崗位職責(zé):
1.負(fù)責(zé)分布式數(shù)據(jù)采集系統(tǒng)的設(shè)計(jì)與研發(fā)工作，實(shí)施互聯(lián)網(wǎng)相關(guān)數(shù)據(jù)的抓取和解析。
2.負(fù)責(zé)采集策略的設(shè)計(jì)與優(yōu)化工作，提升網(wǎng)頁(yè)抓取的效率和質(zhì)量，解決信息精準(zhǔn)抽取等核心技術(shù)難題；
3.分析已有采集系統(tǒng)的技術(shù)缺陷，對(duì)策略架構(gòu)做出合理地調(diào)整和改進(jìn)。
4.負(fù)責(zé)公司數(shù)據(jù)中心的運(yùn)營(yíng)和維護(hù)。
崗位要求：
1.計(jì)算機(jī)類及相關(guān)專業(yè)本科及以上學(xué)歷；
2.精通一門(mén)以上的主流開(kāi)發(fā)語(yǔ)言（Python、Java），熟悉常用的數(shù)據(jù)抓取策略和原理；
3.具有大規(guī)模網(wǎng)頁(yè)爬蟲(chóng)開(kāi)發(fā)經(jīng)驗(yàn)優(yōu)先，掌握爬蟲(chóng)開(kāi)發(fā)原理，能夠分析網(wǎng)站的結(jié)構(gòu)特點(diǎn)與規(guī)律；
4.對(duì)算法設(shè)計(jì)和數(shù)據(jù)結(jié)構(gòu)有深刻的理解，精通網(wǎng)絡(luò)編程；
5.有分布式爬蟲(chóng)架構(gòu)經(jīng)驗(yàn)者優(yōu)先；
6.強(qiáng)烈的責(zé)任心和良好的團(tuán)隊(duì)合作精神，較好的溝通能力，善于學(xué)習(xí)新知識(shí)，能承擔(dān)較大的工作壓力。

職位類別： JAVA

舉報(bào)