崗位要求:?
1、計(jì)算機(jī)相關(guān)專(zhuān)業(yè)專(zhuān)科以上學(xué)歷,一年以上大規(guī)模網(wǎng)頁(yè)爬蟲(chóng)開(kāi)發(fā)經(jīng)驗(yàn),?熟悉JS,ajax語(yǔ)言,有網(wǎng)頁(yè)消重經(jīng)驗(yàn);?
2、熟悉多線程、多進(jìn)程、網(wǎng)絡(luò)通信編程相關(guān)知識(shí),能夠總結(jié)分析不同網(wǎng)站,網(wǎng)頁(yè)的結(jié)構(gòu)特點(diǎn)及規(guī)律,有分布式、垂直領(lǐng)域爬蟲(chóng)開(kāi)發(fā)經(jīng)驗(yàn)優(yōu)先;?
3、熟悉JAVA或其它一種編程語(yǔ)言,熟悉?Lucene/Nutch/Heritrix/larbin/HtmlParser等開(kāi)源工具,?熟練使用正則表達(dá)式;對(duì)數(shù)據(jù)結(jié)構(gòu)和算法設(shè)計(jì)有較為深刻的理解;?
4、良好的邏輯思維能力,善于從海量數(shù)據(jù)中總結(jié)規(guī)律;敏銳的觀察力,可及時(shí)根據(jù)積累的數(shù)據(jù)發(fā)現(xiàn)潛在的問(wèn)題,精通數(shù)據(jù)網(wǎng)絡(luò)信令或熟悉移動(dòng)數(shù)據(jù)網(wǎng)絡(luò)業(yè)務(wù)者優(yōu)先;?
5、熟悉linux操作系統(tǒng)及hapdoop環(huán)境數(shù)據(jù)處理優(yōu)先;?
6、具有良好的溝通和表達(dá)能力和團(tuán)隊(duì)合作能力。