崗位職責(zé):1、負(fù)責(zé)設(shè)計和開發(fā)分布式網(wǎng)絡(luò)爬蟲系統(tǒng),進(jìn)行多平臺信息的抓取和分析工作;2、對相關(guān)爬蟲項目進(jìn)行深度封裝和優(yōu)化,以便能夠應(yīng)付不定時的網(wǎng)站變化;3、搭建數(shù)據(jù)分析和數(shù)據(jù)管理平臺,以便進(jìn)行數(shù)據(jù)分析;任職要求:1、計算機、信息技術(shù)或相關(guān)專業(yè)專科或以上學(xué)歷;??2、精通Python語言開發(fā),有Python項目開發(fā)經(jīng)驗,能夠獨立分析解決問題3、熟悉爬蟲技術(shù),熟悉基礎(chǔ)的網(wǎng)絡(luò)通信協(xié)議,有Django框架1年開發(fā)經(jīng)歷;4、熟悉SQL語言,并有實際應(yīng)用和開發(fā)經(jīng)驗;?5、具有數(shù)據(jù)處理經(jīng)驗的優(yōu)先;?6、熟悉各種Python的爬蟲技術(shù)和框架,如:urllib\selenium\scrapy\pyspyder等7、熟悉各種網(wǎng)頁源代碼解析工具,如:正則\BeautifulSoup\xpath等