崗位職責:
1、負責OTT平臺聚合內(nèi)容的采集工作,如媒資數(shù)據(jù)等;
2、參與線上SaaS平臺的運營工作;
3、領(lǐng)導(dǎo)安排的其他工作。
崗位要求:
1、計算機相關(guān)專業(yè),2年以上相關(guān)工作經(jīng)驗優(yōu)先;
2、有爬蟲開發(fā)接口經(jīng)歷,掌握各種爬蟲技巧優(yōu)先,熟悉爬蟲抓取原理,熟悉反爬策略;
3、熟悉行為驗證碼識別、模擬登陸、數(shù)據(jù)清洗、去重、入庫等;
4、設(shè)計爬蟲策略和防屏蔽規(guī)則,提升網(wǎng)頁抓取的效率和質(zhì)量;
5、能夠獨立解決實際開發(fā)過程中碰到的各類問題;
6、熟練掌握Python和Java、JavaScript語言基礎(chǔ),熟悉Java開發(fā)架構(gòu)優(yōu)先;
7、熟悉HTML、XPath、正則表達式、AJAX、HTTP協(xié)議等;
8、熟悉Scrapy、WebMagic、Flask、SpringBoot等框架;
9、熟悉關(guān)系型數(shù)據(jù)庫,非關(guān)系型數(shù)據(jù)庫、緩存數(shù)據(jù)庫(Redis/Memcached);
10、有良好的邏輯思維能力、溝通能力、學(xué)習(xí)能力、團隊合作精神。