999视频在线免费观看,国产精品一二二区,亚洲国产香蕉视频,中文字幕有码在线视频,亚洲日本另类,中国三级黄色大片,成人中文字幕在线观看

崗位職責(zé)：
1.參與爬蟲(chóng)項(xiàng)目的架構(gòu)設(shè)計(jì)、研發(fā)、編程工作，改進(jìn)和提升爬蟲(chóng)效率；
2.負(fù)責(zé)爬蟲(chóng)數(shù)據(jù)的分布式存儲(chǔ)設(shè)計(jì)及代碼實(shí)現(xiàn)；
3.負(fù)責(zé)網(wǎng)頁(yè)信息抽取、清洗、消重和結(jié)構(gòu)化處理等工作；
4.解決各類反爬問(wèn)題，如字體加密、JS混淆、驗(yàn)證碼、APP抓包和逆向工程;
5.對(duì)爬蟲(chóng)數(shù)據(jù)進(jìn)行數(shù)據(jù)處理、分析及匹配。

任職要求：
1.計(jì)算機(jī)相關(guān)專業(yè)，有三年以上 Python 開(kāi)發(fā)經(jīng)驗(yàn)，熟練 Python 語(yǔ)言；
2.熟練掌握selenium、html、js、css、xpath、正則表達(dá)式等數(shù)據(jù)采集與提取工具；
3.精通常見(jiàn)的反爬蟲(chóng)技術(shù)如字體加密、js混淆、滑塊驗(yàn)證、點(diǎn)選驗(yàn)證、app逆向等；
4.精通scrapy爬蟲(chóng)框架，對(duì)分布式爬蟲(chóng)、海量數(shù)據(jù)采集有深刻理解;
5.熟悉 Django 、Flask等web框架，以及自動(dòng)化開(kāi)發(fā)經(jīng)驗(yàn)者優(yōu)先考慮；
6.能熟練使用Linux、Mongo、ES、Redis、kafka等技術(shù)優(yōu)先考慮；
7.有激情和責(zé)任心，積極主動(dòng)，具有良好的團(tuán)隊(duì)協(xié)作、對(duì)外溝通能力，有良好的自學(xué)能力。提供 Github 或者博客地址，有開(kāi)源項(xiàng)目貢獻(xiàn)者優(yōu)先考慮