崗位職責(zé):
1、負(fù)責(zé)公司產(chǎn)品的研發(fā)工作;高質(zhì)量的設(shè)計(jì)和編碼;
2、充分了解需求,與團(tuán)隊(duì)共同評(píng)估工作量制定工作計(jì)劃,推動(dòng)項(xiàng)目落地;
3、攻堅(jiān)技術(shù)難點(diǎn)與技術(shù)解決方案,負(fù)責(zé)在線大流量高并發(fā)系統(tǒng)設(shè)計(jì)和性能算法優(yōu)化。
任職要求:
1.熟悉常用數(shù)據(jù)提取、數(shù)據(jù)清洗、數(shù)據(jù)處理技術(shù) 如 re、xpath、pandas、numpy、pandas
2.熟悉常用的數(shù)據(jù)爬取技術(shù) 如 requests模塊、驗(yàn)證碼破解、代理ip、cookie、session、selenium、puppeteer、phantomjs
3.熟悉常用數(shù)據(jù)庫(kù) 如mysql、redis等,了解ClickHouse
4.熟悉主流爬蟲(chóng)框架 如 scrapy
5.熟悉linux常用操作命令
6.會(huì)部署分布式爬蟲(chóng),提升效率
7.了解html,css
8.熟悉js技術(shù),熟悉如何逆向,混淆,脫殼
職位福利:周末雙休、帶薪年假、績(jī)效獎(jiǎng)金、五險(xiǎn)一金、餐補(bǔ)