1、設(shè)計、開發(fā)及維護(hù)高效的爬蟲系統(tǒng)，從互聯(lián)網(wǎng)上收集相關(guān)數(shù)據(jù)；
2、分析目標(biāo)網(wǎng)站結(jié)構(gòu)，制定數(shù)據(jù)抓取策略，確保數(shù)據(jù)的準(zhǔn)確性和時效性；
3、優(yōu)化爬蟲性能，解決抓取過程中遇到的技術(shù)難題，提升系統(tǒng)穩(wěn)定性。
任職要求：
1、精通Python，了解JavaScript，具備良好的編程習(xí)慣；
2、熟悉Linux操作系統(tǒng)，能夠進(jìn)行服務(wù)器環(huán)境下的開發(fā)工作；
3、熟練使用Scrapy、BeautifulSoup等主流爬蟲框架；
4、掌握正則表達(dá)式、XPath、CSS選擇器等網(wǎng)頁解析技術(shù)，具備良好的數(shù)據(jù)處理能力；
5、具有良好的團(tuán)隊合作精神，具備較強(qiáng)的學(xué)習(xí)能力和解決問題的能力。
本崗位工作地點：衛(wèi)輝