国产精品又长又粗又爽又黄的毛片, 国产AV无码专区亚洲AV毛片搜, 丰满人妻被猛烈进入中文字幕四川, 国产精品一区二区三区国产女人喷,亚洲国产欧美日韩图片在线人,潘娇娇337p人艺体艺术,成人免费无码大片a毛片古装,一本到高清视频免费,人妻在线视频免费看

更新于 12月20日

爬蟲工程師

1.2-2萬
  • 廣州越秀區(qū)
  • 建設
  • 3-5年
  • 本科
  • 全職
  • 招2人

職位描述

PythonScrapyrequestsHadoopSparkSQL
備注:基于業(yè)務發(fā)展需要,公司現(xiàn)行工作時間為:上午8:30--下午18:00,中午休息兩小時,單休狀態(tài)(國家法定假日正常休息),介意勿投,謝謝理解
崗位職責
1、電商平臺數(shù)據爬取
(1)負責設計分布式爬蟲系統(tǒng),采集抖、快、拼等電商平臺的商品信息(訂單信息、店鋪信息、評論等);
(2)應對反爬機制(IP封鎖、驗證碼、動態(tài)加載),使用代理IP、Selenium模擬瀏覽器等技術突破限制;
(3)優(yōu)化爬蟲性能,包括并行化爬取、數(shù)據去重、異步IO等技術提升效率
數(shù)據清洗與存儲:通過正則表達式/XPath解析數(shù)據,存MySQL/MongoDB等數(shù)據庫;
2、參與自動化系統(tǒng)(如訂貨單生成、報表統(tǒng)計),結合爬蟲與業(yè)務需求提升效率;
3、維護爬蟲服務器,監(jiān)控任務調度與報警反饋,確保系統(tǒng)穩(wěn)定性
4、有AI智能體開發(fā),新媒體推廣智能體與辦公智能體的開發(fā)實施經驗優(yōu)先考慮;
5.具備數(shù)據挖掘經驗,能構建用戶行為分析或個性化推薦系統(tǒng)優(yōu)先考慮
任職要求
1、技術能力
(1)精通Python開發(fā),熟悉Scrapy、Requests、Selenium等爬蟲框架;
(2)掌握HTML/CSS/JS解析技術(XPath、正則表達式、Beautiful Soup);
(3)熟悉數(shù)據庫優(yōu)化(MySQL、MongoDB)及分布式存儲原理;
(4)了解HTTP協(xié)議、抓包工具(Fiddler、Charles)及逆向工程(APP反編譯、JS解密);
2、經驗要求
(1)3年以上數(shù)據爬取實戰(zhàn)經驗
(2)有AI智能體開發(fā)經驗、機器學習或大數(shù)據處理(Hadoop/Spark)經驗者優(yōu)先
3.、軟性要求
(1)計算機相關專業(yè)本科及以上學歷
(2)良好的編碼規(guī)范,能獨立解決問題并優(yōu)化系統(tǒng)性能
(3)適應高強度工作,具備團隊協(xié)作與跨部門溝通能力

工作地點

廣州市越秀區(qū)中山三路33號B座4505

職位發(fā)布者

劉女士/HRBP

立即溝通
公司Logo廣州匯旭信息科技有限公司
廣州匯旭科技有限公司是一家基于大數(shù)據、AI智能的Saas線上撮合平臺,通過運用AI、大數(shù)據和區(qū)塊鏈等數(shù)字科技高效迅捷革除小微與銀行間的信息差。目前總部位于廣東廣州,分公司位于北京,后期將在武漢開設分公司。公司處于成立初期,行業(yè)前景較好。
公司主頁