国产精品又长又粗又爽又黄的毛片, 国产AV无码专区亚洲AV毛片搜, 丰满人妻被猛烈进入中文字幕四川, 国产精品一区二区三区国产女人喷,亚洲国产欧美日韩图片在线人,潘娇娇337p人艺体艺术,成人免费无码大片a毛片古装,一本到高清视频免费,人妻在线视频免费看

更新于 10月30日

爬蟲工程師

1.2-2萬
  • 廣州越秀區(qū)
  • 建設(shè)
  • 3-5年
  • 本科
  • 全職
  • 招2人

職位描述

PythonScrapyrequestsHadoopSparkSQL
備注:基于業(yè)務(wù)發(fā)展需要,公司現(xiàn)行工作時間為:上午8:30--下午18:00,中午休息兩小時,單休狀態(tài)(國家法定假日正常休息),介意勿投,謝謝理解
崗位職責(zé)
1、電商平臺數(shù)據(jù)爬取
(1)負(fù)責(zé)設(shè)計分布式爬蟲系統(tǒng),采集抖、快、拼等電商平臺的商品信息(訂單信息、店鋪信息、評論等);
(2)應(yīng)對反爬機制(IP封鎖、驗證碼、動態(tài)加載),使用代理IP、Selenium模擬瀏覽器等技術(shù)突破限制;
(3)優(yōu)化爬蟲性能,包括并行化爬取、數(shù)據(jù)去重、異步IO等技術(shù)提升效率
數(shù)據(jù)清洗與存儲:通過正則表達式/XPath解析數(shù)據(jù),存MySQL/MongoDB等數(shù)據(jù)庫;
2、參與自動化系統(tǒng)(如訂貨單生成、報表統(tǒng)計),結(jié)合爬蟲與業(yè)務(wù)需求提升效率;
3、維護爬蟲服務(wù)器,監(jiān)控任務(wù)調(diào)度與報警反饋,確保系統(tǒng)穩(wěn)定性
4、有AI智能體開發(fā),新媒體推廣智能體與辦公智能體的開發(fā)實施經(jīng)驗優(yōu)先考慮;
5.具備數(shù)據(jù)挖掘經(jīng)驗,能構(gòu)建用戶行為分析或個性化推薦系統(tǒng)優(yōu)先考慮
任職要求
1、技術(shù)能力
(1)精通Python開發(fā),熟悉Scrapy、Requests、Selenium等爬蟲框架;
(2)掌握HTML/CSS/JS解析技術(shù)(XPath、正則表達式、Beautiful Soup);
(3)熟悉數(shù)據(jù)庫優(yōu)化(MySQL、MongoDB)及分布式存儲原理;
(4)了解HTTP協(xié)議、抓包工具(Fiddler、Charles)及逆向工程(APP反編譯、JS解密);
2、經(jīng)驗要求
(1)3年以上數(shù)據(jù)爬取實戰(zhàn)經(jīng)驗
(2)有AI智能體開發(fā)經(jīng)驗、機器學(xué)習(xí)或大數(shù)據(jù)處理(Hadoop/Spark)經(jīng)驗者優(yōu)先
3.、軟性要求
(1)計算機相關(guān)專業(yè)本科及以上學(xué)歷
(2)良好的編碼規(guī)范,能獨立解決問題并優(yōu)化系統(tǒng)性能
(3)適應(yīng)高強度工作,具備團隊協(xié)作與跨部門溝通能力

工作地點

廣州市越秀區(qū)中山三路33號B座4505

職位發(fā)布者

莊錦程/人事經(jīng)理

三日內(nèi)活躍
立即溝通
公司Logo廣州匯旭信息科技有限公司
廣州匯旭科技有限公司是一家基于大數(shù)據(jù)、AI智能的Saas線上撮合平臺,通過運用AI、大數(shù)據(jù)和區(qū)塊鏈等數(shù)字科技高效迅捷革除小微與銀行間的信息差。目前總部位于廣東廣州,分公司位于北京,后期將在武漢開設(shè)分公司。公司處于成立初期,行業(yè)前景較好。
公司主頁