爬蟲工程師
更新日期:2019-07-23- 工作經(jīng)驗(yàn):
- 無要求
- 最低學(xué)歷:
- 本科
- 招聘人數(shù):
- 2
- 語言要求:
- 無
- 工作性質(zhì):
- 無
- 薪資范圍:
- 1-1.5萬/月
- 職位類別:
- 工作地點(diǎn):
- 廣州市
工作職責(zé):
1、負(fù)責(zé)互聯(lián)網(wǎng)站、網(wǎng)頁、鏈接的特征挖掘;
2、提供分布式爬蟲和數(shù)據(jù)采集系統(tǒng)的技術(shù)實(shí)現(xiàn)方案;
3、設(shè)計(jì)和開發(fā)分布式網(wǎng)絡(luò)爬蟲程序;
4、分析靜態(tài)網(wǎng)頁結(jié)構(gòu),解析網(wǎng)頁數(shù)據(jù),并把規(guī)則模塊化,對(duì)數(shù)值數(shù)據(jù)、文本數(shù)據(jù)進(jìn)行過濾,去重,結(jié)構(gòu)化處理;
5、設(shè)計(jì)優(yōu)化爬蟲調(diào)度系統(tǒng),優(yōu)化調(diào)度策略;
6、有財(cái)經(jīng)類數(shù)據(jù)爬取經(jīng)驗(yàn)者優(yōu)先。
備注:業(yè)務(wù)合作伙伴代招
任職資格:
1、全日制本科以上,計(jì)算機(jī)/軟件工程相關(guān)專業(yè),兩年以上爬蟲經(jīng)驗(yàn);
2、扎實(shí)的Java/Python基礎(chǔ),熟悉多線程編程環(huán)境,熟悉常見開源框架;
3、熟悉前端技術(shù),HTML,JavaScript,Ajax等,協(xié)調(diào)定時(shí)任務(wù)調(diào)用爬蟲模塊;
4、熟練使用正則表達(dá)式,精通網(wǎng)頁數(shù)據(jù)提??;
5、熟悉抓取原理及技術(shù),熟悉Scrapy、Pyspider、nutch等主流爬蟲框架使用;
6、具有構(gòu)建分布式爬蟲系統(tǒng)的經(jīng)驗(yàn),具有海量高并發(fā)網(wǎng)頁爬取項(xiàng)目經(jīng)驗(yàn);
7、熟悉數(shù)據(jù)庫操作、SQL語言與優(yōu)化,了解ETL過程以及操作工具;
8、熟悉大數(shù)據(jù)數(shù)據(jù)庫者優(yōu)先;
9、喜歡技術(shù)鉆研,具有較強(qiáng)的學(xué)習(xí)能力,有獨(dú)立解決問題的能力;
10、富有責(zé)任心,有擔(dān)當(dāng)。
公司網(wǎng)址:http://www.e-tecsun.com/
公司地址:廣州市天河區(qū)軟件路15號(hào)第二層201室、三、四層(一照多址)
聯(lián)系電話:020-29118786
廣東德生科技股份有限公司成立于1999年8月,公司注冊(cè)資本1.3334億元,員工近1000人,是一家專注于人社領(lǐng)域,集研發(fā)、生產(chǎn)、銷售于一體的高科技企業(yè),也是行業(yè)內(nèi)圍繞社保卡全生命周期服務(wù)為主營模式的優(yōu)質(zhì)企業(yè),客戶遍及北京、天津、重慶、廣州、南京、蕪湖、沈陽、大連、江門等國內(nèi)主要城市。
德生科技在社??〝?shù)據(jù)采集及發(fā)行服務(wù)、制卡服務(wù)、省級(jí)發(fā)卡中心服務(wù)、即時(shí)補(bǔ)換卡、社??☉?yīng)用及密鑰服務(wù)、PSAM卡管理、社??缡?yīng)用檢測、人社業(yè)務(wù)智能監(jiān)控、多生物識(shí)別身份認(rèn)證等方面有著豐富的經(jīng)驗(yàn),能為人社客戶提供優(yōu)質(zhì)的解決方案和服務(wù)。公司已取得29項(xiàng)國家專利,100余項(xiàng)著作權(quán),并先后榮獲中國智能卡十強(qiáng)企業(yè)、廣東省高新技術(shù)企業(yè)等殊榮,并多次獲得國家智能卡領(lǐng)域最高獎(jiǎng)——“金卡片獎(jiǎng)-社??ㄗ罴压?yīng)商”和國家金卡工程優(yōu)秀成果——“金螞蟻獎(jiǎng)”。
德生科技以“金融社??☉?yīng)用服務(wù)”為初心,十八年如一日深入服務(wù)于人社領(lǐng)域,順應(yīng)社??☉?yīng)用與發(fā)展方向,緊密結(jié)合行業(yè)的需求,深入研究如何發(fā)揮企業(yè)的主動(dòng)性和創(chuàng)造性,提供優(yōu)質(zhì)的解決方案,支持民生工程的真正落地。先后為國內(nèi)200余個(gè)地市提供社保(醫(yī)保)卡和服務(wù),擁有全方位服務(wù)能力和豐富的社保行業(yè)經(jīng)驗(yàn)。
廣東德生科技股份有限公司
- 企業(yè)性質(zhì): 民營企業(yè)
- 業(yè)務(wù)范圍: BPO
- 所屬行業(yè):計(jì)算機(jī)軟件
- 公司地址:廣州市天河區(qū)軟件路15號(hào)第二層201室、三、四層(一照多址)
該公司其他職位
更多>>- 員工關(guān)系主管2016-05-13
- 高級(jí)銷售工程師2016-05-13
- 文案編輯2016-05-13
- 平面設(shè)計(jì)2016-05-13
- 市場助理2016-05-13
最近瀏覽的職位
- 爬蟲工程師2019-07-23