大數(shù)據(jù)開發(fā) (J001974)
更新日期:2021-07-08工作職責(zé):
1、負(fù)責(zé)大數(shù)據(jù)平臺核心模塊的功能設(shè)計和開發(fā),持續(xù)優(yōu)化后臺系統(tǒng)架構(gòu);
2、基于hadoop、spark等構(gòu)建數(shù)據(jù)分析平臺,進行設(shè)計、開發(fā)分布式計算業(yè)務(wù);
3、輔助管理Hadoop集群運行,穩(wěn)定提供平臺服務(wù);
4、規(guī)劃大數(shù)據(jù)平臺的架構(gòu)和部署需求,把握系統(tǒng)的高可用、擴展、安全、性能、伸縮性等;
5、熟悉云數(shù)據(jù)庫的構(gòu)架,有核心模塊涉及和開發(fā)經(jīng)驗;
6、有前沿數(shù)據(jù)庫技術(shù)的敏銳度,并能夠持續(xù)跟蹤關(guān)注相關(guān)技術(shù);
7、構(gòu)建、提升面向超大規(guī)模數(shù)據(jù)的實時OLAP分析引擎,實現(xiàn)對百億級數(shù)據(jù)的秒級分析 ;
8、深入理解和抽象業(yè)務(wù)需求,支持多樣化的用戶數(shù)據(jù)分析場景,提供良好的業(yè)務(wù)支持。
任職資格:
1、計算機相關(guān)專業(yè)本科及以上學(xué)歷,具備扎實的數(shù)據(jù)結(jié)構(gòu)和算法功底 ;
2、5年及以上相關(guān)工作經(jīng)驗,具備大型分布式、高并發(fā)、高負(fù)載、高可用系統(tǒng)設(shè)計、開發(fā)及調(diào)優(yōu)經(jīng)驗,有大數(shù)據(jù)平臺 的軟件開發(fā)、部署經(jīng)驗;
3、熟悉數(shù)據(jù)倉庫的技術(shù)架構(gòu)和實施方法論,并支撐過實際業(yè)務(wù)場景;
4、熟悉 Hadoop 生態(tài)圈技術(shù)棧,HBase、Hive、MapReduce 等;
5、熟悉Spring等后臺開發(fā)框架,以及MySQL等關(guān)系數(shù)據(jù)庫的設(shè)計與優(yōu)化;
6、熟悉 Spark、Storm、Kafka、 Zookeeper、K8S 等開源組件,具備開源項目集成開發(fā)經(jīng)驗優(yōu)先;
7、熟悉主流大數(shù)據(jù)計算引擎MapReduce, Hadoop, Pig, Spark, HBase, Hive等分布式相關(guān)的技術(shù)及組件,深刻理解內(nèi)部機制和原理;
8、精通Flume,Kafka,Elasticsearch、Flink等實時系統(tǒng)組件,有至少一個以上相關(guān)項目實際開發(fā)經(jīng)驗;
9、極強的編程能力:熟練掌握Python(Java或者Scala),具備迅速處理復(fù)雜的數(shù)據(jù)和實現(xiàn)復(fù)雜的算法的能力;
10、追求優(yōu)秀的設(shè)計和代碼質(zhì)量,有良好的責(zé)任心和執(zhí)行力,具備獨立的分析、解決問題能力 。
公司網(wǎng)址:http://www.cfss.net.cn
公司地址:廣州國際科貿(mào)中心12樓
銀雁集團于1996年從深圳起航,注冊資本1.8億元人民幣,成立20余年長期穩(wěn)健發(fā)展,目前已在全國30個省、市、自治區(qū),200多個城市設(shè)立分支機構(gòu),員工逾5萬人。銀雁專注從事業(yè)務(wù)流程外包服務(wù)(BPM),服務(wù)客戶包括中資銀行、外資銀行、保險公司、政府機關(guān)、企事業(yè)單位、上市公司等。
廣東銀雁科技服務(wù)有限公司是銀雁科技集團旗下獨立法人資格的子公司,成立于2003年7月,旗下涵蓋佛山、珠海、中山、江門、陽江、韶關(guān)、湛江、茂名、云浮、肇慶、汕頭、揭陽、惠州、清遠(yuǎn)等十五個分子公司及辦事處,員工逾6000人。主營業(yè)務(wù)分為三類:1)業(yè)務(wù)流程類:網(wǎng)點與營銷服務(wù)、文檔管理、賬戶管理等;2)技術(shù)服務(wù)類:測試、集成、IT外包;3)軟件解決方案類:支付結(jié)算系統(tǒng)、交易平臺系統(tǒng)、數(shù)據(jù)智能系統(tǒng)、產(chǎn)業(yè)金融系統(tǒng)等。
廣東銀雁科技服務(wù)有限公司
- 企業(yè)性質(zhì): 民營企業(yè)
- 業(yè)務(wù)范圍: ITO,BPO
- 所屬行業(yè):外包服務(wù)
- 公司地址:廣州國際科貿(mào)中心12樓
該公司其他職位
更多>>- Java開發(fā)工程師2020-09-29
- 分期客戶經(jīng)理(駐場外呼)2021-05-25
- 外呼駐場經(jīng)理2021-05-25
- 項目統(tǒng)籌經(jīng)理2021-05-25
- 銀行大堂/理財經(jīng)理助理(J000487)2021-05-25
最近瀏覽的職位
- 大數(shù)據(jù)開發(fā) (J001974)2021-07-08