大數(shù)據(jù)開發(fā)工程師
部門
產(chǎn)品研發(fā)部
任職要求
崗位描述:
設(shè)計、開發(fā)和優(yōu)化基于 Hadoop、Spark、Flink 等框架的大數(shù)據(jù)處理平臺。
負(fù)責(zé)大數(shù)據(jù)集群的部署、配置、監(jiān)控和性能調(diào)優(yōu),
數(shù)據(jù)處理與分析:
開發(fā)高效的數(shù)據(jù)處理流程,包括 ETL 流程設(shè)計與實現(xiàn)。
使用 SQL、Python、Scala 等語言進(jìn)行數(shù)據(jù)分析和挖掘。
項目實施與支持:
參與大數(shù)據(jù)項目的規(guī)劃、設(shè)計和實施,確保項目按時高質(zhì)量交付。
提供技術(shù)支持,解決項目中遇到的技術(shù)難題,
技術(shù)創(chuàng)新與研究:
關(guān)注大數(shù)據(jù)技術(shù)發(fā)展趨勢,參與新技術(shù)的研究和引入。
推動大數(shù)據(jù)技術(shù)在公司內(nèi)部的應(yīng)用和創(chuàng)新。
設(shè)計和開發(fā)高可用、高性能的服務(wù)端應(yīng)用。
與其他團隊協(xié)作,確保服務(wù)端應(yīng)用與大數(shù)據(jù)平臺的無縫集成。
維護和優(yōu)化現(xiàn)有服務(wù)端應(yīng)用,確保系統(tǒng)的穩(wěn)定性和可擴展性。
任職要求
1. 計算機科學(xué)、軟件工程、數(shù)學(xué)或相關(guān)專業(yè)本科及以上學(xué)歷。
2. 3 年以上大數(shù)據(jù)開發(fā)經(jīng)驗,2 年以上服務(wù)端開發(fā)經(jīng)驗
3. 熟練掌握 Hadoop 生態(tài)系統(tǒng)(如 CDH, Hive、HBase、Sqoop, Impala 等),并具備調(diào)優(yōu)能力
4. 精通 Java、Python、Scala 中至少一種編程語言
5. 熟練使用 Linux 操作系統(tǒng)
6. 熟練使用常見的關(guān)系型數(shù)據(jù)庫和非關(guān)系型數(shù)據(jù)庫,并具備調(diào)優(yōu)能力
7. 精通常用的服務(wù)端開發(fā)框架, 如springboot, flask 等
8. 熟悉微服務(wù)架構(gòu), 容器化技術(shù)等;
9. 有具體的數(shù)倉建設(shè)經(jīng)驗, 有大數(shù)據(jù)平臺建設(shè)經(jīng)驗;
10. 具備良好的溝通能力和團隊合作精神,具備較強的解決問題的能力和學(xué)習(xí)新知識的意愿
11. 有醫(yī)療項目經(jīng)驗者優(yōu)先
12. 有機器學(xué)習(xí)、數(shù)據(jù)挖掘等相關(guān)經(jīng)驗者優(yōu)先
學(xué)歷
全日制本科及以上
人數(shù)需求
若干
專業(yè)
計算機相關(guān)
薪資待遇詳細(xì)面議
簡歷投遞通道:[email protected];[email protected]