工作職責(zé):
1、負(fù)責(zé)基于Flink、Hudi、Paimon等構(gòu)建中國聯(lián)通BOM域海量數(shù)據(jù)實時湖倉。
2、負(fù)責(zé)基于Flink的海量實時數(shù)據(jù)的處理、分析、統(tǒng)計和挖掘。
3、負(fù)責(zé)基于大數(shù)據(jù)的AI數(shù)據(jù)集建設(shè)。
4、負(fù)責(zé)建設(shè)公司核心數(shù)據(jù)資產(chǎn),保障相關(guān)數(shù)據(jù)質(zhì)量。
5、負(fù)責(zé)制定相關(guān)技術(shù)規(guī)范和使用規(guī)范。
任職資格要求:
1、學(xué)歷:國內(nèi)外全日制博士研究生。
2、專業(yè)要求:計算機(jī)、軟件工程、信息通信、數(shù)學(xué)等相關(guān)專業(yè)。
工作技能要求:
1、熟悉Linux,掌握主流開發(fā)語言、工具和業(yè)務(wù)流程,熟練掌握Scala、java、C++、Python等1至2種編程語言。
2、熟悉Flink、Hudi、Paimon等大數(shù)據(jù)技術(shù),有豐富的實時湖倉建設(shè)。
3、熟悉Kafka、RocketMQ、ActiveMQ等消息中間件者優(yōu)先。
4、熟練掌握Flink SQL者優(yōu)先。
5、熟悉通用基礎(chǔ)大模型、有AI數(shù)據(jù)集建設(shè)經(jīng)驗者優(yōu)先。
6、有過海量數(shù)據(jù)系統(tǒng)開發(fā)經(jīng)驗者優(yōu)先。