1. 需求溝通和數(shù)據(jù)鏈路梳理,項目架構(gòu)設(shè)計。
2. 系統(tǒng)數(shù)據(jù)流梳理,保信數(shù)據(jù)同步實現(xiàn)方案制定。
3. 數(shù)據(jù)平臺落地:資源評估+數(shù)倉搭建。
4. 客戶現(xiàn)場系統(tǒng)優(yōu)化,支持項目驗收。
任職要求:
計算機或數(shù)學(xué)相關(guān)專業(yè),本科以上學(xué)歷,學(xué)信網(wǎng)可查。
1、 熟悉Hadoop生態(tài)圈,HDFS分布式文件系統(tǒng)存儲原理,MapReduce計算流程
2、熟悉Spark任務(wù)執(zhí)行流程,理解RDD屬性,SparkStreaming流式計算原理和SparkSQL
3、熟練使用Flink實時流處理技術(shù),并能夠進行數(shù)據(jù)處理分析,實時數(shù)倉搭建
4、熟練掌握Doris,ClickHouse,Hudi,HBase等OLAP數(shù)據(jù)庫
北京 - 海淀
航天物聯(lián)網(wǎng)技術(shù)有限公司北京 - 西城
中軟聯(lián)動公司北京 - 石景山
鄭州海奧軟件科技有限公司北京 - 海淀
北京計算機技術(shù)及應(yīng)用研究所北京 - 海淀
北京三維天地科技股份有限公司北京 - 海淀
鑫錫軟件(朝陽)有限公司