崗位職能:
1、負責大數(shù)據(jù)平臺的性能調(diào)優(yōu)與基礎開發(fā),運維;
2、參與基礎架構的設計與模型設計;
3、參與數(shù)據(jù)采集,分析,治理端到端建模;
4、團隊內(nèi)開展技術分享;
任職資格:
1、本科及以上學歷(學信網(wǎng)可查),具備3年以上開發(fā)經(jīng)驗,大數(shù)據(jù)2年以上工作經(jīng)驗
2、熟悉Linux開發(fā)環(huán)境,熟練掌握至少一種編程語言(Java / Python /SQL/Shell)
3、熟悉數(shù)據(jù)倉庫建模理論,了解數(shù)據(jù)倉庫數(shù)據(jù)分層架構、多維數(shù)據(jù)模型設計,掌握數(shù)據(jù)挖掘數(shù)理知識;
4、有大數(shù)據(jù)量場景下調(diào)優(yōu)經(jīng)驗,熟悉大數(shù)據(jù)場景下的各個組件調(diào)優(yōu)方案;
5、熟悉大數(shù)據(jù)平臺的技術,能在Hadoop/Spark等框架下進行數(shù)據(jù)提取和分析 、熟練使用大數(shù)據(jù)組件hbase,hive,spark,flink等;
6、掌握大數(shù)據(jù)挖掘主流技術和數(shù)據(jù)挖掘方法;
7、 掌握爬蟲技術,ETL技術,常用數(shù)據(jù)挖掘算法,模型評估。Spark Mllib,具備扎實的數(shù)理統(tǒng)計知識和計算機知識。
說明:此崗位需駐場至國網(wǎng)電力