職位描述
數(shù)據(jù)開發(fā)專家:
1、基于大數(shù)據(jù)技術(shù)體系,負責大數(shù)據(jù)基礎(chǔ)架構(gòu)和技術(shù)體系的規(guī)劃建設(shè),包括數(shù)據(jù)采集平臺、數(shù)據(jù)資產(chǎn)管理與治理平臺、數(shù)據(jù)質(zhì)量及穩(wěn)定性保障體系、數(shù)據(jù)處理智能化和自動化體系的建設(shè);
2、跟蹤和調(diào)研大數(shù)據(jù)處理和分析的新技術(shù),推動大數(shù)據(jù)平臺技術(shù)持續(xù)演進;
3、構(gòu)建大數(shù)據(jù)質(zhì)量體系,持續(xù)提升數(shù)據(jù)質(zhì)量;
4、促進跨業(yè)務(wù)線的數(shù)據(jù)融合,通過技術(shù)和業(yè)務(wù)場景的緊密結(jié)合,讓數(shù)據(jù)發(fā)揮最大業(yè)務(wù)價值。
職位描述
1、5年以上大數(shù)據(jù)處理研發(fā)經(jīng)驗;
2、扎實的JAVA開發(fā)能力,熟悉shell、python或其他腳本語言中的任意一門;
3、熟練使用數(shù)據(jù)庫同步、日志采集工具;
4、精通hadoop、HDFS、Hbase、Hive等技術(shù);
5、精通flink、storm或spark streaming等流式或流批一體處理框架中的一種或多種;
6、熟練掌握數(shù)據(jù)倉庫建模和ETL設(shè)計方法論;
7、有基于數(shù)據(jù)分析推動業(yè)務(wù)提升或優(yōu)化的實際案例;
8、有數(shù)據(jù)挖掘、機器學習經(jīng)驗者優(yōu)先考慮;
9、有大型電商系統(tǒng)大數(shù)據(jù)分析經(jīng)驗者優(yōu)先考慮。