高級大數據工程師崗位職責
在現在的社會生活中,我們每個人都可能會接觸到崗位職責,崗位職責是指一個崗位所需要去完成的工作內容以及應當承擔的責任范圍。那么相關的崗位職責到底是怎么制定的呢?以下是小編幫大家整理的高級大數據工程師崗位職責,僅供參考,希望能夠幫助到大家。
高級大數據工程師崗位職責1
崗位職責:
1、負責全公司的數據平臺數據可視化研發工作
2、獨立完成數據可視化研發工作
任職要求:
1、計算機、電子通信、數學、統計或者相關專業本科及以上學歷
2、熟練掌握java/python中的一種語言
3、熟悉數據可視化開發,熟悉echarts應用開發的優先
4、熟悉web開發,熟悉html,js,css
5、熟悉quick bi的優先
6、具備良好的團隊合作精神,工作有激情
7、對數據敏感,有產品思維的優先
高級大數據工程師崗位職責2
崗位職責:
1、參與大數據開放平臺基礎能力建設,承擔系統架構、組件開發、方案驗證等工作;
2、參與構建大數據系列產品,包括但不限于用戶畫像、用戶增長與用戶經營、數據分析挖掘、實時計算、數據分發、機器學習平臺、風控反欺詐等產品線;
任職要求:
1、統招本科或以上學歷,5年以上大數據開發工作經驗;
2、扎實的java基礎,能熟練使用java進行軟件功能開發;
3、熟練掌握基于hadoop生態的大數據開發工具,包括hive、spark、hbase、sqoop、es、impala、flink、storm等,有實時系統開發經驗優先;
4、熟悉常用的數據挖掘算法,例如聚類、回歸、決策樹等,有過nlp項目經驗優先;
5、有過互聯網公司數據倉庫、分析系統、用戶畫像、廣告平臺等產品開發經驗者優先;
6、工作積極主動,善于合作,敏而好學;
高級大數據工程師崗位職責3
崗位職責:
1、參與公司數據開發平臺、bi產品等大數據產品的設計和開發;
2、負責數據開發平臺、bi產品等大數據產品的部署和維護,保證其穩定和可靠;
3、關注和參與大數據方向開源產品的技術動態與演進,推動產品與技術架構持續更新;
任職要求:
1、計算機相關專業,本科及以上學歷,5年以上軟件開發經驗,3年以上互聯網產品或分布式系統開發設計經驗;
2、精通java,python,scala等一種或幾種編程語言,并熟悉linux操作系統及bash shell編程;
3、有hadoop/spark/hive/presto/hbase/elasticsearch/kafka等使用經驗,并熟悉上述常用的分布式系統架構設計和原理;
4、熟悉微服務框架及相關技術,如dubbo,springcloud等;
5、熟悉mysql、redis,并了解或接觸過其他數據庫如oracle,sqlserver,postgresql,mongodb等;
6、了解容器技術,如docker,kubernetes;
7、具有一定的軟件設計能力,熱愛大數據和技術,相信技術改變世界,學習能力強,認同數據價值,有面向業務的思維,較強的'自主學習能力和英文技術文檔閱讀能力;
8、良好的溝通能力、團隊精神及服務意識,勇于接受挑戰,能承受較大的工作壓力;
9、有生產環境快速trouble—shooting的經驗和能力者優先;
10、有olap,多維度數據分析經驗優先,有對數據倉庫有較強的理論基礎和理解者優先;
高級大數據工程師崗位職責4
職位描述:
1、基于hadoop生態系統進行大數據平臺建設;
2、負責各業務條線相關指標數據的數據建模
3、負責基于sqoop,hive、spark、sparksql、mysql進行大數據開發
4、負責離線運算、實時計算平臺項目的設計、開發及運維
5、負責對數據平臺進行性能調優
任職要求:
1、統招本科或以上學歷,6年以上大數據開發工作經驗;
2、熟練掌握shell、python開發語言;
3、熟練掌握hadoop、hive、hbase、spark、spark sql、storm、sqoop、kafka、flume、sparkmlib等分布式框架原理,有相關的調優、運維、開發經驗;
4、熟練掌握mysql數據庫集群;
5、精通主流etl開發工具,如:informatica、data services、kettle;精通主流調度工具,如:azkaban,oozie;
6、有數據倉庫、分析系統、用戶畫像等產品開發經驗者優先;
7、有較強的數據和業務結合能力;
8、有醫療或者大健康背景優先;
9、有較強的獨立、主動的學習能力,良好的溝通表達能力。
高級大數據工程師崗位職責5
崗位職責:
1、基于公司大數據產品進行數據開發,包括數據的采集,清洗,預處理,存儲,建模,分析挖掘等
2、根據業務用戶需要分析數據,提供數據支持
3、參與公司大數據產品的運維和監控,保障數據質量和服務穩定性
任職要求:
1、具備本科以上學歷,計算機,軟件以及相關專業,5年以上大數據開發經驗
2、熟悉數據倉庫維度建模,并能根據客戶需求進行數據開發,向模型更新數據
3、使用過至少一種以上的etl工具
4、熟練掌握java,對hadoop相關的技術和組件(hdfs,mr,hbase,hive,spark,storm,kafka等)有全面深入了解
5、熟練掌握shell或者python中的一種
6、具備spark開發經驗者優先
7、具備實時計算(kafka+storm/spark streaming)經驗者優先
8、具備數據分析和數據挖掘方面經驗者優先
【高級大數據工程師崗位職責】相關文章:
高級數據工程師崗位職責描述11-28
數據挖掘工程師崗位職責06-04
高級數據分析師崗位職責12-03
數據庫工程師崗位職責10-20
數據中心工程師崗位職責10-19
數據挖掘工程師工作的崗位職責11-29
大數據開發工程師崗位職責12-13
高級數據庫工程師的工作職責05-12
高級IC驗證工程師崗位職責10-13