高級數據工程師崗位職責描述

　　現如今，崗位職責的使用頻率呈上升趨勢，制定崗位職責有助于提高內部競爭活力，提高工作效率。制定崗位職責的注意事項有許多，你確定會寫嗎？以下是小編幫大家整理的高級數據工程師崗位職責描述，歡迎大家分享。

高級數據工程師崗位職責描述1

　　1.數據采集系統和分布式爬蟲系統的架構設計和開發

　　2.對接外部數據服務商提供的.數據及資訊服務，實現數據的有效沉淀，建立數據服務評估機制

　　3.負責大規模文本、圖像、視頻數據的抓取、抽取，去重、分類，垃圾過濾，質量識別等工作

　　4.研究各種目標網站的形態，互聯網特征挖掘，發現它們的特點和規律

高級數據工程師崗位職責描述2

　　1、負責生產環境Mysql數據庫系統高可用、高性能架構方案，分庫分表策略，數據庫擴展方案;

　　2、排查數據庫故障，分析和解決疑難問題，提出預防方案;

　　3、制定數據庫監控策略、備份策略、容災策略，探查系統潛在的問題和可能的性能瓶頸并進行優化;

　　4、對開發工程師的SQL語句進行審核及SQL優化;

　　5、負責redis、memcache等非關系數據庫的.管理和擴展，能夠根據業務需求完成系統設計、架構設計工作;

　　6、參與前瞻性新技術研究，解決數據庫相關疑難問題。

高級數據工程師崗位職責描述3

　　崗位職責：

　　1、對通信和金融業務數據進行分析和挖掘，滿足研發和運營等部門的`業務需求和決策需求;

　　2、能根據業務特點選擇最合適的數據挖掘算法，并做調優;

　　3、支持數據分析、挖掘算法平臺的部署和日常運營;

　　4、撰寫分析類報告。

　　任職資格：

　　1、大學本科或本科以上統計學、數學或其他相關專業，對數據結構熟悉;

　　2、熟練使用python進行數據分析、處理、可視化。熟悉numpy/pandas/matplotlib等常用模塊。熟練使用sql,最好用過hive-sql或spark-sql;

　　3、對hadoop/spark有一定了解。能夠簡單使用hadoop系列命令;

　　4、對線性回歸，決策森林，xgboost，評分卡等數據挖掘相關算法有一定了解;

　　5、做過web接口調試，熟悉json者優先;

　　6、熟練掌握PPT和EXCEL制作;

　　7、具備良好的學習、溝通與表達能力，具有較強的團隊合作精神，對工作富有熱情，能承受工作壓力;

　　8、有運營商或金融類相關數據經驗工作優先考慮;

　　9、能適應中長期現場出差。

高級數據工程師崗位職責描述4

　　1、負責數據倉庫的設計、開發、部署、維護和優化;

　　2、參與公司項目數據庫架構設計,及相關文檔的.撰寫;

　　3、協助開發完成數據庫表的設計以及SQL調優,給開發人員提供SQL調優指導;

　　4、負責數據庫技術規范建設。

高級數據工程師崗位職責描述5

　　1.高質量地完成集團內外各類數據生產集成、數據分析應用建設工作，涉及投研、市場、ERP、全球金融資訊等四個業務領域方向;

　　2.需求及源系統數據分析，完成數據倉庫/EDM等系統數據模型及應用模型設計、數據Mapping規則文檔撰寫、開發、自測及上線部署;

　　3. 數據質量稽核、問題分析及處理,優化數據處理程序;

　　4. 洞察數據、滿足業務場景需求。

高級數據工程師崗位職責描述6

　　1、負責每日的數據倉庫運維工作，保障數據的.穩定性、一致性等;

　　2、參與數據倉庫的優化設計，如元數據、數據權限、調度優化;

　　3、負責數據質量和數據標準化的設計與開發;

　　4、負責滿足業務部門的日常業務提數與報表需求的開發。

高級數據工程師崗位職責描述7

　　1、參與數據倉庫建設，負責數據倉庫模型設計；

　　2、開發高質量可擴展的'底層數據倉庫體系；

　　3、負責數據倉庫系統與業務系統的接口設計和確認工作；

　　4、負責數據平臺相關的管理工作，如數據研發規范、數據質量及穩定性保證等建設；

　　5、參與公司各個業務線BI、數據產品與應用的數據研發，發覺數據潛在價值。

高級數據工程師崗位職責描述8

　　崗位職責:

　　1.負責銜接大數據平臺與前端的數據傳輸；

　　2.根據客戶需求設計大數據業務平臺架構、配置組件；

　　3.負責后臺服務的調試與測試，梳理接口文檔、開發文檔與測試文檔。

　　任職資格:

　　1.碩士以上，或較為優秀的本科生；后端開發經驗2年以上；

　　2.有基于b/s架構進行實際業務平臺開發的.經驗，有to b軟件開發經驗更佳；

　　3.通用軟件開發基礎、軟件架構基礎、scrum敏捷開發方法，有大數據基礎更佳；

　　4.精通java或python語言，有rcp框架經驗更佳；熟練掌握mybatis、springcloud / springboot、node.js等框架，精通sql技術；了解以太網通信協議，熟悉websocket技術。熟練使用git，svn等工具；

　　5.學習能力強，勇于挑戰，代碼質量意識強，篤信“工程即魔法”。

高級數據工程師崗位職責描述9

　　任職要求：

　　1、軟件、計算機、通訊等理工科相關專業本科及以上學歷；

　　2、具有3年配置管理或產品數據管理經驗；

　　3、熟悉計算機與網絡管理；

　　4、熟悉配置管理與產品數據管理知識，熟練掌握svn、plm等數據管理平臺的操作與管理；

　　5、熟悉系統與信息安全知識；

　　6、具有較強的.邏輯思維能力及良好的溝通能力，良好的主動學習能力及執行力。

高級數據工程師崗位職責描述10

　　崗位職責:

　　1.從事數學建模及數據挖掘應用方法研究;

　　2.與開發部門配合實現相應的數據分析模塊的'開發;

　　3.制定公司數據可管理體系,建產研究用數據平臺。

　　任職要求:

　　1.應用數學、統計學、計算機等專業碩士以上學歷;

　　2.具備常用機器學習、數據挖掘相關知識,會spark;

　　3.具備一種或多種開發語言(如scalapython java等)的程序和算法開發能力,掌握常用數據結構和算法;

　　4.有視頻、地圖、文本、社交等大數據分析能力;

　　5.有工業數據分析工作經驗者優先。

高級數據工程師崗位職責描述11

　　1、負責公司與阿里巴巴在新行業方向(新金融、新零售、國內外運營商)的產品研發;

　　2、負責分析挖掘客戶/行業對大數據產品的需求(應用場景)，利用數據分析結論提升客戶業務能力。例如：文本挖掘，潛在客戶挖掘，用戶畫像，個性化推薦，用能預測等;

　　3、進行大數據場景下的數據統計、數據挖掘、機器學習、深度學習，包括數據整理、模型建立、模型應用、評估優化等;

　　4、將客戶需求準確轉化為可執行的數學模型，針對不同的'應用場景，負責編寫數據挖掘算法及對其的優化;

　　5、基于需求分析/運營支持/商業報告等成果，抽取典型用戶/客戶/行業/產品分析模型并與開發團隊溝通實施方案及構建產品原型。

　　崗位要求：

　　1、本科以上學歷，扎實的機器學習、數據挖掘、統計學理論基礎;有統計、應用數學、金融等相關專業背景優先;

　　2、精通常見機器學習算法(如邏輯回歸、SVM、神經網絡、決策樹、貝葉斯等)，有實際建模經驗，掌握深度學習算法優先;

　　3、具有扎實的計算機操作系統、數據結構等編程基礎，精通至少一門編程語言例如JAVA/python/R等;

　　4、熟悉Map-Reduce模型，對Hadoop、Spark、Storm等大規模數據存儲與運算平臺有實踐經驗優先。

高級數據工程師崗位職責描述12

　　1.負責直播業務相關數據倉庫的數據模型設計;

　　3.參與數據倉庫ETL流程設計、開發和優化，解決ETL過程相關技術問題;

　　3.參與項目規劃，數據采集設計，數據倉庫開發，模型開發，報表開發等;

　　4. 總結數據倉庫建模的方法，負責數據產品平臺化和系統化;

高級數據工程師崗位職責描述13

　　1.從事GIS數據制作、分析、數據管理等工作;

　　2.編寫工作總結和作業流程等文件;

　　3.通過已經完成的矢量化成果和表格數據庫入庫和檢查工作;

　　4.利用軟件對圖形和屬性進行檢查，并進行錯誤修改;

　　5.其他數據制作處理工作。

高級數據工程師崗位職責描述14

　　識別，分析和解決計劃支持問題。

　　與BU利益相關者合作，確定并優先考慮數據和統計要求，包括要收集的特定數據元素。

　　協助開發和實施數據庫，數據收集系統/工具，數據分析以及其他優化統計效率和質量的策略(包括確定流程改進以更好地滿足業務需求)。

　　分析大量數據集，提出有見地的業務建議。

　　通過查看報告和績效指標來確定和糾正數據收集問題，從而確保數據的準確性和完整性。

　　識別，分析，解釋和建模數據湖中數據的趨勢或模式。

　　為各種受眾設計和生成準確有效的統計數據可視化產品和報告。

　　通過促進技術和非技術利益相關者之間的溝通，確保技術團隊了解計劃和業務工作的`短期和長期目標

　　準時交付優質，易懂，明確的產品。

　　參與構建機器學習策略平臺。

　　對數據驅動業務，關鍵思想家，問題解決者和自我啟動者的熱情

　　促進技術和非技術利益相關者之間交流的能力

　　出色的書面和口頭交流能力。

高級數據工程師崗位職責描述15

　　在行業擔任數據工程師或后端工程師超過4年

　　您將了解數據倉庫的概念(建模，調整，維護)

　　您非常精通SQL，并渴望指導和教其他SQL

　　您精通Python或任何其他腳本語言和軟件開發

　　您在分布式數據處理/傳統RDBMS / MPP / NoSQL系統和數據建模方面有很強的低估/經驗

　　您在Spark / Kafka / HBase / Redis / Kettle方面擁有豐富的'經驗

　　您受到探索數據的好奇心和動力的驅動

　　您具有處理數據管道的DevOps問題的經驗

　　對數據驅動業務，關鍵思想家，問題解決者和自我啟動者的熱情

　　獲得認可大學的相關學科的學士學位

高級數據工程師崗位職責描述16

　　相關文件的定義和編寫

　　2.生產良率和拋料率的'監控和改善

　　3.生產異常的分析解決

　　4.技術人員的班別安排

　　5.設備保養的安排和作業follow

　　6.設備故障維修&coordinator

　　7.配合新產品導入或者其他需求的試產驗證

　　8.主管交付的其他事項

高級數據工程師崗位職責描述17

　　工作職責：

　　1、運用數據挖掘和機器學習方法和技術，深入挖掘和分析海量商業數據

　　2、包括但不限于風控模型、用戶畫像、商家畫像建模、文本分析和商業預測等

　　3、運用數據挖掘/統計學習的理論和方法，深入挖掘和分析用戶行為，建設用戶畫像

　　4、從系統應用的角度，利用數據挖掘/統計學習的`理論和方法解決實際問題

　　任職要求

　　—計算機、數學，統計學或人工智能等相關專業碩士以上學歷，5—10年以上或相關工作經歷

　　—精通1—2種編程語言（Python或Java），熟練掌握常用數據結構和算法，具備比較強的實戰開發能力，能帶領團隊共同進步。

　　—具有統計或數據挖掘背景，并對機器學習算法和理論有較深入的研究

　　—熟悉數據挖掘相關算法（決策樹、SVM、聚類、邏輯回歸、貝葉斯）

　　—具有良好的學習能力、時間和流程意識、溝通能力

　　—熟悉Spark或hadoop生態分布式計算框架

　　—優秀的溝通能力，有創新精神，樂于接受挑戰，能承受工作壓力

　　—有互聯網，央企，政務，金融等領域大規模數據挖掘經驗者優先

高級數據工程師崗位職責描述18

　　職責描述：

　　1、負責poi數據的屬性分析、處理和關系挖掘，構建地圖領域的`知識圖譜。

　　2、負責nlp、數據挖掘、深度學習等方向的前沿算法研發，并結合地圖場景優化。

　　任職要求：

　　1、計算機、數學或相關專業，三年以上工作經驗。

　　2、熟悉數據結構和算法設計，熟練使用c++、python。

　　3、熟悉nlp、機器學習、數據挖掘領域的常用算法與工具，對前沿技術保持熱情。

　　4、良好的分析和解決問題能力，能獨立承擔研發工作。

　　5、有地圖數據優化工作背景優先。

　　團隊介紹

　　主要支持北京崗位

　　對地圖（無人駕駛）、廣告（廣點通）、快報感興趣的歡迎勾搭

高級數據工程師崗位職責描述19

　　崗位職責：

　　1.參與金融大數據平臺系統和算法的研發和優化;

　　2.基于大數據金融場景，進行信用風險模型，風控模型，營銷模型的創新設計;

　　3.與業務部門溝通合作，將數據模型應用于實際業務。

　　任職要求：

　　1.計算機相關專業碩士及以上學歷，至少7年以上相關工作經驗;;

　　2.具有良好的商業敏感度和優秀的數據分析技能，能夠開發創新而實際的分析方法以解決復雜的商業問題。

　　3.熟悉機器學習的一般模型;例如分類.聚類.預測，理解一些常用的特征選擇和矩陣分解算法。

　　4.熟悉深度神經網絡和常用模型(如CNN，DBN，sparseconding,RNN等)，有Caffe或Theano或ConvNet的'實踐經驗。

　　5.在語義理解檢索(如知識圖譜表示.結構化預測.語義解析.信息檢索.知識挖掘等)有過深入的工作與研究。

　　6.較強的自學能力.優秀的邏輯思維能力和良好的溝通表達能力和敬業精神。

　　7.具備良好的系統分析能力，良好的抽象思維和邏輯思維能力，獨立分析問題解決問題的能力;

　　8.可承受較大壓力，有責任感，較強的溝通協調能力，具有團隊合作精神;

　　9.有互聯網公司.大型金融企業和大型IT企業工作經歷的優先。

高級數據工程師崗位職責描述20

　　1.依據項目需求建構數據萃取與轉換流程

　　2.挖掘數據特征，進行數據和特征融合

　　3.搭建數學模型，并對模型進行檢驗評估

　　職位要求：

　　1、計算機、數學、統計、人工智能等相關專業的碩士或以上學歷;

　　2、二年以上數據挖掘、機器學習相關工作經驗，熟悉python、spark、pandas、sklearn等數據分析工具者優先;

　　3、熟練掌握貝葉斯、隨機森林、深度學習等機器學習算法;

　　4、突出的分析問題和解決問題能力，自我驅動，并且具備較強的'學習能力、創新應用能力及溝通協調能力，有良好的團隊合作意識;

　　5、有國際背景或能熟練使用英文溝通者優先

高級數據工程師崗位職責描述21

　　1、利用數據倉庫建模及相關技術，參與數據倉庫模型的設計。

　　2、參與企業級大數據倉庫項目的落地開發。

　　3、參與企業級主數據管理項目的.實施落地。

　　4、利用hadoop生態相關技術，負責大數據中心的數據處理流程，包括數據清洗、融合、統計、挖掘等。

高級數據工程師崗位職責描述22

　　1.負責海量數據的分析開發工作;

　　2.完成數據挖掘模型，跟蹤模型的實施和效果，定期優化算法和分析策略，分析研究后提供建設性建議 ;

　　3.優化大數據存儲、計算等各方面性能，確保能從海量大數據信息里，有效進行數據分析和挖掘;

　　4.根據用戶的活動記錄進行特征篩選和關聯挖掘。提高關聯準確性;

　　5.參與相關數據標準和規范的制定。

　　要求：

　　1.熟悉java/scala/python/R中至少一種編程語言，具有良好的編碼習慣;

　　2.計算機、數學相關專業本科以上學歷;

　　3.2年以上數據挖掘及其相關經驗，對常用的數據挖掘算法有較深入了解，有實際算法調優經驗 ;

　　4.熟悉常用數據挖掘算法(聚類/分類/回歸/關聯規則/圖模型)等算法原理，具備實際的`建模經驗，熟悉常用機器學習算法原理，如樸素貝葉斯/決策樹/隨機森林/邏輯回歸/SVM等，并具備相關應用經驗;

　　5.熟悉hadoop生態，具有spark/flink等實際開發經驗;

　　6.極強的數據敏感度，能從海量數據中挖掘出數據核心價值，相關;

　　7.熟悉分布式存儲，熟悉mysql/oracle、hbase、redis、mogongdb、elasticsearch等，熟悉neo4j/JanusGraph等圖數據庫優先 ;

　　8.富有創新精神，充滿激情，樂于接受挑戰，良好的溝通技巧和團隊合作，抗壓性強，能適應加班。

高級數據工程師崗位職責描述23

　　1、負責大數據平臺搭建及數據倉庫建模；

　　2、負責數據庫管理及數據優化；

　　3、利用大數據相關技術實現對數據的分析、挖掘、處理、及數據可視化等相關工作；

　　4、維護大數據平臺并能解決相關問題，保障平臺正常運行；

　　5、學習和研究新技術以滿足系統需求。

高級數據工程師崗位職責描述24

　　1、針對具體的業務場景需求、定義數據分析及挖掘問題;

　　2、使用統計學分析方法、挖掘算法、構建有效且通用的數據分析模型，對數據挖掘方案進行驗證、開發、改進和優化，實現數據挖掘的.功能應用;

　　3、搭建高擴展高性能的數據分析模型庫，作為數據分析團隊的基礎工具;

　　4、完成領導安排的其他工作。

高級數據工程師崗位職責描述25

　　1、針對海量用戶行為數據進行挖掘和建模，深入挖掘數據的.業務價值。研究機器學習或統計學習領域的前沿技術，并能活學活用到項目中。

　　2、基于對汽車廣告投放業務及用戶的理解，參與精準營銷、個性化推薦等模型建設和領域研究，提升轉化率等業務指標。

　　3、根據業務需要采集相關數據，對原始數據進行ETL和歸類整理，并實現流程自動化。

　　4、其他大數據處理及項目開發工作等。

高級數據工程師崗位職責描述26

　　1、負責數據倉庫（HADOOP）ETL工作以及數據運營；

　　2、負責數據產品的`業務需求梳理、數據開發以及維護；

　　3、負責數據倉庫的維度建模以及設計相關的腳本調度；

　　4、負責維度模型的數據處理的腳本開發，程序開發以及接口對接。

高級數據工程師崗位職責描述27

　　1.負責數據分析,數據挖掘相關的算法、應用的`設計與開發;

　　2.負責公司產品各階段數據的整理、分析、挖掘及提交數據報告，重點對車輛行為數據進行分析和挖掘，利用數據分析結論推動業務產品的優化;

　　3.對海量業務數據進行整合、分析挖掘，挖掘產品以及用戶潛在信息，為營銷、運營及決策提供業務分析及數據支持。

高級數據工程師崗位職責描述28

　　1.針對用戶行為預測業務，負責用戶畫像、訂單特征體系建設，包括離線數據產出以及服務化;

　　2.針對用戶端上行為產出的實時數據流，挖掘實時特征并服務化;

　　3.針對客服場景，挖掘實時用戶行為異常以及進線異常;

　　4.針對智能客服場景用戶標簽挖掘，人群挖掘等工作，支持智能運營方向的業務;

　　5.負責開發并維護智能客服業務的`特征服務系統。

【高級數據工程師崗位職責描述】相關文章：

高級數據庫工程師的崗位職責06-05

數據挖掘工程師崗位職責11-06

數據挖掘工程師工作的崗位職責06-27

高級系統工程師崗位職責09-18

高級軟件測試工程師的崗位職責09-15

高級軟件測試工程師崗位職責05-28

數據銷售崗位職責07-16

銷售數據崗位職責05-26

項目總工的崗位職責描述09-13