&

數據工程師崗位崗位職責

更新時間：2024-08-02 14:47:53

相關推薦

數據工程師崗位崗位職責

　　在不斷進步的時代，需要使用崗位職責的場合越來越多，制定崗位職責有助于提高內部競爭活力，提高工作效率。那么你真正懂得怎么制定崗位職責嗎？以下是小編收集整理的數據工程師崗位崗位職責，希望對大家有所幫助。

數據工程師崗位崗位職責1

　　職責：

　　1、對通信和金融業務數據進行分析和挖掘，滿足研發和運營等部門的'業務需求和決策需求;

　　2、能根據業務特點選擇最合適的數據挖掘算法，并做調優;

　　3、支持數據分析、挖掘算法平臺的部署和日常運營;

　　4、撰寫分析類報告。

　　任職資格：

　　1、大學本科或本科以上統計學、數學或其他相關專業，對數據結構熟悉;

　　2、熟練使用python進行數據分析、處理、可視化。熟悉numpy/pandas/matplotlib等常用模塊。熟練使用sql,最好用過hive-sql或spark-sql;

　　3、對hadoop/spark有一定了解。能夠簡單使用hadoop系列命令;

　　4、對線性回歸，決策森林，xgboost，評分卡等數據挖掘相關算法有一定了解;

　　5、做過web接口調試，熟悉json者優先;

　　6、熟練掌握PPT和EXCEL制作;

　　7、具備良好的學習、溝通與表達能力，具有較強的團隊合作精神，對工作富有熱情，能承受工作壓力;

　　8、有運營商或金融類相關數據經驗工作優先考慮;

　　9、能適應中長期現場出差。

數據工程師崗位崗位職責2

　　職責：

　　1.有獨立工作能力，工作踏實認真，以及較強的團隊協作精神。

　　2.負責日志大數據平臺的搭建和規劃;

　　3.在總體架構設計下，完成日志大數據產品的設計、搭建、維護和調優，技術文檔的編寫與維護;

　　4.參與業務日志的大數據分析;

　　5.及時反饋開發中遇到的'難點問題，溝通并尋求解決方案，按階段有計劃地完成開發任務

　　任職資格:

　　1、計算機等相關專業本科以上學歷，2年以上開發經驗;

　　2、熟悉linux操作系統，熟悉shell腳本語言，精通Java，有較強的開發能力;

　　2、熟練使用SQL，熟悉Mysql、MongoDB、Hive等數據庫技術的基本操作及原理;

　　3、熟悉Hadoop/Spark生態系統組件的使用，至少有1年的Spark(Core/Streaming/SQL)開發經驗;

　　4、熟悉Elastic產品線(如Elasticsearch、Kafka、Kibana、Logstash)的使用方法，了解常見優化方案，熟悉Elasticsearch部署、監控及性能調優;

　　5、熟悉數據挖掘、機器學習、網絡數據分析等技術優先;

數據工程師崗位崗位職責3

　　1、負責構建體系框架，公開數據等進行分析，挖掘特征；

　　2、負責大數據產品的規劃，需求分析和產品設計和定義；

　　3、基于現有真實用戶行為數據，能夠從數據中發現能源的需求和業務場景；

　　4、參與業務部門臨時數據分析需求的'調研、分析及實現；

　　5、監測分析產品運營狀況，持續優化產品功能改造和業務拓展方向，提出和落實產品優化改造方案。

　　6、撰寫專題大數據分析報告。

數據工程師崗位崗位職責4

　　職責：

　　1、負責公司大數據平臺建設;

　　2、根據業務需求，制定數據倉庫和數據分析平臺的`實施和持續更新;

　　3、攻克技術難關，保證大數據系統的穩定運行;

　　4、完成大數據產品的開發。

　　職位要求：

　　1、計算機相關專業全日制專科及以上學歷，大數據相關經驗;

　　2、熟悉Java或Scala語言，熟悉Spark，Hadoop，Kafka，Hive，HBase，ZooKeeper等大數據相關技術;

　　3、精通SQL語句并對Redis，Mongodb等NoSQL數據庫有一定經驗;

　　4、對于高并發、高穩定可用性、性能、大數據處理有過實際項目產品經驗者優先;

　　5、責任心強，工作踏實，有團隊協作精神，溝通能力強者優先。

數據工程師崗位崗位職責5

　　職責：

　　1、對海量業務數據進行分析，并利用算法挖掘用戶行為特征，發現潛在規律，建立機器學習算法并優化;

　　2、利用數據挖掘技術分析、預測用戶的消費行為;

　　3、建立各種業務邏輯模型和數學模型，幫助公司改善運營管理，節省成本。

　　任職要求：

　　1、大學本科及以上學歷;

　　2、統計學、會計學、數學、物理等相關專業;

　　3、本科5年以上同崗位工作經驗，研究生3年以上同崗位工作經驗;

　　4、對統計學和數據挖掘算法原理有較為深刻的`理解，了解數據倉庫思想，熟悉SPSS、SAS、R、MAHOUT等數據挖掘軟件之一;

　　5、熟悉決策樹、聚類、邏輯回歸，關聯分析、SVM，貝葉斯等數據挖掘算法，有海量數據挖掘的項目經驗;

　　6、有用戶行為分析、用戶建模、業務建模、數學建模經驗優先;

　　7、良好的邏輯分析能力、分析問題和解決問題的能力，對數據敏感，良好的溝通能力。

數據工程師崗位崗位職責6

　　職責：

　　1、從事Hadoop、Spark、Hbase、hive等分布式大數據產品的設計和開發；

　　2、針對部門大數據業務進行大數據分析、挖掘等產品應用的'開發；

　　3、大數據平臺各類數據業務抽象及模型化；

　　4、參與大數據管理平臺的開發及維護；

　　5、負責大數據平臺數據及相關的應用開發，調優及維護；

　　6、為項目相關開發人員提供大數據技術指導及解決大數據平臺應用中遇到的技術難題；

　　7、良好的團隊合作與溝通能力。

　　任職要求：

　　1、本科及以上學歷，2年以上大數據應用開發經驗；

　　2、具備Java、Python、Scala其中兩種語言的開發經驗；

　　3、了解泛Hadoop大數據生態圈，熟悉HDFS/Hive/Flink/Hbase/Spark/Kafka其中兩種以上技術，并有實際的項目開發經驗，有相關源碼研究者優先；

　　4、具備ETL開發與運維能力，有Flume、kettle經驗優先；

　　5、熟悉大數據平臺的搭建過程，熟悉數據處理流程，有TB級以上數據處理經驗優先，有實時數據處理經驗者優先；

　　6、熟悉離線和實時數據處理流程，熟練使用Spark，Flink處理TB級數據優先；

　　7、熟悉Linux系統環境，有shell等腳本編寫經驗，熟悉Mysql、PostgreSql、Oracle等常用關系數據庫，熟練編寫SQL語句；

　　8、熟悉Yarn，Kubernetes，Azkaban等資源調度框架者優先；

　　9、熟悉Datax的二次開發，并有實際開發經驗優先。

數據工程師崗位崗位職責7

　　職責：

　　1、參與市場營銷分析、策劃、規劃和數據分析工作；

　　2、根據分析、診斷結果，建立分析模型并優化，為運營決策、產品方向、銷售策略等提供數據支持；

　　3、利用專業數據分析、挖掘工具進行數據建模；

　　4、有相關工作經驗1年以上。

　　任職要求：

　　1、碩士以上學歷，有較強的數學功底和扎實的統計學、數據挖掘功底；

　　2、掌握SQL語句，熟悉Oracle，具備數據處理能力；

　　3、精通常用數據挖掘工具軟件R / SPSS Clementine / SAS/Python等工具之一，掌握聚類分析、方差分析、相關分析、回歸分析、關聯規則、決策樹、隨機模型等常用數據分析方法以及經典的數據挖掘算法，具備一定的基礎可自編挖掘算法；

　　4、有較強的.市場敏感度，分析能力強；

　　5、具備良好的職業素質與敬業精神，注重團隊合作，擅長溝通表達；

　　6、 1年或者以上零售或服裝行業客戶關系管理從業經驗（奢侈品行業優先）；有數據挖掘項目實施經驗者優先，有營銷知識，理念和實踐者優先。

數據工程師崗位崗位職責8

　　1、負責部分化驗設備的周期內部比對，收集比對數據，數據有異常波動時及時采取措施予以解決一般性故障，并告知部門領導。

　　2、負責樣品的.收集管理登記和對外樣品的遞送、打包、郵寄。

　　3、負責出口COA的制作和傳遞。

　　4、負責對本部門內檢驗崗位進行測試比對，統一并矯正各駐廠檢驗室檢測標準；做好與上海AT化驗數據的比對測試。

　　5、協助做好化驗設備維修保養和定期周檢工作，按要求維修保養、周檢和送檢。

　　6、每月匯總和打印成品、原材料分析月報，統計原材料得分表。

　　7、做好公司組織試驗部分數據的輸入與傳遞、。

數據工程師崗位崗位職責9

　　職責：

　　1、為用戶提供服務器技術服務，在分公司主管和公司業務部門的領導下，開展技術咨詢、項目支持工作；

　　2、負責總公司在分公司市場開展業務所需要的技術工作；

　　3、協調分公司當地技術活動與總公司相應部門的協調；

　　4、配合分公司完成全年的銷售任務；

　　5、履行各業務部的.技術要求，加強項目管理。

　　6、能夠充分了解用戶各個系統、存儲、服務器、網絡等情況，并結合高校用戶實際情況提出可行的優化建議；、了解網絡相關知識，熟悉TCP/IP協議線，有調試過交換機、路由器、防火墻、各類安全產品經驗優先，有HCNP或等同以上證書優先。

　　任職條件：

　　（1）本科以上學歷，計算機相關專業，具有一年以上計算機通信等相關工作經驗者優先（優秀應屆畢業生亦可）；

　　（2）掌握存儲、服務器等技術和解決方案；

　　（3）具有撰寫標書的工作經驗，從事過大型網絡的設計、施工或維護工作；

　　（4）具有項目管理經驗，能夠按照ISO9001及相應要求進行項目管理；

　　（5）具有較強的學習能力和表達能力；

數據工程師崗位崗位職責10

　　職責：

　　1.建設公司級數據倉庫，并根據業務變化持續迭代和優化;

　　2.對業務數據進行梳理和抽象，建設數據倉庫的數據模型;

　　3.對業務數據進行采集、清洗、轉換和存儲;

　　4.支撐BI、用戶數據、用戶運營、用戶畫像、房源數據、推薦系統等核心數據平臺產品;

　　5.研究大數據前沿技術，不斷持續優化大數據平臺，為業務提供價值。

　　任職資格:

　　1.本科及以上計算機、統計學、數據庫、機器學習等相關專業，5年以上數據相關工作;

　　2.對業務數據有敏銳的理解能力，并能快速梳理和分析業務數據;

　　3.熟練掌握SQL語言、熟悉MySQL，對Shell、Java(主要開發語言)、Python編程非常熟悉;

　　4.熟悉常用的ETL技術和原則;精通數據倉庫數據庫設計規范和實操;

　　5.熟悉Hadoop、Hive、HBase、Spark、Storm等開源平臺者優先;

　　6.具有較強的分析和解決問題的.能力，良好的學習能力和團隊合作精神，追求價值實現，認同目標管理和敏捷。

數據工程師崗位崗位職責11

　　職責：

　　1、規劃及建設大數據平臺;

　　2、負責大數據存儲系統、分布式計算系統、挖掘算法等設計、研發以及維護、優化工作;

　　3、負責分析、挖掘、對抗各種產品安全層面的惡意行為;

　　4、參與項目的系統設計和核心代碼開發，指導和培訓其他工程師;

　　5、整理和提交技術文檔，負責核心功能模塊的代碼編寫和測試工作。

　　崗位要求：

　　1、計算機、統計學等相關專業本科及以上學歷，具有深厚的.數學、統計學和計算機相關知識，精通數據倉庫和數據挖掘的相關技術，3年以上大數據開發相關經驗;

　　2、具有非常扎實的Java基礎，熟悉Shell、Python、R、Scala等一種以上語言;

　　3、算法基礎扎實，熟悉常見的數據結構，了解分布式算法和分布式系統的技術原理;

　　4、精通MapReduce設計方法或Spark計算框架、對NoSQL，Hadoop、Hbase、Spark、Hive等主流云計算，大數據相關軟件有充分的了解，并且有實踐經驗，能解決應用中的復雜問題;

　　5、熟悉大數據處理相關技術，包括但不限于Hadoop、Hive、Hbase、Impala、Spark，Kafaka、Flume、Sqoop、Storm、Redis等;

　　6、研讀過Hadoop、Hbase、Hive源代碼者，能夠在特定業務中進行定制改造者優先;

　　7、具有海量數據處理、數據挖掘、數據分析相關項目的工作經驗者優先。

數據工程師崗位崗位職責12

　　職責：

　　1.根據公司業務需求，進行數據開發及報表制作;

　　2.參與BI、大數據平臺體系建設;

　　3.文檔整理，包括ER圖、原型設計、數據字典整理等;

　　崗位要求：

　　1.本科或以上學歷，計算機相關專業，2年及以上工作經驗;

　　2.熟練使用主流數據庫(如ORACLE/PostgreSQL/MYSQL等)，掌握SQL查詢優化方法;

　　3.熟悉HADOOP生態，能夠熟練使用HIVE/HBASE/SPARK進行數據開發;

　　4.掌握JAVA或PYTHON，會TABLEAU/KYLIN/帆軟等BI工具者優先;

數據工程師崗位崗位職責13

　　服務器開發工程師(python數據方向) ihandy北京漢迪移動互聯網科技股份有限公司,ihandy,ihandysoft,漢迪?崗位職責

　　?負責開發推薦系統的業務后端

　　?支持各種業務開發、架構設計和性能調優

　　?職位要求

　　?精通python,有python web相關開發經驗

　　?有高并發的設計和實現經驗

　　?具有極強的.編碼能力和工程實踐能力

　　?至少熟悉一種數據庫(sql/nosql),至少熟悉一種緩存組件(redis/memcached)

　　?了解推薦系統lambda架構者優先

　　?有hadoop/spark等大數據處理經驗者優先

數據工程師崗位崗位職責14

　　職責：

　　1.根據業務場景要求設計數據挖掘模型，包括有監督、無監督類模型，以及偏好、價值評估類模型、組合最優化類模型等

　　2.通過數據挖掘手段進行標簽化工作

　　3.根據數據挖掘方法論完成數據挖掘全流程建模工作

　　4.自主開展模型效果評估，并不斷優化

　　5.開展數據挖掘模型產品化工作

　　6.帶領產品(或項目)團隊進行技術攻關

　　7.主導數據挖掘相關解決方案編寫、客戶交流

　　任職資格：

　　1.本科及以上學歷

　　2.熟悉SPARK ML

　　3.精通Python技術

　　4.精通數據挖掘常用算法以及神經網絡算法

　　5.精通SQL數據處理，包括關系型數據庫，以及Hive SQL、Spark SQL處理

　　6.三年以上數據挖掘設計、開發經驗

　　7.具備獨立研究以及解決問題的能力

　　8.較強的PPT方案撰寫以及呈現能力

　　9.較強的.溝通協調和執行能力，能夠承受較大的工作壓力

　　10.較強的工作責任心和客戶服務意識

數據工程師崗位崗位職責15

　　職責：

　　1、整合基礎業務數據，對基礎數據庫進行更新維護，參與部門常規報表開發與維護；

　　2、負責數據集市規劃，開發及維護；

　　3、處理各業務模塊數據需求，為業務運營提供數據分析方面咨詢和建議；

　　4、負責搭建并完善業務指標監控體系，為管理層和運營層提供決策支持；

　　5、負責數據分析和應用相關的`業務系統建設，編寫對應系統開發需求，并完成系統測試及應用推廣。

　　職位要求

　　1、兩年以上工作經驗，本科以上學歷，計算機相關專業優先；

　　2、具有良好統計學及相關領域的理論基礎，熟悉數理統計、數據分析工作方法，具有較強的數據分析能力；

　　3、精通SQLPython語言，有銀行數據倉庫，數據集市開發經驗者優先；

　　4、具備較強文字分析和數據處理能力，能獨立編寫數據分析報告；

　　5、具備開闊的互聯網業務思維，對數據敏感，有較好的業務開拓和溝通表達能力。

【數據工程師崗位崗位職責】相關文章：