高階資料工程師的職責(精選22篇)

高階資料工程師的職責 篇1

職責:

高階資料工程師的職責(精選22篇)

1、負責生產環境Mysql資料庫系統高可用、高效能架構方案,分庫分表策略,資料庫擴充套件方案;

2、排查資料庫故障,分析和解決疑難問題,提出預防方案;

3、制定資料庫監控策略、備份策略、容災策略,探查系統潛在的問題和可能的效能瓶頸並進行優化;

4、對開發工程師的SQL語句進行稽核及SQL優化;

5、負責redis、memcache等非關係資料庫的管理和擴充套件,能夠根據業務需求完成系統設計、架構設計工作;

6、參與前瞻性新技術研究,解決資料庫相關疑難問題。

【任職要求】

1、計算機相關專業,統招大專及以上學歷;

2、具備5年以上豐富的MySQL實踐經驗,精通SQL優化以及儲存過程程式設計,熟悉Oracle的管理和優化;

3、精通MySQL資料庫效能優化,精通MySQL引擎,精通MySQL主從調優,精通MySQL叢集優化;

4、精通MySQL資料庫的執行機制和體系架構;

5、精通MySQL複製,實時備份、負載均衡等處理技術,精通資料庫核心引數設定和調整,具備IO與系統性能優化的經驗;

6、熟悉redis、memcached、MongoDB等非關係資料庫管理者優先;

7、有大型網站資料庫高併發量設計經驗、熟悉大型資料庫的設計、容量效能管理和調優經驗者優先。

高階資料工程師的職責 篇2

職責:

1. 負責生產環境Mysql資料庫系統高可用、高效能架構方案,分庫分表策略,資料庫擴充套件方案。

2. 排查資料庫故障,分析和解決疑難問題,提出預防方案;

3. 制定資料庫監控策略,備份策略,容災策略;探查系統潛在的問題和可能的效能瓶頸,並進行優化。

4. 對開發工程師的SQL語句進行稽核,SQL優化。

5. 參與前瞻性新技術研究,解決資料庫相關疑難問題。

6. 負責redis,memcache等非關係資料庫的管理和擴充套件 任職資格:

職位要求:

1. 具備5年以上豐富的MySQL實踐經驗,熟悉Oracle的管理和優化;

2.計算機及相關專業,本科以上學歷;

3. 具備優秀的資料庫架構設計能力,精通MySQL資料庫效能優化,精通MySQL引擎,精通MySQL主從調優;

4. 精通MySQL、ORACLE資料庫的執行機制和體系架構;

5. 精通MySQL、ORACLE複製,實時備份、負載均衡等處理技術,精通資料庫核心引數設定和調整;

6. 精通redis,memcached等非關係資料庫管理;

7. 需具備IO與系統性能優化的經驗;

8. 需具備良好的職業道德,工作認真、踏實,責任心強,有團隊協作精神;

9. 有大型網站資料庫高併發量設計經驗、熟悉大型資料庫的設計、容量/效能管理和調優者優先;

高階資料工程師的職責 篇3

職責:

1. 維護資料庫穩定執行,持續發現和解決潛在的問題;

2. 負責資料庫的效能優化,使用新技術和新架構滿足日益增長的業務需求;

3. 負責資料庫的監控系統設計,為開發團隊提供平臺支援;

4. 負責資料庫的運維方面的相關工作,包括資料庫的安裝部署、壓力測試、備份恢復、知識庫管理等

5. 負責資料庫進行容量規劃、架構設計,提高業務高可用性和容災能力;

6. 負責資料庫相關工作的整體規劃,提供決策建議。

任職要求:

1. 計算機相關專業本科及以上,具有3年以上DB2資料庫DBA經驗;

2. 精通DB2資料庫體系結構和工作原理,有高可用架構規劃設計經驗優先;

3. 熟悉MySQL資料庫體系結構和工作原理,有高可用架構規劃設計經驗優先;

4. 熟悉TSM的運維管理,並熟悉基於TSM的資料備份和恢復;

5. 熟悉V5000、V7000等儲存的運維管理;

6. 熟悉資料庫的效能優化、SQL調優技術,對高併發資料庫的鎖和事務隔離問題有深入理解;

7. 熟悉資料庫容量規劃和分表設計方法,有海量資料庫設計和支援經驗優先;

8. 熟悉常用的資料庫備份方法;

9. 精通指令碼語言,並至少能用Shell,Perl,Python等中的一種進行快速開發。

高階資料工程師的職責 篇4

職責:

1、負責公司資料庫的日常巡檢、常規故障維護、資料庫優化、資料庫的備份恢復

2、負責公司資料庫的容災環境的維護、資料庫的升級、資料庫的遷移

3、負責公司資料庫的資料庫系統linux、solaris的維護

4、負責公司資料庫儲存的維護

職位要求:

1、 三年以上oracle DBA/Sybase/mysql DBA工作經驗,本科以上文憑

2、 熟悉oracle資料庫的體系結構、邏輯結構,熟悉表空間管理,熟悉sql、pl/sql,熟悉oracle資料庫的備份與恢復,熟悉oracle RAC、DATAGURD的搭建與管理,熟悉oracle資料庫的效能優化,熟悉oracle的常規故障處理

3、 熟悉mysql 熟悉mysql叢集的搭建與管理,熟悉mysql的備份與恢復,熟悉mysql資料庫的效能優化與常規故障處理

4、 熟悉linux、unix(solaris),熟悉shell指令碼的編寫,熟悉sun小機維護、熟悉sybase資料庫者優先考慮

5、具有良好的學習能力、溝通能力和團隊合作能力。

6、有耐心,有服務意識

高階資料工程師的職責 篇5

職責:

1、根據業務需求完成資料庫架構設計,配合系統開發團隊提供DBA服務。

2、負責資料庫的系統安裝、配置管理以及效能監控和調優;

3、對資料庫執行狀況進行監控,及時對故障進行分析處理,記錄解決文件;

4、提供資料庫的高可用性部署設計方案、以及負責資料庫的日常維護/管理(資料備份/恢復計劃,系統資料安全以及許可權管理)

任職要求:

1、3年以上mysql DBA全面運維工作經驗,有儲存過程,觸發器,大資料量的經驗。

2、熟悉Linux系統,能獨立完成資料庫系統的部署、調優、測試和監控;

3、有mysql資料庫高負載高併發系統運維經驗;

4、具有很強的故障排查能力,有很好的技術敏感度和技術文件整合能力;

5、熟悉MySQL資料庫設計、管理與優化,熟悉myisam和innodb引擎,熟練mysql效能優化、SQL調優技術;

6、具備基本的JAVA知識,可以協助team完成一些基本的開發工作。

7、工作踏實、責任心強,敢於獨立分析和解決問題。

8、有良好的團隊協作精神,樂於分享,共同進步。

高階資料工程師的職責 篇6

1、綜合公司銷售需求節點、材料供應節奏、OEM工廠實際產能等情況,制訂OEM生產計劃;

2、負責OEM供應商的評估把關及質量監控,跟進OEM工廠計劃達成實績,生產過程中的異常處理,確保OEM產品的完成進度;

3、協助對OEM供應商技術、材料等的考察與評價,管理OEM新專案、新工廠評選匯入,為公司甄選、拓展OEM供應商,為採購環節提供技術支援;

4、負責整包產品抽檢過程中異常處理,制定質量技術指標和相關檔案;

5、負責OEM測試,跟進評估確保滿足量生產日程等,協同並推動供應商的質量改進;

6、OEM生產管理流程梳理完善,結合業務需求制定及改善實績業務流程 。

7、協助部門總監做好管理工作,對相關技術及資訊進行收集,整理與轉化。

高階資料工程師的職責 篇7

職責:

1、根據業務需求完成資料庫架構設計,配合系統開發團隊提供DBA服務。

2、負責資料庫的系統安裝、配置管理以及效能監控和調優;

3、對資料庫執行狀況進行監控,及時對故障進行分析處理,記錄解決文件;

4、提供資料庫的高可用性部署設計方案、以及負責資料庫的日常維護/管理(資料備份/恢復計劃,系統資料安全以及許可權管理)

任職要求:

1、3年以上mysql DBA全面運維工作經驗,有儲存過程,觸發器,大資料量的經驗。

2、熟悉Linux系統,能獨立完成資料庫系統的部署、調優、測試和監控;

3、有mysql資料庫高負載高併發系統運維經驗;

4、具有很強的故障排查能力,有很好的技術敏感度和技術文件整合能力;

5、熟悉MySQL資料庫設計、管理與優化,熟悉myisam和innodb引擎,熟練mysql效能優化、SQL調優技術;

6、具備基本的JAVA知識,可以協助team完成一些基本的開發工作。

7、工作踏實、責任心強,敢於獨立分析和解決問題。

8、有良好的團隊協作精神,樂於分享,共同進步。

高階資料工程師的職責 篇8

職責:

1. 負責公司資料倉庫/資料集市模型設計,優化現有資料倉庫模型;

2. 參與資料倉庫支援工具設計;

3. 參與資料倉庫需求定義;

4. 參與資料治理、元資料建設、優化資料開發流程。

任職資格:

1. 計算機、數學、統計或相關專業本科及以上學歷,資料探勘/平臺和BI分析領域優先;

2. 3年及以上資料倉庫設計開發經驗;

3. 熟悉HIVE,有HQL使用經驗者優先;

4. 精通資料倉庫建模方法,對kimball維度建模理論有深入的瞭解;

5. 有實際數倉建設專案負責人經驗者優先;

6. 熟悉Hadoop生態圈以及大資料環境的 OLAP 框架者優先。

高階資料工程師的職責 篇9

職責:

1.負責資料分析,資料探勘相關的演算法、應用的設計與開發;

2.負責公司產品各階段資料的整理、分析、挖掘及提交資料報告,重點對車輛行為資料進行分析和挖掘,利用資料分析結論推動業務產品的優化;

3.對海量業務資料進行整合、分析挖掘,挖掘產品以及使用者潛在資訊,為營銷、運營及決策提供業務分析及資料支援。

崗位要求:

1、計算機、統計學、數學、計量經濟學、金融學等相關專業,本科及以上學歷,有資料分析相關工作經驗優先;

2、具有深厚的數學、統計學和計算機相關知識,瞭解資料倉庫和資料探勘的相關技術;

3、熟練掌握SQL,有獨立的資料探查能力;

4、曾經參與過比較完整的資料採集、清洗、整理、分析工作,有資料產品設計經驗;5、對商業和業務邏輯敏感,具備良好的邏輯分析能力、組織溝通能力和團隊精神;

6、熟悉決策樹、聚類、邏輯迴歸,關聯分析、SVM,貝葉斯等資料探勘演算法優先,有海量時間序列資料探勘經驗優先;

7、熟悉SAS、SPSS、R等統計分析軟體者優先;

8、具有海量資料探勘、搜尋、推薦相關專案的工作經驗者優先;

9、有物聯網,環保相關行業背景,有競對資料分析及資料探勘經驗優先。

高階資料工程師的職責 篇10

職責:

1、MySQL資料庫規劃、設計、監控維護、升級、備份、映象、容災;

2、資料庫伺服器的安裝部署、效能優化、可靠性、容災方案制定等;

3、對資料庫效能分析與調優,排錯,保證資料安全;

4、負責對開發工程師的 SQL 語句進行優化;

5、配合研發制定資料庫技術方案,分庫分表策略,現有表結構優化,資料遷移方案;

6、負責Mysql自動化相關事宜;

崗位要求

1、3年以上mysql資料庫維護經驗,熟悉mysql故障排查、效能優化、備份與恢復、容災等技術。

2、負責MySQL資料庫日常管理和維護,對現有資料系統的穩定性、高可用性、擴充套件性的相關保障工作;

3、負責效能監控和調優,能夠對業務需求和事故及時響應,調整資料庫設計建議;

4、負責稽核新業務上線的資料庫程式碼稽核與部署;

5、能夠進行資料庫引擎、SQL語句和讀寫分離的優化分析/設計,並具有高併發下讀寫分離維護經驗;

6、熟悉 redis/memcache/mongodb等nosql資料庫優先;

7、熟悉Linux運維管理,熟悉shell或python一種指令碼語言開發優先;

高階資料工程師的職責 篇11

職責:

1. 設計和搭建遊戲伺服器端的技術架構;

2. 負責遊戲平臺伺服器端開發工作,遊戲指令碼內容編寫;

3. 負責與遊戲客戶端資料傳輸協議的制定。

崗位要求:

1、熟悉網遊的架構設計,熟悉多執行緒開發技術,處理大量網路併發資料, 有高併發多執行緒服務端程式開發經驗

2、2年以上工作經驗,1年及以上的C/C++伺服器開發經驗,熟悉掌握C/C++,良好的程式設計習慣和除錯技巧

3、熟悉C/S結構,網路通訊協議,http,socket程式設計技術

4、熟悉資料庫開發,熟悉Mysql,SqlServer資料庫程式設計技術

5、熟悉windows server開發環境,熟悉Linux作業系統原理和日常使用的Shell命令伺服器開發

6、熟悉lua指令碼程式設計

7、熟悉Redis開發

8、邏輯思維清晰,能獨立設計遊戲中系統邏輯,較強的溝通和能力,能承擔工作壓力

高階資料工程師的職責 篇12

職責:

1、負責MySQL的容量規劃,架構設計及安裝、部署及需求處理;

2、負責建立MySQL的高可用叢集、監控,應急和備份恢復機制,保障服務穩定7*24可用;

3、負責MySQL的日常管理,監控和維護,及時排除故障,並對MySQL進行持續效能優化;

4、負責MySQL開發支援,參與資料架構規劃設計,以及相關業務的資料建模、設計評審、SQL程式碼稽核;

5、負責開發人員資料庫方面的知識培養,提高整體開發人員資料庫方面的能力;

6、負責MySQL新技術的研究,適應快速發展的移動網際網路業務場景;

7、負責公司Redis、MC、Hadoop,Otter其他NoSQL,SQL系統的管理和維護。

任職要求:

1、大專及以上學歷,計算機相關專業;

2、至少3年MySQL DBA相關工作經驗,有在知名網際網路的DBA工作經驗優先考慮;

3、精通MySQL資料庫的執行機制和體系架構,熟悉常用的Innodb和myISAM資料引擎,有postgresql、greeplum管理經驗優先;

4、熟悉MySQL叢集、負載均衡和高可用技術方案;

5、精通SQL語句,資料庫儲存過程,能對slow SQL提出優化意見和建議;

6、熟悉linux系統管理和操作,有shell指令碼編寫能力;

7、有Redis、MC、Hadoop、MongoDB等NoSQL實踐經驗者優先;

8、熟悉shell、python、lua程式設計,熟悉JAVA者,有自動化運維工具/平臺搭建者優先考慮;

9、誠信,責任心強,具有較強的團隊意識和良好的溝通能力。

高階資料工程師的職責 篇13

職責:

1、 參與或負責公司的大資料平臺的建設;

2、 負責專案的需求調研、資料分析、商業分析和資料探勘模型等;

3、 負責專案中資料準備、模型建立、模型跟蹤、模型優化、模型維護、部署和評估;等閉環流程,為營銷、運營及決策提供分析支撐及技術支援;

4、 使用統計學分析方法、挖掘演算法,構建有效且通用的資料分析模型,支援現有業務並適應業務的不斷拓展。

職位要求:

1、計算機、統計學、數學、金融學等相關專業,本科及以上學歷,碩士及以上優先;

2、優秀的邏輯思維能力,能夠發現關鍵資料、關鍵問題,從海量資料中發現有價值的規律;

3、善於分析業務、能將複雜的業務需求轉化為資料/數學模型,對大資料處理和分析工作有熱情;

4、熟悉常見爬蟲、反爬蟲技術,有爬蟲相關專案開發經驗優先;

5、 熟悉SAS、R、python等統計分析軟體者優先;

6、 有大資料相關(hadoop、spark)程式設計經驗者優先;

7、有良好的溝通表達能力和分析報告製作經驗者優先。

高階資料工程師的職責 篇14

職責:

1、根據專案要求,開展需求調研,完成調研報告和需求規格說明書;

2、向開發工程師提供諮詢、指導、解釋業務需求,向用戶彙報系統功能;

3、整理和分析客戶需求,對其分類彙總和實現預估,提出需求分析報告和實現計劃要求;

4、參與整個專案開發流程,負責需求開發與跟蹤,完成需求變更的控制與管理,與開發測試團隊一起保證最終專案符合預定的需求;

5、指導測試工程師根據測試需求,組建測試環境的工作。

任職資格

1、計算機或通訊相關專業本科以上學歷,本科畢業4年以上,碩士畢業1年以上;

2、兩年以上終端軟體開發工作經驗;

3、具有較強的溝通能力,邏輯思維能力和文件編寫能力;

4、掌握需求分析方法,熟悉需求管理和研發過程管理,具有較好的開發經驗;

5、較強的責任心及團隊合作精神,能夠承擔工作壓力;

6、有大資料專案需求分析實踐者優先。

高階資料工程師的職責 篇15

職責:

1、負責目標使用者分析、資料預估、使用者驗證、使用者調研等,為運營計劃提供依據;

2、負責對行業資料的採集、管理,並不斷完善行業資料積累;

3、負責使用行為資料、文字資料、關係資料等對使用者進行深入分析,構建使用者畫像,使用者關係網路等工具,持續優化使用者風險評估模型、使用者價值模型;

4、建立和優化資料模型,協助建立自動化決策系統;

5、負責監控日常遊戲資料,輸出相關結論和報告,及時發現數據異動,預警運營風險;

6、支援公司大資料產品的技術體系建設,將業內先進演算法應用到業務場景,提高團隊整體技術創新能力。

要求:

1、本科及以上學歷,計算機、統計學、數學等相關資料分析專業;

2、三年以上工作經驗,有成功的資料探勘專案經驗優先;

3、掌握SQL語句,熟悉OracleMySQLSQL Server中一種或多種,具備資料處理能力;

4、精通常用資料探勘工具軟體R 或Python等,掌握常用資料分析方法以及經典的資料探勘演算法,具備一定的基礎可自編挖掘算;

5、具備一定的報告撰寫能力,思維邏輯清晰,能從資料中提煉核心結果,並能形成有力的資料結果報告;

6、具有良好的邏輯分析能力和資料敏感度,善於發現問題和解決問題的能力,具有吃苦耐勞敬業精神和團隊精神。

高階資料工程師的職責 篇16

1、負責金屬表面處理的工藝標準及技術要求的編制和修訂;

2、負責工藝執行的監督、異常分析及預防措施的提出;

3、協助新產品開發;

4、協助生產工藝技術專案的改善,對產品質量問題分析及解決提供技術支援;

5、負責對員工的作業技能、工藝技術等進行相關培訓;

6、完成上級領導安排的其他工作。

高階資料工程師的職責 篇17

職責:

(1)收集客戶分析需求,轉化需求為可執行的分析方案;

(2)基於分析方案,進行資料收集、挖掘建模、模型優化;

(3)撰寫分析報告;

(4)跟進模型效果評估與優化;

(5)其他資料分析挖掘技術性工作。

崗位要求:

(1)本科及以上學歷,專業背景是應用數學或者統計學等相關專業有關;

(2)2年以上相關資料探勘分析工作經驗;對資料探勘的基本演算法有一定了解和應用經驗;

(3)能快速理解客戶需求,將實際需求轉化為建模分析需求;

(4)熟練使用SAS、JMP、SPSS、R等其中任一挖掘分析軟體。

(5)熟悉運營商業務資料;

高階資料工程師的職責 篇18

職責:

1. 參與資料倉庫和基礎架構規劃、安全規劃、ETL架構和規範制定;

2. 負責海量資料的ETL開發和優化,抽取成各種資料需求,並及時解決ETL相關技術問題;

3. 負責對ETL技術培訓,指導進行資料倉庫專案的開發、測試和運 維;

4. 負責ETL資料準確性驗證及報表維護;

5. 海量資料的ETL開發,抽取成各種資料需求。

任職要求:

1. 本科以上學歷,優秀名校或碩士以上優先,有較好的英文閱讀能力;

2. 精通開源etl開發工具及etl架構,有一定的etl開發經驗,熟悉日常作業的部署和排程。;

3. 熟悉主流資料庫技術,如oracle、Sql server、PostgeSQL、MySql等;

4、精通Shell程式設計。

高階資料工程師的職責 篇19

1、負責組織與業務部門協調與溝通需求,制定新業務解決方案;

2、負責新系統建設的需求管理、方案設計、系統開發等專案管理工作;

3、跟蹤新系統與其他應用系統的事件與問題解決;

4、參與系統供應商選型;

5、與供應商和第三方合作伙伴的協調與溝通;

6、持續改善新系統與其他應用系統的功能與效能;

7、提出IT流程優化建議。

高階資料工程師的職責 篇20

職責:

1、負責公司伺服器日常維護及監控,提供系統功能方面的服務和支援。

2、負責機房巡檢及相關故障、疑難問題排查處理;

3、負責公司辦公電腦軟硬體及其外設日常維護;

任職資格:

1、熟悉微軟windows系列作業系統,熟悉Windows Server產品,有域控管理經驗;

2、熟練掌握VMware虛擬化軟體的使用,有虛擬主機維護經驗者優先;

3、熟悉EXchange server 郵件產品,有相關的安裝配置經驗;

4、能夠熟練使用常用的伺服器系統監控軟體等;

5、熟悉計算機硬體、windows作業系統及應用軟體日常故障排除;

6、工作認真、仔細,有強烈的責任感和良好的溝通能力;

7、專科及以上學歷,1年以上相關工作經驗,計算機相關專業;

8、有MCSE、RHCE等證書者優先;

高階資料工程師的職責 篇21

職責:

1、負責資料庫的架構設計、安裝部署、效能調優及故障診斷;

2、負責資料庫管理維護,監控及效能優化;

3、負責資料庫運維標準化,規範化,以及相關文件編寫及管理;

4、參與業務系統設計,提供高效能、高可用的資料庫設計及業務系統容災設計;

5、參與運維組內部建設工作,執行上級臨時安排的事務。

【任職要求】

1、 本科或以上學歷,2年以上資料庫管理經驗。

2、 熟悉Oracle/MsSQL等常用資料庫的管理,包括資料庫存設計、效能調優、部署和更新。

3、 熟悉MsSQL主從、MHA、Galera等高可用方案。

4、 熟悉MsSQL 相關監控、分析、開發和管理工具。

5、 熟練掌握常用的Linux系統平臺,如CentOS 6或Redhat等。

高階資料工程師的職責 篇22

1.負責三星AP SoC晶片設計系統和射頻電路PCB設計工作;

2.負責元器件庫的建立和維護;

3.解決PCB制板的工藝問題;

4.協助硬體設計工程師進行除錯;

5. 負責SMT的相關檔案,並與SMT廠商完成貼片工作;