- 高級數(shù)據(jù)工程師的職責(zé) 推薦度:
- 相關(guān)推薦
高級數(shù)據(jù)工程師的職責(zé)
高級數(shù)據(jù)工程師的職責(zé)1
職責(zé):
1、負責(zé)ETL開發(fā)、作業(yè)調(diào)度和數(shù)據(jù)平臺建設(shè)
2、負責(zé)數(shù)據(jù)倉庫的設(shè)計、開發(fā)和優(yōu)化,建立結(jié)構(gòu)層次合理、靈活可擴展的`數(shù)據(jù)倉庫
3、設(shè)計并研發(fā)BI分析相關(guān)的數(shù)據(jù)產(chǎn)品
4、結(jié)合對數(shù)據(jù)的理解和業(yè)務(wù)需求,對數(shù)據(jù)進行整理、分析和挖掘
任職要求
1、計算機相關(guān)專業(yè)本科及以上學(xué)歷,有2年以上數(shù)據(jù)倉庫、ETL工作經(jīng)驗
2、有海量數(shù)據(jù)處理、ETL及作業(yè)調(diào)度優(yōu)化、數(shù)據(jù)倉庫建模等經(jīng)驗
3、熟悉Linux、SQL、Python或Java、Shell腳本,有Hadoop/Hive/Spark/HBase/Kylin/Impala等大數(shù)據(jù)技術(shù)使用經(jīng)驗
4、邏輯清晰,對數(shù)據(jù)敏感,深入了解業(yè)務(wù),具備自己獨特的想法并能提出合理的建議
高級數(shù)據(jù)工程師的職責(zé)2
職責(zé):
1、維護數(shù)據(jù)庫穩(wěn)定運行,持續(xù)發(fā)現(xiàn)和解決潛在的問題;
2、負責(zé)數(shù)據(jù)庫的性能優(yōu)化,使用新技術(shù)和新架構(gòu)滿足日益增長的業(yè)務(wù)需求;
3、負責(zé)數(shù)據(jù)庫的.監(jiān)控系統(tǒng)設(shè)計,為開發(fā)團隊提供平臺支持;
4、負責(zé)數(shù)據(jù)庫的運維方面的相關(guān)工作,包括數(shù)據(jù)庫的安裝部署、壓力測試、備份恢復(fù)、知識庫管理等
5、負責(zé)數(shù)據(jù)庫進行容量規(guī)劃、架構(gòu)設(shè)計,提高業(yè)務(wù)高可用性和容災(zāi)能力;
6、負責(zé)數(shù)據(jù)庫相關(guān)工作的整體規(guī)劃,提供決策建議。
任職要求:
1、計算機相關(guān)專業(yè)本科及以上,具有3年以上DB2數(shù)據(jù)庫DBA經(jīng)驗;
2、精通DB2數(shù)據(jù)庫體系結(jié)構(gòu)和工作原理,有高可用架構(gòu)規(guī)劃設(shè)計經(jīng)驗優(yōu)先;
3、熟悉MySQL數(shù)據(jù)庫體系結(jié)構(gòu)和工作原理,有高可用架構(gòu)規(guī)劃設(shè)計經(jīng)驗優(yōu)先;
4、熟悉TSM的運維管理,并熟悉基于TSM的數(shù)據(jù)備份和恢復(fù);
5、熟悉V5000、V7000等存儲的運維管理;
6、熟悉數(shù)據(jù)庫的性能優(yōu)化、SQL調(diào)優(yōu)技術(shù),對高并發(fā)數(shù)據(jù)庫的鎖和事務(wù)隔離問題有深入理解;
7、熟悉數(shù)據(jù)庫容量規(guī)劃和分表設(shè)計方法,有海量數(shù)據(jù)庫設(shè)計和支持經(jīng)驗優(yōu)先;
8、熟悉常用的數(shù)據(jù)庫備份方法;
9、精通腳本語言,并至少能用Shell,Perl,Python等中的一種進行快速開發(fā)。
高級數(shù)據(jù)工程師的職責(zé)3
1、負責(zé)處理產(chǎn)線工程、工藝問題;
2、跟進新產(chǎn)品開發(fā)模具及新物料進度,以確保樣品及時交付;
3、負責(zé)產(chǎn)品轉(zhuǎn)量產(chǎn)工藝制定,參與解決生產(chǎn)過程中的技術(shù)及工藝問題。
4、負責(zé)產(chǎn)品開發(fā)的'模具設(shè)計,材料選擇、工藝制定;
高級數(shù)據(jù)工程師的職責(zé)4
崗位職責(zé):
1、參與公司數(shù)據(jù)開發(fā)平臺、bi產(chǎn)品等大數(shù)據(jù)產(chǎn)品的設(shè)計和開發(fā);
2、負責(zé)數(shù)據(jù)開發(fā)平臺、bi產(chǎn)品等大數(shù)據(jù)產(chǎn)品的部署和維護,保證其穩(wěn)定和可靠;
3、關(guān)注和參與大數(shù)據(jù)方向開源產(chǎn)品的技術(shù)動態(tài)與演進,推動產(chǎn)品與技術(shù)架構(gòu)持續(xù)更新;
任職要求:
1、計算機相關(guān)專業(yè),本科及以上學(xué)歷,5年以上軟件開發(fā)經(jīng)驗,3年以上互聯(lián)網(wǎng)產(chǎn)品或分布式系統(tǒng)開發(fā)設(shè)計經(jīng)驗;
2、精通java,python,scala等一種或幾種編程語言,并熟悉linux操作系統(tǒng)及bash shell編程;
3、有hadoop/spark/hive/presto/hbase/elasticsearch/kafka等使用經(jīng)驗,并熟悉上述常用的分布式系統(tǒng)架構(gòu)設(shè)計和原理;
4、熟悉微服務(wù)框架及相關(guān)技術(shù),如dubbo,springcloud等;
5、熟悉mysql、redis,并了解或接觸過其他數(shù)據(jù)庫如oracle,sqlserver,postgresql,mongodb等;
6、了解容器技術(shù),如docker,kubernetes;
7、具有一定的`軟件設(shè)計能力,熱愛大數(shù)據(jù)和技術(shù),相信技術(shù)改變世界,學(xué)習(xí)能力強,認同數(shù)據(jù)價值,有面向業(yè)務(wù)的思維,較強的自主學(xué)習(xí)能力和英文技術(shù)文檔閱讀能力;
8、良好的溝通能力、團隊精神及服務(wù)意識,勇于接受挑戰(zhàn),能承受較大的工作壓力;
9、有生產(chǎn)環(huán)境快速trouble—shooting的經(jīng)驗和能力者優(yōu)先;
10、有olap,多維度數(shù)據(jù)分析經(jīng)驗優(yōu)先,有對數(shù)據(jù)倉庫有較強的理論基礎(chǔ)和理解者優(yōu)先;
高級數(shù)據(jù)工程師的職責(zé)5
1.高質(zhì)量地完成集團內(nèi)外各類數(shù)據(jù)生產(chǎn)集成、數(shù)據(jù)分析應(yīng)用建設(shè)工作,涉及投研、市場、ERP、全球金融資訊等四個業(yè)務(wù)領(lǐng)域方向;
2.需求及源系統(tǒng)數(shù)據(jù)分析,完成數(shù)據(jù)倉庫/EDM等系統(tǒng)數(shù)據(jù)模型及應(yīng)用模型設(shè)計、數(shù)據(jù)Mapping規(guī)則文檔撰寫、開發(fā)、自測及上線部署;
3.數(shù)據(jù)質(zhì)量稽核、問題分析及處理,優(yōu)化數(shù)據(jù)處理程序;
4.洞察數(shù)據(jù)、滿足業(yè)務(wù)場景需求。
高級數(shù)據(jù)工程師的職責(zé)6
1、負責(zé)每日的數(shù)據(jù)倉庫運維工作,保障數(shù)據(jù)的穩(wěn)定性、一致性等;
2、參與數(shù)據(jù)倉庫的優(yōu)化設(shè)計,如元數(shù)據(jù)、數(shù)據(jù)權(quán)限、調(diào)度優(yōu)化;
3、負責(zé)數(shù)據(jù)質(zhì)量和數(shù)據(jù)標(biāo)準(zhǔn)化的.設(shè)計與開發(fā);
4、負責(zé)滿足業(yè)務(wù)部門的日常業(yè)務(wù)提數(shù)與報表需求的開發(fā)。
高級數(shù)據(jù)工程師的職責(zé)7
在行業(yè)擔(dān)任數(shù)據(jù)工程師或后端工程師超過4年
您將了解數(shù)據(jù)倉庫的概念(建模,調(diào)整,維護)
您非常精通SQL,并渴望指導(dǎo)和教其他SQL
您精通Python或任何其他腳本語言和軟件開發(fā)
您在分布式數(shù)據(jù)處理/傳統(tǒng)RDBMS / MPP / NoSQL系統(tǒng)和數(shù)據(jù)建模方面有很強的低估/經(jīng)驗
您在Spark / Kafka / HBase / Redis / Kettle方面擁有豐富的經(jīng)驗
您受到探索數(shù)據(jù)的好奇心和動力的驅(qū)動
您具有處理數(shù)據(jù)管道的`DevOps問題的經(jīng)驗
對數(shù)據(jù)驅(qū)動業(yè)務(wù),關(guān)鍵思想家,問題解決者和自我啟動者的熱情
獲得認可大學(xué)的相關(guān)學(xué)科的學(xué)士學(xué)位
高級數(shù)據(jù)工程師的職責(zé)8
職責(zé):
負責(zé)數(shù)據(jù)倉庫邏輯模型和物理模型設(shè)計,對上游數(shù)據(jù)進行清洗、清理、加工、轉(zhuǎn)換、加載至目標(biāo)數(shù)據(jù)庫。
負責(zé)數(shù)據(jù)ETL開發(fā)、數(shù)據(jù)平臺建設(shè),解決各種數(shù)據(jù)庫問題。例如:調(diào)優(yōu)、異常處理等。
對接相關(guān)業(yè)務(wù)團隊進行數(shù)據(jù)梳理,清洗并協(xié)助分析完成業(yè)務(wù)數(shù)據(jù)化管理的目標(biāo)。
對業(yè)務(wù)團隊進行數(shù)據(jù)能力輸出,并且負責(zé)與業(yè)務(wù)平臺進行數(shù)據(jù)對接。
崗位要求:
計算機、軟件相關(guān)專業(yè),本科及以上學(xué)歷.
3年以上主流數(shù)據(jù)上(DB2、Oracle、SQLServer、Mysql等)ETL設(shè)計、開發(fā)經(jīng)驗,具備大型數(shù)據(jù)倉庫邏輯模型和物理模型設(shè)計經(jīng)驗,精通SQL,有較好的.SQL性能調(diào)優(yōu)經(jīng)驗。
熟悉Unix/Linux常規(guī)命令與工具,至少熟練使用Shell、Python、Perl等腳本語言之一。
有分布式數(shù)據(jù)倉庫建設(shè)相關(guān)經(jīng)驗者優(yōu)先,具備金融行業(yè)數(shù)據(jù)倉庫建設(shè)相關(guān)經(jīng)驗者優(yōu)先。
高級數(shù)據(jù)工程師的職責(zé)9
識別,分析和解決計劃支持問題。
與BU利益相關(guān)者合作,確定并優(yōu)先考慮數(shù)據(jù)和統(tǒng)計要求,包括要收集的特定數(shù)據(jù)元素。
協(xié)助開發(fā)和實施數(shù)據(jù)庫,數(shù)據(jù)收集系統(tǒng)/工具,數(shù)據(jù)分析以及其他優(yōu)化統(tǒng)計效率和質(zhì)量的策略(包括確定流程改進以更好地滿足業(yè)務(wù)需求)。
分析大量數(shù)據(jù)集,提出有見地的業(yè)務(wù)建議。
通過查看報告和績效指標(biāo)來確定和糾正數(shù)據(jù)收集問題,從而確保數(shù)據(jù)的準(zhǔn)確性和完整性。
識別,分析,解釋和建模數(shù)據(jù)湖中數(shù)據(jù)的趨勢或模式。
為各種受眾設(shè)計和生成準(zhǔn)確有效的統(tǒng)計數(shù)據(jù)可視化產(chǎn)品和報告。
通過促進技術(shù)和非技術(shù)利益相關(guān)者之間的溝通,確保技術(shù)團隊了解計劃和業(yè)務(wù)工作的短期和長期目標(biāo)
準(zhǔn)時交付優(yōu)質(zhì),易懂,明確的產(chǎn)品。
學(xué)習(xí)網(wǎng)參與構(gòu)建機器學(xué)習(xí)策略平臺。
對數(shù)據(jù)驅(qū)動業(yè)務(wù),關(guān)鍵思想家,問題解決者和自我啟動者的`熱情
促進技術(shù)和非技術(shù)利益相關(guān)者之間交流的能力
出色的書面和口頭交流能力。
高級數(shù)據(jù)工程師的職責(zé)10
職責(zé):
1、編寫服務(wù)器端總體設(shè)計文檔,實現(xiàn)關(guān)鍵框架代碼
2、負責(zé)服務(wù)器端架構(gòu)設(shè)計與通訊協(xié)議擬定、模塊劃分、團隊合作和人員分工
3、服務(wù)器端核心模塊與邏輯代碼實現(xiàn)
4、服務(wù)器端負載優(yōu)化,網(wǎng)絡(luò)安全方案設(shè)計
5、分析策劃案的技術(shù)可行性,根據(jù)策劃文檔,獨立設(shè)計開發(fā)相應(yīng)的'游戲模塊
6、對游戲設(shè)定功能進行服務(wù)器端系統(tǒng)設(shè)計、編碼、測試以及開發(fā)文檔編寫
7、使用c++開發(fā)維護服務(wù)器底層,開發(fā)游戲邏輯,開發(fā)周邊支持工具等
8、審核其他程序員的代碼,幫助程序員提高編碼能力,具有在需求明確情況下合理估算開發(fā)時間并嚴(yán)格按照文檔要求完成開發(fā)功能的能力
崗位要求:
1、5年以上網(wǎng)絡(luò)游戲服務(wù)器開發(fā)經(jīng)驗
2、精通C++/C任一種以上程序設(shè)計,能編寫高質(zhì)量代碼,具備良好的開發(fā)文檔書寫習(xí)慣
3、熟悉Linux系統(tǒng)機制、操作和開發(fā),如:多線程、多進程、同步、IPC、網(wǎng)絡(luò)編程(Socket)等
4、熟悉大容量數(shù)據(jù)庫程序開發(fā),熟悉mysql/mongodb/oracle/redis任一種以上的數(shù)據(jù)庫
5、熱愛游戲開發(fā)
高級數(shù)據(jù)工程師的職責(zé)11
職責(zé):
1、負責(zé)數(shù)據(jù)庫的技術(shù)開發(fā)工作,包括數(shù)據(jù)庫相關(guān)方案,編寫數(shù)據(jù)庫相關(guān)手冊;
2、參與數(shù)據(jù)庫開發(fā)及數(shù)據(jù)庫優(yōu)化方面的工作;
3、負責(zé)數(shù)據(jù)庫系統(tǒng)的危機事件處理和應(yīng)急處理;
4、定期完成量化的工作,能獨立處理和解決所負責(zé)的`任務(wù)。
任職要求:
1、5年以上數(shù)據(jù)庫相關(guān)工作經(jīng)驗,計算機相關(guān)專業(yè),本科以上學(xué)歷;
2、熟悉Orancle數(shù)據(jù)庫系統(tǒng),精通SQLserver或MYSql數(shù)據(jù)庫,有數(shù)據(jù)庫編程經(jīng)驗;
3、精通基于Linux及Windows平臺數(shù)據(jù)庫的配置優(yōu)化和安全運維;
4、為人誠信,工作主動,能承受較大的工作壓力,良好的溝通能力和團隊合作精神。
高級數(shù)據(jù)工程師的職責(zé)12
職責(zé):
1.搭建業(yè)務(wù)數(shù)據(jù)模型:深入理解業(yè)務(wù)流程,搭建大數(shù)據(jù)分析平臺,對業(yè)務(wù)進行分析、挖掘、建模,參與模型的維護、部署、評估工作,并形成相應(yīng)的模型標(biāo)準(zhǔn)化報告;建立相關(guān)用戶行為模型,用戶分層模型;
2.分析用戶數(shù)據(jù):通過深度挖掘用戶的個人數(shù)據(jù),行為數(shù)據(jù),研究公司相關(guān)業(yè)務(wù)數(shù)據(jù),整理和發(fā)掘數(shù)據(jù)價值,實現(xiàn)精準(zhǔn)投放,生成數(shù)據(jù)產(chǎn)品并推動落地;
3.分析客戶的'基本屬性及行為數(shù)據(jù),進行精細化客戶分群、客戶畫像,撰寫深入的客戶分析報告,建立與產(chǎn)品、客群、業(yè)務(wù)環(huán)節(jié)相適應(yīng)的細分模型;
4.熟悉電信業(yè)務(wù)優(yōu)先。
任職要求:
1.本科及以上學(xué)歷,統(tǒng)計學(xué)、數(shù)學(xué)、計算機及相關(guān)專業(yè),3年及以上工作經(jīng)歷,有大數(shù)據(jù)平臺、電信行業(yè)背景優(yōu)先;
2.至少掌握一種數(shù)據(jù)分析語言(Java/R/Python/Matlab)進行數(shù)據(jù)分析工作,
3.熟悉各種數(shù)據(jù)分析算法,具有相應(yīng)的數(shù)理統(tǒng)計、熟悉建模和數(shù)據(jù)分析相關(guān)知識,熟悉SVM數(shù)學(xué)推導(dǎo),能獨立實現(xiàn)SVM算法。
4.能夠適應(yīng)高強度、快節(jié)奏的工作氛圍,快速熟悉行業(yè)特性及業(yè)務(wù)知識。
5.熟練使用包括但不限于下列技術(shù)Hadoop、Storm、Spark、Hive、Oracle、MySQL、或者Teradata等
6.良好的邏輯思維能力,能夠從海量數(shù)據(jù)中發(fā)現(xiàn)有價值的規(guī)律。
7.具有良好的溝通能力和團隊合作精神。
高級數(shù)據(jù)工程師的職責(zé)13
職責(zé):
1、負責(zé)應(yīng)用平臺維護,保證其有效運行;
2、負責(zé)業(yè)務(wù)數(shù)據(jù)的挖掘、整合以及分析模型的建立、優(yōu)化和評估;為業(yè)務(wù)人員日常工作提供可靠而明確的數(shù)據(jù)支撐;
3、負責(zé)報表相關(guān)功能的設(shè)計、開發(fā)工作,并負責(zé)報表優(yōu)化、維護、數(shù)據(jù)采集;
4、負責(zé)系統(tǒng)相關(guān)文檔的制定和編寫。
5、有實際的`MY SQL或Oracle等數(shù)據(jù)庫開發(fā)相關(guān)工作經(jīng)歷,具有高級工程師技術(shù)能力;
6、有良好的溝通協(xié)調(diào)能力,能與客戶及項目組同事有效的溝通;
7、能夠獨立分析客戶需求,并能針對客戶需求編寫需求分析、設(shè)計等技術(shù)方案;
8、熱愛軟件事業(yè),具有較強的責(zé)任感,有快速掌握新技術(shù)和獨立解決技術(shù)問題的能力;
技能要求
1.計算機相關(guān)專業(yè),大專及以上學(xué)歷,1年以上ORACLE數(shù)據(jù)庫開發(fā)經(jīng)驗;
2.精通PLSQL編程,能夠熟練編寫ORACLE存儲過程、觸發(fā)器等;
3.思路清晰,邏輯明確,有較強分析與解決問題能力;
4.良好的溝通交流能力,對工作熱情、認真、負責(zé),心態(tài)積極而平穩(wěn),能與團隊成員進行良好的合作;
5.電信行業(yè)工作經(jīng)驗及經(jīng)營分析系統(tǒng)/數(shù)據(jù)挖掘、或業(yè)務(wù)支撐系統(tǒng)(crm、boss)項目建設(shè)經(jīng)驗者優(yōu)先。
高級數(shù)據(jù)工程師的職責(zé)14
職責(zé):
1.負責(zé)數(shù)據(jù)庫技術(shù)開發(fā)工作,包括數(shù)據(jù)庫相關(guān)方案,編寫數(shù)據(jù)庫相關(guān)手冊;
2.參與數(shù)據(jù)庫開發(fā)及數(shù)據(jù)庫性能優(yōu)化工作;
3.負責(zé)數(shù)據(jù)庫系統(tǒng)危機事件處理及應(yīng)急處置;
4.定期完成量化的工作,能獨立處理和解決所負責(zé)的任務(wù);
任職要求:
1.5年以上數(shù)據(jù)庫相關(guān)工作經(jīng)驗,計算機相關(guān)專業(yè),本科以上學(xué)歷;
2.熟悉Orancle數(shù)據(jù)庫系統(tǒng),精通SQLserver或MYSql數(shù)據(jù)庫,有數(shù)據(jù)庫編程經(jīng)驗;
3.精通基于Linux和Windows平臺數(shù)據(jù)庫的配置優(yōu)化和安全運維;
4.為人誠信,工作主動,能承受較大的.工作壓力,具有良好的溝通能力和團隊合作精神。
高級數(shù)據(jù)工程師的職責(zé)15
職責(zé):
1、負責(zé)產(chǎn)品數(shù)據(jù)庫研發(fā),參與系統(tǒng)整體架構(gòu)設(shè)計;
2、根據(jù)產(chǎn)品目標(biāo)負責(zé)相關(guān)業(yè)務(wù)的數(shù)據(jù)分析、建模、設(shè)計評審,跟進產(chǎn)品過程中數(shù)據(jù)庫設(shè)計;
3、負責(zé)產(chǎn)品模塊的數(shù)據(jù)層分析、設(shè)計、編碼、測試;
4、能夠獨立完成產(chǎn)品數(shù)據(jù)層開發(fā)任務(wù),負責(zé)各類數(shù)據(jù)接口開發(fā);
5、負責(zé)各類型數(shù)據(jù)操作處理和兼容問題;數(shù)據(jù)庫復(fù)雜SQL開發(fā)和調(diào)優(yōu)。
任職要求:
1、計算機相關(guān)專業(yè)本科及以上學(xué)歷;
2、5年以上JAVA開發(fā)經(jīng)驗,有Spring Boot框架開發(fā)經(jīng)驗,計算機碩士以上學(xué)歷可酌情考慮;
3、系統(tǒng)掌握數(shù)據(jù)庫原理和知識,精通SQL語法規(guī)則和特點,有3年以上SQL編寫經(jīng)驗。熟悉主流數(shù)據(jù)庫技術(shù),良好的數(shù)據(jù)庫基礎(chǔ)知識,具備良好的SQL編寫與優(yōu)化能力,熟練掌握Oracle、SQLServer、MySQL、PostgreSQL等數(shù)據(jù)庫語言,能熟練應(yīng)用分析函數(shù)、存儲過程;
4、熟練掌握數(shù)據(jù)庫腳本的性能調(diào)優(yōu)方法,有大量數(shù)據(jù)處理或開發(fā)經(jīng)驗者優(yōu)先;
5、熟悉數(shù)據(jù)庫建模,熟練運用建模工具進行產(chǎn)品的分析和設(shè)計;
6、有較強的`交流能力,能很好的理解項目需求;
7、具備良好的自學(xué)能力和獨立解決問題的能力;
8、溝通能力良好,具備團隊合作精神,能適應(yīng)一定壓力開展工作。
【高級數(shù)據(jù)工程師的職責(zé)】相關(guān)文章:
高級數(shù)據(jù)工程師的職責(zé)集錦(15篇)07-09
高級軟件測試工程師的職責(zé)06-09
高級硬件測試工程師的職責(zé)06-10
高級測試工程師的基本職責(zé)07-07
中高級測試工程師的職責(zé)03-18
數(shù)據(jù)庫工程師的基本職責(zé)(優(yōu)選)03-11
中高級測試工程師的職責(zé)(必備)03-18