大數(shù)據(jù)開發(fā)工程師崗位的基本職責(精選10篇)
在不斷進步的時代,我們都跟崗位職責有著直接或間接的聯(lián)系,崗位職責主要強調(diào)的是在工作范圍內(nèi)所應盡的責任。大家知道崗位職責的格式嗎?下面是小編為大家整理的大數(shù)據(jù)開發(fā)工程師崗位的基本職責,歡迎閱讀與收藏。
大數(shù)據(jù)開發(fā)工程師崗位的基本職責 篇1
職責:
1. 根據(jù)公司業(yè)務需求,進行數(shù)據(jù)開發(fā)及報表制作;
2. 參與BI、大數(shù)據(jù)平臺體系建設;
3. 文檔整理,包括ER圖、原型設計、數(shù)據(jù)字典整理等;
崗位要求:
1. 本科或以上學歷,計算機相關專業(yè),2年及以上工作經(jīng)驗;
2. 熟練使用主流數(shù)據(jù)庫(如ORACLE/PostgreSQL/MYSQL等),掌握SQL查詢優(yōu)化方法;
3. 熟悉HADOOP生態(tài),能夠熟練使用HIVE/HBASE/SPARK進行數(shù)據(jù)開發(fā);
4. 掌握JAVA或PYTHON,會TABLEAU/KYLIN/帆軟等BI工具者優(yōu)先;
大數(shù)據(jù)開發(fā)工程師崗位的基本職責 篇2
職責:
1.有獨立工作能力,工作踏實認真,以及較強的團隊協(xié)作精神。
2.負責日志大數(shù)據(jù)平臺的搭建和規(guī)劃;
3.在總體架構設計下,完成日志大數(shù)據(jù)產(chǎn)品的設計、搭建、維護和調(diào)優(yōu),技術文檔的編寫與維護;
4.參與業(yè)務日志的大數(shù)據(jù)分析;
5.及時反饋開發(fā)中遇到的難點問題,溝通并尋求解決方案,按階段有計劃地完成開發(fā)任務
任職資格:
1、計算機等相關專業(yè)本科以上學歷,2年以上開發(fā)經(jīng)驗;
2、熟悉 linux 操作系統(tǒng),熟悉 shell 腳本語言,精通 Java,有較強的開發(fā)能力;
2、熟練使用SQL,熟悉Mysql、MongoDB、Hive等數(shù)據(jù)庫技術的基本操作及原理;
3、熟悉Hadoop/Spark生態(tài)系統(tǒng)組件的使用,至少有1年的Spark(Core/Streaming/SQL)開發(fā)經(jīng)驗;
4、熟悉Elastic產(chǎn)品線(如 Elasticsearch、Kafka、Kibana、Logstash)的使用方法,了解常見優(yōu)化方案,熟悉Elasticsearch部署、監(jiān)控及性能調(diào)優(yōu);
5、熟悉數(shù)據(jù)挖掘、機器學習、網(wǎng)絡數(shù)據(jù)分析等技術優(yōu)先;
大數(shù)據(jù)開發(fā)工程師崗位的基本職責 篇3
職責:
1、負責大數(shù)據(jù)統(tǒng)計平臺建設與優(yōu)化;
2、負責廣告效果分析,反作弊平臺建設;
3、負責移動廣告平臺相關系統(tǒng)的設計研發(fā)及持續(xù)優(yōu)化。
職位要求:
1、計算機或相關專業(yè)本科學歷及以上,2年工作經(jīng)驗;
2、精通大數(shù)據(jù)采集、處理、存儲、查詢相關技術;
3、熟悉Hadoop/Hbase/Hive/Spark/Storm/Kafka相關技術;
4、至少熟練掌握 Java/Scala/Python 中一門語言;
5、有做過大數(shù)據(jù)量查詢優(yōu)化的優(yōu)先;
6、有大數(shù)據(jù)服務運維、性能調(diào)優(yōu)者優(yōu)先;
7、熟悉常用的設計模式,對MVC框架有了解;
8、強烈的責任心,對技術充滿熱情,高效率,良好的溝通能力。
大數(shù)據(jù)開發(fā)工程師崗位的基本職責 篇4
職責:
1、負責大數(shù)據(jù)平臺的技術和產(chǎn)品的設計、開發(fā)、優(yōu)化和維護;
2、負責大數(shù)據(jù)平臺設計文檔編寫,線上產(chǎn)品的維護;
3、負責系統(tǒng)性能優(yōu)化,解決各類潛在系統(tǒng)技術風險,保證系統(tǒng)的安全、穩(wěn)定、快速運行;
4、負責整個產(chǎn)品平臺的搭建、多維數(shù)據(jù)庫建設及管控流程設計;
5、參與指標設計,數(shù)據(jù)建模,負責將數(shù)據(jù)模型在系統(tǒng)中實現(xiàn);
6、負責數(shù)據(jù)抽取、數(shù)據(jù)交換、實時計算等框架研究及相關產(chǎn)品的研發(fā);
7、負責追蹤整體產(chǎn)品過程及質(zhì)量把控。
任職要求:
1、專業(yè)技能:精通 Hadoop 生態(tài)圈中的一項或幾項技術,深入了解 Hadoop 及相關組件的部署及調(diào)優(yōu);設計或開發(fā)過大容量,高性能,高可用,易擴展的分布式系統(tǒng);熟悉實時計算/流式計算系統(tǒng),至少熟悉一項 Nosql 技術;具有扎實 java 功底及開發(fā)能力;對 hadoop,hive,hbase,spark 等相關源碼有一定了解;
2、學歷背景:計算機相關專業(yè)本科及以上學歷;
3、工作經(jīng)驗:3年以上JAVA開發(fā)經(jīng)驗及1年以上大數(shù)據(jù)研發(fā)經(jīng)驗
4、能力素質(zhì):具有出色的抽象設計能力,思路清晰,善于思考,良好的團隊合作能力、溝通能力、較好的自學能力,具有敬崗愛業(yè)的精神。
5、有團隊管理經(jīng)驗者優(yōu)先。
大數(shù)據(jù)開發(fā)工程師崗位的基本職責 篇5
職責:
1、負責區(qū)塊鏈產(chǎn)品的研發(fā),獨立或與團隊合作,按時保質(zhì)完成軟件開發(fā)項目;
2、參與產(chǎn)品系統(tǒng)設計、概要設計工作,核心功能的代碼編寫;
3、獨立解決和指導其他同事處理開發(fā)中遇到的難點問題;
4、總結和編寫相關的開發(fā)文檔;并能夠根據(jù)規(guī)劃需求制定相關技術與產(chǎn)品的`解決方案。
任職資格:
1.本科及以上學歷,5年以上相關工作經(jīng)驗;
2.精通J2EE,精通SSH及常用開源框架和技術,深刻理解各框架的優(yōu)缺點,熟悉分布式、多線程、緩存、消息等高性能架構相關開發(fā)技術;有微服務開發(fā)經(jīng)驗者優(yōu)先 ;掌握主流的前端技術和框架;
3.熟練應用Oracle、MySql數(shù)據(jù)庫件,具備豐富的數(shù)據(jù)庫設計能力;
4、參與過至少一個產(chǎn)品和項目的系統(tǒng)框架設計,有系統(tǒng)設計、調(diào)優(yōu)的經(jīng)驗;
5.具有較強的學習能力,研究能力和問題解決能力,熱衷于新技術的學習和研究;有區(qū)塊鏈研究或經(jīng)驗的優(yōu)先 ;
6.性格開朗、樂觀,有很強的團隊協(xié)作精神和溝通能力,有帶領團隊者綴優(yōu)先;
7.能承受工作壓力,對待工作積極熱情、踏實肯干,能接受短期出差。
大數(shù)據(jù)開發(fā)工程師崗位的基本職責 篇6
職責:
1、根據(jù)數(shù)據(jù)庫倉庫及BI項目的需求,制定ETL相關的設計方案和開發(fā)計劃,并進行后續(xù)的設計、實施、維護;
2、負責整個數(shù)據(jù)倉庫數(shù)據(jù)模型的管理工作(建模、設計、實施);負責數(shù)據(jù)源調(diào)研、入庫、開發(fā)的全流程工作,并保證數(shù)據(jù)質(zhì)量;
3、負責數(shù)據(jù)倉庫的模型的標準制定,實施,監(jiān)督工作;承擔數(shù)據(jù)抽取、清洗、轉(zhuǎn)化等數(shù)據(jù)處理程序開發(fā)。
任職要求:
1、精通關系型數(shù)據(jù)庫理論,熟練掌握Oracle數(shù)據(jù)庫,熟悉數(shù)據(jù)倉庫架構與模型;
2、熟悉Informatica等主流ETL開發(fā)工具;
3、精通SQL語句,對SQL查詢優(yōu)化有豐富的經(jīng)驗,熟悉PLSQL,熟悉函數(shù)、存儲過程,觸發(fā)器等的開發(fā);
4、熟悉Linux操作系統(tǒng)SHELL腳本。
大數(shù)據(jù)開發(fā)工程師崗位的基本職責 篇7
職責:
1.負責ORACLE、SQLSEVER等數(shù)據(jù)庫的實時數(shù)據(jù)處理、故障分析出來,性能優(yōu)化等;
2.定位和解決數(shù)據(jù)集群組件性能和高可用問題,協(xié)助數(shù)據(jù)集群監(jiān)控系統(tǒng)的開發(fā);
3.深入探索業(yè)務數(shù)據(jù),創(chuàng)造性的思考和發(fā)現(xiàn)問題,能夠提出有效解決方案,協(xié)助新項目的預研和開發(fā),數(shù)據(jù)驅(qū)動業(yè)務,
4.負責公司內(nèi)外部各數(shù)據(jù)的接入和清洗處理。
任職資格:
1、計算機相關專業(yè),本科及以上學歷,1年以上hadoop開發(fā)經(jīng)驗,對分布式計算理論有深刻理解。
2、熟悉Linux開發(fā)環(huán)境,熟練Java、scala編程,有良好的編碼習慣;
3、熟悉Hadoop、HBase、HIVE、Spark、KAFKA等系統(tǒng)相關技術原理與實現(xiàn);
4、熟悉mysql、sql server、oracle開發(fā)環(huán)境,對SQL語句相當熟練,具備sql調(diào)優(yōu)能力;
5、有大數(shù)據(jù)運維相關經(jīng)驗優(yōu)先
6、具備良好的溝通能力、學習能力、分析解決問題能力;
7、英語熟練優(yōu)先
大數(shù)據(jù)開發(fā)工程師崗位的基本職責 篇8
職責:
1.編寫存儲過程和SQL腳本實現(xiàn)復雜業(yè)務邏輯;
2.根據(jù)業(yè)務邏輯完成數(shù)據(jù)庫表設計,和整個數(shù)據(jù)的抽取清洗轉(zhuǎn)換過程(ETL),以及數(shù)據(jù)輸出;
3.對于運行緩慢的SQL語句調(diào)優(yōu);
4.數(shù)據(jù)處理自動化腳本部署和維護。
5、定時巡查數(shù)據(jù)庫系統(tǒng),發(fā)現(xiàn)潛在問題和性能瓶頸,并預警
【任職要求】
大專以上學歷,計算機相關專業(yè),有存儲開發(fā)經(jīng)驗;
2、數(shù)據(jù)Oracle或SQLSERVER的運行機制,熟練掌握Oracle或SQLSERVER的基本操作和調(diào)優(yōu);
3、精通SQL語句,基礎扎實
大數(shù)據(jù)開發(fā)工程師崗位的基本職責 篇9
職責:
1、參與需求的調(diào)研、分析和設計工作,并根據(jù)需求設計說明書,編寫數(shù)據(jù)模型存儲過程設計文檔;
2、負責數(shù)據(jù)提取和數(shù)據(jù)分析,以及數(shù)據(jù)庫轉(zhuǎn)換和遷移;
3、負責數(shù)據(jù)模型設計、后臺存儲過程開發(fā);
4、負責數(shù)據(jù)庫日常維護與性能優(yōu)化;
5、負責項目上數(shù)據(jù)庫相關業(yè)務的支撐。
任職要求:
1、本科及以上學歷、計算機相關專業(yè);(可以考慮去掉)
2、3年以上數(shù)據(jù)庫存儲過程開發(fā)工作經(jīng)驗,有一個或以上大型數(shù)據(jù)項目開發(fā)經(jīng)驗;
3、能獨立撰寫存儲過程、視圖、數(shù)據(jù)庫函數(shù)、觸發(fā)器;
4、熟悉ORACLE/DB2數(shù)據(jù)庫,有數(shù)據(jù)庫、SQL語句優(yōu)化的經(jīng)驗;
5、熟悉銀行各業(yè)務部門常用報表類業(yè)務知識,包含資產(chǎn)負債類、中間業(yè)務類、票據(jù)類、信用卡類等。
6、能適應出差的工作環(huán)境;
大數(shù)據(jù)開發(fā)工程師崗位的基本職責 篇10
職責:
1、參與需求分析。負責項目整體規(guī)劃、功能設計、程序開發(fā)工作。
2、對所編寫的程序進行嚴格的綜合測試,進行軟件故障的診斷、定位、分析和調(diào)試。
3、負責項目完善及必要的二次開發(fā)。
4、與團隊協(xié)作進行系統(tǒng)級的代碼優(yōu)化,保證程序的安全、效率和可擴展性。
5、負責系統(tǒng)性能優(yōu)化和技術攻關。
6、按照要求完成相關開發(fā)文檔的整理與編寫。
任職要求:
1、三年及以上后端開發(fā)經(jīng)驗;
2、精通PHP開發(fā)語言,熟悉常用的框架等;
3有大中型規(guī)模的產(chǎn)品架構設計和獨立開發(fā)經(jīng)驗優(yōu)先;
3、具有一定的MySql優(yōu)化經(jīng)驗,精通PHP+MYSQL編程和MySQL數(shù)據(jù)庫
4了解HTML5、CSS3、Jquery、Ajax等前端技術;具有一定的前端開發(fā)能力;
5、精通常見第三方平臺接口的開發(fā)流程;
6、具有很好的團隊合作意識、工作協(xié)同意識;
7、具備根據(jù)業(yè)務和團隊進行技術選型架構能力。
【大數(shù)據(jù)開發(fā)工程師崗位的基本職責】相關文章:
數(shù)據(jù)庫開發(fā)工程師崗位的基本職責-崗位職責01-11
大數(shù)據(jù)開發(fā)工程師的基本職責12-28
數(shù)據(jù)庫開發(fā)工程師崗位的職責01-24
大數(shù)據(jù)開發(fā)工程師的職責文本精選08-19
大數(shù)據(jù)開發(fā)工程師的具體職責03-20
產(chǎn)品開發(fā)技術員崗位的基本職責-崗位職責01-11
數(shù)據(jù)庫工程師的基本職責04-18