大數據開發工程師崗位職責
明確職責可以建立員工之間的有效溝通機制,避免因職責不清而推卸責任,從而建立良好的工作關系。寫大數據開發工程師崗位職責有什么要注意的呢?這里給大家帶來大數據開發工程師崗位職責,希望對大家有所幫助。
大數據開發工程師崗位職責篇1
職責:
1.負責金融銀行大數據系統相關模塊的數據架構及研發實施工作
2.依據業務場景、分析需求提供技術解決方案并加以實現;
3.與客戶業務部門對接,解決數據建模、報表和報告在系統開發遇到的問題;
任職資格:
1.具備3年以上DW系統建設經驗,了解BI系統,有數據管理經驗,有維度建模相關經驗,了解數據倉庫建設過程中的挑戰與問題
2.精通多系統數據融合、清洗、轉換、整合,具備海量數據加工處理相關經驗
3.熟悉業界數據倉庫建模方法、元數據管理、數據質量體系管理
4.掌握大型數據庫開發技術(ORACLE/DB2等),有豐富的數據庫模型設計和優化經驗
5.熟練掌握Unix/Linux常規命令、工具及Shell編程
6.掌握一門或多門編程語言優先,如Java、Python、scala等
7.熟悉Hadoop、spark、kafka等大數據生態相關技術,有相關實踐經驗著優先8.良好的語言溝通與表達能力和自我驅動動力9.具備銀行項目設計、開發、優化等經驗者加分
大數據開發工程師崗位職責篇2
職責
1、負責公司產品運營相關網站后端快速響應開發;
2、負責公司運營支持相關系統開發;
3、負責設計和開發一些內部工具,提高網站整體性開發效益,保證一定的質量;
4、負責相關APP接口開發;
5、配合移動部門與產品部門實現服務器端相關接口開發。
任職資格
1、計算機或相關專業。
2、熟練使用PHP進行程序開發,至少一年以上的PHP項目開發經驗,有模板開發經驗;
3、熟悉Linux系統,至少一年以上Linux平臺開發經驗;
4、掌握WEB編程相關知識JavaScript,CSS,XML,HTTP協議;
5、熟悉大數據量下數據庫(MSSQL、MySQL)的性能管理及優化,具有一定的數據庫規劃能力;
6、有大型網站開發經驗者優先;
7、較強的責任心及團隊合作精神,有獨立解決問題的能力。
大數據開發工程師崗位職責篇3
職責:
1、完成日常任務開發及代碼優化;
2、完成公司現有項目(tp5開發)的更新迭代;
3、參與公司產品的設計,以及完成相應功能模塊的開發,調試;
4、保質保量完成團隊分配的任務。
任職資格:
1、3年以上php開發經驗,從事過電信增值業務者優先;
2、熟練使用thinkphp5或laravel框架;
3、熟悉Unix/Linux操作系統,會使用git或svn等版本控制工具;
4、熟悉mysql數據庫,熟練sql查詢語句;
5、熟悉memcache或redis等緩存技術;
6、熟悉html、css、javascript、jquery框架和ajax等前端技術。
大數據開發工程師崗位職責篇4
1、家電產品內部結構及裝配設計,有智能家電開發經驗者優先;
2、負責參與新產品整體結構設計方案設計,確定產品的結構設計方案和項目計劃,完成樣機試制,確定零部件的詳細設計;
3、能夠結合工業設計、市場反饋、用戶體驗、產品品質綜合確定產品的結構設計方向;
4、負責樣品分析,參與試產、對產品可靠性、工藝性、合理性負責。
大數據開發工程師崗位職責篇5
職責:
1、負責大數據平臺的技術和產品的設計、開發、優化和維護;
2、負責大數據平臺設計文檔編寫,線上產品的維護;
3、負責系統性能優化,解決各類潛在系統技術風險,保證系統的安全、穩定、快速運行;
4、負責整個產品平臺的搭建、多維數據庫建設及管控流程設計;
5、參與指標設計,數據建模,負責將數據模型在系統中實現;
6、負責數據抽取、數據交換、實時計算等框架研究及相關產品的研發;
7、負責追蹤整體產品過程及質量把控。
任職要求:
1、專業技能:精通Hadoop生態圈中的一項或幾項技術,深入了解Hadoop及相關組件的部署及調優;設計或開發過大容量,高性能,高可用,易擴展的分布式系統;熟悉實時計算/流式計算系統,至少熟悉一項Nosql技術;具有扎實java功底及開發能力;對hadoop,hive,hbase,spark等相關源碼有一定了解;
2、學歷背景:計算機相關專業本科及以上學歷;
3、工作經驗:3年以上JAVA開發經驗及1年以上大數據研發經驗
4、能力素質:具有出色的抽象設計能力,思路清晰,善于思考,良好的團隊合作能力、溝通能力、較好的自學能力,具有敬崗愛業的精神。
5、有團隊管理經驗者優先。
大數據開發工程師崗位職責篇6
職責:
1、負責公司云計算業務相關系統的開發、升級、優化工作。
2、參與相關業務邏輯后臺架構設計、系統建模、數據庫設計、核心代碼的編寫及后臺服務程序的研發和編寫。
3、獨立完成完整功能測試和發布,準備相關的技術文檔,協助解決各種技術問題。
4、進行詳細設計、代碼開發,配合測試,高質量完成項目。
5、按照項目計劃,按時提交高質量代碼,完成開發任務。
任職資格:
1、2年以上PHP開發經驗;精通PHP+MySQL,熟悉OOP編程思想和MVC框架,有整體項目開發經驗。
2、熟練使用JavaScript,jQuery熟悉AJAX、JSON數據交互,對Mysql數據庫有豐富的經驗及熟悉優化。
3、熟悉PHP緩存技術、了解高并發、負載均衡處理技術。
4、有移動開發經驗,能完成主流應用工具接口的二次開發,能為業務提供接口支持者優先。
5、有良好的編碼習慣,具有高度的責任心、良好的溝通能力和團隊協作精神。
大數據開發工程師崗位職責篇7
1、負責數據倉庫和大數據處理模塊的架構設計和開發;
2、負責實現基于Spark框架的分布式計算框架的設計和開發工作;
3、負責Spark技術研究和通用數據平臺的性能調優;
4、負責大數據項目中,基于kafka、flume、sparkstreaming、SparkSQL等相關技術的海量數據的處理、分析、統計、挖掘工作。
5、熟悉Scala/Java語言,對Scala/Java原理、底層技術有深入研究者優先;
6、有過海量數據系統開發經驗者優先;
7、熟悉Hadoop/Spark生態系統組件的使用,至少有2年以上的Spark開發經驗;
8、寫過推薦系統的優先考慮
大數據開發工程師崗位職責篇8
職責:
1、負責數據庫的安裝、配置、監控、實時備份、恢復和管理;
2、負責數據清理及系統間的數據遷移;
3、根據需要負責數據庫設計包括表結構、表、索引等的設計;
4、負責編寫SQL、觸發器、存儲過程等;
5、負責原有SQL優化,原有存儲過程維護。
工作要求:
1、2年以上數據庫開發或Java軟件開發經驗;
2、熟練使用Linux系統,熟悉表結構設計、SQL優化,熟練編寫存儲過程;
3、熟悉Oracle、Mysql數據庫運行機制、體系架構;
4、掌握Oracle數據庫維護,能對業務需求和故障及時反饋和處理;
5、具較強的責任心和學習能力,有團隊合作精神、溝通協調能力、承壓能力。
大數據開發工程師崗位職責篇9
職責:
1.負責公司大數據業務集群的運維工作確保高可用;
2.負責基礎運維、故障定位、容量規劃、擴容及性能優化;
3.設計實現大規模分布式集群的運維、報警監控和管理平臺;
4.參與業務架構設計,在設計階段給出可運維性改進建議;
5.深入研究大數據業務相關運維技術,持續優化集群服務架構,探索新的大數據運維技術及發展方向。
任職資格:
1.大專以上學歷,2年及以上大數據運維工作經驗,熟悉hadoop/hbase/hive/Yarn/Spark等分布式相關技術,熟悉源碼尤佳,至少掌握python/shell中的一種語言,接受優秀應屆畢業生;
2.了解大數據平臺應用架構,具備常見問題的基本分析和解決能力;
3.熟悉Linux操作系統的配置、管理及優化,能夠獨立排查及解決操作系統層面的問題;
4.熟悉nginx/emq/tomca、mysql/mongodb/redis等web應用/中間件及主流開源數據庫的使用和配置。
大數據開發工程師崗位職責篇10
職責:
1、參與微信開發、小程序項目功能編碼及完成項目技術攻關;
2、獨立完成網站前后臺的功能開發;
3、負責數據庫優化、程序性能優化;
4、能獨立理清產品需求,完成代碼編導;
崗位要求:
1、大專以上學歷,三年或以上相關工作經驗;
2.精通PHP+MYSQL編程
3.熟練使用一種PHP框架,ThinkPHP、Yii2框架優先;
4.熟練的進行MySQL數據庫設計和優化;
5.熟練使用PHP緩存技術
6.對前端語言Html、Div+CSS、JS、jq有所了解;
7.熟悉常見的短信接口,熟悉支付寶、微信等支付接口的集成.
8.有微信開發、小程序項目、商城開發經驗者優先
大數據開發工程師崗位職責篇11
職責:
1.負責設計和實現手機衛士大數據BI平臺;
2.不斷完善數據產品的架構設計,應用開發和新技術迭代;
3.配合業務,產品,根據不同的業務需求,靈活快速地完成具有挑戰性的項目,為業務提供有價值的數據分析和預測。
任職要求
1.計算機軟件相關專業本科及以上學歷,至少3年以上工作經驗;
2.認可技術與平臺在BI的價值,能夠深入業務領域,通過使用數據分析和挖據技術,讓業務生成的海量數據產生更大價值。
3.熟練掌握大數據技術:包括Hadoop,Spark,Storm,Hive,Presto,Parquet,Flink,Druid,OLAP,ElasticSearch等等。
4.具備良好的編程能力和代碼風格,熟練掌握Java,Python等語言,熟練使用SQL,并具有較強的優化能力。
5.需要有很強的開發和架構設計能力,特別是在大數據的分布式和實時處理領域,對存儲引擎和查詢引擎的原理和優化都具備比較深入的理解。
6.有一定的數據挖掘和機器學習算法能力,包括推薦系統,深度學習等技術領域。
7.擁有正直、積極、寬容的品質,學習能力強,并且善于溝通合作。
大數據開發工程師崗位職責篇12
職責:
1、獨立負責工作小組,并對下級成員進行監督;
2、具備資源整合以及對軟件項目全局把控的能力;
3、負責軟件項目的系統設計和需求分析;
4、制定軟件項目開發計劃,并按時完成功能模塊的設計、開發以及編程任務;
5、積極配合并完成主管下達的任務,并能夠對軟件部門的發展規劃提出意見;
任職條件
1、大數據相關開發經驗3年以上,至少具備2年以上java開發經驗;
2、有基于hadoop的數據抽取、轉換、加載的開發相關經驗;
3、熟練掌握hadoop生態的相關知識,如hive,hbase,flume.kafka,storm,spark,mapreduce等;
4、熟悉Linux操作系統。熟悉linux各項基本操作,至少掌握一門腳本語言;
5、熟練數據倉庫,對多維數據建模有深入理解;
6、有BI數據平臺、數據倉庫、日志采集、多維數據倉庫設計、開發、架構經驗者優先;
7、思維敏捷,有較強的鉆研學習能力,較好的溝通能力、團隊合作;