大數(shù)據(jù)開發(fā)工程師的主要職責(通用19篇)
大數(shù)據(jù)開發(fā)工程師的主要職責 篇1
職責:
1、負責公司大數(shù)據(jù)平臺建設(shè);
2、根據(jù)業(yè)務需求,制定數(shù)據(jù)倉庫和數(shù)據(jù)分析平臺的實施和持續(xù)更新;
3、攻克技術(shù)難關(guān),保證大數(shù)據(jù)系統(tǒng)的穩(wěn)定運行;
4、完成大數(shù)據(jù)產(chǎn)品的開發(fā)。
職位要求:
1、計算機相關(guān)專業(yè)全日制專科及以上學歷,大數(shù)據(jù)相關(guān)經(jīng)驗;
2、熟悉Java或Scala語言,熟悉Spark,Hadoop,Kafka,Hive,HBase,ZooKeeper等大數(shù)據(jù)相關(guān)技術(shù);
3、精通SQL語句并對Redis,Mongodb等NoSQL數(shù)據(jù)庫有一定經(jīng)驗;
4、對于高并發(fā)、高穩(wěn)定可用性、性能、大數(shù)據(jù)處理有過實際項目產(chǎn)品經(jīng)驗者優(yōu)先;
5、責任心強,工作踏實,有團隊協(xié)作精神,溝通能力強者優(yōu)先。
大數(shù)據(jù)開發(fā)工程師的主要職責 篇2
職責:
1.負責公司環(huán)保大數(shù)據(jù)平臺的架構(gòu)與搭建;
2.負責需求分析,根據(jù)客戶應用需求規(guī)劃大數(shù)據(jù)平臺架構(gòu);
3.負責將大數(shù)據(jù)平臺部署至私有服務器群、私有云或公有云;
4.負責在企業(yè)內(nèi)部進行數(shù)據(jù)平臺原型開發(fā)與數(shù)據(jù)實時交互、存儲性能測試;
5.負責與數(shù)據(jù)挖掘算法交互的架構(gòu)設(shè)計與開發(fā)。
任職要求:
1.計算機相關(guān)專業(yè),全日制本科以上學歷;
2.具有3年以上大數(shù)據(jù)相關(guān)應用開發(fā)經(jīng)驗,有Java開發(fā)經(jīng)驗更佳;
3.至少熟悉一種流行的大數(shù)據(jù)編程框架,如Spark,Storm,F(xiàn)link等;
4.熟悉大數(shù)據(jù)生態(tài)圈常用技術(shù)如RocketMQ,Kafka,F(xiàn)lume,Zookeeper等;
5.熟悉Hadoop安裝、調(diào)試、發(fā)布配置應用,熟悉Linux操作系統(tǒng)更佳;
6.至少熟悉TIDB,MySQL,SQLServer其中一種數(shù)據(jù)庫;
7.學習能力強,對技術(shù)有熱情,關(guān)注技術(shù)發(fā)展方向;
8.具有工業(yè)物聯(lián)網(wǎng)、智慧型環(huán)保項目背景者優(yōu)先。
大數(shù)據(jù)開發(fā)工程師的主要職責 篇3
職責:
1、 負責基于Hadoop/Spark平臺架構(gòu)的開發(fā)、設(shè)計和布局 ;
2、 完成系統(tǒng)框架的設(shè)計和核心代碼的編寫;
3、 針對海量的用戶行為數(shù)據(jù)進行統(tǒng)計、分析與挖掘,不斷提高系統(tǒng)運行效率;
4、 負責對數(shù)據(jù)進行分析,為項目組提供大數(shù)據(jù)技術(shù)指導及分析手段支撐;
5、 負責大數(shù)據(jù)平臺的性能監(jiān)控和持續(xù)優(yōu)化;針對需求提供大數(shù)據(jù)分析技術(shù)解決方案 ;
6、 大數(shù)據(jù)平臺的運維工作,持續(xù)完善大數(shù)據(jù)平臺,保證穩(wěn)定性、安全性;
7、 熟練使用大數(shù)據(jù)ETL數(shù)據(jù)抽取工具;
8、領(lǐng)導安排的其他工作。
任職資格:
1、 3年互聯(lián)網(wǎng)行業(yè)開發(fā)經(jīng)驗,計算機或相關(guān)專業(yè)本科以上學歷;
2、 精通Hadoop大數(shù)據(jù)平臺架構(gòu),具有扎實的Java/Python等開發(fā)語言;并可以開發(fā)高效可靠的代碼;
3、 具有較強的數(shù)據(jù)分析、數(shù)據(jù)挖掘的能力;
4、 熟悉spark、Hive、storm等計算框架者優(yōu)先,對分布式存儲和計算原理有較深的理解;
5、 嚴密的數(shù)學思維、突出的分析和歸納能力、優(yōu)秀的溝通表達能;
6、 個性開朗,對技術(shù)鉆研好學、邏輯思維能力強,溝通能力優(yōu)秀,有團隊合作精神。
大數(shù)據(jù)開發(fā)工程師的主要職責 篇4
職責:
1. 負責機票酒店大數(shù)據(jù)項目的評估、設(shè)計及關(guān)鍵模塊研發(fā);
2. 參與公司大數(shù)據(jù)平臺及聯(lián)機分析系統(tǒng)的建設(shè);
3. 機器學習算法討論、評估及算法的最終編碼實現(xiàn);
4. 數(shù)據(jù)平臺開發(fā)規(guī)范制定,數(shù)據(jù)建模及核心框架研發(fā);
任職要求:
1. 本科及以上學歷,計算機或數(shù)學相關(guān)專業(yè),三年以上相關(guān)工作經(jīng)驗;
2. 掌握Java、Python、Scala等 中的一到兩種語言;
3. 熟悉Mongodb、Hive、Hbase、Redis等NoSQL數(shù)據(jù)庫開發(fā)和調(diào)優(yōu);
4. 熟悉數(shù)據(jù)相關(guān)開源框架和工具,如ZooKeeper、Spark、Flink、Impala、Kylin 等;
5. 對數(shù)據(jù)結(jié)構(gòu)和機器學習算法有一定的了解;
6. 具有海量數(shù)據(jù)處理、數(shù)據(jù)挖掘、數(shù)據(jù)分析相關(guān)項目的工作經(jīng)驗者優(yōu)先;
7. 有機票酒店等旅游行業(yè)數(shù)據(jù)開發(fā)經(jīng)驗者優(yōu)先。
大數(shù)據(jù)開發(fā)工程師的主要職責 篇5
職責:
1、負責公司項目應用監(jiān)測數(shù)據(jù),分析軟件大數(shù)據(jù)平臺的代碼開發(fā);
2、負責大數(shù)據(jù)體系架構(gòu)設(shè)計和應用產(chǎn)品的研究;
3、負責大數(shù)據(jù)平臺及應用場景的構(gòu)建、部署、測試;
4、編寫軟件研發(fā)相關(guān)技術(shù)文檔;
5、編寫產(chǎn)品研發(fā)相關(guān)任務單計劃,階段性代碼、技術(shù)方案和軟件產(chǎn)品及時提交至配置管理理庫;
6、Spark程序的研發(fā),sqoop腳本開發(fā)和商家用戶行為等離線分析數(shù)據(jù);
7、kudu,kylin等技術(shù)調(diào)研,編寫軟件研發(fā)相關(guān)技術(shù)文檔;
8、SUNMI數(shù)倉設(shè)計架構(gòu)以及ETL流程開發(fā);
9、建立多維度,多體系的用戶標簽體系以及用戶行為數(shù)據(jù)庫。
崗位要求 :
1、本科以上學歷,4年以上?工作經(jīng)驗,2年以上Hadoop平臺的相關(guān)研發(fā)經(jīng)驗,具有良好的需求分析,方案設(shè)計,架構(gòu)設(shè)計,程序編寫、測試能力;
2、熟悉J2EE或Python平臺開發(fā),有良好的Java或Python語言功底;
3、了解Linux/Unix操作系統(tǒng),了解腳本編程(Shell/Python其中一種);
4、具備數(shù)據(jù)中心資源管理(YARN)、監(jiān)控(ClouderaManage)、調(diào)度(Azkaban)等系統(tǒng)研發(fā)經(jīng)驗者優(yōu)先,具備分布式系統(tǒng)研發(fā)經(jīng)驗者優(yōu)先;
5、熟悉hadoop以及其?生態(tài)圈系統(tǒng)上的hive、hbase、sqoop、spark、spark-streaming等技
術(shù),懂hadoop源碼者優(yōu)先;
6、熟悉Kylin有OLAP平臺設(shè)計和開發(fā)經(jīng)驗優(yōu)先;
7、具有應用大數(shù)據(jù)技術(shù)處理TB級以上數(shù)據(jù)的項目開發(fā)經(jīng)驗者優(yōu)先;
8、有較清晰的代碼編寫規(guī)范,邏輯性強,工作態(tài)度認真,良好溝通能力和團隊合作精神。
大數(shù)據(jù)開發(fā)工程師的主要職責 篇6
職責
1、負責網(wǎng)站開發(fā)、平臺應用、移動后臺設(shè)計編寫;
2、參與相關(guān)頁面的Web前后臺架構(gòu)設(shè)計、核心代碼的編寫及后臺服務程序的研發(fā)和編寫;
3、協(xié)助總架構(gòu)師及部門主管測試和發(fā)布系統(tǒng),準備相關(guān)的技術(shù)文檔,協(xié)助解決各種技術(shù)問題;
4、進行詳細設(shè)計、代碼開發(fā),配合測試,高質(zhì)量完成項目;
5、按照項目計劃,按時提交高質(zhì)量代碼,完成開發(fā)任務;
6、參與公司新產(chǎn)品研發(fā)。
任職資格
1、專科及以上學歷,五年左右PHP開發(fā)經(jīng)驗;
2、熟悉二種以上PHP開發(fā)框架,了解設(shè)計模式;
3、熟悉MYSQL數(shù)據(jù)庫設(shè)計和性能優(yōu)化;
4、精通PHP語言,熟悉JavaScript,AJAX,JSON,XML等Web相關(guān)技術(shù);
5、具備良好的代碼編程習慣及較強的文檔編寫能力;
6、熟悉使用SVN版本控制;
7、嚴謹?shù)倪壿嬎季S,強烈的技術(shù)熱情,善于合作,喜歡有挑戰(zhàn)性的工作;
8、熱愛互聯(lián)網(wǎng)產(chǎn)品,工作態(tài)度積極,對產(chǎn)品細節(jié)敏感。
大數(shù)據(jù)開發(fā)工程師的主要職責 篇7
職責:
1.參與大數(shù)據(jù)平臺搭建以及項目技術(shù)架構(gòu)。
2.數(shù)據(jù)分析,挖掘,模型具體的產(chǎn)品化;
3.根據(jù)產(chǎn)品需求,分析編寫和制定大數(shù)據(jù)相關(guān)解決方案
崗位要求:
1、計算機相關(guān)專業(yè)本科以上學歷,編程基礎(chǔ)扎實,有2年以上大數(shù)據(jù)開發(fā)經(jīng)驗
2、熟悉Hadoop生態(tài)和體系架構(gòu),熟悉Flink、Spark,Hive等常用開源工具
3、熟悉Flume,kakfa,scribe等日志收集體系
4、熟悉主流數(shù)據(jù)庫(Oracle、postgresql、Mysql、Sql Server)中的1種及以上,有較好的SQL性能調(diào)優(yōu)經(jīng)驗
5、有數(shù)據(jù)倉庫ETL經(jīng)驗者優(yōu)先
6、有用戶行為日志采集、海量數(shù)據(jù)處理、數(shù)據(jù)建模方面經(jīng)驗者優(yōu)先
7、有持續(xù)學習的能力;喜歡開源軟件,樂于知識分享;對工作認真負責;可以獨立承擔較大工作壓力
大數(shù)據(jù)開發(fā)工程師的主要職責 篇8
1、負責電商平臺Android客戶端研發(fā)工作,能獨立進行產(chǎn)品開發(fā)和迭代工作;
2、將設(shè)計師的視覺設(shè)計工程化并高兼容度實現(xiàn);
3、對已有代碼進行優(yōu)化和重構(gòu);
大數(shù)據(jù)開發(fā)工程師的主要職責 篇9
職責:
1、負責根據(jù)需求調(diào)研結(jié)果,進行功能設(shè)計、詳細設(shè)計;
2、負責需求和設(shè)計過程中相關(guān)文檔的編制;
3、負責核心代碼的編碼和單元測試;
4、對技術(shù)難點進行攻關(guān),并負責知識發(fā)布和知識傳遞。
任職要求:
1、全日制公立本科以上學歷,計算機相關(guān)專業(yè);
2、有3年以上基于J2EE B/S結(jié)構(gòu)軟件的開發(fā)經(jīng)驗;
3、熟悉HTML、JavaScript、AJAX等相關(guān)WEB技術(shù),熟練掌握JQuery類庫;
4、熟悉Servlet、JSP、JavaBean、XML等知識;
5、熟悉spring、springMVC、mybatis框架;
6、熟悉數(shù)據(jù)庫開發(fā),熟悉ORACLE等;
7、有良好的學習能力、團隊協(xié)作能力,主動溝通能力;
8、愛崗敬業(yè),服從指揮,認真負責;
大數(shù)據(jù)開發(fā)工程師的主要職責 篇10
職責 :
1、參與需求評審,根據(jù)需求分析報告和需求規(guī)格說明書主導技術(shù)方案。
2.負責項目的開發(fā)與維護,能獨立處理和解決所負責的任務;
3.制定軟件開發(fā)階段的工作計劃,協(xié)調(diào)開發(fā)、測試的工作,做好日常代碼審查工作,保證項目的進度和質(zhì)量。
崗位要求:
1、本科以上學歷,5年及以上java語言開發(fā)經(jīng)驗; 編程基礎(chǔ)扎實,精通JSP、Servlet等開發(fā)技術(shù)。
2、熟悉前端框架:如Easyui、Bootstrap等。
3、熟悉主流數(shù)據(jù)庫:Oracle、MySQL等的應用系統(tǒng)的數(shù)據(jù)庫設(shè)計、開發(fā)經(jīng)驗,熟練掌握SQL。
4、熟悉J2EE體系架構(gòu),熟悉Spring、Hibernate、MyBatis等主流開發(fā)框架。
5、有主流應用服務器,如Tomcat、WebLogic至少一種的部署配置及性能調(diào)試經(jīng)驗,熟悉使用svn,git版本管理工具;。
6、了解webservice、socketMQ等接口框架。
7、熟悉Linux系統(tǒng)常用命令;
8、能承受壓力,個性成熟穩(wěn)重,具備良好的溝通協(xié)調(diào)能力,工作積極主動認真負責,富于團隊精神,具有良好的自學能力和獨立解決問題的能力。
大數(shù)據(jù)開發(fā)工程師的主要職責 篇11
職責:
1、與項目經(jīng)理溝通和確認某個模塊的需求和實現(xiàn)方法。
2、負責自己范圍內(nèi)的功能代碼編寫
3、負責自己范圍內(nèi)的功能模塊的單元測試以及階段測試工作
4、對自己開發(fā)的功能模塊進行維護工作
5、部分現(xiàn)場支撐問題解答以及處理
6、合理編制技術(shù)文件,改進和規(guī)范工藝流程;
崗位要求
1、計算機及相關(guān)專業(yè)本科及以上學歷
2、2年以上大型互聯(lián)網(wǎng)電子商務系統(tǒng)或者其他大型企業(yè)應用系統(tǒng)開發(fā)相關(guān)經(jīng)驗;
3、精通Java EE相關(guān)技術(shù)和框架
(包括Java語言基礎(chǔ)/多線程/Spring/MyBatis/Cache/Workflow/zookeeper/dubbo等)
4、有Web及前端技術(shù)開發(fā)經(jīng)驗
(包括Javascript,ajax,jason,HTML,XML,MVC 類Web開發(fā)框架);
5、熟悉基于Mysql、Oracle等數(shù)據(jù)庫的設(shè)計和開發(fā)、Linux操作系統(tǒng)和某種腳本語言編程(如Shell等)
6、熟悉大容量、高性能的數(shù)據(jù)庫系統(tǒng)的應用開發(fā),對各種開源的軟件有深入的了解,
有1年以上的大規(guī)模高并發(fā)訪問的Web應用開發(fā)經(jīng)驗;
7、熟悉企業(yè)應用設(shè)計模式、面向?qū)ο蟮姆治龊驮O(shè)計技術(shù),包括設(shè)計模式、UML建模等
大數(shù)據(jù)開發(fā)工程師的主要職責 篇12
職責:
1、負責網(wǎng)站后臺程序開發(fā)(PHP+Mysql)與網(wǎng)站運營人員、美工人員配合完成網(wǎng)站以及需求功能構(gòu)建;
2、負責服務器的維護和保障安全運行;
3、WAP手機端網(wǎng)站的開發(fā)與維護;
4、負責網(wǎng)站安全監(jiān)控與應急處理,維護網(wǎng)站使之保持可用性和穩(wěn)定性;
5、根據(jù)項目任務計劃按時完成開發(fā)任務。
任職要求:
1、計算機相關(guān)專業(yè),至少1年以上的PHP開發(fā)工作經(jīng)驗,需要有微信小程序或微商城開發(fā)經(jīng)驗;
2、有過實際的電商網(wǎng)站開發(fā)和部署經(jīng)驗;
3、熟悉JS,PHP+Mysql等語言,能獨立完成開發(fā)任務;
4、熟悉至少一種PHP框架,如CodeIgniter/ThinkPHP/ZF
5、熟悉主流第三方支付接口,如支付寶,微信開發(fā);
6、良好的編程習慣,結(jié)構(gòu)清晰、命名規(guī)范、代碼冗余率低;
7、了解apache及apache配置,了解linux系統(tǒng);了解IIS+PHP+Mysql配置;
8、會寫移動端接口,會H5頁面編寫。
9、工作經(jīng)驗豐富者,
大數(shù)據(jù)開發(fā)工程師的主要職責 篇13
職責:
1.根據(jù)產(chǎn)品或項目開發(fā)進度和任務分配,負責相應軟件模塊的設(shè)計開發(fā);
2.根據(jù)開發(fā)規(guī)范和流程獨立完成模塊的設(shè)計、編碼及相關(guān)文檔;
3.服務器環(huán)境的搭建和系統(tǒng)的部署等。
4.協(xié)助編寫需求文檔,編寫概要設(shè)計文檔、詳細設(shè)計文檔、數(shù)據(jù)文檔等相關(guān)文檔。
5.能夠參與系統(tǒng)架構(gòu)設(shè)計、性能優(yōu)化、重構(gòu)的討論及給出解決方案的建議。
任職要求:
1、計算機或相關(guān)專業(yè)背景,大專以上學歷,2年以上工作經(jīng)驗。
2、精通一種或多種主流的關(guān)系型數(shù)據(jù)庫如Mysql、Oracle。
3、熟練使用java編程語言,有良好的編程風格。
4、熟悉java的基礎(chǔ)知識,如數(shù)據(jù)類型、集合、異常處理、多線程、緩存、事務等。
5、熟悉一種或多種nosql數(shù)據(jù)庫,如Mongodb、Redis。
6、熟練使用Spring、SpringMVC、Hibernate等常用后端框架。
7、熟悉linux等操作系統(tǒng)。
8、熟悉SpringBoot框架。
9、熟悉微服務架構(gòu)。
10、熟悉數(shù)據(jù)結(jié)構(gòu)、設(shè)計模式、UML等知識。
11、熟悉一種或多種消息隊列如RocketMQ、Kafka。
大數(shù)據(jù)開發(fā)工程師的主要職責 篇14
職責:
1、負責公司產(chǎn)品的開發(fā)工作;
2、負責系統(tǒng)相關(guān)業(yè)務模塊的設(shè)計與開發(fā);
3、負責相關(guān)開發(fā)文檔的整理與編寫;
4、與前端配合開發(fā)公司APP以及其他項目;
任職資格:
1、大專及以上學歷,兩年以上 PHP工作經(jīng)驗,自學能力強;
2、至少熟悉一種數(shù)據(jù)庫開發(fā)MySQL/SQL/ORCAL。 對數(shù)據(jù)庫性能有開發(fā)、配置、維護、性能優(yōu)化經(jīng)驗;
3、有打包封裝APP開發(fā)經(jīng)驗(必須);
4、熟悉主流PHP開發(fā)框架,熟悉Laravel 優(yōu)先。;
5、良好的溝通,理解和邏輯能力;
6、具有Web前端開發(fā)經(jīng)驗優(yōu)先;
大數(shù)據(jù)開發(fā)工程師的主要職責 篇15
1、負責飛機結(jié)構(gòu)工程管理、工程設(shè)計開發(fā)工作,并要求供應商嚴格按工藝、圖紙、制度進行生產(chǎn),確保產(chǎn)品符合要求
2、協(xié)助銷售中心或產(chǎn)品經(jīng)理開展結(jié)構(gòu)專業(yè)技術(shù)支援工作
3、負責飛機結(jié)構(gòu)的改裝設(shè)計方案的評估、消化和建立設(shè)計能力等工作
4、負責客改貨及VIP改裝的改裝包的技術(shù)消化
5、負責外委產(chǎn)品的工程技術(shù)指導
6、控制產(chǎn)品在供應商處的加工過程,積極配合、參與對不合格品的評審、處置、控制工作;
7、確保設(shè)計按照既定的民航規(guī)章要求和產(chǎn)品質(zhì)量與質(zhì)量體系要求。如歐洲民用航空局關(guān)于設(shè)計單位批準許可的所有各項要求
8、跟蹤產(chǎn)品在外協(xié)供應商處狀態(tài),要求供應商嚴格按工藝、圖紙、制度進行生產(chǎn),確保產(chǎn)品符合要求
大數(shù)據(jù)開發(fā)工程師的主要職責 篇16
1、負責RightCloud CMP混合云管平臺系統(tǒng)相關(guān)研發(fā);
2、負責RightCloud CMP產(chǎn)品售前POC、生產(chǎn)環(huán)境的部署實施;
3、參與公司研發(fā)中心生產(chǎn)&測試各種環(huán)境及相關(guān)服務的日常運維,并保證其安全高效穩(wěn)定的運行;
大數(shù)據(jù)開發(fā)工程師的主要職責 篇17
1、從事軟件產(chǎn)品模塊的功能設(shè)計、數(shù)據(jù)庫設(shè)計工作;
2、從事軟件功能的代碼開發(fā)及測試;
3、從事項目在現(xiàn)場環(huán)境的安裝、部署與調(diào)試;
4、從事項目開發(fā)過程所需的文檔編寫工作。
大數(shù)據(jù)開發(fā)工程師的主要職責 篇18
職責
1、負責web自動化系統(tǒng)的編碼和自測并有效地按照計劃完成工作。
2、解決線上產(chǎn)品運行中出現(xiàn)的技術(shù)問題。
3、積極了解相關(guān)新技術(shù)及趨勢,促進技術(shù)創(chuàng)新,持續(xù)改進系統(tǒng)架構(gòu),提高用戶體驗。
職位要求
1、計算機相關(guān)專業(yè)本科及以上學歷。
2、精通web開發(fā)的相關(guān)技術(shù),3年及以上使用java進行web開發(fā)的經(jīng)驗。
3、熟悉springboot、mybatis、sqlite數(shù)據(jù)庫等相關(guān)技術(shù)。
4、掌握javascript、ajax、jquery,等開發(fā)技術(shù);
5、熟悉selenium等自動化技術(shù)優(yōu)先。
6、具有良好的溝通技能,團隊合作能力,勤奮好學,熱愛技術(shù),樂于分享知識與技術(shù)。
大數(shù)據(jù)開發(fā)工程師的主要職責 篇19
1、負責游戲核心架構(gòu)的搭建以及技術(shù)攻關(guān);
2、使用unreal 4引擎進行游戲客戶端模塊開發(fā),游戲客戶端框架的搭建和后續(xù)功能的開發(fā),對領(lǐng)域前沿保持跟進,針對需求做出最優(yōu)選擇;
3、負責MMO游戲項目的必要的技術(shù)嘗試和開發(fā)流程探索。