大數(shù)據(jù)開發(fā)工程師的職責(zé)是什么呢
大數(shù)據(jù)開發(fā)工程師的職責(zé)是什么呢篇1
職責(zé):
1、與項目經(jīng)理溝通和確認某個模塊的需求和實現(xiàn)方法。
2、負責(zé)自己范圍內(nèi)的功能代碼編寫
3、負責(zé)自己范圍內(nèi)的功能模塊的單元測試以及階段測試工作
4、對自己開發(fā)的功能模塊進行維護工作
5、部分現(xiàn)場支撐問題解答以及處理
6、合理編制技術(shù)文件,改進和規(guī)范工藝流程;
崗位要求
1、計算機及相關(guān)專業(yè)本科及以上學(xué)歷
2、2年以上大型互聯(lián)網(wǎng)電子商務(wù)系統(tǒng)或者其他大型企業(yè)應(yīng)用系統(tǒng)開發(fā)相關(guān)經(jīng)驗;
3、精通JavaEE相關(guān)技術(shù)和框架
(包括Java語言基礎(chǔ)/多線程/Spring/MyBatis/Cache/Workflow/zookeeper/dubbo等)
4、有Web及前端技術(shù)開發(fā)經(jīng)驗
(包括Javascript,ajax,jason,HTML,XML,MVC類Web開發(fā)框架);
5、熟悉基于Mysql、Oracle等數(shù)據(jù)庫的設(shè)計和開發(fā)、Linux操作系統(tǒng)和某種腳本語言編程(如Shell等)
6、熟悉大容量、高性能的數(shù)據(jù)庫系統(tǒng)的應(yīng)用開發(fā),對各種開源的軟件有深入的了解,
有1年以上的大規(guī)模高并發(fā)訪問的Web應(yīng)用開發(fā)經(jīng)驗;
7、熟悉企業(yè)應(yīng)用設(shè)計模式、面向?qū)ο蟮姆治龊驮O(shè)計技術(shù),包括設(shè)計模式、UML建模等
大數(shù)據(jù)開發(fā)工程師的職責(zé)是什么呢篇2
1、家電產(chǎn)品內(nèi)部結(jié)構(gòu)及裝配設(shè)計,有智能家電開發(fā)經(jīng)驗者優(yōu)先;
2、負責(zé)參與新產(chǎn)品整體結(jié)構(gòu)設(shè)計方案設(shè)計,確定產(chǎn)品的結(jié)構(gòu)設(shè)計方案和項目計劃,完成樣機試制,確定零部件的詳細設(shè)計;
3、能夠結(jié)合工業(yè)設(shè)計、市場反饋、用戶體驗、產(chǎn)品品質(zhì)綜合確定產(chǎn)品的結(jié)構(gòu)設(shè)計方向;
4、負責(zé)樣品分析,參與試產(chǎn)、對產(chǎn)品可靠性、工藝性、合理性負責(zé)。
大數(shù)據(jù)開發(fā)工程師的職責(zé)是什么呢篇3
職責(zé):
1.負責(zé)運營平臺以及移動應(yīng)用服務(wù)器API開發(fā)與維護,編寫開發(fā)文檔;
2.根據(jù)業(yè)務(wù)需求提出技術(shù)方案,負責(zé)系統(tǒng)框架的規(guī)劃、開發(fā);
3.熟悉支付業(yè)務(wù)流程,對已有模塊的調(diào)優(yōu)和bug修復(fù)。
任職資格:
1.計算機及相關(guān)專業(yè),熟悉掌握PHP、熟悉面向?qū)ο缶幊?
2.有成熟的項目經(jīng)驗,能獨立處理開發(fā)中遇到的問題;
3.熟悉Linux服務(wù)器相關(guān)知識,熟悉Nginx/Apache等服務(wù)搭建,對服務(wù)器搭建和系統(tǒng)性能調(diào)優(yōu)有了解;
4.熟悉掌握MySQL數(shù)據(jù)庫的使用,對高并發(fā)數(shù)據(jù)處理和數(shù)據(jù)優(yōu)化有相應(yīng)的處理方案;
5.對緩存技術(shù)有了解,使用過Redis/Memcache/Mongodb等常見nosql數(shù)據(jù)庫之一。
大數(shù)據(jù)開發(fā)工程師的職責(zé)是什么呢篇4
職責(zé):
1、負責(zé)數(shù)據(jù)庫的安裝、配置、監(jiān)控、實時備份、恢復(fù)和管理;
2、負責(zé)數(shù)據(jù)清理及系統(tǒng)間的數(shù)據(jù)遷移;
3、根據(jù)需要負責(zé)數(shù)據(jù)庫設(shè)計包括表結(jié)構(gòu)、表、索引等的設(shè)計;
4、負責(zé)編寫SQL、觸發(fā)器、存儲過程等;
5、負責(zé)原有SQL優(yōu)化,原有存儲過程維護。
工作要求:
1、2年以上數(shù)據(jù)庫開發(fā)或Java軟件開發(fā)經(jīng)驗;
2、熟練使用Linux系統(tǒng),熟悉表結(jié)構(gòu)設(shè)計、SQL優(yōu)化,熟練編寫存儲過程;
3、熟悉Oracle、Mysql數(shù)據(jù)庫運行機制、體系架構(gòu);
4、掌握Oracle數(shù)據(jù)庫維護,能對業(yè)務(wù)需求和故障及時反饋和處理;
5、具較強的責(zé)任心和學(xué)習(xí)能力,有團隊合作精神、溝通協(xié)調(diào)能力、承壓能力。
大數(shù)據(jù)開發(fā)工程師的職責(zé)是什么呢篇5
職責(zé):
1、獨立負責(zé)工作小組,并對下級成員進行監(jiān)督;
2、具備資源整合以及對軟件項目全局把控的能力;
3、負責(zé)軟件項目的系統(tǒng)設(shè)計和需求分析;
4、制定軟件項目開發(fā)計劃,并按時完成功能模塊的設(shè)計、開發(fā)以及編程任務(wù);
5、積極配合并完成主管下達的任務(wù),并能夠?qū)浖块T的發(fā)展規(guī)劃提出意見;
任職條件
1、大數(shù)據(jù)相關(guān)開發(fā)經(jīng)驗3年以上,至少具備2年以上java開發(fā)經(jīng)驗;
2、有基于hadoop的數(shù)據(jù)抽取、轉(zhuǎn)換、加載的開發(fā)相關(guān)經(jīng)驗;
3、熟練掌握hadoop生態(tài)的相關(guān)知識,如hive,hbase,flume.kafka,storm,spark,mapreduce等;
4、熟悉Linux操作系統(tǒng)。熟悉linux各項基本操作,至少掌握一門腳本語言;
5、熟練數(shù)據(jù)倉庫,對多維數(shù)據(jù)建模有深入理解;
6、有BI數(shù)據(jù)平臺、數(shù)據(jù)倉庫、日志采集、多維數(shù)據(jù)倉庫設(shè)計、開發(fā)、架構(gòu)經(jīng)驗者優(yōu)先;
7、思維敏捷,有較強的鉆研學(xué)習(xí)能力,較好的溝通能力、團隊合作;
大數(shù)據(jù)開發(fā)工程師的職責(zé)是什么呢篇6
職責(zé):
1、負責(zé)公司在線平臺系統(tǒng)的設(shè)計、評審、編碼等開發(fā)和迭代升級工作,確保相關(guān)系統(tǒng)穩(wěn)定可靠運行;
2、完成系統(tǒng)架構(gòu)設(shè)計、數(shù)據(jù)庫結(jié)構(gòu)設(shè)計、業(yè)務(wù)邏輯抽象、組件封裝等編碼工作;
3、與產(chǎn)品經(jīng)理、前端開發(fā)工程師保持良好溝通,能快速理解、消化各方需求,并落實為具體的開發(fā)工作;
4、對自己開發(fā)的模塊的性能、穩(wěn)定、安全等方面的監(jiān)測和調(diào)優(yōu)承擔(dān)
任職要求
1、3年以上的PHP項目開發(fā)工作經(jīng)驗,熟練掌握各種API接口研發(fā);
2、精通PHP,深入理解MVC模式,精通OOP開發(fā),熟練運用常用設(shè)計模式開發(fā);
3、熟悉html5/CSS3/javascript/AJAX等前端技術(shù),熟悉jQuery/Bootstrap等前端類庫/框架;
4、熟悉MySQL數(shù)據(jù)庫設(shè)計,熟悉分布式儲存者優(yōu)先;熟悉LNMP/LAMP架構(gòu)的搭建、配置和優(yōu)化;
5、熟悉redis/memcached底層緩存技術(shù),有高并發(fā)開發(fā)經(jīng)驗者優(yōu)先;
6、有中大型電商系統(tǒng)、ERP系統(tǒng)等項目開發(fā)及維護經(jīng)驗者優(yōu)先;
7、精通一種或多種PHP開發(fā)框架,熟悉Laravel/Magento者優(yōu)先;
8、具備較強的獨立開發(fā)能力和學(xué)習(xí)能力,同時需要較強的團隊協(xié)作精神、良好的表達能力和溝通能力;
9、工作認真負責(zé),思路清晰,思維敏捷,能承擔(dān)較大的工作壓力,能適應(yīng)創(chuàng)業(yè)型公司的成長速度和挑戰(zhàn),具有較強的自我驅(qū)動力;
大數(shù)據(jù)開發(fā)工程師的職責(zé)是什么呢篇7
職責(zé):
1、完成軟件的設(shè)計、開發(fā)、測試、修改bug等工作。
2、撰寫相關(guān)的技術(shù)文檔。
3、參與業(yè)務(wù)需求的溝通,功能模塊詳細設(shè)計,業(yè)務(wù)功能實現(xiàn)與單元測試,系統(tǒng)維護等工作。
4、對代碼質(zhì)量如執(zhí)行性能、可讀性、可維護性負責(zé)
5、獨立的解決和分析開發(fā)過程中的問題
6、完成上級安排的其他臨時性工作。
崗位要求:
1、計算機相關(guān)專業(yè)專科以上。
2、精通Java語言,熟練使用MyEclipse,熟悉Linux平臺的程序開發(fā)。
3、熟悉面向?qū)ο缶幊淘恚瑪?shù)據(jù)結(jié)構(gòu)和算法基礎(chǔ)扎實。
4、熟悉J2EE相關(guān)技術(shù),掌握Spring、SpringMVC、Mbatis/Hibernate等常用應(yīng)用開發(fā)框架。
5、掌握Web前端技術(shù),熟悉HTML、CSS、JavaScript,有JQuery、Bootstrap、Vue使用經(jīng)驗者優(yōu)先。
6、熟悉Mysql/Oracle等常用關(guān)系型數(shù)據(jù)庫,精通SQL,能夠?qū)QL進行優(yōu)化。
7、了解分布式計算、NoSQL技術(shù),有實際應(yīng)用經(jīng)驗者優(yōu)先。
8、有SpringBoot、SpringCloud、Git、Redis、Java8等相關(guān)使用經(jīng)驗者優(yōu)先。
9、思維敏捷,具備良好的表達能力和溝通能力,PMP/ACP/CSM優(yōu)先。
10、工作認真負責(zé),有強烈的責(zé)任感和吃苦耐勞精神,具有良好的團隊合作精神,具有強烈的事業(yè)心和責(zé)任感。
大數(shù)據(jù)開發(fā)工程師的職責(zé)是什么呢篇8
職責(zé):
1.負責(zé)設(shè)計和實現(xiàn)手機衛(wèi)士大數(shù)據(jù)BI平臺;
2.不斷完善數(shù)據(jù)產(chǎn)品的架構(gòu)設(shè)計,應(yīng)用開發(fā)和新技術(shù)迭代;
3.配合業(yè)務(wù),產(chǎn)品,根據(jù)不同的業(yè)務(wù)需求,靈活快速地完成具有挑戰(zhàn)性的項目,為業(yè)務(wù)提供有價值的數(shù)據(jù)分析和預(yù)測。
任職要求
1.計算機軟件相關(guān)專業(yè)本科及以上學(xué)歷,至少3年以上工作經(jīng)驗;
2.認可技術(shù)與平臺在BI的價值,能夠深入業(yè)務(wù)領(lǐng)域,通過使用數(shù)據(jù)分析和挖據(jù)技術(shù),讓業(yè)務(wù)生成的海量數(shù)據(jù)產(chǎn)生更大價值。
3.熟練掌握大數(shù)據(jù)技術(shù):包括Hadoop,Spark,Storm,Hive,Presto,Parquet,F(xiàn)link,Druid,OLAP,ElasticSearch等等。
4.具備良好的編程能力和代碼風(fēng)格,熟練掌握Java,Python等語言,熟練使用SQL,并具有較強的優(yōu)化能力。
5.需要有很強的開發(fā)和架構(gòu)設(shè)計能力,特別是在大數(shù)據(jù)的分布式和實時處理領(lǐng)域,對存儲引擎和查詢引擎的原理和優(yōu)化都具備比較深入的理解。
6.有一定的數(shù)據(jù)挖掘和機器學(xué)習(xí)算法能力,包括推薦系統(tǒng),深度學(xué)習(xí)等技術(shù)領(lǐng)域。
7.擁有正直、積極、寬容的品質(zhì),學(xué)習(xí)能力強,并且善于溝通合作。
大數(shù)據(jù)開發(fā)工程師的職責(zé)是什么呢篇9
職責(zé)
1、負責(zé)公司大數(shù)據(jù)平臺建設(shè)工作,完成Hdaoop/Spark搭建部署,根據(jù)業(yè)務(wù)需要進行開發(fā);
2、開發(fā)實現(xiàn)網(wǎng)絡(luò)爬蟲并爬取所需數(shù)據(jù),有效存儲到大數(shù)據(jù)平臺;
3、對平臺數(shù)據(jù)做預(yù)處理,滿足數(shù)據(jù)展現(xiàn)及后續(xù)機器學(xué)習(xí)等系統(tǒng)使用;
4、根據(jù)業(yè)務(wù)需要,應(yīng)用大數(shù)據(jù)實時分析技術(shù)、可視化技術(shù)等,并對平臺發(fā)展規(guī)劃進行設(shè)計。
任職資格
1、本科及以上學(xué)歷,計算機相關(guān)專業(yè);
2、熟悉數(shù)據(jù)倉庫和數(shù)據(jù)建模相關(guān)技術(shù)細節(jié),有編程經(jīng)驗,熟悉SQL/Hadoop/Hive/Hbase/Spark等大數(shù)據(jù)工具;
3、具備海量數(shù)據(jù)處理經(jīng)驗,或有互聯(lián)網(wǎng)行業(yè)數(shù)據(jù)挖掘工作經(jīng)驗;
4、1年以上崗位經(jīng)驗優(yōu)先,本科應(yīng)屆有意向的,可優(yōu)先培養(yǎng)。
大數(shù)據(jù)開發(fā)工程師的職責(zé)是什么呢篇10
職責(zé)
1、獨立承擔(dān)系統(tǒng)功能的需求分析和重要功能模塊的設(shè)計;
2、負責(zé)核心模塊的代碼編寫、測試;
3、參與軟件項目工程的實施和管理;
4、培養(yǎng)和指導(dǎo)團隊成員開展工作。
任職資格:
1、計算機相關(guān)專業(yè)(數(shù)學(xué)、物理專業(yè)也可),本科以上學(xué)歷;
2、精通Java語言,熟練使用Eclipse;
3、能熟練掌握目前主流的數(shù)據(jù)庫(Oralce/DB2/SQLSERVER/MySql)至少一種;
4、有3年以上實際項目開發(fā)經(jīng)驗,1-2年作為項目團隊核心成員;
5、能參與系統(tǒng)設(shè)計,獨立完成模塊開發(fā);
6、富有責(zé)任心和創(chuàng)新精神,具有團隊合作精神;
7、計算機相關(guān)專業(yè),本科以上學(xué)歷,或研究生畢業(yè);
8、有過項目管理經(jīng)歷的優(yōu)先錄用。
大數(shù)據(jù)開發(fā)工程師的職責(zé)是什么呢篇11
職責(zé):
1、參與前端應(yīng)用開發(fā),包括Web及Mobile等產(chǎn)品,負責(zé)前端交互的實現(xiàn);
2、與設(shè)計師、產(chǎn)品工程師緊密工作在一起,負責(zé)產(chǎn)出高質(zhì)量的產(chǎn)品前端層;
3、能充分理解項目需求和設(shè)計需求,具有一定研發(fā)精神,能解決各種未知問題;
4、與團隊成員分享經(jīng)驗和新技術(shù),幫助團隊成長。
任職要求:
1、計算機、軟件類專業(yè),本科及以上學(xué)歷;
2、具有3年以上前端開發(fā)經(jīng)驗,精通HTML5、CSS3,熟練應(yīng)用jQuery等框架;
3、對MVC/MVMM有一定的理解,熟練掌握React/Redux或者Vue/Vuex或者AngularJS,有中大型H5項目開發(fā)經(jīng)驗者優(yōu)先;
4、熟悉移動端web開發(fā),能解決各種手機平臺兼容性問題,有webapp、微信公眾號、小程序開發(fā)經(jīng)驗者優(yōu)先;
5、關(guān)注技術(shù)前沿,善于利用各種工具提升自己與團隊的開發(fā)效率;
6、良好的溝通表達能力,具備很好的團隊協(xié)作精神;
7、善于學(xué)習(xí)新的知識,熱愛技術(shù),動手能力強,有進取心。
大數(shù)據(jù)開發(fā)工程師的職責(zé)是什么呢篇12
職責(zé):
1、負責(zé)網(wǎng)站功能的開發(fā)和維護;能針對各種程序網(wǎng)站做二次開發(fā)。
2、負責(zé)對網(wǎng)站已經(jīng)上線的功能進行修改和維護;
3、進行詳細設(shè)計、代碼開發(fā),配合測試,高質(zhì)量完成項目;
任職資格:
1、了解PHP常用開發(fā)框架,熟悉MYSQL,熟悉Div+CSS;
2、具有PHP緩存技術(shù)、靜態(tài)化設(shè)計方面的經(jīng)驗,能夠獨立開發(fā)后臺CMS系統(tǒng);
3、具有良好的編程風(fēng)格,有多層結(jié)構(gòu)的開發(fā)經(jīng)精通網(wǎng)站開發(fā)中常見的安全漏洞及避免方法;
4、具有較強的團隊意識,高度的責(zé)任感,對工作積極嚴謹,勇于承擔(dān)壓力;
5、有良好的溝通和學(xué)習(xí)能力、有較強的團隊協(xié)作能力以及快速解決問題的能力;
大數(shù)據(jù)開發(fā)工程師的職責(zé)是什么呢篇13
1.能夠快速適應(yīng)業(yè)務(wù)需求,撰寫技術(shù)方案和系統(tǒng)設(shè)計;
2.參與技術(shù)方案和系統(tǒng)設(shè)計評審;把握復(fù)雜系統(tǒng)的設(shè)計,確保系統(tǒng)的架構(gòu)質(zhì)量;
3.系統(tǒng)核心部分代碼編寫;疑難問題的解決;
4.負責(zé)參與技術(shù)架構(gòu)設(shè)計、開發(fā)、重構(gòu)、優(yōu)化,根據(jù)業(yè)務(wù)規(guī)劃及技術(shù)規(guī)劃制定應(yīng)用架構(gòu)方案;
5.為團隊引入創(chuàng)新的技術(shù)、創(chuàng)新的解決方案,用創(chuàng)新的思路解決問題。
大數(shù)據(jù)開發(fā)工程師的職責(zé)是什么呢篇14
職責(zé):
1、負責(zé)大數(shù)據(jù)平臺的技術(shù)和產(chǎn)品的設(shè)計、開發(fā)、優(yōu)化和維護;
2、負責(zé)大數(shù)據(jù)平臺設(shè)計文檔編寫,線上產(chǎn)品的維護;
3、負責(zé)系統(tǒng)性能優(yōu)化,解決各類潛在系統(tǒng)技術(shù)風(fēng)險,保證系統(tǒng)的安全、穩(wěn)定、快速運行;
4、負責(zé)整個產(chǎn)品平臺的搭建、多維數(shù)據(jù)庫建設(shè)及管控流程設(shè)計;
5、參與指標設(shè)計,數(shù)據(jù)建模,負責(zé)將數(shù)據(jù)模型在系統(tǒng)中實現(xiàn);
6、負責(zé)數(shù)據(jù)抽取、數(shù)據(jù)交換、實時計算等框架研究及相關(guān)產(chǎn)品的研發(fā);
7、負責(zé)追蹤整體產(chǎn)品過程及質(zhì)量把控。
任職要求:
1、專業(yè)技能:精通Hadoop生態(tài)圈中的一項或幾項技術(shù),深入了解Hadoop及相關(guān)組件的部署及調(diào)優(yōu);設(shè)計或開發(fā)過大容量,高性能,高可用,易擴展的分布式系統(tǒng);熟悉實時計算/流式計算系統(tǒng),至少熟悉一項Nosql技術(shù);具有扎實java功底及開發(fā)能力;對hadoop,hive,hbase,spark等相關(guān)源碼有一定了解;
2、學(xué)歷背景:計算機相關(guān)專業(yè)本科及以上學(xué)歷;
3、工作經(jīng)驗:3年以上JAVA開發(fā)經(jīng)驗及1年以上大數(shù)據(jù)研發(fā)經(jīng)驗
4、能力素質(zhì):具有出色的抽象設(shè)計能力,思路清晰,善于思考,良好的團隊合作能力、溝通能力、較好的自學(xué)能力,具有敬崗愛業(yè)的精神。
5、有團隊管理經(jīng)驗者優(yōu)先。
大數(shù)據(jù)開發(fā)工程師的職責(zé)是什么呢篇15
職責(zé):
1、負責(zé)大型播客網(wǎng)站和大型電子商務(wù)網(wǎng)站PHP程序設(shè)計,開發(fā),維護;
2、參與開發(fā)移動互聯(lián)網(wǎng)的應(yīng)用,包括數(shù)據(jù)架構(gòu),接口定制,大數(shù)據(jù)采集和分析;
3、較好的文檔撰寫能力,編寫易讀,易維護,高質(zhì)量,高效率的代碼。
崗位要求:
1、計算機或相關(guān)專業(yè)大專以上學(xué)歷,2年以上PHP項目開發(fā)經(jīng)驗;
2、精通LAMP架構(gòu)的PHP開發(fā),熟悉OOP、框架、模板、緩存、優(yōu)化等技術(shù);
3、熟練使用MySQL數(shù)據(jù)庫,可以寫出高效的SQL語句;
4、熟練掌握PHP+MySQL環(huán)境的Web應(yīng)用開發(fā),有yii等MVC框架下開發(fā)經(jīng)驗者優(yōu)先;
5、熟練掌握Ajax,jQuery,熟悉memcache,redis,mongoDB;
6、熟悉linux操作系統(tǒng),熟練使用常用命令和工具;
7、良好的英語閱讀能力,能適應(yīng)全英文技術(shù)文檔的開發(fā)項目;
8、具備很好的學(xué)習(xí)鉆研能力,愛好編程這項工作,樂于學(xué)習(xí)新技術(shù);
9、有大型網(wǎng)站開發(fā)經(jīng)驗者優(yōu)先。
大數(shù)據(jù)開發(fā)工程師的職責(zé)是什么呢篇16
職責(zé):
1.根據(jù)產(chǎn)品設(shè)計需求,實現(xiàn)、維護及優(yōu)化WEB前端頁面和業(yè)務(wù)功能;
2.基于vue進行頁面設(shè)計,編寫可重用的前端界面組件,積累公司前端組件庫。
3.負責(zé)公司移動端,pc端研發(fā)工作。
4.現(xiàn)有產(chǎn)品前端界面持續(xù)改進及參與Web前沿技術(shù)研究和新技術(shù)調(diào)研。
任職資格
1.3年以上相關(guān)工作經(jīng)驗;
2.有扎實的javascript基礎(chǔ)(作用域,繼承,閉包,面向?qū)ο笤O(shè)計等);
3.熟悉H5、CSS3等web開發(fā)技術(shù);
4.有豐富的html5移動端開發(fā)經(jīng)驗、熟悉交互設(shè)計;
5.具有react/vue全家桶的實際項目經(jīng)驗和小程序經(jīng)驗
6.有良好的的團隊合作能力,主動性強,執(zhí)行能力強,具備良好的問題定位分析能力;
大數(shù)據(jù)開發(fā)工程師的職責(zé)是什么呢篇17
職責(zé):
1.負責(zé)金融銀行大數(shù)據(jù)系統(tǒng)相關(guān)模塊的數(shù)據(jù)架構(gòu)及研發(fā)實施工作
2.依據(jù)業(yè)務(wù)場景、分析需求提供技術(shù)解決方案并加以實現(xiàn);
3.與客戶業(yè)務(wù)部門對接,解決數(shù)據(jù)建模、報表和報告在系統(tǒng)開發(fā)遇到的問題;
任職資格:
1.具備3年以上DW系統(tǒng)建設(shè)經(jīng)驗,了解BI系統(tǒng),有數(shù)據(jù)管理經(jīng)驗,有維度建模相關(guān)經(jīng)驗,了解數(shù)據(jù)倉庫建設(shè)過程中的挑戰(zhàn)與問題
2.精通多系統(tǒng)數(shù)據(jù)融合、清洗、轉(zhuǎn)換、整合,具備海量數(shù)據(jù)加工處理相關(guān)經(jīng)驗
3.熟悉業(yè)界數(shù)據(jù)倉庫建模方法、元數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量體系管理
4.掌握大型數(shù)據(jù)庫開發(fā)技術(shù)(ORACLE/DB2等),有豐富的數(shù)據(jù)庫模型設(shè)計和優(yōu)化經(jīng)驗
5.熟練掌握Unix/Linux常規(guī)命令、工具及Shell編程
6.掌握一門或多門編程語言優(yōu)先,如Java、Python、scala等
7.熟悉Hadoop、spark、kafka等大數(shù)據(jù)生態(tài)相關(guān)技術(shù),有相關(guān)實踐經(jīng)驗著優(yōu)先8.良好的語言溝通與表達能力和自我驅(qū)動動力9.具備銀行項目設(shè)計、開發(fā)、優(yōu)化等經(jīng)驗者加分
大數(shù)據(jù)開發(fā)工程師的職責(zé)是什么呢篇18
職責(zé):
1.負責(zé)公司大數(shù)據(jù)業(yè)務(wù)集群的運維工作確保高可用;
2.負責(zé)基礎(chǔ)運維、故障定位、容量規(guī)劃、擴容及性能優(yōu)化;
3.設(shè)計實現(xiàn)大規(guī)模分布式集群的運維、報警監(jiān)控和管理平臺;
4.參與業(yè)務(wù)架構(gòu)設(shè)計,在設(shè)計階段給出可運維性改進建議;
5.深入研究大數(shù)據(jù)業(yè)務(wù)相關(guān)運維技術(shù),持續(xù)優(yōu)化集群服務(wù)架構(gòu),探索新的大數(shù)據(jù)運維技術(shù)及發(fā)展方向。
任職資格:
1.大專以上學(xué)歷,2年及以上大數(shù)據(jù)運維工作經(jīng)驗,熟悉hadoop/hbase/hive/Yarn/Spark等分布式相關(guān)技術(shù),熟悉源碼尤佳,至少掌握python/shell中的一種語言,接受優(yōu)秀應(yīng)屆畢業(yè)生;
2.了解大數(shù)據(jù)平臺應(yīng)用架構(gòu),具備常見問題的基本分析和解決能力;
3.熟悉Linux操作系統(tǒng)的配置、管理及優(yōu)化,能夠獨立排查及解決操作系統(tǒng)層面的問題;
4.熟悉nginx/emq/tomca、mysql/mongodb/redis等web應(yīng)用/中間件及主流開源數(shù)據(jù)庫的使用和配置。