激情欧美日韩一区二区,浪货撅高贱屁股求主人调教视频,精品无码成人片一区二区98,国产高清av在线播放,色翁荡息又大又硬又粗视频

hadoop崗位職責

時(shí)間:2023-02-10 08:18:30 崗位職責 我要投稿

hadoop崗位職責

  在當今社會(huì )生活中,我們每個(gè)人都可能會(huì )接觸到崗位職責,崗位職責是指工作者具體工作的內容、所負的責任,及達到上級要求的標準,完成上級交付的任務(wù)。崗位職責到底怎么制定才合適呢?以下是小編為大家收集的hadoop崗位職責,供大家參考借鑒,希望可以幫助到有需要的朋友。

hadoop崗位職責

hadoop崗位職責1

  職責描述:

  1.kafka集群、spark、hive、hbase、hadoop平臺運維;

  2.獨立完成運維過(guò)程中問(wèn)題定位、問(wèn)題解決、并進(jìn)行總結文檔編寫(xiě);

  3.參與大數據平臺etl處理,合理規劃大數據資源,提高大數據平臺資源利用率,負責基于大數據平臺的開(kāi)發(fā)和基礎建設;

  4.負責大數據平臺相關(guān)系統的運維工作;

  5.跟蹤大數據論壇社區新技術(shù)發(fā)展,持續更新技術(shù)資源,挖掘更多應用場(chǎng)景。

  任職要求:

  1.統招本科以上學(xué)歷,3年以上大數據開(kāi)發(fā)經(jīng)驗;

  2.熟悉hadoop、spark、kafka等技術(shù),對底層架構有深入了解,有基于底層架構進(jìn)行開(kāi)發(fā)者優(yōu)先考慮,精通linux腳本,熟悉linux腳本開(kāi)發(fā);

  3.掌握f(shuō)link/kylin/presto/elasticsearch/redis等一種或多種技術(shù)優(yōu)先;精通hive、hbase數據庫開(kāi)發(fā),對其底層架構有深入研究者優(yōu)先考慮;

  4.熟悉數據架構,對數據處理有深入理解。熟悉掌握java/python/scala開(kāi)發(fā)語(yǔ)言;

  5.性格樂(lè )觀(guān),積極主動(dòng),能夠主動(dòng)承擔責任和解決實(shí)際問(wèn)題。

hadoop崗位職責2

  職位描述:

  1.根據業(yè)務(wù)需求和落地環(huán)境確定大數據平臺的方案和具體搭建

  2.負責大數據平臺及相關(guān)業(yè)務(wù)系統的(hadoop/spark/elasticsearch/zeppelin/jupyter等)的運維工作

  3.對大數據基礎平臺系統穩定性負責,負責故障應急響應及指揮,做好故障發(fā)現和預防,為其持續優(yōu)化提供建設性意見(jiàn)

  4.與數據組合作,幫助處理優(yōu)化項目中數據處理工作(數據采集、清洗、匯總、集成等),保證數據的準確性和穩定性

  崗位要求:

  1.精通scala或python至少一門(mén)編程語(yǔ)言,兩種都熟悉優(yōu)先

  2.精通shell腳本編程

  3.熟悉hadoop/hive/hbase/spark等分布式計算環(huán)境進(jìn)行海量數據分析與計算;

  4.做過(guò)數據倉庫,對數據治理、數據標準及元數據有很好理念及實(shí)施經(jīng)驗的優(yōu)先;

  5.熟悉devops等自動(dòng)化運維工具;

  6.有過(guò)10臺以上集群運維的'經(jīng)驗

  7.良好的溝通能力和團隊精神,具備創(chuàng )新意識;

  8.以結果為導向,具有強烈的責任心、鉆研精神和良好的團隊溝通能力。

  關(guān)鍵詞:hadoop spark

hadoop崗位職責3

  職位描述:

  崗位為公司自研大數據平臺產(chǎn)品線(xiàn),非定制外包。

  崗位職責:

  1.負責公司大數據平臺的hadoop技術(shù)棧研究,形成技術(shù)解決方案和整體的大數據架構。

  2.負責hadoop平臺(分布式存儲、分布式資源管理和調度、分布式計算等)的架構研究、測試、優(yōu)化搭建工作;

  3.負責探索,研究新的hadoop生態(tài)中技術(shù)引擎,不斷擴充平臺能力。

  4.制定hadoop整體集群使用規范,規范的hadoop日常維護、異常處理等工作,保障集群穩定、運行規范解決方案

  5.負責公司定制項目的大數據架構的整體解決方案

  6.負責各種行業(yè)大數據在不同應用場(chǎng)景的最佳開(kāi)發(fā)實(shí)踐,提供流計算、批處理分析、數據挖掘、bi分析等技術(shù)解決方案

  任職資格:

  1.三年以上hadoop集群架構開(kāi)發(fā)或架構經(jīng)驗。

  2.精通hadoop架構的設計以及生態(tài),hadoop的集群的`搭建、部署、開(kāi)發(fā)和運維

  3.精通hadoop各個(gè)模塊的能力定位和配置,對hdfs、hbase、mr、spark等基本組件熟知

  4.熟悉linux系統及調錯經(jīng)驗,熟悉jvm運行機制,有shell、python開(kāi)發(fā)經(jīng)驗。

  5.有鉆研新技術(shù)的熱情和能力,善于交流和表達,富有團隊精神

  6.有企業(yè)級大數據系統設計經(jīng)驗者優(yōu)先。

  7.有一定的代碼經(jīng)驗,python/java/c++/ruby均可。

hadoop崗位職責4

  崗位職責:

  1.負責公司大數據平臺的hadoop技術(shù)棧研究,形成技術(shù)解決方案和整體的大數據架構。

  2.負責hadoop平臺(分布式存儲、分布式資源管理和調度、分布式計算等)的架構研究、測試、優(yōu)化搭建工作;

  3.負責探索,?研究新的?hadoop?生態(tài)中技術(shù)引擎,不斷擴充平臺能力。

  4.制定hadoop整體集群使用規范,規范的`hadoop日常維護、異常處理等工作,保障集群穩定、運行規范解決方案

  5.負責公司定制項目的大數據架構的整體解決方案

  6.負責各種行業(yè)大數據在不同應用場(chǎng)景的最佳開(kāi)發(fā)實(shí)踐,提供流計算、批處理分析、數據挖掘、bi分析等技術(shù)解決方案

  任職資格:

  1.三年以上hadoop集群架構開(kāi)發(fā)或架構經(jīng)驗。

  2.精通hadoop架構的設計以及生態(tài),hadoop的集群的搭建、部署、開(kāi)發(fā)和運維

  3.精通hadoop各個(gè)模塊的能力定位和配置,對hdfs、hbase、mr、spark等基本組件熟知

  4.熟悉linux系統及調錯經(jīng)驗,熟悉?jvm?運行機制,有?shell、python開(kāi)發(fā)經(jīng)驗。

  5.有鉆研新技術(shù)的熱情和能力,善于交流和表達,富有團隊精神

  6.有企業(yè)級大數據系統設計經(jīng)驗者優(yōu)先。

  7.有一定的代碼經(jīng)驗,python/java/c++/ruby均可。

hadoop崗位職責5

  崗位職責

  1、hadoop平臺及各服務(wù)組件的運維、變更、故障和異常問(wèn)題迅速定位;

  2、hadoop平臺以及相關(guān)組件的規劃、部署、擴容及搭建安裝;

  3、定期系統分析、性能調優(yōu),優(yōu)化集群性能和資源利用率,提升集群性能,保證hadoop平臺各核心服務(wù)運行的穩定、高效;

  4、編寫(xiě)運維相關(guān)的`shell腳本或者python腳本,hadoop平臺運維相關(guān)文檔撰寫(xiě);

  5、負責指導中低級工程師,為集群用戶(hù)和開(kāi)發(fā)人員提供支持;

  6、維持服務(wù)高效穩定,支撐業(yè)務(wù)和數據量的快速擴張;

  人員要求

  1、1年半及以上hadoop生態(tài)系統運維經(jīng)驗。

  2、熟練掌握l(shuí)inux操作系統,熟悉linux文件系統,內核、網(wǎng)絡(luò )等性能優(yōu)化;

  3、熟練掌握hdfs、yarn、hive、hbase、spark、storm等hadoop生態(tài)組件的功能和原理;

  4、熟練掌握hadoop的安裝部署及性能調優(yōu);

  5、熟悉一門(mén)以上腳本語(yǔ)言(shell、python、perl),熟悉java;

  6、具有良好責任心,團隊合作意識,具有良好的溝通能力和客戶(hù)服務(wù)意識;

  7、對于優(yōu)秀人才,學(xué)歷要求可適當放寬

hadoop崗位職責6

  職位描述:

  1、hadoop產(chǎn)品功能設計、開(kāi)發(fā)與測試、性能優(yōu)化,根據項目具體要求,承擔開(kāi)發(fā)任務(wù),按計劃完成任務(wù)目標

  2、負責編制與項目相關(guān)的技術(shù)文檔。

  任職要求:

  1、計算機相關(guān)專(zhuān)業(yè),本科及以上學(xué)歷,2年以上hadoop開(kāi)發(fā)工作經(jīng)驗;

  2、熟練使用linux系統,熟悉內核和shell腳本編寫(xiě),能夠在linux環(huán)境下進(jìn)行開(kāi)發(fā)工作;

  3、熟練使用java語(yǔ)言進(jìn)行開(kāi)發(fā);

  4、熟悉分布式文件系的設計和使用,調試優(yōu)化過(guò)hdfs文件系統者優(yōu)先;

  5、良好的代碼開(kāi)發(fā)風(fēng)格及開(kāi)發(fā)習慣,學(xué)習能力、溝通能力,英文資料閱讀和理解能力;

  6、參與過(guò)hadoop社區貢獻者優(yōu)先;

  以下要求至少滿(mǎn)足其中1項:

  7、熟悉hadoop的`架構和原理,以及參數調優(yōu)和性能優(yōu)化,了解partition,shuffle,sort等機制。

  8、有設計,調試或者優(yōu)化類(lèi)似hdfs文件系統經(jīng)驗;

  工作地點(diǎn):南京

hadoop崗位職責7

  崗位職責:

  1.負責公司大數據平臺的hadoop技術(shù)棧研究,形成技術(shù)解決方案和整體的大數據架構。

  2.負責hadoop平臺(分布式存儲、分布式資源管理和調度、分布式計算等)的`架構研究、測試、優(yōu)化搭建工作;

  3.負責探索,?研究新的?hadoop?生態(tài)中技術(shù)引擎,不斷擴充平臺能力。

  4.制定hadoop整體集群使用規范,規范的hadoop日常維護、異常處理等工作,保障集群穩定、運行規范解決方案

  5.負責公司定制項目的大數據架構的整體解決方案

  6.負責各種行業(yè)大數據在不同應用場(chǎng)景的最佳開(kāi)發(fā)實(shí)踐,提供流計算、批處理分析、數據挖掘、bi分析等技術(shù)解決方案

  任職資格:

  1.三年以上hadoop集群架構開(kāi)發(fā)或架構經(jīng)驗。

  2.精通hadoop架構的設計以及生態(tài),hadoop的集群的搭建、部署、開(kāi)發(fā)和運維

  3.精通hadoop各個(gè)模塊的能力定位和配置,對hdfs、hbase、mr、spark等基本組件熟知

  4.熟悉linux系統及調錯經(jīng)驗,熟悉?jvm?運行機制,有?shell、python開(kāi)發(fā)經(jīng)驗。

  5.有鉆研新技術(shù)的熱情和能力,善于交流和表達,富有團隊精神

  6.有企業(yè)級大數據系統設計經(jīng)驗者優(yōu)先。

  7.有一定的代碼經(jīng)驗,python/java/c++/ruby均可。

hadoop崗位職責8

  職位描述:

  incorporated in 20xx,kpmg technology r&d centre combines four functions: r&d,in-house services,outsourced services and operational services.it is kpmg’s first r&d centre and second delivery centre in china.

  as kpmg’s first r&d centre in china,our business activities currently include:

  1.development,design,production of computer software and computer system integration;

  2.ai,r&d and delivery of technologies

  3.big data-related services and technical support,including data development,data processing,data mining etc.

  driven by increasing market demand,we will expand the r&d centre’s scope of business on an ongoing basis to enable technologies to provide quality services for our clients.

  responsibilities

  work as part of a team supporting the following business platforms:

  - enterprise data warehouse

  - provide guidance on designing big data platform architecture

  - conduct research on latest big data platform products

  - take responsibility for designing the core components of big data platform such as: hdfs、mapreduce、hiva、hbase

  skills and experience

  - familiar with linux java development environment and java ee specifications

  - familiar with basic data structures and common algorithm

  - familiar with shell and/or java and / or scala

  - familiar with basic linux operations

  - ability to multi-task,strong sense of responsibility,and very strong communication skills

  - deep knowledge of hadoop,spark,hive,nosql,hbase,map reduce is a plus

hadoop崗位職責9

  崗位職責:

  1、負責hadoop平臺上的.數據存儲,數據維護和優(yōu)化;

  2、編寫(xiě)一些pig,hive等分析腳本;

  3、負責把一些分析結果導入到數據庫中,為bi提供基礎數據分析;

  4、hadoop集群?jiǎn)?wèn)題排查,并提出解決方案;

  5、job報錯問(wèn)題排查;

  6、根據集群的問(wèn)題,開(kāi)發(fā)一些監控程序,解決隱患;

  7、平臺工具開(kāi)發(fā)或者提供第三方開(kāi)源工具。

  任職要求:

  1、深入了解hadoop運行機制,包括hdfs/mapreduce/zookeeper/yarn等工作原理。

  2、了解分布式系統的原理。

  3、負責hadoop平臺上的數據存儲,數據維護和優(yōu)化;

  4、hadoop集群?jiǎn)?wèn)題排查,并提出解決方案;

  5、開(kāi)發(fā)監控程序,解決存在的隱患;

  6、有hadoop平臺運維經(jīng)驗優(yōu)先。

  7、有大數據平臺工具開(kāi)發(fā)經(jīng)驗。

hadoop崗位職責10

  工作職責:

  1、打造業(yè)界領(lǐng)先的大數據基礎設施,包括數據接入,同步,存儲、計算,查詢(xún)等環(huán)節的分布式系統,為海量數據和大規模業(yè)務(wù)系統提供可靠的'基礎設施;

  2、與開(kāi)源社區保持交流,發(fā)現對業(yè)務(wù)場(chǎng)景有幫助的特性并引入生產(chǎn)環(huán)境,或將經(jīng)內部驗證的特性貢獻到社區;

  3、承擔千臺規模集群的管理工作,與業(yè)務(wù)一起解決性能優(yōu)化、容量規劃、預算審計等問(wèn)題,保障集群高效穩定經(jīng)濟運行;

  任職資格:

  1、計算機基礎扎實(shí),熟悉常用數據結構和算法,具備較強的邏輯思維能力和編碼能力;

  2、掌握分布式系統原理,對存儲、計算、消息隊列、資源管理,數據同步等中的一項或多項有深入的理解和認識;

  3、樂(lè )于挑戰沒(méi)有明顯答案的問(wèn)題,能快速理解業(yè)務(wù)場(chǎng)景,從具體問(wèn)題中抽象出通用的解決方案;

  4,熟悉hadoop,hbase,zookeeper,flume,k8s等基礎服務(wù)中的一項或多項;

  5、有kafka或者同類(lèi)型技術(shù)設計開(kāi)發(fā)及集群管理經(jīng)驗者優(yōu)先。

hadoop崗位職責11

  崗位職責:

  1.參與人工智能開(kāi)源開(kāi)放平臺核心系統的構建;

  2.人工智能開(kāi)源開(kāi)放平臺相關(guān)前沿技術(shù)、運用調研及落地;

  3.負責人工智能開(kāi)源開(kāi)放平臺性能的優(yōu)化。

  任職要求:

  1.國內學(xué)歷:統招全日制985/211碩士及以上學(xué)歷,取得學(xué)位證和畢業(yè)證;

  2.國外學(xué)歷:海外全日制碩士及以上學(xué)歷;qs世界大學(xué)排名前300高等院校;海外留學(xué)時(shí)長(cháng)不少于1.5年;

  3.有大型互聯(lián)網(wǎng)公司大數據平臺及數據開(kāi)發(fā)經(jīng)驗者優(yōu)先;

  4.扎實(shí)的java、python基礎,掌握常用數據結構(鏈表、哈希、樹(shù))等;

  5.精通linux/unix環(huán)境,熟悉linux性能調優(yōu),熟練掌握shell,有良好的.計算機網(wǎng)絡(luò )基礎;

  6.有較強的產(chǎn)品理解,能從技術(shù)角度推動(dòng)產(chǎn)品優(yōu)化;

  7.有如下技能者優(yōu)先,spark/spark streaming/hadoop/hdfs/kafka/elastic search;

  8.英語(yǔ)6級,能讀懂相關(guān)外文技術(shù)文獻。

hadoop崗位職責12

  工作職責:

  1、負責全行大數據在各類(lèi)業(yè)務(wù)場(chǎng)景中的應用規劃及設計方案的制定;

  2、負責對全行大數據的標準化進(jìn)行梳理并制定相應方案;

  3、負責制定全行的元數據集,并對元數據管理的流程、技術(shù)方案進(jìn)行設計;

  4、面向數據價(jià)值服務(wù)為數據應用場(chǎng)景進(jìn)行方案設計并指導落實(shí)實(shí)施;

  5、負責對大數據相關(guān)領(lǐng)域的創(chuàng )新性研究和知識產(chǎn)權保護工作;

  6、領(lǐng)導交辦的其他工作內容。

  任職要求:

  1、全日制本科及以上學(xué)歷,計算機、通信工程、數學(xué)等相關(guān)專(zhuān)業(yè);

  2、具備3年以上大數據相關(guān)開(kāi)發(fā)經(jīng)驗,2年以上大數據系統相關(guān)設計經(jīng)驗;

  3、熟悉hadoop、hive、hbase、flume、sqoop、spark以及流式計算等大數據相關(guān)技術(shù),并具備相關(guān)開(kāi)發(fā)經(jīng)驗;

  4、在金融行業(yè)或互聯(lián)網(wǎng)金融領(lǐng)域有過(guò)相關(guān)工作經(jīng)驗者優(yōu)先考慮;

  5、具備良好的溝通能力、團隊合作精神,能接受高強度工作。大數據架構師:

  工作職責:

  1、負責全行大數據在各類(lèi)業(yè)務(wù)場(chǎng)景中的應用規劃及設計方案的制定;

  2、負責對全行大數據的`標準化進(jìn)行梳理并制定相應方案;

  3、負責制定全行的元數據集,并對元數據管理的流程、技術(shù)方案進(jìn)行設計;

  4、面向數據價(jià)值服務(wù)為數據應用場(chǎng)景進(jìn)行方案設計并指導落實(shí)實(shí)施;

  5、負責對大數據相關(guān)領(lǐng)域的創(chuàng )新性研究和知識產(chǎn)權保護工作;

  6、領(lǐng)導交辦的其他工作內容。

  任職要求:

  1、全日制本科及以上學(xué)歷,計算機、通信工程、數學(xué)等相關(guān)專(zhuān)業(yè);

  2、具備3年以上大數據相關(guān)開(kāi)發(fā)經(jīng)驗,2年以上大數據系統相關(guān)設計經(jīng)驗;

  3、熟悉hadoop、hive、hbase、flume、sqoop、spark以及流式計算等大數據相關(guān)技術(shù),并具備相關(guān)開(kāi)發(fā)經(jīng)驗;

  4、在金融行業(yè)或互聯(lián)網(wǎng)金融領(lǐng)域有過(guò)相關(guān)工作經(jīng)驗者優(yōu)先考慮;

  5、具備良好的溝通能力、團隊合作精神,能接受高強度工作。

hadoop崗位職責13

  職責描述:

  1.負責設計和搭建軟件系統架構(平臺、數據庫、接口和應用架構等),解決開(kāi)發(fā)中各種系統架構問(wèn)題。

  2.優(yōu)化現有系統的性能,解決軟件系統平臺關(guān)鍵技術(shù)問(wèn)題攻關(guān)、核心功能模塊設計。

  3.在項目需求不斷細化的工程中校正整體的架構設計,以及詳細模塊拆分設計。

  4.營(yíng)造技術(shù)學(xué)習氛圍,帶領(lǐng)團隊不斷完善開(kāi)發(fā)方法及流程,提升開(kāi)發(fā)效率與質(zhì)量,加強技術(shù)標準及規范。

  5.帶領(lǐng)團隊攻克例如大數據量、高并發(fā)、高穩定性等帶來(lái)的各種挑戰及技術(shù)難關(guān)。

  6.參與討論公司產(chǎn)品發(fā)展方向,完整的.規劃和把握產(chǎn)品研發(fā)架構。

  任職要求:

  五年以上java開(kāi)發(fā)經(jīng)驗,有獨立完成項目經(jīng)驗和能力;

  1.精通springmvc+mybatis或ssh等框架的搭建和開(kāi)發(fā);

  2.精通tomcat,apache,nginx等web服務(wù)器的管理和調優(yōu);

  3.精通mysql/mariadb或postgres數據庫的開(kāi)發(fā),管理和調優(yōu);

  4.熟練使用redis,rabbitmq,mongodb等相關(guān)或類(lèi)似技術(shù);

  5.懂得node.js,jquery,h5,websocket,長(cháng)鏈接,nio等技術(shù);

  6.熟練使用linux(centos/ubuntu)操作和管理;

  7.擅長(cháng)系統性能調優(yōu)和疑難問(wèn)題調試;

  8.熟悉oracle、hbase、hive等數據庫的開(kāi)發(fā)優(yōu)化;

  9.熟悉hadoop、spark等大數據平臺;

  10.懂得構建高性能高并發(fā)分布式服務(wù)架構體系優(yōu)先;

  11.懂的數據安全、應用安全和系統安全可以加分;

  12.具有團隊合作精神、能帶隊和懂項目管理可以加分。

hadoop崗位職責14

  工作職責:

  1.負責搭建數據平臺、數據倉庫平臺、物聯(lián)網(wǎng)數據平臺、ai數據平臺,負責數據平臺架構的整合、優(yōu)化、開(kāi)發(fā)、部署實(shí)施、運維相關(guān)工作,確保數據平臺穩定運行

  2.主導搭建數據平臺(dw / ai / hadoop平臺等),提供數據接口對接、存儲、提取、處理、清洗、邏輯解析、規范化、iot設備互聯(lián)互通能力

  3.具備java,sql開(kāi)發(fā)經(jīng)驗,性能調測,開(kāi)源代碼商業(yè)化,底層基礎架構搭建

  4.參與公司數據處理方向的技術(shù)拓展,保障公司業(yè)務(wù)的'數據需求

  5.負責數據平臺實(shí)時(shí)計算/分布式并行計算的架構設計代碼編寫(xiě),及開(kāi)源技術(shù)組件的二次開(kāi)發(fā)

  6.運用hadoop/sparksql與spark streaming或者其它數據分析技術(shù),進(jìn)行包括需求分析,平臺選擇,技術(shù)構架涉及等技術(shù)支持工作,確保能夠保障公司業(yè)務(wù)的數據需求

  任職要求:

  1.熟悉傳統數據倉庫,至少三年以上數據倉庫開(kāi)發(fā)、構建、運維經(jīng)驗

  2.熟悉hadoop技術(shù)體系,有hadoop/spark架構經(jīng)驗,有hadoop計算集群在實(shí)際項目上的開(kāi)發(fā)和維護經(jīng)驗

  3.兩年以上基于hadoop/spark/hbase/hive等分布式數據計算應用開(kāi)發(fā)經(jīng)驗

  4.熟悉數據平臺數據同步技術(shù),如:ogg,cdc,sqoop等,并有實(shí)際經(jīng)驗

  5.熟悉大數據大數據性能優(yōu)化,并有實(shí)際項目經(jīng)驗

  6.熟悉apache mahout/spark mlib的各種算法

  7.精通java,熟練掌握mapreduce原理以及數據分析相關(guān)的二次開(kāi)發(fā)

  8.熟悉linux/unix,熟悉perl/python/shell等腳本開(kāi)發(fā)語(yǔ)言

  9.了解敏捷開(kāi)發(fā)流程,有敏捷開(kāi)發(fā)經(jīng)驗者優(yōu)先

  10.良好的數據結構和算法基礎,有較強的算法設計和實(shí)現能力

  11.本科以上學(xué)歷,計算機及相關(guān)專(zhuān)業(yè)

hadoop崗位職責15

  職責描述:

  1,基于hadoop進(jìn)行mapreduce、hive和hbase的應用開(kāi)發(fā);

  2,維護和管理大規模hadoop集群,解決不斷增長(cháng)的海量數據帶來(lái)的存儲和計算挑戰;

  3,大數據平臺數據清洗、轉換和建模的.開(kāi)發(fā)。

  任職要求:

  1,熟悉hadoop/hbase/spark/hive生態(tài)環(huán)境體系的搭建和管理,掌握hadoop、hbase、mapreduce、hdfs、hive、kylin、zookeeper等開(kāi)源項目的原理和使用方法,具有實(shí)際集群搭建和調優(yōu)經(jīng)驗;

  2,熟悉并有java開(kāi)發(fā)經(jīng)驗,有大平臺架構開(kāi)發(fā)經(jīng)驗;

  3,掌握至少一種nosql數據庫,具有真正項目使用經(jīng)驗;

  4,掌握數據分析的基本流程,擅長(cháng)數據采集、清洗、分析等環(huán)節;

  5,熟悉后端服務(wù)(restful api服務(wù)實(shí)現)優(yōu)先;

  6,熟悉使用sqlserver、oracle、mysql一種;

  7,良好團隊協(xié)作和溝通能力;

  8,大專(zhuān)及以上學(xué)歷,3-5年及以上工作經(jīng)驗。

hadoop崗位職責16

  職責

  搭建和維護hadoop數據分析平臺

  協(xié)助研究r與hadoop結合實(shí)施大數據挖掘

  依據分析挖掘方案,建立模型、生成分析結果、統計表、圖和列表等的程序代碼。

  協(xié)助項目團隊負責人履行項目職責。

  能力和技能

  熟悉linux操作系統、java、hadoop的運營(yíng)及算法。

  具備基本的統計編程知識,例如r、base sas、sas/stat、sas宏語(yǔ)言、sql。

  具備一定的溝通能力。

  具備有效處理多任務(wù)的能力。

  具備一定的`計算能力及發(fā)現細節的能力。

  具備團隊合作能力。

  學(xué)歷和經(jīng)驗要求:

  計算機、數學(xué)專(zhuān)業(yè)學(xué)士學(xué)歷及以上,或同等教育背景并具有統計編程經(jīng)驗;有hadoop運營(yíng)經(jīng)驗、hadoop算法經(jīng)驗者優(yōu)先。

hadoop崗位職責17

  職位描述:

  1.計算機及計算機相關(guān)專(zhuān)業(yè)本科或本科以上學(xué)歷;

  2.十年以上開(kāi)發(fā)工作經(jīng)驗;

  3.精通java編程,熟練掌握spring cloud、spring boot、spring framework、spring security、spring mvc、spring data、mybatis、hibernate、zookeeper等主流的開(kāi)發(fā)框架,有良好的.編程習慣。

  4.精通大數據hadoop、spark、hbase、hive、kafka等產(chǎn)品技術(shù)及應用開(kāi)發(fā)。

  5.精通多線(xiàn)程編程、分布式事務(wù)、存儲系統(如oracle、mongodb、redis等)的性能調優(yōu)和應用開(kāi)發(fā);

  6.具備優(yōu)秀的邏輯思維能力,對解決挑戰性問(wèn)題充滿(mǎn)熱情,善于解決問(wèn)題和分析問(wèn)題;

  7.有強烈的上進(jìn)心和求知欲,善于學(xué)習新事物,良好的團隊合作精神,較強的溝通能力和學(xué)習能力。

hadoop崗位職責18

  工作職責:

  1、參與打造業(yè)界領(lǐng)先的存儲、計算、消息隊列等分布式系統

  2、為海量數據及其上的大規模數據挖掘、數據分析、機器學(xué)習業(yè)務(wù)系統提供可靠、高效的支持

  3、深入了解業(yè)務(wù)需求,利用存儲技術(shù)支持關(guān)鍵業(yè)務(wù)場(chǎng)景

  任職要求:

  1、掌握分布式系統原理,對存儲、計算、消息隊列的`一項或多項有深入的理解和認識

  2、樂(lè )于挑戰沒(méi)有明顯答案的問(wèn)題,能快速理解業(yè)務(wù)場(chǎng)景,從具體問(wèn)題中抽象出通用的解決方案

  3、有較好的溝通能力;有良好的團隊合作精神

【hadoop崗位職責】相關(guān)文章:

Hadoop運維工程師崗位職責02-10

Hadoop就業(yè)前景薪資如何05-16

基于Hadoop分布式文件系統的單點(diǎn)問(wèn)題的研究論文04-27

值班崗位職責-崗位職責07-25

倉管員的崗位職責-崗位職責01-15

it部經(jīng)理崗位職責-崗位職責07-25

物業(yè)班長(cháng)崗位職責-崗位職責11-03

庫管崗位職責-崗位職責01-10

渠道銷(xiāo)售崗位職責-崗位職責01-10

激情欧美日韩一区二区,浪货撅高贱屁股求主人调教视频,精品无码成人片一区二区98,国产高清av在线播放,色翁荡息又大又硬又粗视频