大數(shù)據(jù)(三)大數(shù)據(jù)相關(guān)的職位
本文目錄:
一、寫在前面的題外話
二、2022年就業(yè)狀況
2.1、不同企業(yè)性質(zhì)高校畢業(yè)生 CIER 指數(shù)
2.2、不同企業(yè)規(guī)模高校畢業(yè)生 CIER 指數(shù)
2.3、高校畢業(yè)生供求 TOP15 城市
2.4、一季度景氣指數(shù)較高和較低的行業(yè)排名
2.5、一季度景氣指數(shù)較高和較低的職業(yè)排名
2.6、開發(fā)人員類型劃分的薪水
三、大數(shù)據(jù)相關(guān)的職位
3.1、大數(shù)據(jù)開發(fā)工程師
3.2、數(shù)據(jù)分析師
3.3、數(shù)據(jù)挖掘分析工程師
3.4、數(shù)據(jù)產(chǎn)品經(jīng)理
3.5、數(shù)據(jù)架構(gòu)師
3.6、可視化研發(fā)工程師
3.7、大數(shù)據(jù)工程師
大數(shù)據(jù)工程師職位描述(一)
大數(shù)據(jù)工程師職位描述(二)
大數(shù)據(jù)工程師職位描述(三)
大數(shù)據(jù)工程師職位描述(四)
大數(shù)據(jù)工程師職位描述(五)
大數(shù)據(jù)工程師職位描述(六)
四、備注
?一、寫在前面的題外話
? 我曾聽過某單位負(fù)責(zé)招聘的人有此感慨:面試時,這個人明明考試分?jǐn)?shù)很高,連那些競賽題目都答對了。我們對他抱有很大期望,可是實際工作時,好像很努力,但成績平庸,為什么呢?
? 呵呵,如果我沒估計錯,他說的那個人考試分?jǐn)?shù)高是靠刷題刷出來的,刷題的,容易出現(xiàn)高分低能的情況。現(xiàn)在社會誘惑太多,能專心下來好好學(xué)點東西的人少了。
? 現(xiàn)在就業(yè)市場并不樂觀,一些單位動不動就要求研究生博士生,但實際做的工作大專本科生就已經(jīng)能勝任。招聘而單位里實際工作的人,做著不比高學(xué)歷人少的工作,難度也不亞于其他人,但工資卻實實在在少了一大截,心里多少會有點憋屈。高學(xué)歷要求抬高了入職門檻,一些人無法找到合適的工作,選擇了繼續(xù)深造提高學(xué)歷。
? 學(xué)歷是顯性的,能力是隱性的。學(xué)歷可以被量化,能力卻不能被量化。
? 學(xué)歷和能力哪個更重要,受到個人、企業(yè)、崗位、環(huán)境等多重因素的影響。企業(yè)口中常說能力重要,但實踐中,卻作出相反選擇。
? 所以,大家趁年輕,抽時間自我充電吧……學(xué)歷和能力同時。
???逆境清醒
2023.8.27
二、2022年就業(yè)狀況
2.1、不同企業(yè)性質(zhì)高校畢業(yè)生 CIER 指數(shù)
2022年不同企業(yè)性質(zhì)高校畢業(yè)生 CIER 指數(shù)
2.2、不同企業(yè)規(guī)模高校畢業(yè)生 CIER 指數(shù)
2022年不同企業(yè)規(guī)模高校畢業(yè)生 CIER 指數(shù)
2.3、高校畢業(yè)生供求 TOP15 城市
2022年高校畢業(yè)生供求 TOP15 城市
2.4、一季度景氣指數(shù)較高和較低的行業(yè)排名
2022 年一季度景氣指數(shù)較高和較低的行業(yè)排名
2.5、一季度景氣指數(shù)較高和較低的職業(yè)排名
2022 年一季度景氣指數(shù)較高和較低的職業(yè)排名
2.6、開發(fā)人員類型劃分的薪水
按開發(fā)人員類型劃分的薪水
? 高管和工程經(jīng)理等高級職位的薪水往往最高。 但在美國、德國、英國和加拿大,我們看到區(qū)塊鏈開發(fā)人員的薪水相當(dāng),即使他們有 最低的平均經(jīng)驗?zāi)晗蕖?/p>
三、大數(shù)據(jù)相關(guān)的職位
? 大數(shù)據(jù)作為一種趨勢,已吸引了越來越多的重視,目前,上至國家部委、下至普通公司,已紛紛開展各類大數(shù)據(jù)平臺建設(shè)與分析應(yīng)用。
? 目前大數(shù)據(jù)相關(guān)的職位都有哪些呢?任職要求和待遇如何?這里收集了一些資料供大家參考:
3.1、大數(shù)據(jù)開發(fā)工程師
? 大數(shù)據(jù)開發(fā)工程師又叫數(shù)據(jù)庫開發(fā)工程師,是指設(shè)計、開發(fā)、維護(hù)管理大型數(shù)據(jù)庫的專業(yè)人才。
任職要求:
1、通信、電子工程、自動化、計算機其相關(guān)專業(yè)本科以上學(xué)歷;
2、數(shù)據(jù)庫應(yīng)用軟件的分析、設(shè)計和開發(fā)經(jīng)驗 ;
3、精通關(guān)系數(shù)據(jù)庫原理,精通SQLSERVER,熟悉MySQL,oracle;
4、熟練使用主流的數(shù)據(jù)庫分析設(shè)計工具;能獨立完成數(shù)據(jù)庫系統(tǒng)設(shè)計,能根據(jù)具體應(yīng)用設(shè)計數(shù)據(jù)庫服務(wù)器;
5、熟悉NET 架構(gòu)和J2EE 架構(gòu), 熟悉ASP?NET 和ADO?NET;
6、熟悉Browser/Server 模式應(yīng)用開發(fā),熟悉OOD/OOP 概念和XML 標(biāo)準(zhǔn);
7、熟悉數(shù)據(jù)倉庫、OLAP 和數(shù)據(jù)挖掘;
8、有良好的英語閱讀能力,能夠閱讀英文測試資料;
9、工作嚴(yán)謹(jǐn)細(xì)致,有責(zé)任心;勤奮踏實,善于思考問題;
10、有時間觀念,獨立性強,具有團(tuán)隊合作精神。
工作內(nèi)容:
1、設(shè)計并優(yōu)化數(shù)據(jù)庫物理建設(shè)方案;
2、制定數(shù)據(jù)庫備份和恢復(fù)策略及工作流程與規(guī)范;
3、在項目實施中,承擔(dān)數(shù)據(jù)庫的實施工作;
4、針對數(shù)據(jù)庫應(yīng)用系統(tǒng)運行中出現(xiàn)的問題,提出解決方案;
5、監(jiān)督UNIX,Tandem,NT 等系統(tǒng)上數(shù)據(jù)庫的安裝運行過程;
6、對空間數(shù)據(jù)庫進(jìn)行分析、設(shè)計并合理開發(fā),實現(xiàn)有效管理;
7、監(jiān)督數(shù)據(jù)庫的備份和恢復(fù)策略的執(zhí)行;
8、為應(yīng)用開發(fā)、系統(tǒng)知識等提供技術(shù)咨詢服務(wù)。
3.2、數(shù)據(jù)分析師
? 數(shù)據(jù)分析師是數(shù)據(jù)師的一種,指的是不同行業(yè)中,專門從事行業(yè)數(shù)據(jù)搜集、整理、分析,并依據(jù)數(shù)據(jù)做出行業(yè)研究、評估和預(yù)測的專業(yè)人員。
崗位職責(zé):
1. 抽象數(shù)據(jù)分析需求,形成有競爭力的數(shù)據(jù)產(chǎn)品,幫助產(chǎn)品業(yè)務(wù)更深刻的理解并運用數(shù)據(jù);
2. 基于對互聯(lián)網(wǎng)產(chǎn)品和業(yè)務(wù)的深入理解的基礎(chǔ)上,獨立承擔(dān)復(fù)雜分析任務(wù),為產(chǎn)品方向提供決策支持;
3. 負(fù)責(zé)相關(guān)項目性工作的數(shù)據(jù)支持、業(yè)務(wù)報表的制作;
4. 建立產(chǎn)品業(yè)務(wù)相關(guān)的數(shù)據(jù)統(tǒng)計模型;
5. 建立各個環(huán)節(jié)工作預(yù)警及時,對相關(guān)數(shù)據(jù)異常情況提前預(yù)警。
任職要求:
1. 本科及以上學(xué)歷,計算機、統(tǒng)計學(xué)、數(shù)學(xué)、信息管理、社會學(xué)等相關(guān)專業(yè), 3 年以上咨詢、互聯(lián)網(wǎng)行業(yè)工作經(jīng)驗;
2. 良好的數(shù)據(jù)分析能力,有豐富的數(shù)據(jù)分析、挖掘、清洗和建模的經(jīng)驗;
3. 熟悉互聯(lián)網(wǎng)數(shù)據(jù)采集,具備大數(shù)據(jù)處理能力 , 熟練運用 SQL ,掌握 hive 等相關(guān)數(shù)據(jù)工具;
4. 善于溝通,具有良好的團(tuán)隊合作精神;
5. 有互聯(lián)網(wǎng)行業(yè)數(shù)據(jù)分析工作、做過數(shù)據(jù)挖掘行業(yè)的優(yōu)先。
3.3、數(shù)據(jù)挖掘分析工程師
? 數(shù)據(jù)挖掘工程師是數(shù)據(jù)師的一種。一般是指從大量的數(shù)據(jù)中通過算法搜索隱藏于其中知識的工程技術(shù)專業(yè)人員。這些知識可用使企業(yè)決策智能化,自動化,從而使企業(yè)提高工作效率,減少錯誤決策的可能性,以在激烈的競爭中處于不敗之地。
崗位職責(zé):
1. 負(fù)責(zé)研究新型數(shù)據(jù)分析、數(shù)據(jù)挖掘技術(shù)的方法和工具;
2. 負(fù)責(zé)組織大數(shù)據(jù)分析技術(shù)在行內(nèi)的推廣和培訓(xùn)。
任職要求:
1. 本科及以上學(xué)歷,金融、數(shù)學(xué)、統(tǒng)計、計算機等理工類相關(guān)專業(yè)畢業(yè);
2. 具有扎實的數(shù)學(xué)、統(tǒng)計學(xué)和計算機相關(guān)知識,熟悉機器學(xué)習(xí)等新型數(shù)據(jù)挖掘、分析方法的基本理論和相關(guān)算法,具有實際模型開發(fā)經(jīng)驗;
3. 熟悉一種傳統(tǒng)數(shù)據(jù)挖掘工具,如SAS、SPSS、Matlab、Weka等,或具有至少一種大數(shù)據(jù)分析工具的實際項目開發(fā)經(jīng)驗,如R/Python、Mahout、hadoop、SparkML等;
4. 具有嚴(yán)密的數(shù)據(jù)思維,優(yōu)秀的分析問題能力,及良好的分析研究報告撰寫能力,能制作專業(yè)分析研究報告,樂于解決挑戰(zhàn)性的問題;
5. 在校學(xué)習(xí)成績優(yōu)異,英語四級及以上,責(zé)任心強,有良好的合作精神,有較強的學(xué)習(xí)能力和溝通協(xié)調(diào)能力,對技術(shù)有強烈的熱愛;
6. 思想品質(zhì)端正,身體健康,無重大病史。
3.4、數(shù)據(jù)產(chǎn)品經(jīng)理
? 廣義來看,數(shù)據(jù)產(chǎn)品是可以發(fā)揮數(shù)據(jù)價值去輔助用戶更優(yōu)的做決策(甚至行動)的一種產(chǎn)品形式。它在用戶的決策和行動過程中,可以充當(dāng)信息的分析展示者和價值的使能者。從這個角度講,搜索引擎、個性化推薦引擎顯然也是數(shù)據(jù)產(chǎn)品,由于產(chǎn)品形態(tài)已經(jīng)比較成熟,所以很少被人劃分到數(shù)據(jù)產(chǎn)品的概念里,另外,這類產(chǎn)品往往大都在數(shù)據(jù)外面穿了一層外衣,使非專業(yè)的用戶并不能直觀的感受到數(shù)據(jù)的存在。
崗位職責(zé):
1.建立與優(yōu)化模型實驗室并支持日常運營工作,支持商戶的模型建設(shè)與優(yōu)化
2.針對互聯(lián)網(wǎng)風(fēng)控業(yè)務(wù)痛點設(shè)計與開發(fā)大數(shù)據(jù)風(fēng)控產(chǎn)品,包括但不限于信用報告、用戶畫像、風(fēng)險評分、信貸一體化系統(tǒng)、營銷平臺等
3.建設(shè)對上下游數(shù)據(jù)產(chǎn)品的質(zhì)量分析、價值分析體系,周期性跟蹤與優(yōu)化數(shù)據(jù)產(chǎn)品各層質(zhì)量工作
崗位要求:
1、本科及以上學(xué)歷,統(tǒng)計學(xué)及計算機相關(guān)專業(yè)畢業(yè)
2、2年以上數(shù)據(jù)管理或者參與建設(shè)過風(fēng)險策略、風(fēng)控系統(tǒng)建設(shè)、營銷平臺建設(shè)相關(guān)經(jīng)驗
3、掌握使用Python、SAS、R等至少一種統(tǒng)計分析軟件或熟練掌握AxureRP等原型工具
4、具備優(yōu)秀的溝通能力、協(xié)調(diào)能力和組織能力
4.對行業(yè)發(fā)展和風(fēng)險演變具備強烈的敏感度
3.5、數(shù)據(jù)架構(gòu)師
? 數(shù)據(jù)架構(gòu)師是一個既需要掌控整體又需要洞悉局部瓶頸并依據(jù)具體的業(yè)務(wù)場景給出解決方案的團(tuán)隊領(lǐng)導(dǎo)型人物。一個架構(gòu)師得需要足夠的想像力,能把各種目標(biāo)需求進(jìn)行不同維度的擴展,為目標(biāo)客戶提供更為全面的需求清單。架構(gòu)師在軟件開發(fā)的整個過程中起著很重要的作用。
職位要求:
1. 計算機、工業(yè)自動化等相關(guān)專業(yè)本科及以上學(xué)歷。
2. 熟悉數(shù)據(jù)倉庫建模理論,3年以上相關(guān)領(lǐng)域?qū)嵺`經(jīng)驗,能夠獨立完成系統(tǒng)架構(gòu)。
3. 熟悉Hadoop、Hive、Spark等大數(shù)據(jù)技術(shù)。
4. 熟練使用Java或其他語言進(jìn)行復(fù)雜業(yè)務(wù)邏輯的數(shù)據(jù)處理工作,具備海量數(shù)據(jù)處理以及性能優(yōu)化的能力。
5. 熟練MySQL、Redis、HBase等數(shù)據(jù)庫,能夠完成存儲查詢的優(yōu)化。
6. 思路清晰,具備良好的溝通能力和理解能力,較強的學(xué)習(xí)能力以及快速解決問題的能力。
7. 對新技術(shù),新事物有很好的探索和求知欲。
崗位職責(zé)
1. 負(fù)責(zé)大數(shù)據(jù)項目技術(shù)架構(gòu)評估與設(shè)計。
2. 負(fù)責(zé)關(guān)鍵功能的開發(fā),技術(shù)難題的解決,以及輸出代碼的關(guān)鍵把控。
3. 負(fù)責(zé)對使用關(guān)鍵技術(shù)的預(yù)研和選型,完成PoC。
4. 負(fù)責(zé)大數(shù)據(jù)平臺新技術(shù)的開發(fā)使用和性能優(yōu)化,測試。
5. 能夠帶領(lǐng)團(tuán)隊完成項目開發(fā)工作,并能分享技術(shù)經(jīng)驗。
6. 研究主流技術(shù),能夠應(yīng)用于產(chǎn)品,推動產(chǎn)品功能、性能的提升。
3.6、可視化研發(fā)工程師
? 數(shù)據(jù)可視化,是關(guān)于數(shù)據(jù)視覺表現(xiàn)形式的科學(xué)技術(shù)研究。其中,這種數(shù)據(jù)的視覺表現(xiàn)形式被定義為,一種以某種概要形式抽提出來的信息,包括相應(yīng)信息單位的各種屬性和變量。
崗位職責(zé)
1. 大數(shù)據(jù)可視化平臺架構(gòu)及開發(fā);
2. 參與大數(shù)據(jù)平臺數(shù)據(jù)可視化的技術(shù)選型、技術(shù)規(guī)格和關(guān)鍵特性的設(shè)計;
3. 參與數(shù)據(jù)可視化通用產(chǎn)品的核心功能研發(fā),組件、模板設(shè)計,模塊化框架設(shè)計;
4. 負(fù)責(zé)大數(shù)據(jù)可視化產(chǎn)品的開發(fā)和維護(hù),在理解產(chǎn)品業(yè)務(wù)的基礎(chǔ)上,提升產(chǎn)品的用戶體驗,技術(shù)驅(qū)動業(yè)務(wù)的發(fā)展;
5. 對可視化產(chǎn)品進(jìn)行性能調(diào)優(yōu),攻克體驗好、高性能和高穩(wěn)定性等各種挑戰(zhàn)以及技術(shù)難關(guān);
6. 關(guān)注業(yè)界技術(shù)發(fā)展動態(tài),持續(xù)改進(jìn),保持?jǐn)?shù)據(jù)可視化產(chǎn)品架構(gòu)、技術(shù)的先進(jìn)性.
崗位要求
1. 計算機或者軟件工程相關(guān)專業(yè),全日制本科以上學(xué)歷,扎實的計算機以及網(wǎng)絡(luò)基礎(chǔ)
2. 3 年以上數(shù)據(jù)可視化工作經(jīng)驗,參與過大型數(shù)據(jù)可視化產(chǎn)品的技術(shù)設(shè)計與開發(fā)工作
3. 優(yōu)秀的前端研發(fā)能力,有富交互產(chǎn)品研發(fā)經(jīng)驗,熟悉主流的前端框架,如 vue/react/angular 等
4. 熟悉主流數(shù)據(jù)可視化組件,如echarts、thingJS、datav等,閱讀過源碼、理解這些圖表庫的代碼設(shè)計、有二次開發(fā)的經(jīng)驗者優(yōu)先
5. 熱愛數(shù)據(jù)可視化領(lǐng)域,對數(shù)據(jù)可視化有深刻的理解,如果你對大數(shù)據(jù)開發(fā)感興趣,想系統(tǒng)學(xué)習(xí)大數(shù)據(jù)的話,有高度的技術(shù)敏感度,廣闊的技術(shù)視野,對性能優(yōu)化/跨終端多平臺開發(fā)有經(jīng)驗
6. 具備 Web 前端獨立開發(fā)的能力,熟悉一門后端語言(PHP/Python/Java/Node等)。
3.7、大數(shù)據(jù)工程師
大數(shù)據(jù)工程師職位描述(一)
崗位職責(zé):
1.負(fù)責(zé)數(shù)據(jù)分析、加工、清洗、處理程序的開發(fā);
2.從事海量數(shù)據(jù)分析、挖掘相關(guān)工作;
3.負(fù)責(zé)大數(shù)據(jù)相關(guān)平臺的搭建、開發(fā)、維護(hù)、優(yōu)化;
4.對業(yè)務(wù)部門的數(shù)據(jù)分析需求給予實現(xiàn)與支持;
5.對公司的“數(shù)據(jù)驅(qū)動運營”的業(yè)務(wù)目標(biāo)進(jìn)行大數(shù)據(jù)架構(gòu)方案實現(xiàn)。
任職要求:
1.計算機相關(guān)專業(yè),本科及以上學(xué)歷,3年以上Java開發(fā)工作經(jīng)驗,學(xué)習(xí)能力突出;
2.熟悉hadoop生態(tài)系統(tǒng)內(nèi)常見項目的使用(hdfs、hive、hbase、spark、zookeeper、yarn等),具有python、spark 、MapReduce開發(fā)經(jīng)驗,有實際大數(shù)據(jù)項目經(jīng)驗優(yōu)先;
3.熟練掌握Oracle、MySql等主流數(shù)據(jù)庫;
4.精通JAVA,熟悉基于J2EE的WEB架構(gòu)設(shè)計,熟悉Web開發(fā)流程,有豐富的Web MVC(Struts/Spring MVC、Spring,Hibernate/Mybatis等)開發(fā)經(jīng)驗;
5.熟悉Linux/Unix系統(tǒng)環(huán)境下的操作;熟悉Tomcat等應(yīng)用服務(wù)器的配置和優(yōu)化;
6.具有良好的溝通能力、組織能力及團(tuán)隊協(xié)作精神,有較強的分析和解決問題的能力。
大數(shù)據(jù)工程師職位描述(二)
崗位職責(zé):
1.大數(shù)據(jù)平臺功能規(guī)劃、設(shè)計;
2.大數(shù)據(jù)平臺的設(shè)計、研發(fā);
3.大數(shù)據(jù)平臺實施、數(shù)據(jù)接入。
任職要求:
1.?? ?統(tǒng)招本科及以上學(xué)歷,計算機科學(xué)、軟件工程、數(shù)學(xué)、統(tǒng)計學(xué)相關(guān)專業(yè)畢業(yè);
2.具有扎實的Java基礎(chǔ),精通SQL、mysql以及2年以上軟件開發(fā)經(jīng)驗;
3.熟悉HADOOP平臺架構(gòu),有hadooop、HBase、Hive、Spark、kafka使用經(jīng)驗;
4.熟練Python進(jìn)行數(shù)據(jù)處理,網(wǎng)頁爬取;
5.有非結(jié)構(gòu)化數(shù)據(jù)解析、識別經(jīng)驗優(yōu)先。
大數(shù)據(jù)工程師職位描述(三)
崗位職責(zé):
1.負(fù)責(zé)數(shù)據(jù)倉庫建設(shè)、設(shè)計、優(yōu)化和落地;
2.負(fù)責(zé)數(shù)據(jù)ETL開發(fā)、數(shù)據(jù)平臺建設(shè)、設(shè)計并實現(xiàn)對BI分析、數(shù)據(jù)產(chǎn)品開發(fā)。
任職要求:
1.985院校計算機相關(guān)專業(yè)本科以上學(xué)歷;
2.有較扎實的數(shù)據(jù)倉庫理論基礎(chǔ),對數(shù)據(jù)模型建設(shè)、應(yīng)用層建設(shè)有比較豐富的經(jīng)驗;
3.有Hadoop、Hive、Spark、Impala等大數(shù)據(jù)技術(shù)使用經(jīng)驗者優(yōu)先。
大數(shù)據(jù)工程師職位描述(四)
崗位職責(zé):
1.主要負(fù)責(zé)電信業(yè)務(wù)的大數(shù)據(jù)開發(fā)工作;
2.結(jié)合業(yè)務(wù)需求設(shè)計數(shù)據(jù)分析場景,并形成后臺實現(xiàn)方案,獨立完成業(yè)務(wù)數(shù)據(jù)建模,并將結(jié)果轉(zhuǎn)化為運營指標(biāo);
3.對產(chǎn)品全生命周期跟進(jìn),協(xié)調(diào)各種資源保證產(chǎn)品順利發(fā)展。
任職要求:
1.?? ?計算機或者相關(guān)專業(yè)本科及以上學(xué)歷,3年及以上相關(guān)工作經(jīng)驗;
2.熟練掌握java開發(fā)語言,熟悉多線程和線程調(diào)優(yōu),如懂scala開發(fā)更佳;
3.熟悉Linux服務(wù)器環(huán)境、熟悉shell;
4.熟悉分布式系統(tǒng)、集群管理、SOA架構(gòu)等相關(guān)技術(shù),熟悉hadoop on yarn集群部署和工作原理,熟練掌握MR開發(fā),有大型集群開發(fā)運維經(jīng)驗更佳;
5.熟悉以下技術(shù)中3種及以上者優(yōu)先考慮:hive、hbase、impala、Nginx、zookeeper、redis、kafka、storm、spark、es、爬蟲;
6.具有良好的溝通能力和團(tuán)隊精神,具有良好的抗壓能力。
大數(shù)據(jù)工程師職位描述(五)
崗位職責(zé):
1.負(fù)責(zé)大數(shù)據(jù)處理平臺應(yīng)用的開發(fā)工作;
2.利用Hadoop yarn/Storm/Spark進(jìn)行開發(fā)、存儲、分布式計算應(yīng)用的代碼實現(xiàn);
3.優(yōu)化Hadoop yarn/Storm/Spark 參數(shù),實現(xiàn)系統(tǒng)調(diào)優(yōu),滿足行業(yè)應(yīng)用的實時大數(shù)據(jù)處理需求;
4.學(xué)習(xí)新技術(shù),提高整個平臺的計算能力和效率;
5.開發(fā)基于HIVE、Hbase、ES等數(shù)據(jù)處理方式的腳本程序。
任職要求:
1.3年以上Hadoop/Storm/Spark開發(fā)經(jīng)驗,對分布式、并行計算理論有深刻理解;
2.精通java/scala/python任一語言;
3.對Hadoop/Storm/Spark源碼有研究,有大數(shù)據(jù)平臺開發(fā)工作經(jīng)驗者優(yōu)先;
4.有很好的技術(shù)敏感性,良好的學(xué)習(xí)能力和吃苦耐勞能力;
5.具有較好的溝通協(xié)調(diào)能力、團(tuán)隊合作能力、文檔編寫能力。
大數(shù)據(jù)工程師職位描述(六)
工作內(nèi)容
構(gòu)建大數(shù)據(jù)分析平臺
參與業(yè)務(wù)數(shù)據(jù)建設(shè)、參與數(shù)據(jù)專題體系建設(shè)、數(shù)據(jù)中臺建設(shè)
數(shù)據(jù)分析和挖掘工作
基于數(shù)據(jù)的離線和實時流分析
支撐業(yè)務(wù)的數(shù)據(jù)模型建設(shè)以及數(shù)據(jù)指標(biāo)的計算和分析
數(shù)據(jù)存儲、查詢和運營數(shù)據(jù)分析體系搭建
運用Hadoop\Spark\ES等分布式計算和存儲平臺
ETL流程的優(yōu)化
必備技能
Spark/Flink(架構(gòu)及開發(fā))、ES、Flume/Filebeat、Kafka
熟練使用SQL
Hadoop相關(guān)技術(shù)(開發(fā)、部署、調(diào)優(yōu)),理解MapReduce原理和過程
?
四、備注
招聘圖片來源:中國大數(shù)據(jù)行業(yè)人才生態(tài)現(xiàn)狀
?
大數(shù)據(jù)文章:
- 大數(shù)據(jù)(一)定義、特性
- 大數(shù)據(jù)(二)大數(shù)據(jù)行業(yè)相關(guān)統(tǒng)計數(shù)據(jù)
- 大數(shù)據(jù)(三)大數(shù)據(jù)相關(guān)的職位
- 基于Echarts構(gòu)建大數(shù)據(jù)可視化大屏
- 大數(shù)據(jù)(四)主流大數(shù)據(jù)技術(shù)
??????????推薦閱讀:
[你找到牽手一輩子的人了嗎?] 七夕情人節(jié)特輯 |
數(shù)字技術(shù)能讓古籍“活過來”嗎? |
心情不好時,幫自己訓(xùn)練個AI情緒鼓勵師吧(基于PALM 2.0 finetune) |
深度學(xué)習(xí)框架TensorFlow |
人工智能開發(fā)人員工作流程、看法、工具統(tǒng)計數(shù)據(jù) |
2023 年6月開發(fā)者調(diào)查統(tǒng)計結(jié)果——最流行的技術(shù)(2) |
2023 年6月開發(fā)者調(diào)查統(tǒng)計結(jié)果——最流行的技術(shù)(1) |
讓Ai幫我們畫個粽子,它會畫成什么樣呢? |
|
|
|
給照片換底色(python+opencv) | 貓十二分類 | 基于大模型的虛擬數(shù)字人__虛擬主播實例 |
|
|
|
計算機視覺__基本圖像操作(顯示、讀取、保存) | 直方圖(顏色直方圖、灰度直方圖) | 直方圖均衡化(調(diào)節(jié)圖像亮度、對比度) |
|
|
|
?語音識別實戰(zhàn)(python代碼)(一) |
?人工智能基礎(chǔ)篇 |
?計算機視覺基礎(chǔ)__圖像特征 |
|
||
?matplotlib 自帶繪圖樣式效果展示速查(28種,全) |
||
|
||
Three.js實例詳解___旋轉(zhuǎn)的精靈女孩(附完整代碼和資源)(一) | ||
|
|
|
立體多層玫瑰繪圖源碼__玫瑰花python 繪圖源碼集錦 | ?Python 3D可視化(一) |
?讓你的作品更出色——詞云Word Cloud的制作方法(基于python,WordCloud,stylecloud) |
|
|
|
?python Format()函數(shù)的用法___實例詳解(一)(全,例多)___各種格式化替換,format對齊打印 |
?用代碼寫出浪漫__合集(python、matplotlib、Matlab、java繪制愛心、玫瑰花、前端特效玫瑰、愛心) |
python愛心源代碼集錦(18款) |
|
|
|
?Python中Print()函數(shù)的用法___實例詳解(全,例多) |
?Python函數(shù)方法實例詳解全集(更新中...) |
?《 Python List 列表全實例詳解系列(一)》__系列總目錄、列表概念 |
|
|
|
用代碼過中秋,python海龜月餅?zāi)阋灰獓L一口? | ?python練習(xí)題目錄 |
|
|
|
|
草莓熊python turtle繪圖(風(fēng)車版)附源代碼 | ??草莓熊python turtle繪圖代碼(玫瑰花版)附源代碼 |
??草莓熊python繪圖(春節(jié)版,圣誕倒數(shù)雪花版)附源代碼 |
|
|
|
?巴斯光年python turtle繪圖__附源代碼 |
皮卡丘python turtle海龜繪圖(電力球版)附源代碼 | |
|
|
|
?Node.js (v19.1.0npm 8.19.3) vue.js安裝配置教程(超詳細(xì)) |
?色彩顏色對照表(一)(16進(jìn)制、RGB、CMYK、HSV、中英文名) |
2023年4月多家權(quán)威機構(gòu)____編程語言排行榜__薪酬狀況 |
|
|
|
?手機屏幕壞了____怎么把里面的資料導(dǎo)出(18種方法) |
【CSDN云IDE】個人使用體驗和建議(含超詳細(xì)操作教程)(python、webGL方向) | ?查看jdk安裝路徑,在windows上實現(xiàn)多個java jdk的共存解決辦法,安裝java19后終端亂碼的解決 |
|
||
vue3 項目搭建教程(基于create-vue,vite,Vite + Vue) | ||
|
|
|
2023年春節(jié)祝福第二彈——送你一只守護(hù)兔,讓它溫暖每一個你【html5 css3】畫會動的小兔子,炫酷充電,字體特 | ?別具一格,原創(chuàng)唯美浪漫情人節(jié)表白專輯,(復(fù)制就可用)(html5,css3,svg)表白愛心代碼(4套) |
SVG實例詳解系列(一)(svg概述、位圖和矢量圖區(qū)別(圖解)、SVG應(yīng)用實例) |
|
|
|
【程序人生】卡塔爾世界杯元素python海龜繪圖(附源代碼),世界杯主題前端特效5個(附源碼) | HTML+CSS+svg繪制精美彩色閃燈圣誕樹,HTML+CSS+Js實時新年時間倒數(shù)倒計時(附源代碼) | ?2023春節(jié)祝福系列第一彈(上)(放飛祈福孔明燈,祝福大家身體健康)(附完整源代碼及資源免費下載) |
|
|
|
?tomcat11、tomcat10 安裝配置(Windows環(huán)境)(詳細(xì)圖文) |
?Tomcat端口配置(詳細(xì))文章來源:http://www.zghlxwxcb.cn/news/detail-683967.html |
?Tomcat 啟動閃退問題解決集(八大類詳細(xì))文章來源地址http://www.zghlxwxcb.cn/news/detail-683967.html |
到了這里,關(guān)于大數(shù)據(jù)(三)大數(shù)據(jù)相關(guān)的職位的文章就介紹完了。如果您還想了解更多內(nèi)容,請在右上角搜索TOY模板網(wǎng)以前的文章或繼續(xù)瀏覽下面的相關(guān)文章,希望大家以后多多支持TOY模板網(wǎng)!