崗位職責(zé)
1.負(fù)責(zé)大數(shù)據(jù)基礎(chǔ)平臺(tái)的整體規(guī)劃和架構(gòu)設(shè)計(jì), 參與需求分析、 架構(gòu)設(shè)計(jì)、 技術(shù)決策以及詳
細(xì)設(shè)計(jì);
2.為現(xiàn)有大數(shù)據(jù) Hadoop、 hive 平臺(tái)提供性能調(diào)優(yōu)、 架構(gòu)優(yōu)化重組, 解決系統(tǒng)中的關(guān)鍵問(wèn)題
和技術(shù)難題;
3.把握基礎(chǔ)業(yè)務(wù)復(fù)雜系統(tǒng)的設(shè)計(jì), 確保系統(tǒng)的架構(gòu)質(zhì)量, 編寫核心部分代碼;
4.指導(dǎo)和培訓(xùn)工程師, 不斷提升團(tuán)隊(duì)能力;
5.持續(xù)挑戰(zhàn)新的技術(shù)方向, 攻克大數(shù)據(jù)量, 高并發(fā), 高穩(wěn)定性, 易用性等各種技術(shù)難點(diǎn)。
任職資格:
1.3 年以上大數(shù)據(jù)架構(gòu)經(jīng)驗(yàn), 2 年團(tuán)隊(duì)管理經(jīng)驗(yàn), 熟悉 Hadoop、 Spark 并有豐富的開發(fā)經(jīng)驗(yàn),
熟悉 zeus 調(diào)度;
2.扎實(shí)的 Java、 Scala 語(yǔ)言基礎(chǔ), 對(duì) JVM 運(yùn)行機(jī)制有深入了解;
3.熟練使用 Linux/Unix 等操作系統(tǒng),具備編寫 shell 的能力;
4.熟悉 SQL 和 noSQL 數(shù)據(jù)庫(kù)的設(shè)計(jì)和開發(fā), 如: Oracle/Mysql/Hbase/Mongodb/Redis 等;
5.熟悉大數(shù)據(jù)相關(guān)組件搭建、 應(yīng)用、 優(yōu)化, 如:Mapreduce/Sqoop/Hdfs/Hive/Spark-Streaming/Solr 等;
6.熟練使用 ETL 工具進(jìn)行數(shù)據(jù)抽取, 清洗, 轉(zhuǎn)換, 關(guān)聯(lián)等操作;
7.較強(qiáng)的人際關(guān)系能力、 有團(tuán)隊(duì)精神, 較強(qiáng)的執(zhí)行與推動(dòng)能力, 有一定抗壓力。
職位類別:
軟件工程師
舉報(bào)