崗位描述:
1.負(fù)責(zé)Hadoop平臺(tái)運(yùn)維和優(yōu)化工作;
2.保證Hadoop平臺(tái)各核心服務(wù)運(yùn)行的穩(wěn)定、高效;
3.對(duì)Hadoop平臺(tái)運(yùn)維不斷優(yōu)化,提升數(shù)據(jù)產(chǎn)品的質(zhì)量和響應(yīng)速度;
4.協(xié)助維護(hù)和管理Hadoop集群,參與新技術(shù)選型和調(diào)研,解決不斷增長(zhǎng)的海量數(shù)據(jù)帶來(lái)的存儲(chǔ)和計(jì)算挑戰(zhàn)
5.能運(yùn)用分布式計(jì)算/大數(shù)據(jù)挖掘思路和技術(shù)開發(fā)產(chǎn)品,以服務(wù)化的方式提升產(chǎn)品質(zhì)量和研發(fā)效率
6.開發(fā)各種Hadoop大數(shù)據(jù)自動(dòng)化運(yùn)維與監(jiān)控工具。
任職資格:
1.2年以上Linux系統(tǒng)管理工作經(jīng)驗(yàn);
2.具有Hadoop平臺(tái)管理經(jīng)驗(yàn),熟悉GFS/Hadoop、hive、hbase等開源項(xiàng)目;
3.熟悉Apache?Hadoop部署、性能調(diào)優(yōu),熟悉jetty,thrift;
4.精通Shell/Python/Java/Perl語(yǔ)言的一種或多種;
5.熟悉nagios,cacti,ganglia,zabbix,zenoss優(yōu)先;
6.對(duì)大數(shù)據(jù)和自動(dòng)化運(yùn)維開發(fā)有濃厚興趣,熟悉hadoop、hbase、hive、scribe、flume、storm等分布式相關(guān)技術(shù)優(yōu)先;
7.有大規(guī)模hadoop運(yùn)維經(jīng)驗(yàn)者優(yōu)先;有hadoop/hbase?開發(fā)經(jīng)驗(yàn)者優(yōu)先