下面是小編給大家分享的一篇Hadoop LZO安裝的詳細(xì)教程，感興趣的朋友跟小編一起來了解一下吧!

1.安裝 Hadoop-gpl-compression
1.1 wget http://hadoop-gpl-compression.apache-extras.org.codespot.com/files/hadoop-gpl-compression-0.1.0-rc0.tar.gz
1.2 mv hadoop-gpl-compression-0.1.0/lib/native/Linux-amd64-64/* $HADOOP_HOME/lib/native/Linux-amd64-64/

1.3 cp hadoop-gpl-compression-0.1.0/hadoop-gpl-compression-0.1.0.jar /usr/local/hadoop-1.0.2/lib/

2.安裝 lzo
apt-get install gcc
apt-get install lzop

3.在本地測試 可以 執(zhí)行 壓縮及解壓縮命令
下載 https://github.com/kevinweil/hadoop-lzo/zipball/master
解壓包
export CFLAGS=-m64
export CXXFLAGS=-m64
//用于 hadoop0.20 ，所以1.0未必適用
進行build
ant compile-native tar
將生成的 build/hadoop-lzo-0.4.15.jar cp 到 /usr/local/hadoop-1.0.2/lib

測試解壓程序
bin/hadoop jar /usr/local/hadoop-1.0.2/lib/hadoop-lzo-0.4.15.jar com.hadoop.compression.lzo.LzoIndexer /home/hadoop/project_hadoop/aa.html.lzo

以上就是關(guān)于Hadoop LZO安裝的詳細(xì)教程，想必都了解了吧，更多相關(guān)內(nèi)容請繼續(xù)關(guān)注愛站技術(shù)頻道。

標(biāo)簽： linux

版權(quán)申明：本站文章部分自網(wǎng)絡(luò)，如有侵權(quán)，請聯(lián)系：west999com@outlook.com
特別注意：本站所有轉(zhuǎn)載文章言論不代表本站觀點！
本站所提供的圖片等素材，版權(quán)歸原作者所有，如需使用，請與原作者聯(lián)系。