Hadoop2.5.1使用笔记

WBOY
リリース: 2016-06-07 16:40:58
オリジナル
949 人が閲覧しました

只是记录遇到的问题及解决方法: 1.安装教程:http://dogdogfish.com/2014/04/26/installing- hadoop -2-4-on-ubuntu-14-04/ 2.新版本的 hadoop streaming 库地址:$HADOOP_HOME/share/hadoop/tools/lib/hadoop-streaming-2.5.1.jar 3.使用hadoop streaming

只是记录遇到的问题及解决方法:

1.安装教程:http://dogdogfish.com/2014/04/26/installing-hadoop-2-4-on-ubuntu-14-04/

2.新版本的hadoop streaming 库地址:$HADOOP_HOME/share/hadoop/tools/lib/hadoop-streaming-2.5.1.jar

3.使用hadoop streaming 同一键值需要自己合并

4.Hadoop Core(hadoop-core-*.jar) is renamed Hadoop Common. location:$HADOOP_HOME/share/hadoop/common/hadoop-common-2.5.1.jar

报错:

1.java.lang.RuntimeException: PipeMapRed.waitOutputThreads(): subprocess failed with code 1
    解决方案:程序有错, 检查 http://localhost:50070/logs/userlogs/下的日志看container日志中的stderr,然后具体问题具体解决
ログイン後にコピー
関連ラベル:
ソース:php.cn
このウェブサイトの声明
この記事の内容はネチズンが自主的に寄稿したものであり、著作権は原著者に帰属します。このサイトは、それに相当する法的責任を負いません。盗作または侵害の疑いのあるコンテンツを見つけた場合は、admin@php.cn までご連絡ください。
人気のチュートリアル
詳細>
最新のダウンロード
詳細>
ウェブエフェクト
公式サイト
サイト素材
フロントエンドテンプレート