[解決済み] 最初のhadoopプロジェクトエラー。"入力パスが存在しません"
2022-02-14 07:28:02
質問
シンプルなHadoopプロジェクトをセットアップするために、私はこのチュートリアルに従います。 http://ebiquity.umbc.edu/Tutorials/Hadoop/23%20-%20create%20the%20project.html
私のHadoopシングルノードは正常に動作しているようです。
を指定すると
In
このコードでフォルダを作成します。
FileInputFormat.setInputPaths(conf, new Path("In"));
このようなエラーが発生します。
13/03/03 22:05:27 ERROR security.UserGroupInformation: PriviledgedActionException as:DEVUSER cause:org.apache.hadoop.mapred.InvalidInputException: Input path does not exist: hdfs://localhost:9100/user/DEVUSER/In
現在では
In
フォルダは
C:\homedir\hadoop-1.0.4\In
In"フォルダはどこに作成すればよいのでしょうか。
hdfs://localhost:9100/user/DEVUSER/In
? ローカルファイルシステム上のフォルダを指すように xml ファイルを更新する必要がありますか?
解決方法は?
まず、入力ファイルをHDFSファイルシステムにアップロードする必要があります。
bin/hadoop fs -mkdir In
という名前のディレクトリが作成されます。
/user/DEVUSER/In
をHDFSに保存します。
bin/hadoop fs -put *.txt In
は、すべての
*.txt
ファイルをカレントディレクトリからクラスタ(HDFS)に転送します。
の章を読み飛ばしているようです。 データのアップロード チュートリアルから。このチュートリアルに従えば、あなたの問題は解決するはずです。
関連
-
[解決済み] Apache Hive 小数点以下2桁に四捨五入する方法は?
-
[解決済み] Hadoop-Hiveからテーブルを削除/トランケートする方法は?
-
[解決済み] コマンドプロンプトからHiveとHadoopのバージョンを知るには?
-
[解決済み] 単一ファイルをコピーする際にhadoop discpの問題が発生する
-
[解決済み] HADOOPでワード数を値でソートする方法は?[重複している]。
-
[解決済み] Hive - 現在使用している実行エンジンを知る方法
-
[解決済み] HDFSのHiveプロキシユーザーの最適なソリューションは何ですか?
-
[解決済み] HiveのRANK OVER機能
-
[解決済み] curl で --negotiate を使用する場合、keytab ファイルは必要ですか?
-
[解決済み] Facebookのデータ分析ツール「HiPal」とは、どのようなものなのか?
最新
-
nginxです。[emerg] 0.0.0.0:80 への bind() に失敗しました (98: アドレスは既に使用中です)
-
htmlページでギリシャ文字を使うには
-
ピュアhtml+cssでの要素読み込み効果
-
純粋なhtml + cssで五輪を実現するサンプルコード
-
ナビゲーションバー・ドロップダウンメニューのHTML+CSSサンプルコード
-
タイピング効果を実現するピュアhtml+css
-
htmlの選択ボックスのプレースホルダー作成に関する質問
-
html css3 伸縮しない 画像表示効果
-
トップナビゲーションバーメニュー作成用HTML+CSS
-
html+css 実装 サイバーパンク風ボタン
おすすめ
-
[解決済み] hadoop.tmp.dirはどうすればいいのでしょうか?
-
[解決済み] Hadoop-Hiveからテーブルを削除/トランケートする方法は?
-
[解決済み] yarn.scheduler.maximum-allocation-mb` と `yarn.nodemanager.resource.memory-mb` の違いについて教えてください。
-
[解決済み] Hive - 現在使用している実行エンジンを知る方法
-
[解決済み] HDFSのHiveプロキシユーザーの最適なソリューションは何ですか?
-
[解決済み] Hive - Hiveサービスのクラスパスを印刷する方法
-
[解決済み] HiveのRANK OVER機能
-
[解決済み] Facebookのデータ分析ツール「HiPal」とは、どのようなものなのか?
-
[解決済み] Hiveで日付の差を計算する方法
-
[解決済み] HiveにStringのsplit関数はありますか?