[解決済み] Hive - Hiveサービスのクラスパスを印刷する方法
2022-02-17 10:44:10
質問
ハイブ クエリの実行中にロードされる jar の場所を確認するために、ハイブ サービスのクラスパスをチェックする必要があります。
新しいパーケット形式のデータを読み込むために、hiveのパーケットjarを最新のものに更新したいのですが。
hiveのlibの場所(/usr/hdp/2.5.XX/hive/lib/)のjarを更新しましたが、他の場所の古いjarをまだ使用しています。
以下のコマンドでjarをリストアップしてみましたが、何も出力されません。
<ブロッククオートhive>list jars;
を使用して新しいjarを追加してみました。
jarを追加する <'jar file>
が、まだ古いjarが選ばれています。
ハイブサービスに使用されているクラスパスまたはジャーを見つける方法はありますか?
解決方法を教えてください。
以下のコマンドを実行し、ハイブコマンドの場所を取得します。
which hive
usr/bin/(あなたのハイブの場所)の下にある'hive'ファイルを開いてください。
vi /usr/bin/hive
以下のように表示されるはずです。 ハイブファイルのバックアップを取り、以下のように実行前の最後にHADOOP_CLASSPATH用のechoコマンドを追加してください。
#!/bin/bash
if [ -d "/usr/hdp/2.5.0.0-1245/atlas/hook/hive" ]; then
if [ -z "${HADOOP_CLASSPATH}" ]; then
export HADOOP_CLASSPATH=/usr/hdp/2.5.0.0-1245/atlas/hook/hive/*
else
export HADOOP_CLASSPATH=${HADOOP_CLASSPATH}:/usr/hdp/2.5.0.0-1245/atlas/hook/hive/*
fi
fi
...
if [ -z "${HADOOP_CLASSPATH}" ]; then
export HADOOP_CLASSPATH=${HCATALOG_JAR_PATH}
else
export HADOOP_CLASSPATH=${HADOOP_CLASSPATH}:${HCATALOG_JAR_PATH}
fi
####### Prints hadoop classpath
echo "Classpath=$HADOOP_CLASSPATH"
exec "${HIVE_HOME}/bin/hive.distro" "$@"
hiveコマンドを実行して、クラスパスを表示します。
環境変数 'HADOOP_CLASSPATH' に新しい parquet jar の場所を追加することで、parquet の問題は解決されました。
関連
-
[解決済み] hive.tez.container.size と tez.task.resource.memory.mb の違いについて
-
[解決済み] Apache Hive 小数点以下2桁に四捨五入する方法は?
-
[解決済み] yarn.scheduler.maximum-allocation-mb` と `yarn.nodemanager.resource.memory-mb` の違いについて教えてください。
-
[解決済み] HADOOPでワード数を値でソートする方法は?[重複している]。
-
[解決済み] HDFSのHiveプロキシユーザーの最適なソリューションは何ですか?
-
[解決済み] Hive - Hiveサービスのクラスパスを印刷する方法
-
[解決済み] 最初のhadoopプロジェクトエラー。"入力パスが存在しません"
-
[解決済み] curl で --negotiate を使用する場合、keytab ファイルは必要ですか?
-
[解決済み] Facebookのデータ分析ツール「HiPal」とは、どのようなものなのか?
-
[解決済み] HiveにStringのsplit関数はありますか?
最新
-
nginxです。[emerg] 0.0.0.0:80 への bind() に失敗しました (98: アドレスは既に使用中です)
-
htmlページでギリシャ文字を使うには
-
ピュアhtml+cssでの要素読み込み効果
-
純粋なhtml + cssで五輪を実現するサンプルコード
-
ナビゲーションバー・ドロップダウンメニューのHTML+CSSサンプルコード
-
タイピング効果を実現するピュアhtml+css
-
htmlの選択ボックスのプレースホルダー作成に関する質問
-
html css3 伸縮しない 画像表示効果
-
トップナビゲーションバーメニュー作成用HTML+CSS
-
html+css 実装 サイバーパンク風ボタン
おすすめ
-
[解決済み] hadoop.tmp.dirはどうすればいいのでしょうか?
-
[解決済み] hive.tez.container.size と tez.task.resource.memory.mb の違いについて
-
[解決済み] Apache Hive 小数点以下2桁に四捨五入する方法は?
-
[解決済み] コマンドプロンプトからHiveとHadoopのバージョンを知るには?
-
[解決済み] Hive - 現在使用している実行エンジンを知る方法
-
[解決済み] HadoopでDatanodeのプロセスが実行されていない
-
[解決済み] HDFSのHiveプロキシユーザーの最適なソリューションは何ですか?
-
[解決済み] 最初のhadoopプロジェクトエラー。"入力パスが存在しません"
-
[解決済み] Hiveで日付の差を計算する方法
-
[解決済み] HiveにStringのsplit関数はありますか?