Sparkのバージョンを確認する方法
2023-10-19 19:49:01
質問内容
とあるように、CentOSにインストールされているsparkのバージョンを知るにはどうしたらいいのでしょうか?
現在のシステムにはcdh5.1.0がインストールされています。
どのように解決するのですか?
Spark-Shellを使用する場合、冒頭のバナーに表示されます。
プログラム的に
SparkContext.version
を使うことができます。
関連
-
[解決済み] java.io.IOException。Could not locate executable nullbinintechnutils.exe in the Hadoop binaries. spark Eclipse on windows 7
-
[解決済み] Spark が "java.net.URISyntaxException" を報告するのはなぜですか?DataFrameを使用する際に「java.net.URIStyntaxException: Relative path in absolute URI」と表示されるのはなぜですか?
-
[解決済み] sparkでsaveAsTextFileするときのファイル名の付け方は?
-
[解決済み] Spark - repartition() vs coalesce()
-
[解決済み】SparkコンソールにINFOメッセージを表示させないようにするには?
-
[解決済み] SparkでINFOロギングをオフにする方法は?
-
[解決済み] sparkで出力ディレクトリを上書きする方法
-
[解決済み] Apache BeamがSpark/Flinkよりもバッチ処理に優れている点は何ですか?
-
[解決済み] sparkでドライバのpythonのバージョンを設定するには?
-
[解決済み] RDD/Spark DataFrameの特定の列に基づく行からの重複の除去
最新
-
nginxです。[emerg] 0.0.0.0:80 への bind() に失敗しました (98: アドレスは既に使用中です)
-
htmlページでギリシャ文字を使うには
-
ピュアhtml+cssでの要素読み込み効果
-
純粋なhtml + cssで五輪を実現するサンプルコード
-
ナビゲーションバー・ドロップダウンメニューのHTML+CSSサンプルコード
-
タイピング効果を実現するピュアhtml+css
-
htmlの選択ボックスのプレースホルダー作成に関する質問
-
html css3 伸縮しない 画像表示効果
-
トップナビゲーションバーメニュー作成用HTML+CSS
-
html+css 実装 サイバーパンク風ボタン
おすすめ
-
[解決済み] SparkでcreateOrReplaceTempViewはどのように動作するのですか?
-
[解決済み] Apache SparkとAkkaの比較【終了しました
-
[解決済み] spark 2.4.4 をインストールした後に pyspark を実行しようとすると、「TypeError: an integer is required (got type bytes)」というエラーが発生するのを修正する方法
-
[解決済み] sparkでsaveAsTextFileするときのファイル名の付け方は?
-
[解決済み] ShuffledRDD、MapPartitionsRDD、ParallelCollectionRDDの違いは何ですか?
-
[解決済み] TypeError: 'Column' オブジェクトは WithColumn を使用して呼び出すことができません。
-
[解決済み】mapとflatMapの違いと、それぞれの良い使用例について教えてください。
-
[解決済み】Spark Dataframeで列の内容をすべて表示するにはどうすればよいですか?
-
[解決済み] Sparkにはどのようなクラスタタイプを選べばよいですか?
-
[解決済み] PySparkのデータフレームで各列のNullとNanの値の数を効率的に見つけるにはどうしたらいいですか?