1. ホーム
  2. windows

[解決済み] WindowsでSparkをセットアップするには?

2023-02-15 16:48:11

質問

WindowsでApache Sparkをセットアップしようとしています。

少し検索した後、私はスタンドアロンモードが私が望むものであることを理解しています。 Windows で Apache Spark を実行するには、どのバイナリをダウンロードすればよいですか?私は、スパークのダウンロードページで、hadoopとcdhの配布物を見ます。

私はこれに対するウェブでのリファレンスを持っていません。このためのステップバイステップガイドは非常に高く評価されています。

どのように解決するのですか?

Windowsでは、ソースからビルドするのが一番簡単な解決方法だと思います。

このガイドにほぼ従うことができます。 http://spark.apache.org/docs/latest/building-spark.html

Mavenをダウンロード、インストールし MAVEN_OPTS をガイドで指定された値に設定します。

しかし、もしあなたがSparkで遊んでいて、自分のマシンがWindowsを実行しているという他の理由で実際にWindows上で実行する必要がないのであれば、Linux仮想マシン上にSparkをインストールすることを強くお勧めします。ClouderaやHortonworksによって作られた既製のイメージをダウンロードし、バンドルされているバージョンのSparkを使用するか、ソースやsparkのウェブサイトから取得できるコンパイル済みのバイナリから自分自身をインストールするのが、おそらく始めるための最も簡単な方法でしょう。