Échec de la recherche du répertoire des jars Spark. Vous devez construire Spark avant d'exécuter ce programme.

Question

Je suis en train d'essayer d'installer Spark sur Windows 10 mais j'ai une erreur lorsque j'essaie d'exécuter pyspark.

Impossible de trouver le répertoire des jars de Spark. Vous devez construire Spark avant d'exécuter ce programme.

J'ai suivi les étapes indiquées ici jusqu'à l'étape 4.

Je suis allé dans Scripts et site-packages d'Anaconda. Dans Scripts, il y a pyspark spark-shell et ainsi de suite, MAIS le dossier pyspark dans site-packages n'a ni le dossier jars ni son propre dossier bin.

Où se trouvent les jars ?

Answer 1

Une des causes de cette erreur est que lors du réglage du chemin d'accès, le chemin d'accès Spark_home peut contenir des espaces comme "C:/Users//apache spark/bin"

Il suffit de supprimer les espaces ou de changer de répertoire.