“Bagaimana cara menggunakan Apache Spark dengan notebook di Anaconda” Kode Jawaban

Bagaimana cara menggunakan Apache Spark dengan notebook di Anaconda

PYSPARK_PYTHON=/opt/continuum/anaconda/bin/python spark-submit pyspark_script.py
Lazy Lion

Bagaimana cara menggunakan Apache Spark dengan notebook di Anaconda

import os
import sys
os.environ["PYSPARK_PYTHON"] = "/opt/continuum/anaconda/bin/python"
os.environ["JAVA_HOME"] = "/usr/java/jdk1.7.0_67-cloudera/jre"
os.environ["SPARK_HOME"] = "/opt/cloudera/parcels/CDH/lib/spark"
os.environ["PYLIB"] = os.environ["SPARK_HOME"] + "/python/lib"
sys.path.insert(0, os.environ["PYLIB"] +"/py4j-0.9-src.zip")
sys.path.insert(0, os.environ["PYLIB"] +"/pyspark.zip")
Lazy Lion

Jawaban yang mirip dengan “Bagaimana cara menggunakan Apache Spark dengan notebook di Anaconda”

Pertanyaan yang mirip dengan “Bagaimana cara menggunakan Apache Spark dengan notebook di Anaconda”

Lebih banyak jawaban terkait untuk “Bagaimana cara menggunakan Apache Spark dengan notebook di Anaconda” di Python

Jelajahi jawaban kode populer menurut bahasa

Jelajahi bahasa kode lainnya