SQLContext objet n'a pas d'attribut en lecture lors de la lecture de csv dans pyspark

Je suis le chargement d'un fichier csv dans pyspark comme suit (dans pyspark shell): 

>>> from pyspark.sql import SQLContext
>>> sqlContext = SQLContext(sc)
>>> df = sqlContext.read.format('com.databricks.spark.csv').options(header='true').load('data.csv')

mais j'obtiens cette erreur: 

Traceback (most recent call last):
  File "<stdin>", line 1, in <module>
AttributeError: 'SQLContext' object has no attribute 'read'
>>>

Je suis en utilisant étincelle 1.3.1 et je suis en train d'utilisateur spark-csv

InformationsquelleAutor MedAli | 2015-10-06
  1. 5

    Que vous essayez d'utiliser Spark 1.4+ syntaxe.

    Pour Spark 1.3

    from pyspark.sql import SQLContext
sqlContext = SQLContext(sc)

df = sqlContext.load(source="com.databricks.spark.csv", header="true", path = "cars.csv")
df.select("year", "model").save("newcars.csv", "com.databricks.spark.csv")
    • En fait, je suis à l'aide de l'api python exemple de l'étincelle csv module, github.com/databricks/spark-csv#python-api. ce qui rend l'utilisation de lire comme je le fais
    • vous essayez d'utiliser Spark 1.4+: syntaxe
    InformationsquelleAutor xiº