2017-03-02 70 views
-3

为什么我不能读取hadoop自述文件?为什么不读取文件在SparkContext.textFile()

Spark REPL Image

+0

您似乎已经忘记了问一个问题的解决方案。 –

+0

@ cricket_007这个职位已更新,请对我发表评论 –

+0

你真的为EC2付费学Spark吗?这是浪费金钱...无论如何,你仍然没有问题。是什么让你认为第一行不是空白? –

回答

0

下面你可以找到星火2.1.0

val appName = "Read Text File Example" 
val master = "local[*]" 

val conf = new SparkConf().setAppName(appName).setMaster(master) 

val spark = SparkSession 
    .builder() 
    .config(conf) 
    .getOrCreate() 

val sp = spark.read.text("pathtofile/README.md") 

sp.collect().foreach(println) 
相关问题