Rdd没法调用toDF原因
来源：互联网 发布：美团抢单送外卖的软件 编辑：程序博客网 时间：2024/06/10 02:49
创建rdd方法1//use case class Person case class Person(name:String,age:Int) def rddToDFCase(sparkSession : SparkSession):DataFrame = { //导入隐饰操作，否则RDD无法调用toDF方法 import sparkSession.implicits._ val peopleRDD = sparkSession.sparkContext .textFile("file:/E:/scala_workspace/z_spark_study/people.txt",2) .map( x => x.split(",")).map( x => Person(x(0),x(1).trim().toInt)).toDF() peopleRDD }
创建rdd方法2：
def rddToDF(sparkSession : SparkSession):DataFrame = { //设置schema结构 val schema = StructType( Seq( StructField("name",StringType,true) ,StructField("age",IntegerType,true) ) ) val rowRDD = sparkSession.sparkContext .textFile("file:/E:/scala_workspace/z_spark_study/people.txt",2) .map( x => x.split(",")).map( x => Row(x(0),x(1).trim().toInt)) sparkSession.createDataFrame(rowRDD,schema) }
1 0
- Rdd没法调用toDF原因
- value toDF is not a member of org.apache.spark.rdd.RDD[People]
- value toDF is not a member of org.apache.spark.rdd.RDD[People]
- 解决value toDF is not a member of org.apache.spark.rdd.RDD[People]
- scala学习-DescriptionResourcePathLocationType value toDF is not a member of org.apache.spark.rdd.R
- div 背景图片没法显示的原因
- RDD
- RDD
- RDD
- RDD
- rdd
- RDD
- RDD
- RDD
- rdd
- RDD
- toDF需要导入的包
- 2013-01-29 杀完毒IDE没法用了 找了半天原因 郁闷重装
- J题
- macOS
- finally 是执行try return之前还是之后之争
- Android架构设计---关于MVVM模式的探讨
- phpstorm安装破解及汉化
- Rdd没法调用toDF原因
- 进程与线程的区别与联系
- 进程/线程同步、互斥、通信的问题：
- Java ServerSocket用法深入分析
- Android插件化系列第（五）篇---Activity的插件化方案（代理模式）
- Unity角色血条等信息制作
- 代理加速 gradle 构建
- 使用ImageSpan，图片不能与文字对齐问题
- MVP编写流程
