问题描述
我正在尝试将RDD转换为数据帧,但始终收到不匹配的输入错误。我需要更改什么?
from pyspark.sql.functions import col
from pyspark.sql import Row
from pyspark.sql.types import *
from pyspark.sql.functions import desc
from pyspark.sql.functions import SparkContext
Text = "/content/birds.txt"
Words = sc.textFile(Text).flatMap(lambda line: line.split(" ")).map(lambda word: (word,1)).reduceByKey(lambda x,y: x + y)
print(Words)
# Convert word-count RDD to dataframe with 2 columns ["Name","Number"]
rwdf = words.toDF("Name","Number")
rwdf.show(5)
解决方法
暂无找到可以解决该程序问题的有效方法,小编努力寻找整理中!
如果你已经找到好的解决方法,欢迎将解决方案带上本链接一起发送给小编。
小编邮箱:dio#foxmail.com (将#修改为@)