如何转换阵列星火数据帧列表(How to convert a list of array to Sp

2019-09-30 16:41发布

假设我有一个列表:

x = [[1,10],[2,14],[3,17]]

我想转换x到火花数据帧有两列id (1,2,3)和value (10,14,17)。

我怎么能这样做?

谢谢

Answer 1:

x = [[1,10],[2,14],[3,17]]
df = sc.parallelize(x).toDF(['ID','VALUE'])
df.show()


文章来源: How to convert a list of array to Spark dataframe