将值保存在Spark中

维夫曼

我正在尝试从本地文件夹读取和写入数据,但是我的数据不完全相同。

val data =sc.textFile("/user/cts367689/datagen.txt")

 val a=data.map(line=>(line.split(",")(0).toInt+line.split(",")(4).toInt,line.split(",")(3),line.split(",")(2)))

a.saveAsTextFile("/user/cts367689/sparkoutput")

输出:

(526,female,avil)
(635,male,avil)  
(983,male,paracetamol)    
(342,female,paracetamol)    
(158,female,avil)

我如何保存以下输出,需要去掉括号。

预期结果:

526,female,avil
635,male,avil    
983,male,paracetamol   
342,female,paracetamol    
158,female,avil
法哈德·西迪基(Fahad Siddiqui)
val a = data.map (
  line => 
    (line.split(",")(0).toInt + line.split(",")(4).toInt) + "," +
    line.split(",")(3) + "," + 
    line.split(",")(2)
)

尝试执行此操作,而不是将其返回()那就是一个元组。

本文收集自互联网,转载请注明来源。

如有侵权,请联系[email protected] 删除。

编辑于
0

我来说两句

0条评论
登录后参与评论

相关文章

来自分类Dev

将中间结果保存在Spark中

来自分类Dev

将arraylist值保存在函数中

来自分类Dev

将RDD的元素保存在Spark应用程序中

来自分类Dev

无法将Firestore中的值保存在列表中

来自分类Dev

将onclick属性值保存在变量中,然后执行

来自分类Dev

将值保存在数组中(并覆盖每次更新)

来自分类Dev

将输入值保存在子行中-DataTables

来自分类Dev

将JSON值保存在Expo React Native变量中

来自分类Dev

将输入值保存在本地存储中

来自分类Dev

Django将默认值保存在代理模型中

来自分类Dev

将返回值保存在数组中。

来自分类Dev

Android将Edittexts的值保存在SharedPreference中

来自分类Dev

Shell将数组元素值保存在变量中

来自分类Dev

如何将案例值保存在变量中

来自分类Dev

将空值保存在数据库中

来自分类Dev

将哈希值保存在数据库中

来自分类Dev

将选择值保存在数组中并遍历

来自分类Dev

将 ACF 的值保存在 R 中以用于绘图

来自分类Dev

将对象的值保存在矢量中,将指针保存在地图中。这个对吗?

来自分类Dev

使用相同的键将多个值保存在NSMutableDictionary中,然后将字典存储在NSMutableArray中

来自分类Dev

将值保存在循环内的向量中,并找到保存某个元素的特定循环

来自分类Dev

避免使用实体框架将空值或空值保存在数据库中

来自分类Dev

如何使用Java或Spark-Java将大量文档保存在Cloudant中?

来自分类Dev

将通过 oracle 查询创建的 Spark DataFrame 保存在 hive 表中?

来自分类Dev

将颜色值保存在主题变量中并在活动xml中引用它们?

来自分类Dev

将文本值保存在iOS中的JavaScript(如NSUserdefaults)中

来自分类Dev

使用Python中的for循环将值分别保存在字典中

来自分类Dev

将值保存在$ .get中的Javascript变量中,并在PHP变量中使用它

来自分类Dev

将文本值保存在iOS中的JavaScript(如NSUserdefaults)中

Related 相关文章

  1. 1

    将中间结果保存在Spark中

  2. 2

    将arraylist值保存在函数中

  3. 3

    将RDD的元素保存在Spark应用程序中

  4. 4

    无法将Firestore中的值保存在列表中

  5. 5

    将onclick属性值保存在变量中,然后执行

  6. 6

    将值保存在数组中(并覆盖每次更新)

  7. 7

    将输入值保存在子行中-DataTables

  8. 8

    将JSON值保存在Expo React Native变量中

  9. 9

    将输入值保存在本地存储中

  10. 10

    Django将默认值保存在代理模型中

  11. 11

    将返回值保存在数组中。

  12. 12

    Android将Edittexts的值保存在SharedPreference中

  13. 13

    Shell将数组元素值保存在变量中

  14. 14

    如何将案例值保存在变量中

  15. 15

    将空值保存在数据库中

  16. 16

    将哈希值保存在数据库中

  17. 17

    将选择值保存在数组中并遍历

  18. 18

    将 ACF 的值保存在 R 中以用于绘图

  19. 19

    将对象的值保存在矢量中,将指针保存在地图中。这个对吗?

  20. 20

    使用相同的键将多个值保存在NSMutableDictionary中,然后将字典存储在NSMutableArray中

  21. 21

    将值保存在循环内的向量中,并找到保存某个元素的特定循环

  22. 22

    避免使用实体框架将空值或空值保存在数据库中

  23. 23

    如何使用Java或Spark-Java将大量文档保存在Cloudant中?

  24. 24

    将通过 oracle 查询创建的 Spark DataFrame 保存在 hive 表中?

  25. 25

    将颜色值保存在主题变量中并在活动xml中引用它们?

  26. 26

    将文本值保存在iOS中的JavaScript(如NSUserdefaults)中

  27. 27

    使用Python中的for循环将值分别保存在字典中

  28. 28

    将值保存在$ .get中的Javascript变量中,并在PHP变量中使用它

  29. 29

    将文本值保存在iOS中的JavaScript(如NSUserdefaults)中

热门标签

归档