spark sql中将数据保存成parquet,json格式
2024-09-21 07:47:03
val df = sqlContext.load("/opt/modules/spark1.3.1/examples/src/main/resources/people.json","json")
df.select("name","age").save("/opt/test/namesAndAges.json","json")
//或者 df.select("name","age").save("/opt/test/namesAndAges.parquet","parquet")
最新文章
- 实现Myxls设置行高的功能(转)
- 利用iframe将div放置在object的上面
- 3-5年的PHPer常见的面试题
- C#设计模式——生成器模式(Builder Pattern)
- BZOJ 4011 落忆枫音
- jQuery_效果(淡入淡出)
- 2016年11月1日——jQuery源码学习笔记
- ip聚合(百度之星资格赛1003)
- Changing a remote's URL
- Android7.0 Phone应用源码分析(三) phone拒接流程分析
- JUnit4总结
- SNS团队第七次站立会议(2017.04.28)
- 服务器 隐藏php版本,nginx版本号等
- unittest报告出现dict() ->; new empty dictionary错误解决办法
- [数据结构] 2.2 Huffman树
- g2o
- Java SE之Java工作原理
- vuejs实现瀑布流布局(二)
- yum-阿里源配置
- 【比赛游记】THUSC2018酱油记