部署spark集群

使用spark包

spark-1.0.2-bin-hadoop2.tgz

在spark-shell和java -jar访问hadoop hdfs上的文件写法是有区别的

在spark-shell直接使用/user/ning/1.txt 之类的路径，不用加hdfs://host:port 的前缀

在java -jar 命令中访问呢，需要hdfs://host:port/user/ning/1.txt这样模式的路径才能访问

最新文章

1. 通过JSch编写上传、下载文件
2. 嵌入式linux下如何尽快播放开机音乐
3. 今天不谈技术，说说一些常用的软件~By 逆天
4. 数据库—SQL语句
5. Asp.net Core基于MVC框架实现PostgreSQL操作
6. OCP-052 & 053部分答案解析
7. 使用RMAN备份数据库
8. Podfile 文件的编写
9. Win7,8的上帝模式文件夹 GodMode.{ED7BA470-8E54-465E-825C-99712043E01C}
10. ACboy needs your help（HDU 1712 分组背包入门）
11. Oracle操作数据库oracleHelper
12. angular drag and drop (marceljuenemann) 笔记
13. Jacobi symbol（裸雅可比符号）
14. Java_监听文件夹或者文件是否有变动
15. HTML百宝箱（1从0开始）
16. laravel5.8笔记四：路由
17. create-react-app 搭建的项目中，让 antd 通过侧边栏导航 Menu 的 Menu.Item 控制 Content 部分的变化
18. 【设计模式】—— 状态模式State
19. php反射获取类和方法中的注释
20. HDUOJ---The Moving Points

热门文章

1. 由 [SDOI2012]Longge的问题 探讨欧拉函数和莫比乌斯函数的一些性质和关联
2. 生成式学习算法（三）之----高斯判别分析模型（Gaussian Discriminant Analysis ，GDA）
3. hadoop之hdfs架构详解
4. asp.net core mvc 之 DynamicApi
5. Python学习-函数,函数参数,作用域
6. 首次接触flask遇到socket.error: [Errno 10013] 报错
7. Spring Cloud 初认识
8. org.hibernate.AnnotationException: No identifier specified for entity 错误解决
9. 深入集合类系列——ArrayList和Vector的区别
10. 蓝松SDK - 卡点视频制作介绍