spark 熟悉过程
2024-08-31 10:12:57
spark shell 交互
启动:bin 目录下 ./spark-shell --master local [ ×× ] --jars ×××.jar
进入[ >> scala ]交互[ spark 由scala开发 ]
退出:quit / ctrl+D
编程环境 [ 使用spark API]
1、scala编程
自己搭建:
* 编程环境搭建
+ubuntu & java JDK & Scala (Scala解释器)
* scala打包&构建工具sbt [ 打包成jar ]
集成环境:
* Scala IDE for eclipse
* eclipse
* idea
2、java 编程
* 暂无
3、python 编程
* 暂无
4、R语言 编程
* 暂无
最新文章
- Swift - UIView,UItableView,Cell设置边框方法
- akka优势
- Lab_3_SysOps_Storage_Linux_v2.5
- 实战:ADFS3.0单点登录系列-总览
- 链接库lib和dl的概念,加载方式的区别
- Windows 7(x64)下安装Ubuntu12.4
- git status对应中文名称
- Teradata 的rank() 和 row_number() 函数
- 学习并使用了两种linq to entity 的实现sql关键字in的查询方法
- XSS解决方案系列之四:关于编码
- Mapreduce运行过程分析(基于Hadoop2.4)——(一)
- H3 BPM 笔记
- Oracle文章中常用数据表的描述
- Python 数据处理扩展包: pandas 模块的DataFrame介绍(读写数据库的操作)
- c++构造析构顺序
- udp 双机通信(服务器循环检测)2
- scss 学习笔记
- 移动平台Unity3D 应用性能优化
- jmeter的介绍和使用二
- Oarcle的开始
热门文章
- 开发环境入门 linux基础 (部分)正则表达式 grep sed
- sql server实用要点全解
- 什么是SPU、SKU、SKC、ARPU
- HDLM命令dlnkmgr详解之二__help/clear
- 类型:Ajax;问题:ajax调用ashx参数获取不到;结果:ashx文件获取$.ajax()方法发送的数据
- Plist文件存储
- Hbase批量插入优化记录
- hadoop再次集群搭建(3)-如何选择相应的hadoop版本
- liunx环境,摄像头无法识别,解决方案
- StackMapTable format error