Hadoop ecosystem 生态圈
2024-08-31 08:19:43
Cascading: hadoop上面的workflow
Sqoop(发音:skup)是一款开源的工具,主要用于在Hadoop(Hive)与传统的数据库(mysql、postgresql...)间进行数据的传递
- 2) Nutch,互联网数据及Nutch搜索引擎应用
- 3) HDFS,Hadoop的分布式文件系统
- 5) MapReduce,分布式计算框架
- 6) Flume、Scribe,Chukwa数据收集,收集非结构化数据的工具。
- 7) Hiho、Sqoop,讲关系数据库中的数据导入HDFS的工具
- 8) Hive数据仓库,pig分析数据的工具
- 10)Oozie作业流调度引擎
- 11)Hue,Hadoop自己的监控管理工具
- 12)Avro 数据序列化工具
- 13)mahout数据挖掘工具
- 14)Hbase分布式的面向列的开源数据库
最新文章
- python subprocess阻塞
- [CareerCup] 16.5 Semphore 信号旗
- 将STM32的标准库编译成lib使用【图文】
- 并非然并卵的z-index
- Mac OS X 快捷键(完整篇) 转载
- poj2656---求一列数中最大数的序数而且在前面输入的更优先
- 集合ArrayList案例
- #搜索# #BFS# #优先队列# ----- OpenJudge鸣人和佐助
- aps.net验证控件的异常处理
- Javascript高级编程学习笔记(77)—— 表单(5)过滤输入
- python3使用selenium + Chrome基础操作代码
- 省市联动-获取资源文件xml 获取nodes的方法要学会
- 使用VMware新建一个Linux系统虚拟机(全)
- 最少拦截系统 HDU - 1257
- (并发编程)进程 (multiprocessing--Process实现进程并发)
- topcoder srm 430 div1
- tchart2
- 自动分配ip的方法- 【Linux】
- 手机web不同屏幕字体大小高度自适应
- javascript解决getElementById()的bug以及getElementsByClassName的兼容性写法