Hadoop 简介
2024-10-11 10:11:01
一个开源的,高可靠,可扩展的分布式计算框架
解决的问题
1 海量数据的存储(HDFS)
2海量数据的分析(Mapreduce)
3 分布式资源调度 (Yarn)
应用场景
日志分析,基于海量数据的在线应用,推荐系统,计算广告,复杂算法,网盘,搜素引擎,,,,
一 HDFS
动态增加,自动备份
二 mapreduce
分而治之,并行计算框架
三 Yarn
CPU 内存的分配,资源调度和任务调度管理
最新文章
- sql查询删除重复数据
- 六个漂亮的 ES6 技巧
- 01背包问题:POJ3624
- Cheatsheet: 2014 02.01 ~ 02.28
- 小知识点 LINQ中延时求值和主动求值的区别
- HDU 1796How many integers can you find(简单容斥定理)
- QP:price list 安全性设置
- 转载:在Visual Studio 2013中管理中国特色的社会主义Windows Azure
- 算法的稳定性(Stability of Sorting Algorithms)
- [M]表格中的天正文字转换问题
- angular多页面切换传递参数
- Android 音视频开发(二):使用 AudioRecord 采集音频数据并保存到文件
- jQuery经典案例
- 【003:使用SW4STM32不进入中断的原因】
- operator用法:隐式类型转换
- js通过replace()方法配合正则去除空格
- [MicroPython]TPYBoardv102超全DIY案例一览
- C#算法 选择排序、冒泡排序、插入排序
- Html块标签、含样式的标签、语义化的标签:
- ANDROID 实现 再按一次返回键退出程序 代码片段