第一次安装hadoop记录
2024-09-01 05:12:47
需求是：安装hadoop连接远程hadoop文件系统。JDK和hadoop需要与集群版本一致
首先去官网下载hadoop http://archive.apache.org/dist/hadoop/core/hadoop-2.6.5/ 版本是2.6.5 下载190MB的那个包 下载下来后 配置D:\developer\hadoop-2.6.5\etc\hadoop 配置core-site.xml
<name>fs.defaultFS</name>
<value>hdfs://118.31.116.226:9000</value> 默认连接hadoop 的HDFS路径。然后运行wordcount demo 官网给的demohttp://hadoop.apache.org/docs/r2.6.5/hadoop-project-dist/hadoop-common/SingleCluster.html
运行main方法时报错：(null) entry in command string: null chmod 0700 原因是hadoop缺少运行库
解决办法：
在https://github.com/SweetInk/hadoop-common-2.7.1-bin
中下载winutils.exe,libwinutils.lib 拷贝到%HADOOP_HOME%\bin目录 。
在https://github.com/SweetInk/hadoop-common-2.7.1-bin中下载hadoop.dll，并拷贝到c:\windows\system32目录中。
欢迎大家与我讨论！
最新文章
- JAVA基础 Exception, Error
- 使用 OWIN Self-Host ASP.NET Web API 2
- HTML5视频Video 音频Audio
- SELinux深入理解
- <input type="file" />浏览时只显示指定文件类型
- BZOJ4060 : [Cerc2012]Word equations
- matlab 小波变换
- SGU 142.Keyword
- C++ Primer 5th 第3章 字符串、向量和数组
- 全陷阱破解：在Linux环境下的Jenkins中持续集成Androidproject
- UiAutomator2.0升级填坑记
- windows c++ 错误汇总
- [Android framework学习] ViewGroup的addView函数分析
- loadrunner 脚本优化-检查点设置
- cookie路径概念理解
- 简单易懂的博弈论讲解(巴什博弈、尼姆博弈、威佐夫博弈、斐波那契博弈、SG定理)
- LeetCode（43）：字符串相乘
- 剑指offer-整数中1出现的次数
- oracle中使用sql语句生成10w条测试数据
- linux分区之gpt（大于2T的分区）