hadoop3入门(3)
hadoop3入门(3)
· hadoop on windows · hive on windows · spark on windows(提交方式是spark on yarn)
Python 图机器学习算法库graphkit-learn-master.zip
下载网络上的依赖包winutils-master 例如:F:\soft-env\05-hadoop-3.1.0\bin 解压winutils-master.zip,找到3.1.0版本 将所有的文件覆盖到F:\soft-env\05-hadoop-3.1.0\bin目录 将winutils.exe
各个版本window安装hadoop后需要编译的bin目录中的所有文件,下载后替换hadoop/bin目录下的所有文件即可
hadoop-3.3.1 windows版及配置安装包 解压后可使用
hadoop各版本hadoop.dll和winutils
该压缩包里包含对应着十几个hadoop版本,但没适配2020年hadoop最新的几个版本。。。。。。
hadoop winutils.exe 2.6.5-3.2.1 hadoop windows运行插件 或者直接访问地址下载 https://github.com/wuda01/winutils
hadoop-winutils hadoop.dll 3.1.3 版本 用于配置hdfs 客户端,放在Hadoop3.1.3的bin 目录下面。
windows下hadoop安装,hadoop插件apache-hadoop-3.1.0-winutils-master.zip
在本地win10环境安装高版本的hadoop3.1.0以上,把apache-hadoop-3.1.0-winutils-master\bin目录下的文件全部拷贝到hadoop下的bin目录即可
用于windows跨系统调试hadoop,使用时将打开对应版本中的bin目录,将里面的hadoop.dll文件拷贝到c:\\windows\\system32,hadoop.dll和winutils.exe放在hadoop的bin目录下,然后关机重启windows
默认下载的Hadoop不支持Windows系统,需要替换bin目录下的文件方便在Windows上运行。这个就是用来直接替换掉hadoop目录下bin文件的
在Windows上运行MapReduce的文件
主要是想分享hadoop3.1.0-winutils这个windows依赖包
大数据hadoop插件winutils-master.zip,windows版本的,文件中是百度网盘链接及提取码
hadoop-2.7.1.tar.gz scala-2.11.12.zip spark-2.4.7-bin-hadoop2.tgz winutils-master.zip
包含的版本号如下:hadoop-2.6.5、hadoop-2.7.3、hadoop-2.7.4、hadoop-2.7.6、hadoop-2.7.7、hadoop-2.8.0、hadoop-2.8.1、hadoop-2.8.2、hadoop-2.8.3、hadoop-2.8.4、hadoop-2.8.5、hadoop-2.9.0、hadoop-2.9.1、...
Hadoop3.1.2在Windows上部署时,需要替换的文件,参考博客:https://blog.csdn.net/lianghecai52171314/article/details/103221424
window搭建本地hadoop环境时需要用到winutils.exe的程序,这里收集了hadoop 2.6.0 ,2.6.3,2.6.4,2.7.1,2.8.0,2.8.1,2.8.3,3.0.0版本的东西,另外包括大数据算法电子书
winutils-master百度网盘链接
换了另外的apache-hadoop-3.1.3-winutils-master,就可以运行,个人觉得winutils应该有32位和64位区别。apache-hadoop-3.1.3-winutils-master下载错误。2.解压配置HADOOP_HOME环境变量,将环境变量配置到上面这个包...
下载链接: https://pan.baidu.com/s/1El55vYJbF-UeABsg5hYgbQ 提取码:5c7a