hadoop-艺赛旗社区

经验动态下载提问活动应用互动学院最新优选官网

登录

hadoop • 13 引用 • 5 回帖

0

hive

引用 3 回帖 0
ssh

引用 1 回帖 0
大数据

引用 3 回帖 0
分布式集群

引用 12 回帖 5
完全分布式集群

引用 1 回帖 0
hive仓库

引用 1 回帖 0
ubuntu

引用 7 回帖 1

默认 / 热议 / 好评 / 优选 / 最近回帖

其他经验 Linux专题 hadoop 分布式集群 3 回帖 • 796 浏览

ubuntu-11 - 安装 java 环境

wangwei - 机器学习, 数据采集, 数据分析, web网站，IS-RPA，APP
xuyiran0343 5 年前回帖

PS 前面，安装了防火墙。注意，安装防火墙之后，把前面用到的端口，计入防火墙允许的里面。不然外界访问不到准备好好 java 的压缩包 [图片] 解压 [图片] 重命名 [图片] 刚才的路径，放入环境变量 [图片] 使新配置的环境变量生效， ....
hadoop 分布式集群 hive仓库 5.3K 浏览

Hadoop - 11. 测试主服务上传文件到 hive 仓库，然后从服务查看

wangwei - 机器学习, 数据采集, 数据分析, web网站，IS-RPA，APP

12、测试主服务上传文件到 hive 仓库，然后从服务查看测试主服务上传文件到 hive 仓库，然后从服务查看 —–主机 master —– PS：用完一定要停掉打开的 hive： stop-dfs.sh 、stop-yarn.sh&nb ....
hadoop 分布式集群 slaves 6.5K 浏览

Hadoop - 10、修改 hadoop slaves 文件

wangwei - 机器学习, 数据采集, 数据分析, web网站，IS-RPA，APP

11、修改 hadoop slaves 文件 hadoop3.0 以后 slaves 更名为 workers 了 slaves 文件一般在集群中你唯一地选择一台机器作为 NameNode ，一台机器作为 ResourceManager，这 ....
hadoop 分布式集群 hive 5.2K 浏览

Hadoop - 9. 修改 Hive 配置文件

wangwei - 机器学习, 数据采集, 数据分析, web网站，IS-RPA，APP

10、修改 Hive 配置文件修改 Hive 配置文件： mv apache-hive-2.3.3-bin hive 改名为 hive (这是我自己改的，改这个就需要改前面设置的 hive 的 path 路径，即 bashrc) cd h ....
hadoop 分布式集群 Mysql hive 4.8K 浏览

Hadoop - 8. 安装 mysql+ 创建 HIVE 用户

wangwei - 机器学习, 数据采集, 数据分析, web网站，IS-RPA，APP

9、安装 mysql+ 创建 HIVE 用户进入 mysql use mysql； mysql> create user ‘hive’ identified by ‘hive’; mysql> grant all privil ....
hadoop 分布式集群 hive 5.5K 浏览

Hadoop - 7.Hive 安装（每个节点上都要安装 Hive）

wangwei - 机器学习, 数据采集, 数据分析, web网站，IS-RPA，APP

8、Hive 安装（每个节点上都要安装 Hive） Hive 安装（每个节点上都要安装 Hive）由于是伪分布式所以这里选用MySQL最为元数据库，将 msyql 和 hive 安装在 master 服务器上，统一给放到 **/usr/l ....
hadoop 分布式集群 yarn 3.9K 浏览

Hadoop - 6. 启动 Yarn

wangwei - 机器学习, 数据采集, 数据分析, web网站，IS-RPA，APP

7、启动 YARN （伪分布式不启动 YARN 也可以，一般不会影响程序执行）有的人可能会疑惑，怎么启动 Hadoop 后，见不到书上所说的 JobTracker 和 TaskTracker，这是因为新版的 Hadoop 使用了新的 Ma ....
hadoop 完全分布式集群 3.1K 浏览

Hadoop - 5. 安装 Hadoop

wangwei - 机器学习, 数据采集, 数据分析, web网站，IS-RPA，APP

6、安装 Hadoop 安装 Hadoop：一：下面是在本地有 Hadoop 文件的基础下进行 1.ssh 传输文件，默认对方文档是 /home/hadoop 因为是传给 hadoop 用户的。 2.sudo tar -zxvf hado ....
hadoop 分布式集群 954 浏览

Hadoop - 4. 安装 java 环境

wangwei - 机器学习, 数据采集, 数据分析, web网站，IS-RPA，APP

5、安装 java 环境 1. 首先在 usr/lib/jvm 看看是否安装，如果没有看看 usr/local 。。如果有就忽略下面所有步骤，大概率会有。 2. 检查 usr/local 或者 /home/ubuntu ，等地是否有安装包 ....
hadoop 分布式集群 ubuntu 5.1K 浏览

Hadoop - 3. 主机之间的通信

wangwei - 机器学习, 数据采集, 数据分析, web网站，IS-RPA，APP

1、连手机热点。（saixun-2。hadoop hadoop） 2、虚拟机使用桥接网卡的网络连接方式 3、查看本地 IP 和网关： [图片] 4、打开准备的 master 主虚拟机： [图片] 4.2：修改为静态 ip：输入命令 ....
hadoop ssh 分布式集群 ubuntu 3.9K 浏览

Hadoop - 2.Ubuntu 16.04 SSH 远程登录

wangwei - 机器学习, 数据采集, 数据分析, web网站，IS-RPA，APP

[链接]Ubuntu 16.04 SSH 远程登录问题方法 / 步骤 1. 安装 open ssh： sudo apt-get install openssh-server 2. 修改 root 密码 #sudo p ....
hadoop 大数据分布式集群 1.8K 浏览

Hadoop - 1.2 集群介绍

wangwei - 机器学习, 数据采集, 数据分析, web网站，IS-RPA，APP

之前我已经搭建好了单机模式以及伪分布式，已在虚拟操作系统 Ubuntu 中安装了 SSH(安装外壳协议)，在搭建完全分布式模式时需要通过 SSH 来启动 Slave 列表中各台机器的守护进程。环境说明 >虚拟机：VBOX >操 ....
hadoop 大数据 BigData 分布式集群 2K 浏览

Hadoop - 1.Hadoop 的运行环境介绍

wangwei - 机器学习, 数据采集, 数据分析, web网站，IS-RPA，APP

[链接]hadoop 主要有三种运行模式： > [单机模式] > [伪分布模式] > [完全分布模式] [链接] 单机模式其中在单机模式下所有 3 个 XML 文件均为空，当配置文件为空时，Hadoop 会完全运行在本地 ....

登录注册

立即登录，可享更多福利

联系我们

艺赛旗社区RPA相关交流群、微信公众号与抖音号的二维码

经验榜单

1

艺赛旗RPA机器人
2
3
4
5

call me Z
6

wangwei
7

曹捷
8
9

jiangyudong
10

光头雷

建议意见

论坛规则 · 提问的智慧 · 常见问题 · 标准产品服务

RPA资讯

发帖

快速了解RPA: RPA; RPA技术; RPA软件; RPA培训; RPA应用; RPA机器人

网站介绍: 艺赛旗社区是首家从事于机器人流程自动化、RPA培训、RPA软件开发与交流的社区论坛，在艺赛旗社区广大的RPA发烧友可以交流RPA机器人流程自动化相关知识和经验、下载体验RPA、参加RPA线上线下活动、参加RPA培训等

备案信息: 沪ICP备12049238号版权所有©上海艺赛旗软件股份有限公司 2011-2018; © 2018 B3log 开源旗下云南链滴科技有限公司版权所有 • Sym