博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
大快搜索数据爬虫技术实例安装教学篇
阅读量:6764 次
发布时间:2019-06-26

本文共 731 字,大约阅读时间需要 2 分钟。

Hadoop作为搭建大数据处理平台的重要“基石”,关于它的分析和讲解的文章已经有很多了。Hadoop本身是一分布式的系统,因此在安装的时候,需要多每一个节点进行组建的安装。并且由于是开源软件,其安装过程相对比较复杂。这也是很多人在搭建hadoop运行环境时总是不能一次性成功的主要原因。

hadoop每个组建都要做很多的配置工作,如果手动去完成这个工作,工作量其实还是非常庞大。正是这一点我觉得很多做国产发行版hadoop软件开发的都没有大快的DKhadoop发行版做的好。我记得在之前写DKHadoop运行环境搭建流程的时候也提到过这个问题,DKH可以说是把易用性做的非常好了,无论是对于老手还是新入门者,上手速度要比其他的一些发行版快的多。
针对hadoop每个组建都要配置的这种情况,DKH提供了自动化安装应用来部署Hadoop。这就大大缩短了Hadoop的安装时间,同时也简化了安装Hadoop的过程。如果你在安装之后想要拓展节点,其实也不用担心。因为DKH中提供了节点管理的功能。
“节点”是集群中的服务器。DKH集群中的节点担任不同服务的不同角色,协同工作。我们可以在DKH管理界面添加节点。 然后在相应的服务中选择“添加角色”,那么新添加的节点就有了该服务的功能。
1、进入管理界面(在“主机”菜单中)
大快搜索数据爬虫技术实例安装教学篇
这里你可以查看节点的基本信息,并且可以添加和删除节点。
2、添加节点:点击“向集群添加主机”进入“添加节点”界面
大快搜索数据爬虫技术实例安装教学篇

输入对应节点的IP地址即可。

3、为节点指定服务:在每一个服务界面中,选择“添加角色”如下图所示
大快搜索数据爬虫技术实例安装教学篇
选择要添加的节点,点击“继续”即可完成添加。
大快搜索数据爬虫技术实例安装教学篇

转载于:https://blog.51cto.com/13976251/2312793

你可能感兴趣的文章
看看这变态的自动布局
查看>>
CentOS 7.3 + Server JRE 1.8 + Hadoop-2.8.0
查看>>
安装jekyll过程提示make不是内部程序
查看>>
8-Storm
查看>>
服务器安全问题不容忽视 安全狗多功能护航
查看>>
Maven实战(二)构建简单Maven项目
查看>>
从世界各地测试网站访问速度
查看>>
每刻途,一个神奇的网站
查看>>
临时、未整理的 javascript 小技巧
查看>>
2.4 Apache访问控制
查看>>
图灵等价和图灵完备
查看>>
android studio开发环境搭建
查看>>
Zookeeper之——关于Zookeeper的那些事
查看>>
Spring 与 ActiveMQ 整合代码
查看>>
类的定义
查看>>
SOLR--7--传统关系型数据库在全文检索中的劣势
查看>>
代码上线流程以及版本发布小结
查看>>
MySQL多表查询
查看>>
如何挑选适合的前端框架?
查看>>
帝国cms、织梦cms、phpcms等负载测试总结
查看>>