- host文件配置
/etc/hosts文件若没配置好,会引起一系列不见遇见的问题,有时候会在这些问题上面花费较多的时间.
hadoop@PC3GD000516:/usr/local/hadoop$ more /etc/hosts 127.0.0.1 localhost 192.168.215.85 master pc-name0 192.168.215.201 slave1 pc-name1 192.168.215.202 slave2 pc-name2 #127.0.1.1 pc-name0
要点:
- 主从机器的IP要配置好,包括机器别名(如slave1)/机器实体名(如pc-name1)
- 同时本机的 127.0.0.1 不要配置机器名,要注释掉
- hadoop 数据临时目录配置
<property> <name>hadoop.tmp.dir</name> <value>/usr/local/hadoop/tmp</value> </property>
hadoop配置文件 core-site.xml 配置尽量手动配置这个选项,否则的话都默认存在了里系统的默认临时文件/tmp里。这用于记录dfs namenode的相关节点信息,如一些格式化信息等.如果使用默认临时文件路径/tmp的话,每次重启服务器后,就要重新 dfsadmin namenode -format 一次了,数据也丢失了.
相关推荐
Hadoop2.2+Zookeeper3.4.5+HBase0.96集群环境搭建
数据仓库hadoop+zookeeper+hbase集群安装方法记录,自己搭建纯手写的记录。相关软件请自行下载
Hadoop+ZooKeeper+HBase+hive(HQL)安装步骤
Hadoop+Zookeeper+HBase环境搭建,详细步骤和实例,从零开始搭建Hadoop集群
[Doker+HBASE+HADOOP+Zookeeper]全分布式环境搭建
hadoop集群配置流程以及用到的配置文件,hadoop2.8.4、hbase2.1.0、zookeeper3.4.12
Hadoop HA高可用集群搭建(Hadoop+Zookeeper+HBase)
Hadoop+Zookeeper+Hbase+Hive部署
徐老师大数据培训Hadoop+HBase+ZooKeeper+Spark+Kafka+Scala+Ambari
1、内容概要:Hadoop+Spark+Hive+HBase+Oozie+Kafka+Flume+Flink+Elasticsearch+Redash等大数据集群及组件搭建指南(详细搭建步骤+实践过程问题总结)。 2、适合人群:大数据运维、大数据相关技术及组件初学者。 3、...
Hadoop+Zookeeper+Hbase安装配置使用.pdf
jdk1.8.0_131、apache-zookeeper-3.8.0、hadoop-3.3.2、hbase-2.4.12 mysql5.7.38、mysql jdbc驱动mysql-connector-java-8.0.8-dmr-bin.jar、 apache-hive-3.1.3 2.本文软件均安装在自建的目录/export/server/下 ...
Hadoop+Zookeeper+HBase部署指南
从零开始hadoop+zookeeper+hbase+hive集群安装搭建,内附详细配置、测试、常见error等图文,按照文档一步一步搭建肯定能成功。(最好用有道云打开笔记)
Hadoop+Zookeeper+HBase部署指南
hadoop + zookeeper +hive + hbase安装学习共12页word资料.pdf
通过VirtualBox安装多台虚拟机,实现集群环境搭建。 优势:一台电脑即可。 应用场景:测试,学习。...内附百度网盘下载地址,有hadoop+zookeeper+spark+kafka等等·····需要的安装包和配置文件
hadoop2.6.0+HA+Zookeeper3.4.6+hbase1.0.0安装配置步骤详细文档,包括各种xml配置文件