centos6.6安装hadoop-2.5.0（五、部署过程中的问题解决）

时间：2022-08-25 07:56:41

操作系统：centos6.6

环境：selinux disabled；iptables off；java 1.8.0_131

安装包：hadoop-2.5.0.tar.gz

一、安装过程中会出现WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable的问题；

通过debug模式观察，是glibc-1.14 not found，然后升级系统的glibc到2.14.1；

debug模式设置：

　　#vim /etc/profile

　　centos6.6安装hadoop-2.5.0（五、部署过程中的问题解决）

　　#source /etc/profile

软件包的下载地址：https://pan.baidu.com/s/1dzRKGu；

执行安装命令：#yum localhost glibc*

查看glibc版本：#rpm -qa | grep  glibc

centos6.6安装hadoop-2.5.0（五、部署过程中的问题解决）

二、格式化文件系统之前一定要先stop namenode、datanode、secondarynode，否则格式化之后在stop\start namenode会报txid的值不对的问题

三、重新格式化的时候，需要删除tmp临时目录下的dfs文件，让NameNode和Datenode目录重新产生，否则会出现NameNodeID和DataNodeID不一致，服务启动报错

namenode和datanode的clientid值必须保持一致才能成为一个集群，否则会有namenode或者datanode节点启动不启来，clientid的位置在tmp/dfs/data、name/VERSION

centos6.6安装hadoop-2.5.0（五、部署过程中的问题解决）的更多相关文章

  1. Hadoop 2.6.0分布式部署參考手冊

    Hadoop 2.6.0分布式部署參考手冊 关于本參考手冊的word文档.能够到例如以下地址下载:http://download.csdn.net/detail/u012875880/8291493 ...

  2. OpenStack安装部署管理中常见问题解决方法

    一.网络问题-network 更多网络原理机制可以参考<OpenStack云平台的网络模式及其工作机制>. 1.1.控制节点与网络控制器区别 OpenStack平台中有两种类型的物理节点, ...

  3. CentOS7&period;0分布式安装HADOOP 2&period;6&period;0笔记-转载的

    三台虚拟机,IP地址通过路由器静态DHCP分配 (这样就无需设置host了). 三台机器信息如下 -      1. hadoop-a: 192.168.0.20  #master     2. ha ...

  4. 安装hadoop 2&period;2&period;0

    安装环境为 CentOS 64位系统, 大概分下面几个步奏, 0. 安装JDK1. 配置SSH2. 配置/etc/hosts3. 拷贝hadoop包到没台机器上4. 修改hadoop配置文件5. 关闭 ...

  5. centos6&period;5 安装gcc 4&period;9&period;0

    wget http://gcc.skazkaforyou.com/releases/gcc-4.9.0/gcc-4.9.0.tar.gz  // 下载源码 tar -zxvf gcc-4.9.0 cd ...

  6. CentOS 6&period;5 伪分布式 安装 hadoop 2&period;6&period;0

    安装 jdk -openjdk* 检查安装:java -version 创建Hadoop用户,设置Hadoop用户使之可以免密码ssh到localhost su - hadoop ssh-keygen ...

  7. Ubuntu 12&period;04&period;5 LTS 上安装hadoop 2&period;6&period;0后运行自带的例程wordcount

    注:我所有的操作均通过Xshell 5远程连接Ubuntu进行实施 第一步:启动hadoop,利用jps查看hadoop是否已经启动,如果没有启动用start-dfs.sh脚本启动(hadoop2.X ...

  8. CentOS6&period;5安装redis（3&period;0&period;3&rpar;

      如果没有安装gcc需要安装gcc 才能编译成功 yum install gcc 离线安装gcc的方法 # rpm -ivh mpfr-2.4.1-6.el6.x86_64.rpm # rpm -i ...

  9. Centos虚拟机上安装部署Tenginx，以及部署过程中遇到的问题

    Tenginx下载网址: Tenginx 官网地址:http://tengine.taobao.org/ Tenginx的官方网址中可以阅读Nginx的文档,可以选择中文进行阅读.下载Tengine- ...

随机推荐

  1. 三种观察者模式的C&num;实现

    系列主题:基于消息的软件架构模型演变 说起观察者模式,估计在园子里能搜出一堆来.所以写这篇博客的目的有两点: 观察者模式是写松耦合代码的必备模式,重要性不言而喻,抛开代码层面,许多组件都采用了Publ ...

  2. salesforce 零基础学习（四十七） 数据加密简单介绍

    对于一个项目来说,除了稳定性以及健壮性以外,还需要有较好的安全性,此篇博客简单描述salesforce中关于安全性的一点小知识,特别感谢公司中的nate大神和鹏哥让我学到了新得知识. 项目简单背景: ...

  3. C&plus;&plus; 第一个C&plus;&plus;程序

    #include <iostream> // C++自带的标准头文件都是没有.h的 // 就相当于C语言的<stdio.h> // 提前使用命名空间std using name ...

  4. 单例模式C&num;

    首先来明确一个问题,那就是在某些情况下,有些对象,我们只需要一个就可以了, 比如,一台计算机上可以连好几个打印机,但是这个计算机上的打印程序只能有一个, 这里就可以通过单例模式来避免两个打印作业同时输 ...

  5. window scipy install

    http://www.lfd.uci.edu/~gohlke/pythonlibs/#numpy whl包,使用pip install xx.whl  安装 1:先安装 numpy+mkl.  whl ...

  6. Protocol Buffer Xcode 正确使用思路 成功安装 Xcode7&period;1

    1. 下载protobuf编译工具 序列化是将数据转换为一个特定的类 http://pan.baidu.com/s/1qWrxHxU 下载解压,它不是用来放在你的项目里 2.打开终端 依次输入并等待指 ...

  7. Git&commat;OSC &amp&semi; SSH配置

    #### [ 导入外部Git仓库到中国源代码托管平台(Git@OSC)] 免费代码托管 您可以通过SSH或者HTTP的方式提交和管理代码,也可以通过Web的方式在线阅读,编辑代码与Team@OSC的集 ...

  8. pycharm 激活方法

    方法一: 服务器激活 pycharm 安装: https://www.cnblogs.com/pyyu/articles/9210171.html 方法二: 密钥激活 pycharm 获取激活码 (密 ...

  9. java书籍

    1.«java高并发编程详解 »一本比较详细介绍多线程的书籍,个人感觉比 并发编程思想 这本书详细

  10. 第五周特种JAVA健民欧巴分享经验

    1.int为原始数据类型,没有特殊含义: 另一个为引用类型:该类型定义后可以开辟内存空间: 2.特殊值null:代表一个对象变量不引用任何对象//null不是为空,就是什么都没有. 3.  “==” ...

相关文章