• linkedu视频
  • 平面设计
  • 电脑入门
  • 操作系统
  • 办公应用
  • 电脑硬件
  • 动画设计
  • 3D设计
  • 网页设计
  • CAD设计
  • 影音处理
  • 数据库
  • 程序设计
  • 认证考试
  • 信息管理
  • 信息安全
菜单
linkedu.com
导航菜单
  • 网页制作
  • 数据库
  • 程序设计
  • 操作系统
  • CMS教程
  • 游戏攻略
  • 脚本语言
  • 平面设计
  • 软件教程
  • 网络安全
  • 电脑知识
  • 服务器
  • 视频教程
  • windows
  • 服务器硬件
  • 服务器运维
  • 云计算
  • 虚拟化
  • IIS教程
  • Linux
  • Apache
  • Ftp
  • DNS
  • Nginx
您的位置:首页 > 服务器 >云计算 > hadoop 2.6.0 安装过程,hadoop2.6.0

hadoop 2.6.0 安装过程,hadoop2.6.0

作者:网友 字体:[增加 减小] 来源:互联网

本文主要包含hadoop2.6.0安装,hadoop2.6.0下载,hadoop 2.6.0,hadoop 2.6.0.tar.gz,hadoop 2.6.0 配置等服务器相关知识,网友希望可以进行参考

hadoop 2.6.0 安装过程,hadoop2.6.0


最近才开始接触hadoop,最先要做的当然是安装hadoop 了,在安装hadoop之前需要作以下的一些准备
一个linux 环境,我使用vmware的虚拟机环境安装了centos 这个请自己百度一下吧,确实是太大了 jdk 1.6 以上的linux安装包 hadoop 2.6.0的安装包 注意,我使用的64位的linux,所以用的Java是64位的安装包 http://pan.baidu.com/s/1kT3PYLL

hadoop 集群支持三种模式    1.单机模式    2.伪分布是模式    3.完全分布式 由于是学习使用,所以我安装第二种模式。
假设有一个已经安装好的linux环境,那么hadoop安装过程如下:
1. 安装Java 将上述java的安装包放到linux /usr/java目录下,赋给程序执行的权限 chmod +X jdk-6u45-linux-x64-rpm.bin 然后执行./jdk-6u45-linux-x64-rpm.bin 安装Java即可, 安装完成后还需要配置环境变量 vi ~/.bash_profile 加入下面这一段 export JAVA_HOME=/usr/java/jdk1.6.0_45 2.免密码ssh设置 命令如下 ssh-keygen -t rsa 然后一直enter,最后秘钥会保存在~/.ssh中,然后进入.ssh目录 执行如下命令 cp id_rsa.pub authorized_keys 最后使用ssh localhost 验证是否成功,如果不输入密码那就说明成功
3.解压hadoop 我提前将hadoop安装包放到了/tmp 目录下,然后进行解压 tar -zxvf  hadoop-2.6.0.tar.gz -C /hadoop
4.编辑 etc/hadoop/hadoop-env.sh,设置如下
export JAVA_HOME=/usr/java/lates
5.修改相关的配置文件

etc/hadoop/core-site.xml:

<configuration>
    <property>
        <name>fs.defaultFS</name>
        <value>hdfs://localhost:9000</value>
    </property>
</configuration>

etc/hadoop/hdfs-site.xml:

<configuration>
    <property>
        <name>dfs.replication</name>
        <value>1</value>
    </property>
</configuration>

etc/hadoop/mapred-site.xml:

<configuration>
    <property>
        <name>mapreduce.framework.name</name>
        <value>yarn</value>
    </property>
</configuration>

etc/hadoop/yarn-site.xml:

<configuration>
    <property>
        <name>yarn.nodemanager.aux-services</name>
        <value>mapreduce_shuffle</value>
    </property>
</configuration>
5.验证是否安装成功
  1. 格式化文件系统      $ bin/hdfs namenode -format
  2. 启动dataNode和nameNode $ sbin/start-dfs.sh
  3. 使用浏览器管理namenode   http://localhost:50070/
   

分享到:QQ空间新浪微博腾讯微博微信百度贴吧QQ好友复制网址打印

您可能想查找下面的文章:

  • hadoop2.6.0伪分布式安装,hadoop2.6.0伪
  • apache hadoop-2.6.0-CDH5.4.1 安装笔记,hadoop2.6.0安装
  • ZooKeeper+Hadoop2.6.0的ResourceManager HA搭建,hadoop2.6集群搭建
  • hadoop 2.6.0 安装过程,hadoop2.6.0

相关文章

  • 机器学习--Logistic回归算法案例,--logistic算法
  • Navicat连接oracle,出现Only compatible with oci version 8.1 and&amp;nb,navicatoci
  • hadoop集群搭建之NFS服务,hadoop集群nfs
  • Hadoop之——搭建ZooKeeper服务器集群,hadoopzookeeper
  • MongoDB Query 的几个方法,mongodbquery
  • MapReduce处理数据平均值与数值大小排行比较,mapreduce平均值
  • CloudStack VM运行状态的监控-Management,cloudstack系统vm
  • 架构设计(ASP.NET MVC+Knockout+Web API+SignalR),knockoutsignalr
  • NUTCH2.3 hadoop2.7.1 hbase1.0.1.1 solr5.2.1部署(一),hadoop2.7安装
  • hive使用技巧(一)自动化动态分配表分区及修改hive表字段名称,使用技巧hive

文章分类

  • windows
  • 服务器硬件
  • 服务器运维
  • 云计算
  • 虚拟化
  • IIS教程
  • Linux
  • Apache
  • Ftp
  • DNS
  • Nginx

最近更新的内容

    • Hadoop中查看一个文件位置信息,
    • 新增数据页面360浏览器样式异常,新增360浏览器样式
    • MapReduce编程之倒排索引,mapreduce编程索引
    • 机器学习算法-Adaboost,学习算法-adaboost
    • 《1》CentOS7.0+OpenStack+kvm云平台部署—基础配置,centos7.0kvm
    • 创建GZIP压缩格式的HIVE表,gzip压缩格式hive
    • 机器学习--Logistic回归算法案例,--logistic算法
    • 自定义输出文件名,输出文件名
    • 产品型公司的发展-Zoho发布费用管理新品,让CRM系统更强大,-zohocrm
    • 《转》Ubuntu14.04 openstack juno配置之 ceilometer遥测模块安装配置,《转》ubuntu14.04

关于我们 - 联系我们 - 免责声明 - 网站地图

©2020-2025 All Rights Reserved. linkedu.com 版权所有