您所在位置: 网站首页 / 文档列表 / 并行计算/云计算 / 文档详情
hadoop on demand安装指南.doc 立即下载
上传人:yy****24 上传时间:2024-09-03 格式:DOC 页数:5 大小:19KB 金币:18 举报 版权申诉
预览加载中,请您耐心等待几秒...

hadoop on demand安装指南.doc

hadoopondemand安装指南.doc

预览

在线预览结束,喜欢就下载吧,查找使用更方便

18 金币

下载文档

如果您无法下载资料,请参考说明:

1、部分资料下载需要金币,请确保您的账户上有足够的金币

2、已购买过的文档,再次下载不重复扣费

3、资料包下载后请先用软件解压,在使用对应软件打开

1.说明:本实验是在4台平台相同的虚拟机上进行的,其ip和主机名分别为192.168.6.136server.torque.com、node1.torque.com、192.168.6.138node2.torque.com、192.168.6.139node3.torque.comnode3。HOD是利用预先安装好的Hadoop集群来完成安装的。2.准备工作:1)分别在4台虚拟机的/etc/hosts文件中写入如下内容192.168.6.136server.torque.comserver192.168.6.137node1.torque.comnode1192.168.6.138node2.torque.comnode2192.168.6.139node3.torque.comnode32)为root设置从server到node*的无密码访问=1\*GB3①ssh-keygen-tdsa之后一路回车即可=2\*GB3②scp~/.ssh/id_dsa.pubHYPERLINK"mailto:root@node1.torque.com:/root/.ssh"root@node1.torque.com:/root/.sshsshnode1.torque.comcd/root/.sshcatid_dsa.pub>>authorized_keys=3\*GB3③对node2和node3重复第=2\*GB3②步3.安装Torque注:1)~4)和6)步是在server上进行的1)下载torquewgetHYPERLINK"http://www.adaptivecomputing.com/resources/downloads/torque/torque-2.5.1.tar.gz"http://www.adaptivecomputing.com/resources/downloads/torque/torque-2.5.1.tar.gz2)解压tar–zxvftorque-2.5.1.tar.gz3)安装cdtorque-2.5.1./configuremakemakeinstalltorque被默认安装在/var/spool/torque中makepackages生成用于客户端安装的包,即在node1和node2以及node3上安装的包,之后利用scp将生成的torque-package-mom-linux-i686.sh和torque-package-clients-linux-i686.sh拷贝到node1和node2以及node3上./torque.setuproot4)配置cd/var/spool/torque/server_privvinodes#添加如下内容server.torque.comnp=1hadoop_clusternode1.torque.comnp=1hadoop_clusternode2.torque.comnp=1hadoop_clusternode3.torque.comnp=1hadoop_clustercd/var/spool/torque/mom_privviconfig$pbsserverserver.torque.com$logevent255pbs_mom-c/var/spool/torque/mom_priv/configqterm-tquickpbs_serverpbs_sched5)分别在node1~node3上进行客户端的安装./torque-package-mom-linux-i686.sh–install./torque-package-clients-linux-i686.sh–installcd/var/spool/torque/mom_privviconfig$pbsserverserver.torque.com$logevent255/usr/local/sbin/pbs_mom-c/var/spool/torque/mom_priv/config6)验证安装是否成功pbsnodes7)为HOD创建队列qmgrcreatequeuehadoop_qsetqueuehadoop_qqueue_type=Executionsetqueuehadoop_qresources_default.nodes=hadoop_cluster……4.安装python(在所有节点上都需要安装)1)下载wgetHYPERLINK"http://download.chinaunix.net/down.php?id=34747&
单篇购买
VIP会员(1亿+VIP文档免费下)

扫码即表示接受《下载须知》

hadoop on demand安装指南

文档大小:19KB

限时特价:扫码查看

• 请登录后再进行扫码购买
• 使用微信/支付宝扫码注册及付费下载,详阅 用户协议 隐私政策
• 如已在其他页面进行付款,请刷新当前页面重试
• 付费购买成功后,此文档可永久免费下载
年会员
99.0
¥199.0

6亿VIP文档任选,共次下载特权。

已优惠

微信/支付宝扫码完成支付,可开具发票

VIP尽享专属权益

VIP文档免费下载

赠送VIP文档免费下载次数

阅读免打扰

去除文档详情页间广告

专属身份标识

尊贵的VIP专属身份标识

高级客服

一对一高级客服服务

多端互通

电脑端/手机端权益通用

手机号注册 用户名注册
我已阅读并接受《用户协议》《隐私政策》
已有账号?立即登录
我已阅读并接受《用户协议》《隐私政策》
已有账号?立即登录
登录
手机号登录 微信扫码登录
微信扫一扫登录 账号密码登录

首次登录需关注“豆柴文库”公众号

新用户注册
VIP会员(1亿+VIP文档免费下)
年会员
99.0
¥199.0

6亿VIP文档任选,共次下载特权。

已优惠

微信/支付宝扫码完成支付,可开具发票

VIP尽享专属权益

VIP文档免费下载

赠送VIP文档免费下载次数

阅读免打扰

去除文档详情页间广告

专属身份标识

尊贵的VIP专属身份标识

高级客服

一对一高级客服服务

多端互通

电脑端/手机端权益通用