hadoop扩容,hdfs磁盘挂载,集群扩容
1、虚拟机里增加新磁盘
查看 新增加的磁盘
[root]# fdisk -lu
2、磁盘进行分区 和格式化
fdisk /dev/sdb
输入n 添加分区号 输入1
会生成 sdb1
只做一个分区就好 (测试环境 只分了一个区)
分好之后 输入w 保存退出。
再查看一次分区表 fdisk -lu
磁盘格式化
mkfs -t ext4 /dev/sdb
3、挂载磁盘
这里 新建了目录 mkdir /hdfs-disk
mount /dev/sdb /hdfs-disk
挂载完 在hdfs-disk 下创建目录
mkdir -p /hdfs-disk/hdfs/data 作为hdfs的目录
挂载完成记得修改 目录的所属权限
chown -R hadoop:hadoop /hdfs-disk
挂载完了 需要修改 /etc/fstab 否则系统重启 挂载盘就没了
mount -a //重启机器 读取 /etc/fstab挂载
vi /etc/fstab
添加 一行
/dev/sdb /hdfs-disk ext4 defaults 0 0
至此 挂载磁盘完成
4、修改hdfs配置文件
vi /test/hadoop-2.7.1/etc/hadoop/hdfs-site.xml
增加挂载目录 /hdfs-disk/hdfs/data
完成后重启 hdfs,到此 hadoop集群扩容完成
来源:IT懒猫社区 blog ,转载请出名出处!
本文地址:http://www.catroom.com.cn/article/8
发表评论
取消回复