1集群情状是还是不是运维不荒谬

当前目录下有点文书和目录,当中每一种目录里都有若干.txt文件,

ubuntu用shell脚本达成将当前目录下有所目录中的某一类公事拷贝到同一目录下

当前目录下有点文件和目录,个中每一种目录里都有若干.txt文件,

到现在供给在当前目录创建一个新目录all,且将那个目录全部.txt文件

都拷贝到目录all。在ubuntu12.04的shell脚本完毕如下:

#!/bin/sh

# 提示消息
echo “start:”

# 定义变量
dst=all
pst=.txt

# 复制文件到指标文件夹
if [ -d ${dst} ]
then
echo “${dst} existed”
else
echo “mkdir ${dst}”
mkdir ./${dst}
cp ./*/*$pst ./$dst
fi

当前目录下有一点点文本和目录,个中每种目录里都有若干.tx…

Hadoop读书情状搭建好后,就要测试景况是不是OK了,测试的方法一点也不细略,只供给自个儿用hadoop自带的example
jar进行测试一把就能够,具体的测试方法如下:

后天须要在当前目录创造三个新目录all,且将这些目录全体.txt文件

 1: su – grid
 2:  pwd
      /home/grid
 3:  创造input目录,mkdir input  —> 然后进入input 目录 cd input
 4: 通过输出重定向的方法,新扩充多少个txt文件
    echo “Hi,China”>Text1.txt 
    echo “Hi,Hadoop”>Text2.txt
 5: 查看txt文件,确认内容是不是OK
    cat Text1.txt
    Hi,China
  6:查看Hadoop HDFS里是还是不是有东西
    cd ..
      cd hadoop-1.2.1
      bin/hadoop fs -ls
      返回: ls: Cannot  access .: No such file or directory
 7:  把input目录下的文本拷贝到hadoop in目录下
    bin/hadoop fs -put ../put  ./in
    提示错误:
    put: org.apache.hadoop.hdfs.server .namenode.SafeModeException:
Cannot create directory /user/grid/in. Name node is in safe mode.
 
 
很分明,提示大家前段时间Hadoop处于安全方式下,处于安全格局下,大家是不能够做此外操作的,无法拷贝文件,所以必要接触安全格局:
 
  bin/hadoop dfsadmin -safemode leave ,继续以上操作就哦了。
 
8:确认文件是还是不是拷贝进去.
  bin/hadoop fs -ls
  重返: 以上八个文本。
 
9:能够查阅以上文件内容,确认是还是不是OK.
  bin/hadoop fs -cat ./in/Text1.txt
  返回:Hi,China
 
10:实施example jar 实行总计分析。
  bin/hadoop jar hadoop-examples-1.2.1.jar wordcount in out
 
11:查看实行输出文件。
 bin/hadoop fs -cat ./out/part-r-00000
 

都拷贝到目录all。在Ubuntu
12.04的shell脚本完结如下:

返回:
 Hadoop 1
 Hi 2
 China 1
 
假使看上以上结果,就证实集群蒙受已经哦了,能够健康办事了。

#!/bin/sh

调查进度的手续,供大家参谋:

# 提示新闻
echo “start:”

无需付费下载地址在

# 定义变量
dst=all
pst=.txt

用户名与密码都以www.linuxidc.com

# 复制文件到对象文件夹
if [ -d ${dst} ]
then
echo “${dst} existed”
else
echo “mkdir ${dst}”
mkdir ./${dst}
cp ./*/*$pst ./$dst
fi

实际下载目录在
/二零一六年龄资历料/111月/二12日/怎样确认分布式Hadoop1.2.1集群碰到是还是不是运维符合规律

更加的多Ubuntu相关音讯见Ubuntu 专项论题页面 http://www.linuxidc.com/topicnews.aspx?tid=2

下载格局见
http://www.linuxidc.com/Linux/2013-07/87684.htm

正文永恒更新链接地址:http://www.linuxidc.com/Linux/2015-07/119595.htm

————————————–分割线

Ubuntu
13.04上搭建Hadoop环境
http://www.linuxidc.com/Linux/2013-06/86106.htm

Ubuntu 12.10 +Hadoop 1.2.1版本集群配置
http://www.linuxidc.com/Linux/2013-09/90600.htm

Ubuntu上搭建Hadoop碰着(单机格局+伪遍及情势)
http://www.linuxidc.com/Linux/2013-01/77681.htm

Ubuntu下Hadoop景况的配置
http://www.linuxidc.com/Linux/2012-11/74539.htm

单机版搭建Hadoop情形图像和文字化教育程详解
http://www.linuxidc.com/Linux/2012-02/53927.htm

Hadoop LZO 安装教程
http://www.linuxidc.com/Linux/2013-01/78397.htm

Hadoop集群上采纳Lzo压缩
http://www.linuxidc.com/Linux/2012-05/60554.htm

图片 1

————————————–分割线

越多Hadoop相关音讯见Hadoop 专项论题页面 http://www.linuxidc.com/topicnews.aspx?tid=13

正文长久更新链接地址:http://www.linuxidc.com/Linux/2014-05/101690.htm

图片 2