实验熟悉常用的HDFS操作复习资料.docx

实验2熟悉常用的操作
1 实验目的
1. 理解在体系结构中的角色；
2. 熟练使用操作常用的命令；
3. 熟悉操作常用的 。
2 实验平台
操作系统：
版本：2.6.0或以上版本
版本：1.6或以上版本
3 实验内容和要求
1. 编程实现以下指定功能，并利用提供的命令完成相同任务：
提示：
1) 部分命令的参数路径只能是本地路径或者路径。
2) 若命令的参数既可以是本地路径，也可以是路径时，务必注意区分。为保证操作正确，可指定路径前缀 或者
3) 注意区分相对路径及绝对路径
4) 具体命令的说明可参考教材或
（1） 向中上传任意文本文件，如果指定的文件在中已经存在，由用户指定是追加到原有文件末尾还是覆盖原有的文件；
命令:
检查文件是否存在: (执行完这一句不会输出结果，需要继续输入命令
" $?")
追加命令:
覆盖命令1:
覆盖命令2:

也可以使用如下命令实现：
（如下代码可视为一行代码，在终端中输入第一行代码后，直到输入 才会真正执行）：
$( );
$( );
$( );

代码：

;
.*;
.*;

{
/**
* 判断路径是否存在
*/
( , ) {
= ();
( ());
}

/**
* 复制文件到指定路径
* 若路径已存在，则进行覆盖
*/
( , , ) {
= ();
= ();
= ();
/* 第一个参数表示是否删除源文件，第二个参数表示是否覆盖 */
(, , , );
();
}

/**
* 追加文件内容
*/
( , , ) {
= ();
= ();
/* 创建一个文件读入流 */
= ();
/* 创建一个文件输出流，输出的内容将追加到文件末尾 */
= ();
/* 读写文件内容 */
[] = [1024];
= -1;
( ( = ()) > 0 ) {
(, 0, );
}
();
();
();
}

/**
* 主函数
*/
([] ) {
= ();
("",":9000");
= ""; 本地路径
= ""; 路径
= ""; 若文件存在则追加到文件末尾
= ""; 若文件存在则覆盖

{
/* 判断文件是否存在 */
= ;
((, )) {
= ;
( + " 已存在.");
} {
( + " 不存在.");
}
/* 进行处理 */
( ) { 文件不存在，则上传
(, , );
( + " 已上传至 " + );
} ( ("") ) { 选择覆盖
(, , );
( + " 已覆盖 " + );
} ( ("") ) { 选择追加
(, , );
( + " 已追加至 " + );
}
} ( e) {
();
}
}
}
（2） 从中下载指定文件，如果本地文件及要下载的文件名称相同，则自动对下载的文件重命名；
命令：

$( );
$( 2);
$( );

代码：

;
.*;
.*;

{
/**
* 下载文件到本地
* 判断本地路径是否已存在，若已存在，则自动进行重命名
*/
( , , ) {
= ();
= ();
f = ();
/* 如果文件名存在，自动重命名(在文件名后面加上 _0, _1 ...) */
(()) {
( + " 已存在.");
i = 0;
() {
f = ( + "_" + ());
(()) {
= + "_" + ();
;
}
}
("将重新命名为: " + );
}

下载文件到本地
= ();
(, );
();
}

/**
* 主函数
*/
([] ) {
= ();
("",":9000");
= ""; 本地路径
= ""; 路径

{
(, , );
("下载完成");
} ( e) {
();
}
}
}
（3） 将中指定文件的内容输出到终端中；
命令：

代码：

;
.*;
.*;

{
/**
* 读取文件内容
*/
( , ) {
= ();
= ();
= ();
d = ( ());
= ;
( ( = ()) ) {
();
}
();
();
();
}

/**
* 主函数
*/
([] ) {
= ();
("",":9000");
= ""; 路径

{
("读取文件: " + );
(, );
("\n读取完成");
} ( e) {
();
}
}
}
（4） 显示中指定的文件的读写权限、大小、创建时间、路径等信息；
命令：

代码：

;
.*;
.*;
;

{
/**
* 显示指定文件的信息
*/
( , ) {
= ();
= ();
[] = ();
( s : ) {
("路径: " + ()());
("权限: " + ()());
("大小: " + ());
/* 返回的是时间戳,转化为时间日期格式 */
= ();
= (" ");
= ();
("时间: " + );
}
();
}

/**
* 主函数
*/
([] ) {
= ();
("",":9000");
= ""; 路径

{
("读取文件信息: " + );
(, );
("\n读取完成");
} ( e) {
();
}
}
}
（5） 给定中某一个目录，输出该目录下的所有文件的读写权限、大小、创建时间、路径等信息，如果该文件是目录，则递归输出该目录下所有文件相关信息；
命令：

代码：

;
.*;
.*;
;

{
/**
* 显示指定文件夹下所有文件的信息（递归）
*/
( , ) {
= ();
= ();
/* 递归获取目录下的所有文件 */
<> = (, );
/* 输出每个文件的信息 */
(()) {
s = ();
("路径: " + ()());
("权限: " + ()());
("大小: " + ());
/* 返回的是时间戳,转化为时间日期格式 */
= ();
= (" ");
= ();
("时间: " + );
();
}
();
}

/**
* 主函数
*/
([] ) {
= ();
("",":9000");
= ""; 路径

{
("(递归)读取目录下所有文件的信息: " + );
(, );
("读取完成");
} ( e) {
();
}
}
}
（6） 提供一个内的文件的路径，对该文件进行创建和删除操作。如果文件所在目录不存在，则自动创建目录；
命令：

$( 12);
$( 12);
$( 12 12);

删除文件： 12
代码：

;
.*;
.*;

{
/**
* 判断路径是否存在
*/
( , ) {
= ();
( ());
}

/**
* 创建目录
*/
( , ) {
= ();
= ();
= ();
();
;
}

/**
* 创建文件
*/
( , ) {
= ();
= ();
= ();
();
();
}

/**
* 删除文件
*/
( , ) {
= ();
= ();
= (, );
();
;
}

/**
* 主函数
*/
([] ) {
= ();
("",":9000");
= ""; 路径
= ""; 路径对应的目录

{
/* 判断路径是否存在，存在则删除，否则进行创建 */
( (, ) ) {
(, ); 删除
("删除路径: " + );
} {
( (, ) ) { 若目录不存在，则进行创建
(, );
("创建文件夹: " + );
}
(, );
("创建路径: " + );
}
} ( e) {
();
}
}
}
（7） 提供一个的目录的路径，对该目录进行创建和删除操作。创建目录时，如果目录文件所在目录不存在则自动创建相应目录；删除目录时，由用户指定当该目录不为空时是否还删除该目录；
命令：

创建目录： 12
删除目录（如果目录非空则会提示 ，不执行删除）： 12
强制删除目录： 12
代码：

;
.*;
.*;

{
/**
* 判断路径是否存在
*/
( , ) {
= ();
( ());
}

/**
* 判断目录是否为空
* : 空，: 非空
*/
( , ) {
= ();
= ();
<> = (, );
();
}

/**
* 创建目录
*/
( , ) {
= ();
= ();
= ();
();
;
}

/**
* 删除目录
*/
( , ) {
= ();
= ();
/* 第二个参数表示是否递归删除所有文件 */
= (, );
();
;
}

/**
* 主函数
*/
([] ) {
= ();
("",":9000");
= ""; 目录
= ; 是否强制删除

{
/* 判断目录是否存在，不存在则创建，存在则删除 */
( (, ) ) {
(, ); 创建目录
("创建目录: " + );
} {
( (, ) ) { 目录为空或强制删除
(, );
("删除目录: " + );
} { 目录不为空
("目录不为空，不删除: " + );
}
}
} ( e) {
();
}
}
}
（8） 向中指定的文件追加内容，由用户指定内容追加到原有文件的开头或结尾；
命令：

追加到文件末尾：
追加到文件开头：
（由于没有直接的命令可以操作，方法之一是先移动到本地进行操作，再进行上传覆盖）：

>>

代码：

;
.*;
.*;

{
/**
* 判断路径是否存在
*/
( , ) {
= ();
( ());
}

/**
* 追加文本内容
*/
( , , ) {
= ();
= ();
/* 创建一个文件输出流，输出的内容将追加到文件末尾 */
= ();
(());
();
();
}

/**
* 追加文件内容
*/
( , , ) {
= ();
= ();
/* 创建一个文件读入流 */
= ();
/* 创建一个文件输出流，输出的内容将追加到文件末尾 */
= ();
/* 读写文件内容 */
[] = [1024];
= -1;
( ( = ()) > 0 ) {
(, 0, );
}
();
();
();
}

/**
* 移动文件到本地
* 移动后，删除源文件
*/
( , , ) {
= ();
= ();
= ();
(, );
}

/**
* 创建文件
*/
( , ) {
= ();
= ();
= ();
();
();
}

/**
* 主函数
*/
([] ) {
= ();
("",":9000");
= ""; 文件
= "新追加的内容\n";
= ""; 追加到文件末尾
= ""; 追加到文件开头

{
/* 判断文件是否存在 */
( (, ) ) {
("文件不存在: " + );
} {
( ("") ) { 追加在文件末尾
(, , );
("已追加内容到文件末尾" + );
} ( ("") ) { 追加到文件开头
/* 没有相应的可以直接操作，因此先把文件移动到本地，创建一个新的，再按顺序追加内容 */
= "";
(, , ); 移动到本地
(, ); 创建一个新文件
(, , ); 先写入新内容
(, , ); 再写入原来内容
("已追加内容到文件开头: " + );
}
}
} ( e) {
();
}
}
}
（9） 删除中指定的文件；
命令：

命令：

;
.*;
.*;

{
/**
* 删除文件
*/
( , ) {
= ();
= ();
= (, );
();
;
}

/**
* 主函数
*/
([] ) {
= ();
("",":9000");
= ""; 文件

{
( (, ) ) {
("文件删除: " + );
} {
("操作失败（文件不存在或删除失败）");
}
} ( e) {
();
}
}
}
（10） 删除中指定的目录，由用户指定目录中如果存在文件时是否删除目录；
命令：

删除目录（如果目录非空则会提示 ，不执行删除）： 12
强制删除目录： 12
代码：

;
.*;
.*;

{
/**
* 判断目录是否为空
* : 空，: 非空
*/
( , ) {
= ();
= ();
<> = (, );
();
}

/**
* 删除目录
*/
( , , ) {
= ();
= ();
/* 第二个参数表示是否递归删除所有文件 */
= (, );
();
;
}

/**
* 主函数
*/
([] ) {
= ();
("",":9000");
= ""; 目录
= ; 是否强制删除

{
( (, ) ) {
("目录不为空，不删除");
} {
( (, , ) ) {
("目录已删除: " + );
} {
("操作失败");
}
}
} ( e) {
();
}
}
}
（11） 在中，将文件从源路径移动到目的路径。
命令：

2
代码：

;
.*;
.*;

{
/**
* 移动文件
*/
( , , ) {
= ();
= ();
= ();
= (, );
();
;
}

/**
* 主函数
*/
([] ) {
= ();
("",":9000");
= ""; 源文件路径
= ""; 目的路径

{
( (, , ) ) {
("将文件 " + + " 移动到 " + );
} {
("操作失败(源文件不存在或移动失败)");
}
} ( e) {
();
}
}
}
2. 编程实现一个类“”，该类继承“”，要求如下：实现按行读取中指定文件的方法“()”，如果读到文件末尾，则返回空，否则返回文件一行的文本。
代码：

;
;
;
;
.*;

{
( ) {
();
}

/**
* 实现按行读取
* 每次读入一个字符，遇到"\n"结束，返回一行内容
*/
( ) {
[] = [1024];
= -1;
= 0; 循环执行时， 每次会从上一次读取结束的位置继续读取，因此该函数里， 每次都从0开始
( ( = (, , 1)) -1 ) {
(([])("\n") ) {
1;
;
}
1;
}

( > 0) {
();
} {
;
}
}

/**
* 读取文件内容
*/
( , ) {
= ();
= ();
= ();
= ( ());
= ;
( ( = ()) ) {
();
}
();
();
();
}

/**
* 主函数
*/
([] ) {
= ();
("",":9000");
= ""; 路径
{
(, );
} ( e) {
();
}
}
}
3. 查看帮助手册或其它资料，用“”和“”编程完成输出中指定文件的文本到终端中。
代码：

.*;
;
.*;
;

{
{
( ());
}

/**
* 主函数
*/
([] ) {
= ""; 文件
= ;
{
/* 通过对象打开数据流，从中读取数据 */
= ()();
(,4096);
} {
();
}
}
}
4 实验报告
《云计算》课程机房上机实验报告
题目：
常规操作
姓名
吴翰
日期
实验环境：
实验内容及完成情况：完成
出现的问题：无
解决方案（列出遇到的问题和解决办法，列出没有解决的问题）：

第 20 页