博客
关于我
Linux-文件合并与文件归档
阅读量:762 次
发布时间:2019-03-23

本文共 900 字,大约阅读时间需要 3 分钟。

Linux 文件合并与文件归档

文件合并是将多个文件的内容合并到一个文件中,常见用途包括将日志文件归类、批量处理文本文件等。本文将详细介绍文件合并的方法及相关操作。

文件合并

文件合并可以通过以下方式实现:

1. 文件覆盖

将指定文件的内容添加到目标文件中,但如果目标文件已存在,则会覆盖原有内容。示例:

cat /etc/passwd copy.txt

2. 文件追加

将文件内容添加到目标文件的末尾,不会覆盖现有内容。示例:

cat -a /etc/passwd copy.txt

3. 统计文件总共有多少条数据

可以使用以下命令统计文件中数据条数,可以选择有无空行处理。示例:

cat -n copy.txt

(注:-n选项会显示行号,包含空白行。)

文件归档

文件归档是将多个文件或目录打包成一个归档文件,便于备份、还原及传输。常用工具包括〈arch〉、〈tar〉等。归档的优点包括文件集成、体积缩小及便于管理。

归档命令示例:

tar -cf /path/backups/userdata.tar userdata/

-cf:创建归档文件(-c)、写入数据(-f),

/path/backups/userdata.tar:指定归档文件路径,
userdata/:指定要归档的目录路径。

两种压缩方式

1. Gzip 压缩(默认压缩方式)

Gzip 是一种高效的压缩工具,压缩后文件大小会大幅减少。压缩后的文件自动命名为<.gz>,并可以通过gunzip进行解压。示例:

gzip file.txt

2. Bzip2 压缩

Bzip2 是另一种常用的压缩工具,与Gzip类似,但压缩和解压速度更快。压缩后文件自动命名为<.bz2>,解压使用bunzip2。示例:

bzip2 file.txt

打包后再压缩

在将文件打包成归档文件后,可以对归档文件进行压缩,进一步减少文件体积,常用于离线存储及传输。示例:

tar -cf userdata.tar userdata/ | gzip -c > data.tar.gz

(注:|表示管道传输,-c选项创建归档文件,-f写入数据,-c压缩文件。)

转载地址:http://pzdzk.baihongyu.com/

你可能感兴趣的文章
NIFI1.21.0最新版本安装_配置使用HTTP登录_默认是用HTTPS登录的_Https登录需要输入用户名密码_HTTP不需要---大数据之Nifi工作笔记0051
查看>>
NIFI1.21.0通过Postgresql11的CDC逻辑复制槽实现_指定表多表增量同步_增删改数据分发及删除数据实时同步_通过分页解决变更记录过大问题_02----大数据之Nifi工作笔记0054
查看>>
NIFI1.21.0通过Postgresql11的CDC逻辑复制槽实现_指定表多表增量同步_增加修改实时同步_使用JsonPath及自定义Python脚本_03---大数据之Nifi工作笔记0055
查看>>
NIFI1.21.0通过Postgresql11的CDC逻辑复制槽实现_指定表多表增量同步_插入修改删除增量数据实时同步_通过分页解决变更记录过大问题_01----大数据之Nifi工作笔记0053
查看>>
NIFI1.21.0通过Postgresql11的CDC逻辑复制槽实现_指定表或全表增量同步_实现指定整库同步_或指定数据表同步配置_04---大数据之Nifi工作笔记0056
查看>>
NIFI1.23.2_最新版_性能优化通用_技巧积累_使用NIFI表达式过滤表_随时更新---大数据之Nifi工作笔记0063
查看>>
NIFI从MySql中增量同步数据_通过Mysql的binlog功能_实时同步mysql数据_根据binlog实现数据实时delete同步_实际操作04---大数据之Nifi工作笔记0043
查看>>
NIFI从MySql中增量同步数据_通过Mysql的binlog功能_实时同步mysql数据_配置binlog_使用处理器抓取binlog数据_实际操作01---大数据之Nifi工作笔记0040
查看>>
NIFI从MySql中增量同步数据_通过Mysql的binlog功能_实时同步mysql数据_配置数据路由_实现数据插入数据到目标数据库_实际操作03---大数据之Nifi工作笔记0042
查看>>
NIFI从MySql中增量同步数据_通过Mysql的binlog功能_实时同步mysql数据_配置数据路由_生成插入Sql语句_实际操作02---大数据之Nifi工作笔记0041
查看>>
NIFI从MySql中离线读取数据再导入到MySql中_03_来吧用NIFI实现_数据分页获取功能---大数据之Nifi工作笔记0038
查看>>
NIFI从MySql中离线读取数据再导入到MySql中_不带分页处理_01_QueryDatabaseTable获取数据_原0036---大数据之Nifi工作笔记0064
查看>>
NIFI从MySql中离线读取数据再导入到MySql中_无分页功能_02_转换数据_分割数据_提取JSON数据_替换拼接SQL_添加分页---大数据之Nifi工作笔记0037
查看>>
NIFI从Oracle11G同步数据到Mysql_亲测可用_解决数据重复_数据跟源表不一致的问题---大数据之Nifi工作笔记0065
查看>>
NIFI从PostGresql中离线读取数据再导入到MySql中_带有数据分页获取功能_不带分页不能用_NIFI资料太少了---大数据之Nifi工作笔记0039
查看>>
nifi使用过程-常见问题-以及入门总结---大数据之Nifi工作笔记0012
查看>>
NIFI分页获取Mysql数据_导入到Hbase中_并可通过phoenix客户端查询_含金量很高的一篇_搞了好久_实际操作05---大数据之Nifi工作笔记0045
查看>>
NIFI分页获取Postgresql数据到Hbase中_实际操作---大数据之Nifi工作笔记0049
查看>>
NIFI同步MySql数据_到SqlServer_错误_驱动程序无法通过使用安全套接字层(SSL)加密与SQL Server_Navicat连接SqlServer---大数据之Nifi工作笔记0047
查看>>
NIFI同步MySql数据源数据_到原始库hbase_同时对数据进行实时分析处理_同步到清洗库_实际操作06---大数据之Nifi工作笔记0046
查看>>