常见压缩格式的解压与压缩
常见压缩格式以及它们对应的解压方法介绍如下：
1
2
3
4
|
.tar
解包：tar xvf FileName.tar
打包：tar cvf FileName.tar DirName
（注：tar是打包，不是压缩！）
|
1
2
3
4
|
.gz
解压1：gunzip FileName.gz
解压2：gzip -d FileName.gz
压缩：gzip FileName
|
1
2
3
4
|
.tar.gz 和 .tgz
解压：tar zxvf FileName.tar.gz
解压（指定解压目录）：tar -C /work/Odroid -xzf FileName.tar.gz
压缩：tar zcvf FileName.tar.gz DirName
|
1
2
3
4
|
.bz2
解压1：bzip2 -d FileName.bz2
解压2：bunzip2 FileName.bz2
压缩： bzip2 -z FileName
|
1
2
3
|
.tar.bz2
解压：tar jxvf FileName.tar.bz2
压缩：tar jcvf FileName.tar.bz2 DirName
|
1
2
3
4
|
.bz
解压1：bzip2 -d FileName.bz
解压2：bunzip2 FileName.bz
压缩：未知
|
1
2
3
|
.tar.bz
解压：tar jxvf FileName.tar.bz
压缩：未知
|
1
2
3
|
.Z
解压：uncompress FileName.Z
压缩：compress FileName
|
1
2
3
|
.tar.Z
解压：tar Zxvf FileName.tar.Z
压缩：tar Zcvf FileName.tar.Z DirName
|
1
2
3
|
.zip
解压：unzip FileName.zip
压缩：zip FileName.zip DirName
|
1
2
3
|
.rar
解压：rar x FileName.rar
压缩：rar a FileName.rar DirName
|
1
2
3
|
.lha
解压：lha -e FileName.lha
压缩：lha -a FileName.lha FileName
|
1
2
|
.rpm
解包：rpm2cpio FileName.rpm | cpio -div
|
1
2
|
.deb
解包：ar p FileName.deb data.tar.gz | tar zxf -
|
1
2
3
4
5
|
.tar .tgz .tar.gz .tar.Z .tar.bz .tar.bz2 .zip .cpio .rpm .deb .slp .arj .rar .ace .lha .lzh .lzx .lzs .arc .sda .sfx .lnx .zoo .cab .kar .cpt .pit .sit .sea
解压：sEx x FileName.*
压缩：sEx a FileName.* FileName
sEx只是调用相关程序，本身并无压缩、解压功能，请注意！
|
gzip 命令介绍
gzip [选项] 压缩（解压缩）的文件名该命令的各选项含义如下：
- -c 将输出写到标准输出上，并保留原有文件。
- -d 将压缩文件解压。
- -l 对每个压缩文件，显示下列字段： 压缩文件的大小；未压缩文件的大小；压缩比；未压缩文件的名字。
- -r 递归式地查找指定目录并压缩其中的所有文件或者是解压缩。
- -t 测试，检查压缩文件是否完整。
- -v 对每一个压缩和解压的文件，显示文件名和压缩比。
- -num 用指定的数字 num 调整压缩的速度，-1 或 –fast 表示最快压缩方法（低压缩比），-9 或–best表示最慢压缩方法（高压缩比）。系统缺省值为 6。
gzip指令实例
- gzip * #把当前目录下的每个文件压缩成 .gz 文件。
- gzip -dv * #把当前目录下每个压缩的文件解压，并列出详细的信息。
- gzip -l * #详细显示例1中每个压缩的文件的信息，并不解压。
- gzip usr.tar #压缩 tar 备份文件 usr.tar，此时压缩文件的扩展名为.tar.gz。
求某个文件的SHA256校验和
1
|
sha256sum gpslogger-78.zip > gpslogger-78.zip.SHA256
|
检查SHA256校验和
1
|
sha256sum -c gpslogger-78.zip.SHA256
|
注意: 检查校验和时，源文件(gpslogger-78.zip)和校验和文件(gpslogger-78.zip.SHA256)要放在同一目录下。
PGP校验
- 从文件（如Keybase.io）导入PGP的公钥（PGP Public Key）或者直接使用命令
gpg --recv-key 公钥值（公钥值如76CBE9A9）。
- 验证完整性和签名的命令如下：
1
|
gpg --verify ~/Downloads/gpslogger-71.apk.asc
|
查看目录中所有文件大小总和
查看磁盘情况
查看System.map中的符号信息
第一种方法
1
|
sudo cat /boot/System.map-$(uname -r) | grep "vmap_area_list"
|
第二种方法
1
2
|
cd /proc
sudo cat kallsyms | grep "vmap_area_list"
|
注意，在第二种方法中若是不加上sudo，输出的地址将全是0。
第三种方法
1
|
nm vmlinux | grep "vmap_area_list"
|
如果是自己编译内核，则会拥有内核镜像文件vmlinux（make后生成的）。
Ubuntu系统安装软件
离线deb软件包的安装方法
1
|
sudo dpkg -i package.deb
|
dpkg的一些实用使用方法：
1
2
3
4
5
6
7
8
9
10
|
dpkg -i package.deb 安装包
dpkg -r package 删除包
dpkg -P package 删除包（包括配置文件）
dpkg -L package 列出与该包关联的文件
dpkg -l package 显示该包的版本
dpkg –unpack package.deb 解开 deb 包的内容
dpkg -S keyword 搜索所属的包内容
dpkg -l 列出当前已安装的包
dpkg -c package.deb 列出 deb 包的内容
dpkg –configure package 配置包
|
范例
在Ubuntu LTS 14.04下安装OpenJDK：
- 从archive.ubuntu.com下载64位deb包:
- 利用
sha256sum -c命令检查校验和
- 安装deb软件包
1
2
3
|
sudo apt-get update
#安装所下载的三个deb软件包
sudo dpkg -i {downloaded.deb file}
|
注意:使用dpkg命令安装软件时，可能会因为缺少依赖而出现错误，此时只需运行如下命令(安装出错之后运行)：
1
|
sudo apt-get -f install
|
然后重新运行sudo dpkg -i {downloaded.deb file}命令，安装所需deb包。
4） 更新默认Java 版本(可选)
1
2
|
sudo update-alternatives --config java
sudo update-alternatives --config javac
|
使用apt安装和卸载软件
1
|
apt-cache search keyword
|
1
|
apt-cache policy softname
|
1
|
apt-get install softname1 softname2 softname3……
|
1
|
apt-get remove softname1 softname2 softname3……
|
1
|
apt-get remove --purge softname1
|
1
|
apt-cache search softname1 softname2 softname3……
|
范例
使用apt在Ubuntu 版本大于15.04平台下安装OpenJDK：
- 使用apt命令安装
1
2
|
sudo apt-get update
sudo apt-get install openjdk-8-jdk
|
- 更新默认Java 版本(可选)
1
2
|
sudo update-alternatives --config java
sudo update-alternatives --config javac
|
解决Android文件系统只读问题
解除Read only file system on Android限制的方法：
- Simply change ro to rw and add the remount option（root权限）
1
|
mount -o rw,remount /system
|
- Once you are done making changes, you should remount with the original readonly（root权限）.
1
|
mount -o ro,remount /system
|
远程命令
远程登录
1
2
3
4
5
6
|
# 基本用法
ssh user@host
# 若本地用户名与远程用户名一致，登录时可以省略用户名
ssh host
# 指定端口
ssh -p 2222 user@host
|
建立ssh通道
1
2
3
4
5
6
|
# 通过localhost:1234直接访问远程的ip:port
ssh -L 127.0.0.1:1234:127.0.0.1:8888 username@address_of_remote
# -L选项中的本地网卡地址是可以省略,例如：
# 在本地主机A1登陆远程云主机B1，并进行本地端口转发。2000端口绑定本地所有网卡
ssh -L 2000:localhost:3000 username@address_of_remote
|
远程复制文件
1
2
3
4
5
6
7
8
9
10
|
# 上传文件
scp 需要上传的文件路径 user@host:/dir
# 上传文件夹
scp -r 需要上传的文件夹路径 user@host:/dir
# 下载文件
scp user@host:/dir/文件名 要拷贝到的地方
# 指定端口
scp -P 2222 user@host:/dir 要拷贝到的地方
|
update-alternatives切换默认程序
设置默认gcc
1
2
|
sudo update-alternatives --install /usr/bin/gcc gcc /usr/local/gcc-8.2/bin/gcc 82 --slave /usr/bin/g++ g++ /usr/local/gcc-8.2/bin/g++
sudo update-alternatives --install /usr/bin/gcc gcc /usr/bin/gcc-10 10 --slave /usr/bin/g++ g++ /usr/bin/g++-10
|
设置默认cmake
1
2
|
sudo update-alternatives --install /usr/bin/cmake cmake /usr/local/cmake-3.5.0-Linux-x86_64/bin/cmake 305 --slave /usr/bin/ctest ctest /usr/local/cmake-3.5.0-Linux-x86_64/bin/ctest --slave /usr/bin/ccmake ccmake /usr/local/cmake-3.5.0-Linux-x86_64/bin/ccmake --slave /usr/bin/cmake-gui cmake-gui /usr/local/cmake-3.5.0-Linux-x86_64/bin/cmake-gui --slave /usr/bin/cpack cpack /usr/local/cmake-3.5.0-Linux-x86_64/bin/cpack
sudo update-alternatives --install /usr/bin/cmake cmake /usr/local/cmake-3.10.0-Linux-x86_64/bin/cmake 310 --slave /usr/bin/ctest ctest /usr/local/cmake-3.10.0-Linux-x86_64/bin/ctest --slave /usr/bin/ccmake ccmake /usr/local/cmake-3.10.0-Linux-x86_64/bin/ccmake --slave /usr/bin/cmake-gui cmake-gui /usr/local/cmake-3.10.0-Linux-x86_64/bin/cmake-gui --slave /usr/bin/cpack cpack /usr/local/cmake-3.10.0-Linux-x86_64/bin/cpack
|
使用apt安装gcc-10
- 编辑
/etc/apt/sources.list，加入如下语句：
1
|
deb http://ftp.hk.debian.org/debian sid main
|
- 运行
sudo apt update更新安装源，出现密钥验证错误，使用如下命令解决：
1
2
3
|
gpg --keyserver hkp://pool.sks-keyservers.net:80 --recv-key 04EE7237B7D453EC
# gpg --keyserver pgpkeys.mit.edu --recv-key 04EE7237B7D453EC
gpg -a --export 04EE7237B7D453EC | sudo apt-key add -
|
之后再次运行sudo apt update命令。
1
|
sudo apt install gcc-10 g++-10
|
使用grep和xargs过滤文件
1
|
ls | grep -v -E "\.py$|doc" | xargs -I {} mv {} ./doc
|
Ubuntu一行命令换apt源
1
|
sed -i 's/http:\/\/archive.ubuntu.com\/ubuntu\//http:\/\/mirrors.163.com\/ubuntu\//g' /etc/apt/sources.list && apt update
|
sed命令批量替换字符串
1
2
3
4
5
6
7
8
9
|
sed -i "s/原字符串/新字符串/g" `grep 原字符串 -rl 所在目录`
# demo: sed -i "s/CHECK(/CHECK_CUDA(/g" `grep CHECK\( -rl .`
grep "CHECK_CUDA(" . -nr
# -i 表示inplace edit，就地修改文件
# -r 表示搜索子目录
# -l 表示输出匹配的文件名
# -n 表示输出匹配的行号
|
使用正则表达式查找特定文件
1
|
find ~/.cache/bazel/ -path "*external/org_tensorflow" | grep "_bazel_root/[A-Za-z0-9]*/external/org_tensorflow$"
|
shell脚本默认参数设置
1
2
|
SAVE_FILE=xla_pass_${1:-'unspecified'}.csv
GPU_ID=${2:-'0'}
|
查看C++ name mangling函数名称
C++允许函数重载，因此编译器存在name mangling机制，这样显示的函数名称将难以理解。可以使用c++filt命令对name mangling后的名称进行转换，示例如下：
1
2
3
4
|
nm ./build/libcinnapi.so | c++filt | grep CinnBuilder::Add
# 0000000001b30348 T cinn::frontend::CinnBuilder::Add(cinn::frontend::Variable const&, cinn::frontend::Variable const&)
c++filt _ZN6paddle8platform18RecordedCudaMallocEPPvmi
# paddle::platform::RecordedCudaMalloc(void**, unsigned long, int)
|
查看C/C++二进制文件符号表
nm命令可以用于查看一个二进制文件中的符号表，其常用的options列举如下：
-
-A：在每个符号信息的前面打印所在对象文件名称
-
-C：输出demangle的符号名称，等价于nm main | c++filt命令，对于c++编译出来的对象文件建议加上-C
-
-D：打印动态符号
-
-l：使用对象文件中的调试信息打印出所在源文件及行号，须确保作用的对象文件中带有符号调式信息
-
-n：按照地址/符号值来排序
-
-u：打印出那些未定义的符号
下文结合示例给出部分符合类型的解释说明。
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
|
#include <cstdio>
int g1;
int g2 = 0;
static int g3;
static int g4 = 0;
const int g5 = 0;
static const int g6 = 0;
void func1() {}
static void func2() {}
void overload(int i) {}
void overload(float i) {}
int main(int argc, char *argv[]) {
static int st = 0;
int t1;
int t2 = 0;
const int t3 = 0;
printf("Hello, world!\n");
return 0;
}
|
对于每一个符号，nm命令列出其值(the symbol value)、类型（the symbol type）和名字(the symbol name)：
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
|
0000000000404030 B __bss_start
0000000000404030 b completed.7344
0000000000404020 D __data_start
0000000000404020 W data_start
0000000000401080 t deregister_tm_clones
0000000000401070 T _dl_relocate_static_pie
00000000004010f0 t __do_global_dtors_aux
0000000000403dd8 d __do_global_dtors_aux_fini_array_entry
0000000000404028 D __dso_handle
0000000000403de0 d _DYNAMIC
0000000000404030 D _edata
0000000000404048 B _end
00000000004011f4 T _fini
0000000000401120 t frame_dummy
0000000000403dd0 d __frame_dummy_init_array_entry
00000000004021f4 r __FRAME_END__
0000000000404034 B g1
0000000000404038 B g2
0000000000404000 d _GLOBAL_OFFSET_TABLE_
w __gmon_start__
000000000040201c r __GNU_EH_FRAME_HDR
0000000000401000 T _init
0000000000403dd8 d __init_array_end
0000000000403dd0 d __init_array_start
0000000000402000 R _IO_stdin_used
00000000004011f0 T __libc_csu_fini
0000000000401180 T __libc_csu_init
U __libc_start_main@@GLIBC_2.2.5
0000000000401146 T main
U puts@@GLIBC_2.2.5
00000000004010b0 t register_tm_clones
0000000000401040 T _start
0000000000404030 D __TMC_END__
0000000000401122 T _Z5func1v
000000000040113a T _Z8overloadf
0000000000401130 T _Z8overloadi
000000000040403c b _ZL2g3
0000000000404040 b _ZL2g4
0000000000402004 r _ZL2g5
0000000000402008 r _ZL2g6
0000000000401129 t _ZL5func2v
0000000000404044 b _ZZ4mainE2st
|
| 符号类型 |
解释 |
| A |
该符号的值是绝对的，在后续的链接中将不再改变。常出现在中断向量表中，表示中断向量函数在中断向量表中的位置 |
| B |
全局非初始化数据段(bss段)的符号，其值表示该符号在bss段中的偏移，如g1
|
| D |
该符号放在普通的数据段中，通常是那些已经初始化的全局变量 |
| b |
全局static的符号，如g3(_ZL2g3) |
| r |
const型只读的变量(readonly)，如g5(_ZL2g5) |
| I |
该符号是对另一个符号的间接引用 |
| N |
debugging符号 |
| T |
位于代码区的符号，通常是那些全局非静态函数，比如本文件里的函数，如main和func1(_Z5func1v) |
| t |
位于代码区的符号，一般是static函数，如func2(_ZL5func2v) |
| U |
该符号在本文件未定义过，需要自其他对象文件中链接进来，如调用glibc库的puts@@GLIBC_2.2.5函数 |
| W |
未明确指定的弱链接符号，与其链接的其他对象文件中有它的定义就用上，否则就使用一个系统特别指定的默认值 |
| ? |
该符号类型没有定义 |
![]() |
局部变量在符号表中是不存在的 |
查看文件类型信息
file命令可用于识别文件类型，也可用于辨别一些文件的编码格式。与windows通过扩展名来确定文件类型相比，file主要通过查看文件的头部信息来获取文件类型。
查看二进制文件的处理器架构
查看一个可执行二进制文件所属处理器架构的方法如下：
1
2
|
file main
# main: ELF 64-bit LSB executable, x86-64, version 1 (SYSV), dynamically linked, interpreter /lib64/ld-linux-x86-64.so.2, for GNU/Linux 3.2.0, with debug_info, not stripped
|
查看文本文件的编码格式
查看一个文本文件的编码格式方法如下：
1
2
3
4
|
file main.cc
# main.cc: C source, ASCII text
file demo.py
# demo.py: Python script, ASCII text executable
|
查看elf格式文件信息
-
readelf -h用于读取指定elf文件的头信息
1
2
3
4
5
6
|
readelf -h main
# ELF Header:
# Magic: 7f 45 4c 46 02 01 01 00 00 00 00 00 00 00 00 00
# Class: ELF64
# Data: 2's complement, little endian
# ...
|
-
readelf -s用于查看指定elf文件的符号表，示例：readelf -s main
- 全局变量、静态全局变量、静态局部变量、全局函数名都会出现在符号表中,而局部变量不会被保存在符号表中
参考资料