1.Linux常用命令大全
2.插件崩溃怎么回事怎么解决
3.Android性能优化：定性和定位Android图形性能问题——以后台录屏进程为例
4.linux基础命令
5.Linux 应用案例开发手册——基于Xilinx Zynq-7010/7020工业开发板

Linux常用命令大全

       系统信息

       arch 显示机器的处理器架构(1)

       uname -m 显示机器的处理器架构(2)

       uname -r 显示正在使用的内核版本

       dmidecode -q 显示硬件系统部件 - (SMBIOS / DMI)

       hdparm -i /dev/hda 罗列一个磁盘的架构特性

       hdparm -tT /dev/sda 在磁盘上执行测试性读取操作

       cat /proc/cpuinfo 显示CPU info的信息

       cat /proc/interrupts 显示中断

       cat /proc/meminfo 校验内存使用

       cat /proc/swaps 显示哪些swap被使用

       cat /proc/version 显示内核的版本

       cat /proc/net/dev 显示网络适配器及统计

       cat /proc/mounts 显示已加载的文件系统

       lspci -tv 罗列 PCI 设备

       lsusb -tv 显示 USB 设备

       date 显示系统日期

       cal 显示年的日历表

       date . 设置日期和时间 - 月日时分年.秒

       clock -w 将时间修改保存到 BIOS

       关机 (系统的关机、重启以及登出 )

       shutdown -h now 关闭系统(1)

       init 0 关闭系统(2)

       telinit 0 关闭系统(3)

       shutdown -h hours:minutes 按预定时间关闭系统

       shutdown -c 取消按预定时间关闭系统

       shutdown -r now 重启(1)

       reboot 重启(2)

       logout 注销

文件和目录

       cd /home 进入 '/ home' 目录'

       cd .. 返回上一级目录

       cd ../.. 返回上两级目录

       cd 进入个人的主目录

       cd ~user1 进入个人的主目录

       cd - 返回上次所在的目录

       pwd 显示工作路径

       ls 查看目录中的文件

       ls -F 查看目录中的文件

       ls -l 显示文件和目录的详细资料

       ls -a 显示隐藏文件

       ls *[0-9]* 显示包含数字的文件名和目录名

       tree 显示文件和目录由根目录开始的树形结构(1)

       lstree 显示文件和目录由根目录开始的树形结构(2)

       mkdir dir1 创建一个叫做 'dir1' 的目录'

       mkdir dir1 dir2 同时创建两个目录

       mkdir -p /tmp/dir1/dir2 创建一个目录树

       rm -f file1 删除一个叫做 'file1' 的文件'

       rmdir dir1 删除一个叫做 'dir1' 的目录'

       rm -rf dir1 删除一个叫做 'dir1' 的目录并同时删除其内容

       rm -rf dir1 dir2 同时删除两个目录及它们的内容

       mv dir1 new_dir 重命名/移动 一个目录

       cp file1 file2 复制一个文件

       cp dir/* . 复制一个目录下的所有文件到当前工作目录

       cp -a /tmp/dir1 . 复制一个目录到当前工作目录

       cp -a dir1 dir2 复制一个目录

       ln -s file1 lnk1 创建一个指向文件或目录的软链接

       ln file1 lnk1 创建一个指向文件或目录的物理链接

       touch -t file1 修改一个文件或目录的时间戳 - (YYMMDDhhmm)

       file file1 outputs the mime type of the file as text

       iconv -l 列出已知的编码

       iconv -f fromEncoding -t toEncoding inputFile outputFile creates a new from the given input file by assuming it is encoded in fromEncoding and converting it to toEncoding.

       find . -maxdepth 1 -name *.jpg -print -exec convert "{ }" -resize x "thumbs/{ }" ; batch resize files in the current directory and send them to a thumbnails directory (requires convert from Imagemagick)

文件搜索

       find / -name file1 从 '/' 开始进入根文件系统搜索文件和目录

       find / -user user1 搜索属于用户 'user1' 的文件和目录

       find /home/user1 -name *.bin 在目录 '/ home/user1' 中搜索带有'.bin' 结尾的文件

       find /usr/bin -type f -atime + 搜索在过去天内未被使用过的执行文件

       find /usr/bin -type f -mtime - 搜索在天内被创建或者修改过的文件

       find / -name *.rpm -exec chmod '{ }' ; 搜索以 '.rpm' 结尾的文件并定义其权限

       find / -xdev -name *.rpm 搜索以 '.rpm' 结尾的文件，忽略光驱、捷盘等可移动设备

       locate *.ps 寻找以 '.ps' 结尾的文件 - 先运行 'updatedb' 命令

       whereis halt 显示一个二进制文件、源码或man的位置

       which halt 显示一个二进制文件或可执行文件的完整路径

挂载一个文件系统

       mount /dev/hda2 /mnt/hda2 挂载一个叫做hda2的盘 - 确定目录 '/ mnt/hda2' 已经存在

       umount /dev/hda2 卸载一个叫做hda2的盘 - 先从挂载点 '/ mnt/hda2' 退出

       fuser -km /mnt/hda2 当设备繁忙时强制卸载

       umount -n /mnt/hda2 运行卸载操作而不写入 /etc/mtab 文件- 当文件为只读或当磁盘写满时非常有用

       mount /dev/fd0 /mnt/floppy 挂载一个软盘

       mount /dev/cdrom /mnt/cdrom 挂载一个cdrom或dvdrom

       mount /dev/hdc /mnt/cdrecorder 挂载一个cdrw或dvdrom

       mount /dev/hdb /mnt/cdrecorder 挂载一个cdrw或dvdrom

       mount -o loop file.iso /mnt/cdrom 挂载一个文件或ISO镜像文件

       mount -t vfat /dev/hda5 /mnt/hda5 挂载一个Windows FAT文件系统

       mount /dev/sda1 /mnt/usbdisk 挂载一个usb 捷盘或闪存设备

       mount -t smbfs -o username=user,password=pass //WinClient/share /mnt/share 挂载一个windows网络共享

磁盘空间

       df -h 显示已经挂载的分区列表

       ls -lSr |more 以尺寸大小排列文件和目录

       du -sh dir1 估算目录 'dir1' 已经使用的磁盘空间'

       du -sk * | sort -rn 以容量大小为依据依次显示文件和目录的大小

       rpm -q -a --qf '%{ SIZE}t%{ NAME}n' | sort -k1,1n 以大小为依据依次显示已安装的rpm包所使用的空间 (fedora, redhat类系统)

       dpkg-query -W -f='${ Installed-Size;}t${ Package}n' | sort -k1,1n 以大小为依据显示已安装的deb包所使用的空间 (ubuntu, debian类系统)

用户和群组

       groupadd group_name 创建一个新用户组

       groupdel group_name 删除一个用户组

       groupmod -n new_group_name old_group_name 重命名一个用户组

       useradd -c "Name Surname " -g admin -d /home/user1 -s /bin/bash user1 创建一个属于 "admin" 用户组的用户

       useradd user1 创建一个新用户

       userdel -r user1 删除一个用户 ( '-r' 排除主目录)

       usermod -c "User FTP" -g system -d /ftp/user1 -s /bin/nologin user1 修改用户属性

       passwd 修改口令

       passwd user1 修改一个用户的口令 (只允许root执行)

       chage -E -- user1 设置用户口令的失效期限

       pwck 检查 '/etc/passwd' 的文件格式和语法修正以及存在的用户

       grpck 检查 '/etc/passwd' 的文件格式和语法修正以及存在的群组

       newgrp group_name 登陆进一个新的群组以改变新创建文件的预设群组

文件的权限 - 使用 "+" 设置权限，使用 "-" 用于取消

       ls -lh 显示权限

       ls /tmp | pr -T5 -W$COLUMNS 将终端划分成5栏显示

       chmod ugo+rwx directory1 设置目录的mesa8.4.0源码所有人(u)、群组(g)以及其他人(o)以读（r ）、写(w)和执行(x)的权限

       chmod go-rwx directory1 删除群组(g)与其他人(o)对目录的读写执行权限

       chown user1 file1 改变一个文件的所有人属性

       chown -R user1 directory1 改变一个目录的所有人属性并同时改变改目录下所有文件的属性

       chgrp group1 file1 改变文件的群组

       chown user1:group1 file1 改变一个文件的所有人和群组属性

       find / -perm -u+s 罗列一个系统中所有使用了SUID控制的文件

       chmod u+s /bin/file1 设置一个二进制文件的 SUID 位 - 运行该文件的用户也被赋予和所有者同样的权限

       chmod u-s /bin/file1 禁用一个二进制文件的 SUID位

       chmod g+s /home/public 设置一个目录的SGID 位 - 类似SUID ，不过这是针对目录的

       chmod g-s /home/public 禁用一个目录的 SGID 位

       chmod o+t /home/public 设置一个文件的 STIKY 位 - 只允许合法所有人删除文件

       chmod o-t /home/public 禁用一个目录的 STIKY 位

文件的特殊属性 - 使用 "+" 设置权限，使用 "-" 用于取消

       chattr +a file1 只允许以追加方式读写文件

       chattr +c file1 允许这个文件能被内核自动压缩/解压

       chattr +d file1 在进行文件系统备份时，dump程序将忽略这个文件

       chattr +i file1 设置成不可变的文件，不能被删除、修改、重命名或者链接

       chattr +s file1 允许一个文件被安全地删除

       chattr +S file1 一旦应用程序对这个文件执行了写操作，使系统立刻把修改的结果写到磁盘

       chattr +u file1 若文件被删除，系统会允许你在以后恢复这个被删除的文件

       lsattr 显示特殊的属性

打包和压缩文件

       bunzip2 file1.bz2 解压一个叫做 'file1.bz2'的文件

       bzip2 file1 压缩一个叫做 'file1' 的文件

       gunzip file1.gz 解压一个叫做 'file1.gz'的文件

       gzip file1 压缩一个叫做 'file1'的文件

       gzip -9 file1 最大程度压缩

       rar a file1.rar test_file 创建一个叫做 'file1.rar' 的包

       rar a file1.rar file1 file2 dir1 同时压缩 'file1', 'file2' 以及目录 'dir1'

       rar x file1.rar 解压rar包

       unrar x file1.rar 解压rar包

       tar -cvf archive.tar file1 创建一个非压缩的 tarball

       tar -cvf archive.tar file1 file2 dir1 创建一个包含了 'file1', 'file2' 以及 'dir1'的档案文件

       tar -tf archive.tar 显示一个包中的内容

       tar -xvf archive.tar 释放一个包

       tar -xvf archive.tar -C /tmp 将压缩包释放到 /tmp目录下

       tar -cvfj archive.tar.bz2 dir1 创建一个bzip2格式的压缩包

       tar -xvfj archive.tar.bz2 解压一个bzip2格式的压缩包

       tar -cvfz archive.tar.gz dir1 创建一个gzip格式的压缩包

       tar -xvfz archive.tar.gz 解压一个gzip格式的压缩包

       zip file1.zip file1 创建一个zip格式的压缩包

       zip -r file1.zip file1 file2 dir1 将几个文件和目录同时压缩成一个zip格式的压缩包

       unzip file1.zip 解压一个zip格式压缩包

RPM 包 - （Fedora, Redhat及类似系统）

       rpm -ivh package.rpm 安装一个rpm包

       rpm -ivh --nodeeps package.rpm 安装一个rpm包而忽略依赖关系警告

       rpm -U package.rpm 更新一个rpm包但不改变其配置文件

       rpm -F package.rpm 更新一个确定已经安装的rpm包

       rpm -e package_name.rpm 删除一个rpm包

       rpm -qa 显示系统中所有已经安装的rpm包

       rpm -qa | grep mand file1_in.txt_or_file1_out.txt general syntax for text manipulation using PIPE, STDIN and STDOUT

       cat file1 | command( sed, grep, awk, grep, etc...) result.txt 合并一个文件的详细说明文本，并将简介写入一个新文件中

       cat file1 | command( sed, grep, awk, grep, etc...) result.txt 合并一个文件的详细说明文本，并将简介写入一个已有的文件中

       grep Aug /var/log/messages 在文件 '/var/log/messages'中查找关键词"Aug"

       grep ^Aug /var/log/messages 在文件 '/var/log/messages'中查找以"Aug"开始的词汇

       grep [0-9] /var/log/messages 选择 '/var/log/messages' 文件中所有包含数字的行

       grep Aug -R /var/log/* 在目录 '/var/log' 及随后的目录中搜索字符串"Aug"

       sed 's/stringa1/stringa2/g' example.txt 将example.txt文件中的 "string1" 替换成 "string2"

       sed '/^$/d' example.txt 从example.txt文件中删除所有空白行

       sed '/ *#/d; /^$/d' example.txt 从example.txt文件中删除所有注释和空白行

       echo 'esempio' | tr '[:lower:]' '[:upper:]' 合并上下单元格内容

       sed -e '1d' result.txt 从文件example.txt 中排除第一行

       sed -n '/stringa1/p' 查看只包含词汇 "string1"的行

       sed -e 's/ *$//' example.txt 删除每一行最后的空白字符

       sed -e 's/stringa1//g' example.txt 从文档中只删除词汇 "string1" 并保留剩余全部

       sed -n '1,5p;5q' example.txt 查看从第一行到第5行内容

       sed -n '5p;5q' example.txt 查看第5行

       sed -e 's/*/0/g' example.txt 用单个零替换多个零

       cat -n file1 标示文件的行数

       cat example.txt | awk 'NR%2==1' 删除example.txt文件中的所有偶数行

       echo a b c | awk '{ print $1}' 查看一行第一栏

       echo a b c | awk '{ print $1,$3}' 查看一行的第一和第三栏

       paste file1 file2 合并两个文件或两栏的内容

       paste -d '+' file1 file2 合并两个文件或两栏的内容，中间用"+"区分

       sort file1 file2 排序两个文件的内容

       sort file1 file2 | uniq 取出两个文件的并集(重复的行只保留一份)

       sort file1 file2 | uniq -u 删除交集，留下其他的行

       sort file1 file2 | uniq -d 取出两个文件的交集(只留下同时存在于两个文件中的文件)

       comm -1 file1 file2 比较两个文件的内容只删除 'file1' 所包含的内容

       comm -2 file1 file2 比较两个文件的内容只删除 'file2' 所包含的内容

       comm -3 file1 file2 比较两个文件的内容只删除两个文件共有的部分

字符设置和文件格式转换

       dos2unix filedos.txt fileunix.txt 将一个文本文件的格式从MSDOS转换成UNIX

       unix2dos fileunix.txt filedos.txt 将一个文本文件的格式从UNIX转换成MSDOS

       recode ..HTML page.txt page.html 将一个文本文件转换成html

       recode -l | more 显示所有允许的转换格式

文件系统分析

       badblocks -v /dev/hda1 检查磁盘hda1上的坏磁块

       fsck /dev/hda1 修复/检查hda1磁盘上linux文件系统的完整性

       fsck.ext2 /dev/hda1 修复/检查hda1磁盘上ext2文件系统的完整性

       e2fsck /dev/hda1 修复/检查hda1磁盘上ext2文件系统的完整性

       e2fsck -j /dev/hda1 修复/检查hda1磁盘上ext3文件系统的完整性

       fsck.ext3 /dev/hda1 修复/检查hda1磁盘上ext3文件系统的完整性

       fsck.vfat /dev/hda1 修复/检查hda1磁盘上fat文件系统的完整性

       fsck.msdos /dev/hda1 修复/检查hda1磁盘上dos文件系统的完整性

       dosfsck /dev/hda1 修复/检查hda1磁盘上dos文件系统的完整性

初始化一个文件系统

       mkfs /dev/hda1 在hda1分区创建一个文件系统

       mke2fs /dev/hda1 在hda1分区创建一个linux ext2的文件系统

       mke2fs -j /dev/hda1 在hda1分区创建一个linux ext3(日志型)的文件系统

       mkfs -t vfat -F /dev/hda1 创建一个 FAT 文件系统

       fdformat -n /dev/fd0 格式化一个软盘

       mkswap /dev/hda3 创建一个swap文件系统

SWAP文件系统

       mkswap /dev/hda3 创建一个swap文件系统

       swapon /dev/hda3 启用一个新的swap文件系统

       swapon /dev/hda2 /dev/hdb3 启用两个swap分区

备份

       dump -0aj -f /tmp/home0.bak /home 制作一个 '/home' 目录的完整备份

       dump -1aj -f /tmp/home0.bak /home 制作一个 '/home' 目录的交互式备份

       restore -if /tmp/home0.bak 还原一个交互式备份

       rsync -rogpav --delete /home /tmp 同步两边的目录

       rsync -rogpav -e ssh --delete /home ip_address:/tmp 通过SSH通道rsync

       rsync -az -e ssh --delete ip_addr:/home/public /home/local 通过ssh和压缩将一个远程目录同步到本地目录

       rsync -az -e ssh --delete /home/local ip_addr:/home/public 通过ssh和压缩将本地目录同步到远程目录

       dd bs=1M if=/dev/hda | gzip | ssh user@ip_addr 'dd of=hda.gz' 通过ssh在远程主机上执行一次备份本地磁盘的操作

       dd if=/dev/sda of=/tmp/file1 备份磁盘内容到一个文件

       tar -Puf backup.tar /home/user 执行一次对 '/home/user' 目录的交互式备份操作

       ( cd /tmp/local/ tar c . ) | ssh -C user@ip_addr 'cd /home/share/ tar x -p' 通过ssh在远程目录中复制一个目录内容

       ( tar c /home ) | ssh -C user@ip_addr 'cd /home/backup-home tar x -p' 通过ssh在远程目录中复制一个本地目录

       tar cf - . | (cd /tmp/backup ; tar xf - ) 本地将一个目录复制到另一个地方，保留原有权限及链接

       find /home/user1 -name '*.txt' | xargs cp -av --target-directory=/home/backup/ --parents 从一个目录查找并复制所有以 '.txt' 结尾的文件到另一个目录

       find /var/log -name '*.log' | tar cv --files-from=- | bzip2 log.tar.bz2 查找所有以 '.log' 结尾的文件并做成一个bzip包

       dd if=/dev/hda of=/dev/fd0 bs= count=1 做一个将 MBR (Master Boot Record)内容复制到软盘的动作

       dd if=/dev/fd0 of=/dev/hda bs= count=1 从已经保存到软盘的备份中恢复MBR内容

光盘

       cdrecord -v gracetime=2 dev=/dev/cdrom -eject blank=fast -force 清空一个可复写的光盘内容

       mkisofs /dev/cdrom cd.iso 在磁盘上创建一个光盘的iso镜像文件

       mkisofs /dev/cdrom | gzip cd_iso.gz 在磁盘上创建一个压缩了的光盘iso镜像文件

       mkisofs -J -allow-leading-dots -R -V "Label CD" -iso-level 4 -o ./cd.iso data_cd 创建一个目录的iso镜像文件

       cdrecord -v dev=/dev/cdrom cd.iso 刻录一个ISO镜像文件

       gzip -dc cd_iso.gz | cdrecord dev=/dev/cdrom - 刻录一个压缩了的ISO镜像文件

       mount -o loop cd.iso /mnt/iso 挂载一个ISO镜像文件

       cd-paranoia -B 从一个CD光盘转录音轨到 wav 文件中

       cd-paranoia -- "-3" 从一个CD光盘转录音轨到 wav 文件中（参数-3）

       cdrecord --scanbus 扫描总线以识别scsi通道

       dd if=/dev/hdc | md5sum 校验一个设备的md5sum编码，例如一张 CD

网络 - （以太网和WIFI无线）

       ifconfig eth0 显示一个以太网卡的配置

       ifup eth0 启用一个 'eth0' 网络设备

       ifdown eth0 禁用一个 'eth0' 网络设备

       ifconfig eth0 ..1.1 netmask ...0 控制IP地址

       ifconfig eth0 promisc 设置 'eth0' 成混杂模式以嗅探数据包 (sniffing)

       dhclient eth0 以dhcp模式启用 'eth0'

       route -n show routing table

       route add -net 0/0 gw IP_Gateway configura default gateway

       route add -net ..0.0 netmask ..0.0 gw ..1.1 configure static route to reach network '..0.0/'

       route del 0/0 gw IP_gateway remove static route

       echo "1" /proc/sys/net/ipv4/ip_forward activate ip routing

       hostname show hostname of system

       host www.example.com lookup hostname to resolve name to ip address and viceversa(1)

       nslookup www.example.com lookup hostname to resolve name to ip address and viceversa(2)

       ip link show show link status of all interfaces

       mii-tool eth0 show link status of 'eth0'

       ethtool eth0 show statistics of network card 'eth0'

       netstat -tup show all active network connections and their PID

       netstat -tupl show all network services listening on the system and their PID

       tcpdump tcp port show all HTTP traffic

       iwlist scan show wireless networks

       iwconfig eth1 show configuration of a wireless network card

       hostname show hostname

       host www.example.com lookup hostname to resolve name to ip address and viceversa

       nslookup www.example.com lookup hostname to resolve name to ip address and viceversa

       whois www.example.com lookup on Whois database

       GO TOP INDEX ^

       Microsoft Windows networks (SAMBA)

       nbtscan ip_addr netbios name resolution

       nmblookup -A ip_addr netbios name resolution

       smbclient -L ip_addr/hostname show remote shares of a windows host

       smbget -Rr smb://ip_addr/share like wget can download files from a host windows via smb

       mount -t smbfs -o username=user,password=pass //WinClient/share /mnt/share mount a windows network share

插件崩溃怎么回事怎么解决

       起因：

       测试公司的保障MySQL高可用组件时发现一个异常。

       停止从库，高可用组件将从库自动启动后，主库发生重启。而正常情况下主库不应发生重启。

       环境：

       OS: CentOS release 6.7 (Final)MySQL：Ver . Distrib 5.7., for linux-glibc2.5 (x_) using EditLine wrapper主从实例开启半同步 MySQL semi-sync配置文档

       分析：

       首先，先分析log文件

       在主库的mysql-error.log中我们可以发现如下几点：

       1. 主库的semi-sync在崩溃前做了启停动作。

       --T::.+:

       Semi-sync replication switched OFF.--T::.+:

       Semi-sync replication disabled on the master.--T::.+: 0

       Stopping ack receiver thread--T::.+:

       Semi-sync replication enabled on the master.--T::.+: 0

       Starting ack receiver thread

       2. 主库的semi-sync启动后立即引发了semi-sync插件崩溃，并抛出Assert异常。

       mysqld: /export/home/pb2/build/sb_0--./mysql-5.7./plugin/semisync/semisync_master.cc:: int ReplSemiSyncMaster::commitTrx(const char*, my_off_t): Assertion `entry' failed.:: UTC - mysqld got signal 6 ;

       3. 这里还有一个相当重要的复现故障的线索。简单说明一下，这条SQL语句是为了检测主从数据差，而由高可用中间件不断的向数据库更新时间戳。

       Trying to get some variables.Some pointers may be invalid and cause the dump to abort.Query (7fcc0): update universe.u_delay set real_timestamp=now(), logic_timestamp = logic_timestamp + 1 where source = 'ustats'Connection ID (thread ID): Status: NOT_KILLED

       到这里初步判断是这个故障应与设置

       rpl_semi_sync_master_enabled开关相关，并且应该当时是有事务提交的。

       进一步验证，这里只部署一组开启semi-sync的MySQL实例，而不安装高可用组件。利用bash脚本向主库不断插入数据：

       /opt/mysql/base/bin/mysql -uroot -p1 -S /opt/mysql/data//mysqld.sock -e "create database if not exists test;use test;drop table if exists t1;create table t1(id int) "

       i=0

       while true

       do

       /opt/mysql/base/bin/mysql -uroot -p1 -S /opt/mysql/data//mysqld.sock -e "insert into test.t1 values($i)"

       i=$((i+1))

       done

       在主库的机器上，反复运行如下命令，启停semi-sync master，不超过5次必能复现这个故障。

       /opt/mysql/base/bin/mysql -uroot -p1 -S /opt/mysql/data//mysqld.sock -e'SET GLOBAL rpl_semi_sync_master_enabled = OFF;SET GLOBAL rpl_semi_sync_master_enabled = ON'

       所以这个故障复现有了两个必要条件：

       启停semi-sync master

       数据库当时有事务提交

       其次，分析MySQL源码

       至于为什么不能每次启停semi-sync master都能触发这个故障，那我们就要看看MySQL的源码了

       还好mysql-error.log明确的指出了抛出异常的位置：

       mysqld: /export/home/pb2/build/sb_0--./mysql-5.7./plugin/semisync/semisync_master.cc:: int ReplSemiSyncMaster::commitTrx(const char*, my_off_t): Assertion `entry' failed.:: UTC - mysqld got signal 6 ;This could be because you hit a bug. It is also possible that this binaryor one of the libraries it was linked against is corrupt, improperly built,or misconfigured. This error can also be caused by malfunctioning hardware.Attempting to collect some information that could help diagnose the problem.As this is a crash and something is definitely wrong, the informationcollection process might fail.

       找到MySQL源码，抛出异常的的位置 mysql-5.7. semisync_master.cc#L

       看来是这个‘entry’的值为NULL，才抛出的异常，但是这还没有回答我的疑问。

       再看MySQL的报错信息，MySQL自己也认识到这应该是个BUG，那它有没有修复这个故障呢？

       我找到MySQL最新5.7.的版本，查看它的历史记录mysql-5.7. semisync_master.cc history

       这正是我想要的修复和提交，打开看看有没有对产生故障原因的分析。Bug#: ENABLING SEMI-SYNC DURING COMMIT CAN CAUSE MASTER TO ASSERT.

       为了方便解释这个BUG, 这里先简单的介绍一下MySQL binlog提交过程：

       MySQL 在5.6版本引入了Binary Log Group Commit，二进制日志的提交由此可以简化为三个阶段：

       Flush stage：将事务的日志写入binlog文件的缓存中

       Sync stage: 将binlog文件中的缓存数据写入磁盘

       Commit stage：根据顺序调用存储引擎提交事务。

       MYSQL_BIN_LOG::ordered_commit，这个是iapp源码分享平台事务在binlog阶段提交的核心函数。通过该函数，实现了事务日志写入binlog文件，以及触发dump线程将binlog发送到从库，在最后将事务设置为提交状态。

       事实上，有没有semi-sync机制，上面介绍的MySQL的有关事务提交中关于binlog的流程都是一样的。semi-sync的作用只是主从之间的一个确认过程，主库等待从库返回相关位置的binlog已经同步到从库的确认，没有得到确认之前，事务提交则在该函数（步骤）上等待直至获得返回。

       在半同步复制中，为了在主库提交事务时等待从库的确认，才引出了由‘entry’组成的active transaction链表。

       在BUG分析中提到：

       首先在flush stage，由semi-sync创建一个‘entry’，并关联一个或一组处于flush stage的事务。这个‘entry’被插入一个active transaction链表。 参考: create entry

       搜图

       编辑

       接下来是sync stage，在sync stage每个处于这个阶段的线程将会设置trx_wait_binlog_name和trx_wait_binlog_pos为事务对应binlog的相对位置最后再commit stage，semi-sync为了等从库的确认，会用trx_wait_binlog_name和trx_wait_binlog_pos获取这个位置关联的'entry', 参考: find entry

       这里有两个场景会出现‘entry’找不到的状况：

       1. 从库已经确认的事务在binlog位置比当前等待从库确认的事务在binlog的位置要大

       2. 当事务进入flush stage的时候semi-sync还没有开启，也就没有‘entry’被创建，然后插入active transaction链表

       这里情况1永远也不会进入等待阶段，因为它已经被从库确认过了。情况2则会导致上述的断言异常，因为这里他无法在active transaction链表找到相应的’entry‘

       到这里我的疑问终于解开，原来开启semi-sync master的时机很重要，要恰巧撞到事务提交过了flush stage但还没有到commit stage这个缝隙

       结论：

       最终修复的结果也很明显，就是遇到找不到‘entry’，并且从库也没有确认的情况，这个事务提交就被认为是一次异步提交。

       再看一眼在哪些版本修复了这个BUG：

       所以升级MySQL版本可以解决问题。

       复盘：

       最后总结一下我的诊断路径：

       观察故障出现的现象，分析MySQL的error log通过猜想和实验，构成简单的复现场景通过日志和MySQL源码的对应关系, 搜索代码历史, 定位BUG号通过阅读BUG的分析，了解异常发生的原理并知道了详细的复现条件

Android性能优化：定性和定位Android图形性能问题——以后台录屏进程为例

       简介

       发现、定性与定位

       总结

       跟不上旋律节奏的VSYNC

       严重异常耗时的dequeueBuffer

       VirtualDisplay合成耗时

       结论

       FPS

       初步定位问题

       定性问题

       定位问题

       成果展示

       参考

简介

       本文记录一次Android图形性能问题的分析过程——发现、定性和定位图形性能问题，以及探讨的性能优化方案。

       环境：Android Q + MTK + ARM Mali-G。

       所分析的性能问题（下称case）：打开录屏应用并启动后台录屏，滑动前台应用（滑屏）。性能表现差：CPU、GPU负载显著升高、掉帧、用户明显卡顿感，帧率不足帧，帧渲染、合成耗时急剧飙升（渲染耗时平均为ms左右）。

       经过优化后，相同环境和条件下，渲染帧率稳定在帧（提升一倍），渲染耗时平均为8.ms左右（为优化前的不到三分之一的消耗）。

       关键词 Keywords: Screen Recording; Frame rate; FPS; GPU utilization; Jank; MediaProjection; VirtualDisplay; MediaCodec; Perfetto; Inferno; Surface; SurfaceTexture; VSYNC; SurfaceFlinger; HWC; Hardware composer; GPU; OpenGL;

发现、定性与定位FPS

       计算FPS的方法和工具 Android框架层通过hwui配合底层完成渲染。该框架本身提供了逐帧渲染分段耗时记录。开源 手游 源码通过dumpsys gfxinfo可以获取。

io.microshow.screenrecorder/io.microshow.screenrecorder.activity.MainActivity/android.view.ViewRootImpl@6b9b8a9?(visibility=0)DrawPrepare?Process?Execute3...................1................

       使用工具统计帧率与平均耗时（同时打印GPU负载），在开启后台录屏的情况下滑动屏幕，平均渲染耗时高达~ms，超出.ms一倍，导致帧率仅帧，显著低于帧。

Average?elapsed?.?msFPS:??│?9.?0.?.?2.#?GPU负载?LOADING?BLOCKING?IDLE?0?#?case的对比——未开启后台录屏Average?elapsed?9.?msFPS:??│?1.?0.?5.?1.

       通过gfx柱状图直观感受性能数据 直观地感受图形渲染性能，除了帧率感受、触控延时外，还可以通过将gfxinfo的分段耗时通过柱状图展示在屏幕上。

       这是case性能问题的gfxinfo柱状图，可以看到红柱和绿柱都非常高，远远超越了流畅标准。其中，绿柱异常放大表明两个Vsync之间耗时显著增长，红柱异常放大表明应用层应用加速使用的DisplayLists大量增长、或图形层使用GLES调用GPU耗时显著增多导致的GPU执行绘制指令耗时变长。

初步定位问题

       本节记录初步的分析思路和定位过程。首先我们完成实验（启停后台录屏并滑动屏幕触发渲染）、观测以及记录，拿到了后台录屏启停情况下的FPS、分阶段耗时以及GPU负载（相关数据位于FPS小节）。

       开发的工具输出的统计数据计算结果非常直观，一眼可见，后台录屏为Draw阶段带来额外的~8倍或~8ms耗时，给Process阶段带来额外的~2倍或~ms耗时。帧率从帧坠落到~帧。

       耗时分析 可以看到，主要的额外耗时来自Draw和Process。接下来重点围绕着两part定位问题问题。

StageDescriptionCompDraw创建DisplayLists的耗时。Android的View如果支持硬件加速，绘制工作均通过DisplayLists由GPU绘制，可以处理为onDraw的耗时额外~8ms或~8倍Prepare准备没有额外耗时ProcessDisplayLists执行耗时。即硬件加速机制下提交给GPU绘制的工作耗时额外~ms或~2倍ExecuteFramebuffer前后缓冲区flip动作的耗时，上屏耗时额外不到~1ms

       Hz下，上述4个步骤合计耗时小于.ms为正常情况。case为~ms。主要增量来自Draw和Process。

       经过上述初步分析、观测后，接下来的分析可以围绕Draw和Process开展。由于Android Draw部分涉及较广，包含App 渲染线程（DisplayLists）、UI线程（onDraw方法创建DisplayLists），以及图形栈耗时如SurfaceFlinger、RenderEngine等都可能增加Draw耗时。

       这里一个技巧可以初步判断耗时来自App进程(渲染线程和UI线程)还是来自图形栈。如果能判断耗时来自App或图形栈，那么可以缩小分析范围、减少分析工作量。上述四大阶段的耗时统计分类比较宽，实际上还有更详细的分阶段耗时，它呈现在前文描述过的gfx统计信息柱状图上。gfx柱状图会以蓝色（RGB(,,)）呈现onDraw方法创建和更新DisplayLists的耗时。如果case与正常情况对比后，共享内存vs源码这部分耗时（蓝柱大小对比）差异很小，即可说明额外的Draw耗时不是来自App的，极可能来自图形栈。Besides，结合过度绘制分析，判断case与正常情况下是否有更多的额外绘制次数可以协同判断。

       ——根据上述指导思想，排查出了case的额外Draw耗时与App onDraw无关，多出来的DisplayLists来自App以外的进程，可能是图形栈如SurfaceFlinger。

定性问题

       本小节介绍问题追踪过程，通过一些方法定位到各阶段的耗时原因，并定性地得出case性能问题的性质。从本小节开始，围绕Perfetto进行分析。这里贴出perfetto的总览，我将关键的信息排序到顶部。前四行分别为SF负责图形的线程、提交到GPU等待完成的工作、Vsync-App、Vsync-sf，最后两行为case中出现卡顿掉帧的App的主线程(UI)和渲染线程(RenderThread)。

跟不上旋律节奏的VSYNC

       容易看到，Vsync-sf非常不规律。Vsync-sf是触发SurfaceFlinger一次合成工作的基于Hardware VSYNC虚拟出来的一个信号。它相对于真实硬件信号（HW_VSYNC）一个规律的偏移（在case设备上，Vsync-app与Vsync-sf都被配置为8.3ms，即硬件VSYNC到达后，虚拟的Vsync-app和Vsync-sf延时8.3ms后发出，分别触发App绘制、SurfaceFlinger合成。

       而case的Vsync-sf交错、残次、不齐、无规律，显然工况不佳。它将导致SurfaceFlinger不能按照预期的时间间隔将合成的帧提交到Framebuffer（经过Flip后，被提交的Framebuffer将上屏成为显示器的下一帧图像），出现掉帧/丢帧。

       As we can see，case的VSYNC-sf出现严重的漂移（见图，第二行的VSYNC-sf残次不齐、跟不上规律、难看且混乱），这导致了丢帧。（但VSYNC-sf的失控仅表示与丢帧的相关性，并不直接表明因果性。）

       VSYNC-sf为什么会出现偏差？ 出于功耗的考虑，VSYNC-sf合VSYNC-app并不是一定会触发的。如果app或sf并没有更新画面的需求，那么死板固定地调度它们进行绘制和合成是不必的。编程上，负责触发VSYNC-sf和VSYNC-app的两个EventThread会在requestNextVsync调用后才会将下一个VSYNC-sf或VSYNC-app发出。因此，当（各自EventThread的）requestNextVsync没有调用时，VSYNC-app和VSYNC-sf也就出现漂移。BufferQueueLayer::onFrameAvailable会在应用提交后调用，网站源码怎么美化该方法通过调用SF的signalLayerUpdate触发产生下一个VSYNC-sf。

       换而言之，出于功耗，或别的什么原因（比如耗时导致的延期，人家是线程实现的消息队列），SurfaceFlinger的SFEventThread有可能不调用requestNextVsync，这将导致Vsync-sf在窗口期内短暂消失——但是也不会出现参差不齐的情况。结合case的VSYNC信号报告来看，VSYNC-sf信号异常切实地提示了性能问题——它的不规律现象表明前后Vsync之间有异常耗时，而非低功耗机制被激活或无屏幕刷新（case性能问题复现时一直在滑前台应用的屏，它每ms都有画面更新的需求）。

       VSYNC-sf虽然出现了偏差，但是它与卡顿问题仅有相关性（或者说它是性能问题的结果），并非因果关系。猜测是其他卡顿问题导致了SF延缓了对VSYNC的request，导致其信号出现漂移。VSYNC-sf信号偏差实质上指导意义重大，因为它能提示我们，问题发生在比App更底层的地方（前文分析的结论），且比SurfaceFlinger提交到Framebuffer更上层的位置（VSYNC-sf用于触发合成，合成完成后提交到屏幕双缓冲区）。

       这样，将case性能问题的上下界都确定了，问题分析范围从原先的整个图形栈，有效的缩小到了SurfaceFlinger渲染和合成阶段了。

严重异常耗时的dequeueBuffer

       通读Perfetto，可以看到，出了难看的Vsync-sf以外，还可以看到刺眼的超长耗时的draw（App UI线程）以及耗时变态长的dequeueBuffer(App 渲染线程)调用。相对于正常情况，perfetto报告提示的case的draw方法成倍增长的耗时非常容易被误认为耗时“居然来自一开始就排除掉的App进程"，这与前文提出的”问题范围“是不能自洽的——它们是相反的结论，肯定哪里不对。仔细分析才能发现，draw方法确实是消耗了更多墙上时间（但是不意味着消耗了更多CPU时间，因为等待过程是sleep的），但是draw方法是因为等待渲染线程的dequeueBuffer造成的耗时，而dequeueBuffer的严重异常耗时却是被底层的图形栈拖累的。

       我们看到，draw严重耗时，渲染线程dequeueBuffer消耗掉~ms的时间。As we all known，Android的Graphics buffer是生产者消费者模型，当作为消费者的SF来不及处理buffer并释放，渲染线程也就需要额外耗时等待buffer就绪。上面还有一段"Waiting GPU Completion"的trace没有贴上来（下图），这段耗时比不开启后台录屏的case下高得多（~3ms对比~ms），说明了一定的GPU性能问题或SF的性能问题，甚至有可能是Display有问题（HWC release耗时过长也会导致SF释放buf、生产者渲染线程dequeueBuffer额外等待）。

       这里的机制比较复杂，不熟悉底层Graphics buffer的流水线模型就不好理解。In one world, dequeueBuffer申请的buffer不是凭空new出来的，而是在App-SurfaceFlinger-Framebuffer这一流水线中循环使用的。流水线中的buffer不是无限的，而是有穷的几个。当底层的伙计，如SF和HWC，使用了buffer但是没有来得及释放时（它们的工作没做完之前不会释放buffer），流水线（可以理解成头尾相接的单向队列（ring buffer））没有可用的buffer，此时dequeueBuffer就不得不进入等待，出现耗时看上去很长的问题。实际上，dequeueBuffer耗时的唯一原因几乎仅仅只有一个：底层消费太慢了，流水线没有剩余buffer，因此需要等待。

       这个模型抽象理解非常简单。下图，右边消费者是底层图形栈——它每消费完一个buffer就会释放掉，每释放一个buffer应用层能用的buffer就加1。左边生产者是App渲染线程——它调用dequeueBuffer申请一个buffer以将它的画面绘制到这个buffer上。buffer送入BufferQueue后由右边的消费者（图形栈）进行消费（合成、上屏显示），然后释放buffer。当图形栈来不及release buffer时，dequeueBuffer的调用者（App渲染线程）将由于无可用buffer，就必须挂起等待了，在perfetto上就留下长长的一段”耗时“（实际上是墙上时间，大部分都没有占用CPU）。

       以上，这就是为什么说App渲染线程dequeueBuffer严重耗时中的耗时为什么要打引号，为什么要说是被图形层拖累了。

       下图可以看到，刨去dequeueBuffer的严重异常耗时，执行渲染的部分耗时相对于正常的case几乎没有差异，这可以断言渲染线程的惨烈耗时主要就是被dequeueBuffer浪费了。

       从GPU Completion来看，此时GPU正在为SF工作，因为在图中看到（不好意思没有截全，下图你是看不出来的），dequeueBuffer总是在SF的GPU Completion结束之后结束的，这就表明SF正在通过GPU消费buffer（调用GPU进行合成后提交，然后标记buffer允许被渲染线程dequeue）。dequeueBuffer获取到就绪的buffer此时此刻取决于SF的消费能力——因为case中它是短板。（当然图形层的buffer可用不止SurfaceFlinger需要释放，因为SF释放后buffer实质上流转到更底层的HWC，等它将Buffer提交到屏幕后才会释放，这里释放后才能给App再次使用(上面哪个模型图把SF和HWC合并为流水线的图形层buffer消费者)。

       从perfetto报告看HWC release非常及时、余量充足，SF的GPU Completion则较紧密地接着dequeueBuffer返回，基本断言是SF太慢了——排除HWC的责任。（下图看不出来，当时没有截图到HWC的release情况。）

       到这里，除了再次确认排除了前台App的问题外，还可以断言问题来自SurfaceFlinger过分耗时。此外将问题范围的下界从整个SF合成流程（上文的Vsync-sf）缩小到了排除HWC的范围。

       结论：渲染耗时一切正常，问题出现在SF消费buffer（合成图形）失速了，导致没有可用的buffer供渲染线程使用。从下图的SF的工况（第三列）来看，情况确实如此。

       既然一口咬定是SF的锅，那就瞧瞧SF。先看SF的INVALIDATE，这没啥好看的，异常case和正常case都是~2.5ms。主要看refresh，正常case ~6.8ms，异常case ~.8ms。refresh包含SF的合成四件套，包括rebuildLayerStack、CalcuateWorkingSet、Prepare、doComposition。Perfetto报告直接表明，case的后台录屏导致的额外一次合成和配套工作是主要的耗时增量。

       之所以会执行两次合成，是因为后台录屏工具编程上通过Android SDK提供的MediaProjection配合VirtualDisplay实现一个虚拟的镜像的屏幕。SurfaceFlinger会将画面输送一份到这个虚拟的Display以实现屏幕图像传送到录屏工具，虚拟的屏幕要求额外的一次合成。从上图可以直接得出结论，case带来的额外工作消耗就是对该录屏用的VirtualDisplay的合成工作(doComposition)带来的。

VirtualDisplay合成耗时

       由于问题范围已经缩小到了很小的一个范围，在SurfaceFlinger的Refresh过程中，case相对正常应用有巨大的差异耗时，几乎完全来自于对VirtualDisplay的合成耗时(doComposition)。同时也可以看到，两次合成（一次是设备的物理屏幕，一次是case的后台录屏工具创建的虚拟屏幕）中，虚拟屏幕的耗时远远高于物理屏幕（4倍以上）。

       通过查看ATRACE的tag（上图，Perfetto中SurfaceFlinger中主线程的各个trace point都是用ATRACE打的tag），结合dumpsys SurfaceFlinger，能直接看到的线索是：

       虚拟屏显著耗时，且合成工作通过GLES调用GPU完成

       物理屏合成耗时很小，它通过HWC合成

       结合图中提示的trace tag、耗时，可以得出结论，使用GPU合成的虚拟屏中因GPU合成耗时很长，导致它显著高于物理屏HWC合成耗时。如果GPU合成能够和HWC合成一样快，或者干脆让虚拟屏也使用HWC合成，那么可以预期SurfaceFlinger的合成工作的消耗将显著降低。

结论

       本小节综合上述三个小节的分析，对节”定性问题“下一个结论。

       耗时的本质已经被看透，录屏工具申请创建的VirtualDisplay没有通过HWC进行合成，而是通过GPU进行合成，它耗时很长导致界面卡顿。In one word，case使用的VirtualDisplay的合成方式不够高效。

       HWC是Hardward Composer。它接收图形数据，类似于往桌面（真的桌面，不是电脑和手机的桌面）上面叠放照片和纸张——即合成过程。这个工作能将界面上几个窗口叠加在一起后送到屏幕上显示。通过GLES调动GPU也能干这活，不过HWC执行合成的动作是纯硬件的——它很快，比GPU快几倍。

定位问题

       前面虽然定性了问题原因是合成方式不够高效，但是没有得出其中的原理——为什么虚拟屏不使用高效的HWC进行合成。本节通过介绍HWC的原理、SurfaceFlinger控制合成方式、虚拟屏Surface特性等来介绍图形栈中合成方式的处理模式。掌握了相关管理后，探讨一些尽量通用的共性的解决方案实现性能优化。最后着重介绍多套优化方案中的一种直面根本原因的解决方法——MediaCodec.MediaFormat创建的支持HWC合成的Surface方案。

       SurfaceFlinger如何决定使用HWC还是GPU合成？ SurfaceFlinger合成主要可以依靠两条路径。其中之一是”纯硬“的HWC合成（在dumpsys SurfaceFlinger中可以看到Composition type为DEVICE），另一个是通过OpenGL让GPU进行合成（Composition type为CLIENT）。

       除非是功耗上的设计，否则SurfaceFlinger总是会优先检查本次合成是否支持使用HWC。编程上，在合成阶段之一的prepare过程中，SurfaceFlinger通过prepareFrame在RenderSurface与Hardware Composer（即HWC）的HIDL服务通信，完成hwc layer的创建。但是，layer能够成功创建不意味着一定支持HWC合成。SurfaceFlinger通过getChangedCompositionTypes向HWC查询不支持HWC合成的Layer。该方法返回的layer如果被标记为CLIENT合成，那么这部分Layer无法由HWC进行合成，而只能通过GPU进行合成——case的VirtualDisplay就是这个情况。

       部分layer可能不能由HWC合成的原因（除功耗策略、其他软件策略外）：

       HWC layer达到上限 Hardware Composer支持的layer数量是有限的。查阅公开资料可知，HWC合成动作属于硬件提供的能力，它们的合成能力受到硬件本身的限制。Google官方资料对Android设备的要求是，HWC最少应该支持4个Layer，分别用于一个常规页面上最常见的4个层：壁纸、状态栏、导航栏和应用窗口。 在case设备中，经过测试，该平台的HWC最多支持7个能进行HWC合成的layer，从第8个layer开始，完完全全只能使用CLIENT合成亦即SurfaceFlinger调用RenderEngine通过OpenGL调动GPU进行合成。 正是由于HWC合成layer有上限，因此在弹出多个弹窗、叠加过于复杂时，即使界面简单也有可能出现比较明显的卡顿。

       VirtualDisplay的Surface格式不受HWC支持 HWC的硬件合成能力对buffer（Surface封装）内保存的图像的格式有要求。比如，HWC不能处理缩放，仅支持一部分的格式，大多数都还有其他因素会导致不支持，如旋转、部分Alpha等等。In one word，图像格式的数量是远远多于HWC支持的类型数的。当HWC碰到不支持合成的Surface时，就会在前文提过的getChangedCompositionTypes中通知SurfaceFlinger，由SurfaceFlinger转为使用GPU合成。

       结合上述几种情况，设计实验验证。其中通过在物理屏上弹窗来增加Layer以获取HWC Layer上限。确认case无法使用HWC合成不是Layer上限导致的问题后，通过对比来验证Surface格式问题。Surface是对native层的buffer的封装，其类型广泛、实现复杂，一个一个试是不现实的。通过对比性能强劲的类似实现可以一探究竟。Android adb提供一个出厂自带的录屏命令screenrecord、用于测试双屏显示功能的虚拟辅助屏幕（开发者模式-模拟辅助屏）、著名远程窥屏工具scrcpy等三个工具是一系列重要参考。

       经过测试，screenrecord和scrcpy创建的VirtualDisplay支持HWC合成——这是优化目标。首先看看它们的实现。

       编程上，虚拟辅助屏幕采用了与case一模一样的实现——通过创建VirtualDisplay让图形层额外合成一次屏幕到该虚拟屏幕中。虚拟屏幕本质上将画面发送给录屏功能实现，而非进行显示来完成录屏。

       通读screenrecord源码，逻辑上，它与虚拟辅助屏、case录屏应用是相同的——VirtualDisplay录屏。但是编程上略有差异：

       screenrecord直接通过binder与SurfaceFlinger通信，获取了raw VirtualDisplay，而

linux基础命令

       Linux常用命令大全

       ç³»ç»Ÿä¿¡æ¯

       arch 显示机器的处理器架构(1)

       uname -m 显示机器的处理器架构(2)

       uname -r 显示正在使用的内核版本

       dmidecode -q 显示硬件系统部件 - (SMBIOS / DMI)

       hdparm -i /dev/hda 罗列一个磁盘的架构特性

       hdparm -tT /dev/sda 在磁盘上执行测试性读取操作

       cat /proc/cpuinfo 显示CPU info的信息

       cat /proc/interrupts 显示中断

       cat /proc/meminfo 校验内存使用

       cat /proc/swaps 显示哪些swap被使用

       cat /proc/version 显示内核的版本

       cat /proc/net/dev 显示网络适配器及统计

       cat /proc/mounts 显示已加载的文件系统

       lspci -tv 罗列 PCI 设备

       lsusb -tv 显示 USB 设备

       date 显示系统日期

       cal 显示年的日历表

       date . 设置日期和时间 - 月日时分年.秒

       clock -w 将时间修改保存到 BIOS

       å…³æœº (系统的关机、重启以及登出 )

       shutdown -h now 关闭系统(1)

       init 0 关闭系统(2)

       telinit 0 关闭系统(3)

       shutdown -h hours:minutes & 按预定时间关闭系统

       shutdown -c 取消按预定时间关闭系统

       shutdown -r now 重启(1)

       reboot 重启(2)

       logout 注销

       æ–‡ä»¶å’Œç›®å½•

       cd /home 进入 '/ home' 目录'

       cd .. 返回上一级目录

       cd ../.. 返回上两级目录

       cd 进入个人的主目录

       cd ~user1 进入个人的主目录

       cd - 返回上次所在的目录

       pwd 显示工作路径

       ls 查看目录中的文件

       ls -F 查看目录中的文件

       ls -l 显示文件和目录的详细资料

       ls -a 显示隐藏文件

       ls *[0-9]* 显示包含数字的文件名和目录名

       tree 显示文件和目录由根目录开始的树形结构(1)

       lstree 显示文件和目录由根目录开始的树形结构(2)

       mkdir dir1 创建一个叫做 'dir1' 的目录'

       mkdir dir1 dir2 同时创建两个目录

       mkdir -p /tmp/dir1/dir2 创建一个目录树

       rm -f file1 删除一个叫做 'file1' 的文件'

       rmdir dir1 删除一个叫做 'dir1' 的目录'

       rm -rf dir1 删除一个叫做 'dir1' 的目录并同时删除其内容

       rm -rf dir1 dir2 同时删除两个目录及它们的内容

       mv dir1 new_dir 重命名/移动 一个目录

       cp file1 file2 复制一个文件

       cp dir/* . 复制一个目录下的所有文件到当前工作目录

       cp -a /tmp/dir1 . 复制一个目录到当前工作目录

       cp -a dir1 dir2 复制一个目录

       ln -s file1 lnk1 创建一个指向文件或目录的软链接

       ln file1 lnk1 创建一个指向文件或目录的物理链接

       touch -t file1 修改一个文件或目录的时间戳 - (YYMMDDhhmm)

       file file1 outputs the mime type of the file as text

       iconv -l 列出已知的编码

       iconv -f fromEncoding -t toEncoding inputFile > outputFile creates a new from the given input file by assuming it is encoded in fromEncoding and converting it to toEncoding.

       find . -maxdepth 1 -name *.jpg -print -exec convert "{ }" -resize x "thumbs/{ }" \; batch resize files in the current directory and send them to a thumbnails directory (requires convert from Imagemagick)

       æ–‡ä»¶æœç´¢

       find / -name file1 从 '/' 开始进入根文件系统搜索文件和目录

       find / -user user1 搜索属于用户 'user1' 的文件和目录

       find /home/user1 -name \*.bin 在目录 '/ home/user1' 中搜索带有'.bin' 结尾的文件

       find /usr/bin -type f -atime + 搜索在过去天内未被使用过的执行文件

       find /usr/bin -type f -mtime - 搜索在天内被创建或者修改过的文件

       find / -name \*.rpm -exec chmod '{ }' \; 搜索以 '.rpm' 结尾的文件并定义其权限

       find / -xdev -name \*.rpm 搜索以 '.rpm' 结尾的文件，忽略光驱、捷盘等可移动设备

       locate \*.ps 寻找以 '.ps' 结尾的文件 - 先运行 'updatedb' 命令

       whereis halt 显示一个二进制文件、源码或man的位置

       which halt 显示一个二进制文件或可执行文件的完整路径

       æŒ‚载一个文件系统

       mount /dev/hda2 /mnt/hda2 挂载一个叫做hda2的盘 - 确定目录 '/ mnt/hda2' 已经存在

       umount /dev/hda2 卸载一个叫做hda2的盘 - 先从挂载点 '/ mnt/hda2' 退出

       fuser -km /mnt/hda2 当设备繁忙时强制卸载

       umount -n /mnt/hda2 运行卸载操作而不写入 /etc/mtab 文件- 当文件为只读或当磁盘写满时非常有用

       mount /dev/fd0 /mnt/floppy 挂载一个软盘

       mount /dev/cdrom /mnt/cdrom 挂载一个cdrom或dvdrom

       mount /dev/hdc /mnt/cdrecorder 挂载一个cdrw或dvdrom

       mount /dev/hdb /mnt/cdrecorder 挂载一个cdrw或dvdrom

       mount -o loop file.iso /mnt/cdrom 挂载一个文件或ISO镜像文件

       mount -t vfat /dev/hda5 /mnt/hda5 挂载一个Windows FAT文件系统

       mount /dev/sda1 /mnt/usbdisk 挂载一个usb 捷盘或闪存设备

       mount -t smbfs -o username=user,password=pass //WinClient/share /mnt/share 挂载一个windows网络共享

       ç£ç›˜ç©ºé—´

       df -h 显示已经挂载的分区列表

       ls -lSr |more 以尺寸大小排列文件和目录

       du -sh dir1 估算目录 'dir1' 已经使用的磁盘空间'

       du -sk * | sort -rn 以容量大小为依据依次显示文件和目录的大小

       rpm -q -a --qf '%{ SIZE}t%{ NAME}n' | sort -k1,1n 以大小为依据依次显示已安装的rpm包所使用的空间 (fedora, redhat类系统)

       dpkg-query -W -f='${ Installed-Size;}t${ Package}n' | sort -k1,1n 以大小为依据显示已安装的deb包所使用的空间 (ubuntu, debian类系统)

       è¿”回顶部索引 ^

       ç”¨æˆ·å’Œç¾¤ç»„

       groupadd group_name 创建一个新用户组

       groupdel group_name 删除一个用户组

       groupmod -n new_group_name old_group_name 重命名一个用户组

       useradd -c "Name Surname " -g admin -d /home/user1 -s /bin/bash user1 创建一个属于 "admin" 用户组的用户

       useradd user1 创建一个新用户

       userdel -r user1 删除一个用户 ( '-r' 排除主目录)

       usermod -c "User FTP" -g system -d /ftp/user1 -s /bin/nologin user1 修改用户属性

       passwd 修改口令

       passwd user1 修改一个用户的口令 (只允许root执行)

       chage -E -- user1 设置用户口令的失效期限

       pwck 检查 '/etc/passwd' 的文件格式和语法修正以及存在的用户

       grpck 检查 '/etc/passwd' 的文件格式和语法修正以及存在的群组

       newgrp group_name 登陆进一个新的群组以改变新创建文件的预设群组

       è¿”回顶部索引 ^

       æ–‡ä»¶çš„权限 - 使用 "+" 设置权限，使用 "-" 用于取消

       ls -lh 显示权限

       ls /tmp | pr -T5 -W$COLUMNS 将终端划分成5栏显示

       chmod ugo+rwx directory1 设置目录的所有人(u)、群组(g)以及其他人(o)以读（r ）、写(w)和执行(x)的权限

       chmod go-rwx directory1 删除群组(g)与其他人(o)对目录的读写执行权限

       chown user1 file1 改变一个文件的所有人属性

       chown -R user1 directory1 改变一个目录的所有人属性并同时改变改目录下所有文件的属性

       chgrp group1 file1 改变文件的群组

       chown user1:group1 file1 改变一个文件的所有人和群组属性

       find / -perm -u+s 罗列一个系统中所有使用了SUID控制的文件

       chmod u+s /bin/file1 设置一个二进制文件的 SUID 位 - 运行该文件的用户也被赋予和所有者同样的权限

       chmod u-s /bin/file1 禁用一个二进制文件的 SUID位

       chmod g+s /home/public 设置一个目录的SGID 位 - 类似SUID ，不过这是针对目录的

       chmod g-s /home/public 禁用一个目录的 SGID 位

       chmod o+t /home/public 设置一个文件的 STIKY 位 - 只允许合法所有人删除文件

       chmod o-t /home/public 禁用一个目录的 STIKY 位

       è¿”回顶部索引 ^

       æ–‡ä»¶çš„特殊属性 - 使用 "+" 设置权限，使用 "-" 用于取消

       chattr +a file1 只允许以追加方式读写文件

       chattr +c file1 允许这个文件能被内核自动压缩/解压

       chattr +d file1 在进行文件系统备份时，dump程序将忽略这个文件

       chattr +i file1 设置成不可变的文件，不能被删除、修改、重命名或者链接

       chattr +s file1 允许一个文件被安全地删除

       chattr +S file1 一旦应用程序对这个文件执行了写操作，使系统立刻把修改的结果写到磁盘

       chattr +u file1 若文件被删除，系统会允许你在以后恢复这个被删除的文件

       lsattr 显示特殊的属性

       è¿”回顶部索引 ^

       æ‰“包和压缩文件

       bunzip2 file1.bz2 解压一个叫做 'file1.bz2'的文件

       bzip2 file1 压缩一个叫做 'file1' 的文件

       gunzip file1.gz 解压一个叫做 'file1.gz'的文件

       gzip file1 压缩一个叫做 'file1'的文件

       gzip -9 file1 最大程度压缩

       rar a file1.rar test_file 创建一个叫做 'file1.rar' 的包

       rar a file1.rar file1 file2 dir1 同时压缩 'file1', 'file2' 以及目录 'dir1'

       rar x file1.rar 解压rar包

       unrar x file1.rar 解压rar包

       tar -cvf archive.tar file1 创建一个非压缩的 tarball

       tar -cvf archive.tar file1 file2 dir1 创建一个包含了 'file1', 'file2' 以及 'dir1'的档案文件

       tar -tf archive.tar 显示一个包中的内容

       tar -xvf archive.tar 释放一个包

       tar -xvf archive.tar -C /tmp 将压缩包释放到 /tmp目录下

       tar -cvfj archive.tar.bz2 dir1 创建一个bzip2格式的压缩包

       tar -xvfj archive.tar.bz2 解压一个bzip2格式的压缩包

       tar -cvfz archive.tar.gz dir1 创建一个gzip格式的压缩包

       tar -xvfz archive.tar.gz 解压一个gzip格式的压缩包

       zip file1.zip file1 创建一个zip格式的压缩包

       zip -r file1.zip file1 file2 dir1 将几个文件和目录同时压缩成一个zip格式的压缩包

       unzip file1.zip 解压一个zip格式压缩包

       è¿”回顶部索引 ^

       RPM 包 - （Fedora, Redhat及类似系统）

       rpm -ivh package.rpm 安装一个rpm包

       rpm -ivh --nodeeps package.rpm 安装一个rpm包而忽略依赖关系警告

       rpm -U package.rpm 更新一个rpm包但不改变其配置文件

       rpm -F package.rpm 更新一个确定已经安装的rpm包

       rpm -e package_name.rpm 删除一个rpm包

       rpm -qa 显示系统中所有已经安装的rpm包

       rpm -qa | grep mand <> file1_in.txt_or_file1_out.txt general syntax for text manipulation using PIPE, STDIN and STDOUT

       cat file1 | command( sed, grep, awk, grep, etc...) > result.txt 合并一个文件的详细说明文本，并将简介写入一个新文件中

       cat file1 | command( sed, grep, awk, grep, etc...) >> result.txt 合并一个文件的详细说明文本，并将简介写入一个已有的文件中

       grep Aug /var/log/messages 在文件 '/var/log/messages'中查找关键词"Aug"

       grep ^Aug /var/log/messages 在文件 '/var/log/messages'中查找以"Aug"开始的词汇

       grep [0-9] /var/log/messages 选择 '/var/log/messages' 文件中所有包含数字的行

       grep Aug -R /var/log/* 在目录 '/var/log' 及随后的目录中搜索字符串"Aug"

       sed 's/stringa1/stringa2/g' example.txt 将example.txt文件中的 "string1" 替换成 "string2"

       sed '/^$/d' example.txt 从example.txt文件中删除所有空白行

       sed '/ *#/d; /^$/d' example.txt 从example.txt文件中删除所有注释和空白行

       echo 'esempio' | tr '[:lower:]' '[:upper:]' 合并上下单元格内容

       sed -e '1d' result.txt 从文件example.txt 中排除第一行

       sed -n '/stringa1/p' 查看只包含词汇 "string1"的行

       sed -e 's/ *$//' example.txt 删除每一行最后的空白字符

       sed -e 's/stringa1//g' example.txt 从文档中只删除词汇 "string1" 并保留剩余全部

       sed -n '1,5p;5q' example.txt 查看从第一行到第5行内容

       sed -n '5p;5q' example.txt 查看第5行

       sed -e 's/*/0/g' example.txt 用单个零替换多个零

       cat -n file1 标示文件的行数

       cat example.txt | awk 'NR%2==1' 删除example.txt文件中的所有偶数行

       echo a b c | awk '{ print $1}' 查看一行第一栏

       echo a b c | awk '{ print $1,$3}' 查看一行的第一和第三栏

       paste file1 file2 合并两个文件或两栏的内容

       paste -d '+' file1 file2 合并两个文件或两栏的内容，中间用"+"区分

       sort file1 file2 排序两个文件的内容

       sort file1 file2 | uniq 取出两个文件的并集(重复的行只保留一份)

       sort file1 file2 | uniq -u 删除交集，留下其他的行

       sort file1 file2 | uniq -d 取出两个文件的交集(只留下同时存在于两个文件中的文件)

       comm -1 file1 file2 比较两个文件的内容只删除 'file1' 所包含的内容

       comm -2 file1 file2 比较两个文件的内容只删除 'file2' 所包含的内容

       comm -3 file1 file2 比较两个文件的内容只删除两个文件共有的部分

       è¿”回顶部索引 ^

       å­—符设置和文件格式转换

       dos2unix filedos.txt fileunix.txt 将一个文本文件的格式从MSDOS转换成UNIX

       unix2dos fileunix.txt filedos.txt 将一个文本文件的格式从UNIX转换成MSDOS

       recode ..HTML < page.txt > page.html 将一个文本文件转换成html

       recode -l | more 显示所有允许的转换格式

       è¿”回顶部索引 ^

       æ–‡ä»¶ç³»ç»Ÿåˆ†æž

       badblocks -v /dev/hda1 检查磁盘hda1上的坏磁块

       fsck /dev/hda1 修复/检查hda1磁盘上linux文件系统的完整性

       fsck.ext2 /dev/hda1 修复/检查hda1磁盘上ext2文件系统的完整性

       e2fsck /dev/hda1 修复/检查hda1磁盘上ext2文件系统的完整性

       e2fsck -j /dev/hda1 修复/检查hda1磁盘上ext3文件系统的完整性

       fsck.ext3 /dev/hda1 修复/检查hda1磁盘上ext3文件系统的完整性

       fsck.vfat /dev/hda1 修复/检查hda1磁盘上fat文件系统的完整性

       fsck.msdos /dev/hda1 修复/检查hda1磁盘上dos文件系统的完整性

       dosfsck /dev/hda1 修复/检查hda1磁盘上dos文件系统的完整性

       è¿”回顶部索引 ^

       åˆå§‹åŒ–一个文件系统

       mkfs /dev/hda1 在hda1分区创建一个文件系统

       mke2fs /dev/hda1 在hda1分区创建一个linux ext2的文件系统

       mke2fs -j /dev/hda1 在hda1分区创建一个linux ext3(日志型)的文件系统

       mkfs -t vfat -F /dev/hda1 创建一个 FAT 文件系统

       fdformat -n /dev/fd0 格式化一个软盘

       mkswap /dev/hda3 创建一个swap文件系统

       è¿”回顶部索引 ^

       SWAP文件系统

       mkswap /dev/hda3 创建一个swap文件系统

       swapon /dev/hda3 启用一个新的swap文件系统

       swapon /dev/hda2 /dev/hdb3 启用两个swap分区

       è¿”回顶部索引 ^

       å¤‡ä»½

       dump -0aj -f /tmp/home0.bak /home 制作一个 '/home' 目录的完整备份

       dump -1aj -f /tmp/home0.bak /home 制作一个 '/home' 目录的交互式备份

       restore -if /tmp/home0.bak 还原一个交互式备份

       rsync -rogpav --delete /home /tmp 同步两边的目录

       rsync -rogpav -e ssh --delete /home ip_address:/tmp 通过SSH通道rsync

       rsync -az -e ssh --delete ip_addr:/home/public /home/local 通过ssh和压缩将一个远程目录同步到本地目录

       rsync -az -e ssh --delete /home/local ip_addr:/home/public 通过ssh和压缩将本地目录同步到远程目录

       dd bs=1M if=/dev/hda | gzip | ssh user@ip_addr 'dd of=hda.gz' 通过ssh在远程主机上执行一次备份本地磁盘的操作

       dd if=/dev/sda of=/tmp/file1 备份磁盘内容到一个文件

       tar -Puf backup.tar /home/user 执行一次对 '/home/user' 目录的交互式备份操作

       ( cd /tmp/local/ && tar c . ) | ssh -C user@ip_addr 'cd /home/share/ && tar x -p' 通过ssh在远程目录中复制一个目录内容

       ( tar c /home ) | ssh -C user@ip_addr 'cd /home/backup-home && tar x -p' 通过ssh在远程目录中复制一个本地目录

       tar cf - . | (cd /tmp/backup ; tar xf - ) 本地将一个目录复制到另一个地方，保留原有权限及链接

       find /home/user1 -name '*.txt' | xargs cp -av --target-directory=/home/backup/ --parents 从一个目录查找并复制所有以 '.txt' 结尾的文件到另一个目录

       find /var/log -name '*.log' | tar cv --files-from=- | bzip2 > log.tar.bz2 查找所有以 '.log' 结尾的文件并做成一个bzip包

       dd if=/dev/hda of=/dev/fd0 bs= count=1 做一个将 MBR (Master Boot Record)内容复制到软盘的动作

       dd if=/dev/fd0 of=/dev/hda bs= count=1 从已经保存到软盘的备份中恢复MBR内容

       è¿”回顶部索引 ^

       å…‰ç›˜

       cdrecord -v gracetime=2 dev=/dev/cdrom -eject blank=fast -force 清空一个可复写的光盘内容

       mkisofs /dev/cdrom > cd.iso 在磁盘上创建一个光盘的iso镜像文件

       mkisofs /dev/cdrom | gzip > cd_iso.gz 在磁盘上创建一个压缩了的光盘iso镜像文件

       mkisofs -J -allow-leading-dots -R -V "Label CD" -iso-level 4 -o ./cd.iso data_cd 创建一个目录的iso镜像文件

       cdrecord -v dev=/dev/cdrom cd.iso 刻录一个ISO镜像文件

       gzip -dc cd_iso.gz | cdrecord dev=/dev/cdrom - 刻录一个压缩了的ISO镜像文件

       mount -o loop cd.iso /mnt/iso 挂载一个ISO镜像文件

       cd-paranoia -B 从一个CD光盘转录音轨到 wav 文件中

       cd-paranoia -- "-3" 从一个CD光盘转录音轨到 wav 文件中（参数-3）

       cdrecord --scanbus 扫描总线以识别scsi通道

       dd if=/dev/hdc | md5sum 校验一个设备的md5sum编码，例如一张 CD

       è¿”回顶部索引 ^

       ç½‘络 - （以太网和WIFI无线）

       ifconfig eth0 显示一个以太网卡的配置

       ifup eth0 启用一个 'eth0' 网络设备

       ifdown eth0 禁用一个 'eth0' 网络设备

       ifconfig eth0 ..1.1 netmask ...0 控制IP地址

       ifconfig eth0 promisc 设置 'eth0' 成混杂模式以嗅探数据包 (sniffing)

       dhclient eth0 以dhcp模式启用 'eth0'

       route -n show routing table

       route add -net 0/0 gw IP_Gateway configura default gateway

       route add -net ..0.0 netmask ..0.0 gw ..1.1 configure static route to reach network '..0.0/'

       route del 0/0 gw IP_gateway remove static route

       echo "1" > /proc/sys/net/ipv4/ip_forward activate ip routing

       hostname show hostname of system

       host www.example.com lookup hostname to resolve name to ip address and viceversa(1)

       nslookup www.example.com lookup hostname to resolve name to ip address and viceversa(2)

       ip link show show link status of all interfaces

       mii-tool eth0 show link status of 'eth0'

       ethtool eth0 show statistics of network card 'eth0'

       netstat -tup show all active network connections and their PID

       netstat -tupl show all network services listening on the system and their PID

       tcpdump tcp port show all HTTP traffic

       iwlist scan show wireless networks

       iwconfig eth1 show configuration of a wireless network card

       hostname show hostname

       host www.example.com lookup hostname to resolve name to ip address and viceversa

       nslookup www.example.com lookup hostname to resolve name to ip address and viceversa

       whois www.example.com lookup on Whois database

       GO TOP INDEX ^

       Microsoft Windows networks (SAMBA)

       nbtscan ip_addr netbios name resolution

       nmblookup -A ip_addr netbios name resolution

       smbclient -L ip_addr/hostname show remote shares of a windows host

       smbget -Rr smb://ip_addr/share like wget can download files from a host windows via smb

       mount -t smbfs -o username=user,password=pass //WinClient/share /mnt/share mount a windows network share

Linux 应用案例开发手册——基于Xilinx Zynq-/工业开发板

       开发案例说明

       开发案例位于产品资料“4-软件资料\Demo\tl-linux-application\”路径下的 base-demos 和 python-demos 目录。base-demos目录提供Linux常用开发案例，案例bin目录存放可执行文件，案例src目录存放源码。python-demos目录提供Python开发案例，脚本文件无需编译，可直接运行。测试板卡是基于Xilinx Zynq-系列XC7Z/XC7Z高性能低功耗处理器设计的异构多核SoC工业级核心板。

       若需重新编译Linux常用开发案例，请将对应案例src目录复制到Ubuntu工作目录下，进入src目录执行命令加载PetaLinux环境变量，并执行make命令进行案例编译。编译完成后，将在当前目录下生成可执行文件。

       Linux常用开发案例包括tl_led_flash、tl_key_test和tl_can_echo等。

       tl_led_flash案例功能是通过向评估底板用户指示灯LED设备节点反复交替写入1、0数值，实现LED闪烁效果。LED点亮与熄灭时间均为0.5s。程序流程示意图显示LED设备节点为“/sys/class/leds/user-ledX/”目录下的brightness。

       操作说明包括将案例bin目录下的可执行程序tl_led_flash复制到评估板文件系统，并在可执行程序所在目录执行命令运行程序，即可看到评估底板LED1以0.5s的时间间隔进行闪烁。同时，串口终端打印系统全部LED设备信息和程序当前控制的LED设备信息。

       关键代码包括预定义LED数组、LED亮灭操作和时间间隔。

       tl_key_test案例功能是通过监听用户按键设备节点状态，检测按键事件。程序流程示意图显示用户按键设备节点为“/dev/input/event0”。操作说明包括将案例bin目录下的可执行程序tl_key_test复制到评估板文件系统，在可执行程序所在目录执行命令运行程序，串口终端将打印提示信息。再按下评估板用户按键KEY1，程序将检测到按键事件，并打印按键状态信息。

       关键代码包括定义按键、监听按键事件和循环监听。

       tl_can_echo案例功能使用canutils工具包的canecho程序实现CAN接口数据接收并重发功能。canutils工具包内含5个独立程序，包括canconfig、candump、canecho、cansend、cansequence等。本案例仅使用canecho功能，如需实现其他功能，可自行下载canutils工具包并从中获取对应功能程序源码。操作说明包括使用USB转CAN模块连接评估板CAN接口和PC机USB接口，参照调试工具安装文档安装USB转CAN驱动和ECAN Tools调试软件，双击打开ECAN Tools软件，选择设备类型，然后点击“打开设备”。打开ECAN Tools界面，将案例bin目录下的PL端.bin格式可执行文件复制到评估板文件系统"/lib/firmware/"目录下，并执行命令加载PL端可执行文件。进入评估板文件系统使用文件系统自带的canconfig工具设置波特率，并启动CAN接口。将案例bin目录下的可执行程序tl_can_echo复制到评估板文件系统，执行命令查看程序参数信息，绑定CAN接口并接收由ECAN Tools发出的数据，然后将接收到的数据重新发送出去。

       关键代码包括使用socket监听CAN接口和将从CAN接口接收到的数据重新发送出去。

       tcp_udp_demos案例主要实现客户端(client)与服务端(server)的文本数据相互收发功能。案例包含4个程序，包括tl_tcp_server、tl_tcp_client、tl_udp_server和tl_udp_client。操作说明包括将案例bin目录下的4个可执行程序复制到评估板文件系统，在Ubuntu中执行命令使用OpenSSH登陆评估板文件系统，并在可执行程序所在目录执行命令运行TCP和UDP服务端和客户端程序。程序执行后，客户端将会连接服务端或服务端和客户端程序均在评估板上运行时，可进行本地回环测试。关键代码以TCP通信程序为例，包括注意源码中的数据结构和系统调用的使用。

       Python开发案例包括tl_led_flash和tl_key_test两个简单案例。操作说明包括将案例目录下的脚本文件拷贝到评估板文件系统，并在脚本文件所在目录执行命令查看程序参数信息，执行命令运行脚本程序，即可看到评估底板上的LED闪烁或检测按键事件。关键代码包括查找所有LED设备和控制LED亮灭，以及打开按键设备和监听按键事件。

       以上内容为Linux应用案例开发手册——基于Xilinx Zynq-/工业开发板中的详细开发案例和操作说明。更多关于嵌入式开发的内容分享，欢迎关注Tronlong创龙科技~