chaos
#System
#Linux
#运维
背景需求 遇到一个需要使用scp/rsync向远端传送当前文件夹下前n个文件的需求,若要一个一个的手输也不是不行,但总感觉有一些蠢
解决方案 xargs功能强大 xargs(英文全拼: eXtended ARGuments)是给命令传递参数的一个过滤器,也是组合多个命令的一个工具。 xargs 可以将管道或标准输入(stdin)数据转换成命令行参数,也能够从文件的输出中读取数据。 xargs 也可以将单行或多行文本输入转换为其他格式,例如多行变单行,单行变多行。 xargs 是一个强有力的命令,它能够捕获一个命令的输出,然后传递给另外一个命令。 详解 首先是要拿到该文件夹下的前n个文件 ls | head -100
利用rsync向远端传输文件 rsync -avzP <file_names> user@remote
使用xargs省去手动输入文件列表 ls | head -100 |xargs -i rsync -avzP {} user@remote
注意事项 args 默认的命令是 echo,这意味着通过管道传递给 xargs 的输入将会包含换行和空白,不过通过 xargs 的处理,换行和空白将被空格取代。 xargs 一般是和管道一起使用。
chaos
#深度学习
#System
#Linux
背景 NVIDIA-container-runtime是在docker容器中映射本机显卡必备的运行时 NVIDIA推出该工具之后搭配新版本的docker就不需要使用单独版本的docker启动支持显卡的容器 开始动手 添加安装源 官网比较难进,酌情查看
Debian-based distributions Debian/Ubuntu/…
curl -s -L https://nvidia.github.io/nvidia-container-runtime/gpgkey | \ sudo apt-key add - distribution=$(. /etc/os-release;echo $ID$VERSION_ID) curl -s -L https://nvidia.github.io/nvidia-container-runtime/$distribution/nvidia-container-runtime.list | \ sudo tee /etc/apt/sources.list.d/nvidia-container-runtime.list sudo apt-get update RHEL-based distributions CentOS/Fedora/Oracle/…
distribution=$(. /etc/os-release;echo $ID$VERSION_ID) curl -s -L https://nvidia.github.io/nvidia-container-runtime/$distribution/nvidia-container-runtime.repo | \ sudo tee /etc/yum.repos.d/nvidia-container-runtime.repo 更新密钥 安装源来自于nvidia官网,可能会有些慢
Debian-based distributions curl -s -L https://nvidia.github.io/nvidia-container-runtime/gpgkey | \ sudo apt-key add - RHEL-based distributions DIST=$(sed -n 's/releasever=//p' /etc/yum.conf) DIST=${DIST:-$(. /etc/os-release; echo $VERSION_ID)} sudo rpm -e gpg-pubkey-f796ecb0 sudo gpg --homedir /var/lib/yum/repos/$(uname -m)/$DIST/nvidia-container-runtime/gpgdir --delete-key f796ecb0 安装 安装源来自于nvidia官网,可能会有些慢
chaos
#日常使用
#Linux
#系统
场景 自用linux系统装在一块不是太稳定的硬盘里,很多服务启动脚本、docker容器脚本需要定期备份到另一块硬盘上 硬连接不适用于文件夹、跨盘连接 软链接在源文件丢失、挂掉的情况下会失效 解决方案 使用简单的一个shell脚本向目标位置复制需要备份的文件(夹) crontab是linux提供的定时任务,搭配上述脚本实现每xx时间自动执行shell脚本 脚本 services=( \ "path/to/some/file/or/folder" \ "path/to/another/file/or/folder" \ ) destination="/path/to/destination/folder/" for elem in ${services[@]} do echo "# Backuping $elem" cp -r $elem $destination done echo "--------------------------------" date echo "- All backup task completed! -" echo "--------------------------------" echo "--------------------------------" echo -e "\n\n" 设置定时任务 打开定时任务编辑 crontab -e 添加任务 # backup all of my services at 3:50 every day 50 3 * * * bash /path/to/backup_services.sh >> /path/to/backup.