Marco Nie - 2021年5月 https://blog.niekun.net/2021/05/ zh-CN you are the company you keep... Mon, 31 May 2021 18:33:51 +0800 Mon, 31 May 2021 18:33:51 +0800 理解 Linux shell 脚本的 2>&1 https://blog.niekun.net/archives/2320.html https://blog.niekun.net/archives/2320.html Mon, 31 May 2021 18:33:51 +0800 admin 我们在编程中经常会使用一些固定语句来解决对应固定的问题,在 shell 脚本中一个被经常使用但不太好理解的短句就是 2>&1,例如:

ls foo > /dev/null 2>&1

下面我们一步步了解下这种结构的含义。

I/O redirection 重定向

简单理解,redirection 重定向就是将一个命令的 output 输出发送到另一个地方。例如,我们通过 cat 命令打印一个文件的内容到屏幕:

$ cat foo.txt
foo
bar
baz

我们也可以将输出的内容发送到其他地方,例如将内容重定向到另一个文件 file.txt:

$ cat foo.txt > output.txt

$ cat output.txt
foo
bar
baz

执行第一条 cat 命令,我们不会看到任何输出信息,因为我们修改了 standard output (stdout)标准输出到一个文件,所以它就不会输出到屏幕了。

需要注意的是还有另一个地方:standard error (stderr)标准错误,当有错误时会输出信息。所以当我们通过 cat 命令输出一个不存在的文件内容时:

$ cat nop.txt > output.txt
cat: nop.txt: No such file or directory

以上示例中即使我们将 stdout 重定向到一个文件了,由于 output.txt 不存在,stderr 依然会输出错误信息到屏幕。因为我们重定向的只是 stdout 而不包括 stderr

file descriptors 文件描述器

一个文件描述器是一个正整数,用来表示一个打开文件的。每个文件都有其各自的文件描述器。这里我们只需要知道 stdoutstderr 有其各自的文件描述器 id 定义了它们各自的地址。

stdout1stderr2

在之前的示例中,我们可以修改命令为如下结构:

cat foo.txt 1> output.txt

这里的 1 就是 stdout 的文件描述器,通过重定向语法 [FILE_DESCRIPTOR]>stdout 重定向到另一个文件。注意 1> 可以简写为 >

类似的,可以将 stderr 重定向到指定的目的地:

$ cat nop.txt 2> error.txt

$ cat error.txt
cat: nop.txt: No such file or directory

这样就会将 error 存入 error.txt 文件,屏幕上不会输出任何信息。

下面我们理解下 2>&1 的意义。我们使用 &1 来指向 stdout 的重定向地址,所以 2>&1 表示重定向 stderr 到和 stdout 同样的重定向位置上。所以我们就可以通过下面示例的方法同时将 stdoutstderr 重定向到同一个文件中:

$ cat foo.txt > output.txt 2>&1

$ cat output.txt
foo
bar
baz

$ cat nop.txt > output.txt 2>&1

$ cat output.txt
cat: nop.txt: No such file or directory

总结

  • 有两个地方用来让程序发送输出内容:stdoutstderr
  • 可以单独定义两个输出的重定向目的地
  • 文件描述器用来识别 stdout (1)stderr (2)
  • command > outputcommand 1> output 的简写
  • 通过 &[FILE_DESCRIPTOR] 指向一个文件描述器的重定向目标地址上
  • 2>&1 可以将 stderr 重定向到 stdout 同样的重定向地址上。反之亦然。

参考链接

Understanding Shell Script's idiom: 2>&1
In the shell, what does “ 2>&1 ” mean?

]]>
0 https://blog.niekun.net/archives/2320.html#comments https://blog.niekun.net/feed/2021/05/
通过 telegram-cli 命令行发送 telegram 消息 https://blog.niekun.net/archives/2310.html https://blog.niekun.net/archives/2310.html Tue, 18 May 2021 20:08:00 +0800 admin 最近需要实现一个自动发送 telegram 消息的功能,GitHub 上发现一个 telegram 第三方的命令行终端:telegram-cli。可以实现我需要的功能。

GitHub 主页:https://github.com/vysheng/tg

测试平台为 Ubuntu 18.04

安装

有两种方法安装,第一种是通过 snap 应用商店来安装,第二种是从源码安装。

snap 安装需要首先安装 snap 环境:

sudo apt install snapd

然后就可以安装 telegram-cli:

sudo snap install telegram-cli

默认安装路径为:/snap/bin/telegram-cli

从源码编译稍微有些麻烦,因为 GitHub 上的源码最近更新是 2016 年,经过我的测试在 make 时会报错,查询后需要增加安装相关依赖库及调整配置选项后才能正常编译。

首先安装依赖:

 sudo apt-get install libreadline-dev libconfig-dev libssl-dev lua5.2 liblua5.2-dev libevent-dev libjansson-dev libpython-dev zlib1g-dev libgcrypt20-dev make

下载仓库源码:

git clone --recursive https://github.com/vysheng/tg.git && cd tg

然后配置 configure:

./configure --disable-openssl

最后编译:

make

编译完成后可执行文件在项目源码的 bin 文件夹内。

使用

安装完成后需要配置账户信息,输入 telegram-cli 命令:

telegram-cli

会提示输入手机号,验证码和密码等信息,按照提示输入完成后就会登录到 telegram-cli 中了。

这时候通过 msg USERNAME message 的模式来给某个对话发送消息了:

> msg my_bot test

USERNAME 可以是某个用户,Bot 或者 channel。可以直接使用其名称或者通过@username的方式定义会话对象。

经过我的测试,第一次登录到 telegram-cli 后,直接给某个对象发送消息会提示:error FAIL: 38: can not parse arg #1,但是我的用户名写的是没问题的。这时候需要首先执行一下 dialog_list 会输出当前登录账户的会话列表,可以看到每个会话的对象名称,这时候就可以正常通过使用对象名称或者 @username 来发送消息了。

以上的操作都是在登录到 telegram-cli 中进行的,可以通过 quitsafe_quit 命令退出 telegram-cli 程序:

> quit

我们也可以直接通过 telegram-cli 命令发送给某个对象消息,需要 -e 参数加执行的命令,例如:

telegram-cli -e "msg @username message"

建议执行时加上 -W参数以加载 dialog 列表,否则可能出现报警:error FAIL: 38: can not parse arg #1

telegram-cli -W -e "msg @username message"

使用 -D 参数可以关闭输出信息。使用 -U 参数可以自定义命令执行的用户。

更多 telegram-cli 可用参数如下:

# telegram-cli -h
telegram-cli Usage
  --phone/-u                           specify username (would not be asked during authorization)
  --rsa-key/-k                         specify location of public key (possible multiple entries)
  --verbosity/-v                       increase verbosity (0-ERROR 1-WARNIN 2-NOTICE 3+-DEBUG-levels)
  --enable-msg-id/-N                   message num mode
  --config/-c                          config file name
  --profile/-p                         use specified profile
  --log-level/-l                       log level
  --sync-from-start/-f                 during authorization fetch all messages since registration
  --disable-auto-accept/-E             disable auto accept of encrypted chats
  --lua-script/-s                      lua script file
  --wait-dialog-list/-W                send dialog_list query and wait for answer before reading input
  --disable-colors/-C                  disable color output
  --disable-readline/-R                disable readline
  --alert/-A                           enable bell notifications
  --daemonize/-d                       daemon mode
  --logname/-L <log-name>              log file name
  --username/-U <user-name>            change uid after start
  --groupname/-G <group-name>          change gid after start
  --disable-output/-D                  disable output
  --tcp-port/-P <port>                 port to listen for input commands
  --udp-socket/-S <socket-name>        unix socket to create
  --exec/-e <commands>                 make commands end exit
  --disable-names/-I                   use user and chat IDs in updates instead of names
  --enable-ipv6/-6                     use ipv6 (may be unstable)
  --help/-h                            prints this help
  --accept-any-tcp                     accepts tcp connections from any src (only loopback by default)
  --disable-link-preview               disables server-side previews to links
  --bot/-b                             bot mode
  --json                               prints answers and values in json format
  --permanent-msg-ids                  use permanent msg ids
  --permanent-peer-ids                 use permanent peer ids

crontab 定时任务

可以通过 crontab 设置定时自动发送消息。

首先编辑执行脚本,将如下示例代码保存在 test.sh 中:

#!/bin/sh
LOGFILE="/home/log/submit_code.log"

telegram-cli -U root -W -e "msg USERNAME test" >> ${LOGFILE}

以上脚本通过 root 用户执行发送消息,会首先加载 dialog list 然后发送消息,最后退出会话。

脚本中我配置了将发送信息保存在 log 文件中,也可以不保存日志,去掉最后的 >> ${LOGFILE} 即可。

然后配置 crontab 定时任务,可以参考我的教程:https://blog.niekun.net/archives/461.html

需要注意的是通过 snap 安装的 telegram-cli 可执行程序目录默认在 /snap/bin 目录下。需要将路径定义到 crontab 配置文件中才可以正常识别到脚本中的 telegram-cli 命令。

编辑 /etc/crontab 文件:

SHELL=/bin/sh
PATH=/usr/local/sbin:/usr/local/bin:/sbin:/bin:/usr/sbin:/usr/bin:/snap/bin
HOME=/root

10  9  *  *  * root bash   /path/to/test.sh

注意 PATH 参数最后添加的 /snap/bin,如果是通过其他方式安装的 telegram-cli,需要根据实际情况定义可执行程序路径。

保存文件后,会自动在 9 点 10 分自动执行 test.sh 脚本。

参考链接

How to install telegram-clion Ubuntu
使用telegram-cli命令行发送信息
LXK0301京东签到脚本-自动提交互助码
FAIL: 38: can not parse arg #1

]]>
0 https://blog.niekun.net/archives/2310.html#comments https://blog.niekun.net/feed/2021/05/