linux systemd 服务连续启动失败，不会再重启分析

1. 问题现象

在Linux 系统中，将自已写的可执行文件放到 systemd 服务中做成service 服务，以支持开机自启和失败重启。但是发现服务在重启多次失败后再也起不来，服务状态是 failed，并且报 start request repeated too quickly.

2. 问题排查

2.1 自定义的test 服务脚本

由于restart 使用的选项是alwayls， 所以按常理服务应该会一直尝试重启，但是实际失败后就没有再重启。

2.2 原因分析

这是由于systemd 通过选项控制，由 StartLimitIntervalSec= 和 StartLimitBurst= 选项 和Restart= 选项限制服务在特定时间内的重启次数。

而 StartLimitBurst= 默认值为5 ，StartLimitIntervalSec= 的默认值为10，这个可以从systemd的源码中搜索到

#DefaultStartLimitBurst=5
https://github.com/systemd/systemd/blob/994c7978608a0bd9b317f4f74ff266dd50a3e74e/src/core/system.conf.in#L52
https://github.com/systemd/systemd/blob/994c7978608a0bd9b317f4f74ff266dd50a3e74e/src/core/user.conf.in#L33

这个就与图 1 restart counter is at 5 完全一致。

如果需要修改这个值，可以通过修改 /etc/systemd/system.conf 配置文件

https://serverfault.com/questions/845471/service-start-request-repeated-too-quickly-refusing-to-start-limit

3. 篇外

3.1 systemd restart 的选项

选项	作用
no	服务不会自动重启
on-success	在服务正常退出（退出状态码为 0）时重启
on-failure	当服务异常退出（退出状态码非 0）或被信号终止时重启
on-abnormal	当服务被信号终止或由于系统异常（如崩溃）退出时重启
always	无论服务如何退出（正常或异常），都会自动重启

3.2 systemd

systemd 服务分为 系统级别和用户级别，系统级别的xxx.service 在/lib/systemd/system/ 中， 用户级别在/usr/lib/systemd/system/下