在Jetson Orin Nano这类嵌入式Linux设备上运行程序时，日志输出卡住是很常见的问题，程序可能仍在正常运行，但日志不再更新，导致我们无法及时掌握程序状态。下面从常见原因出发，介绍对应的排查和解决方式。
常见原因分析
1. 标准输出缓冲未刷新
Linux下标准输出默认是行缓冲模式，当输出内容没有换行符时，内容会暂存在缓冲区，不会立即输出到终端或日志文件。如果程序长时间没有输出换行，就会出现日志卡住的假象。
2. 日志文件被占用或锁死
如果多个进程同时写同一个日志文件，或者日志文件被其他进程锁定，写操作会被阻塞，导致日志输出停滞。另外，日志文件所在磁盘分区满了，也会无法写入新内容。
3. 程序陷入阻塞或死循环
程序可能在等待IO操作、网络请求或者锁资源，进入阻塞状态，不再执行日志输出逻辑。也可能陷入死循环，但是没有新的日志打印语句被执行。
排查步骤
第一步：检查程序运行状态
使用ps命令查看程序是否还在运行，查看CPU和内存占用情况，判断程序是否陷入死循环或者阻塞。
# 查看程序进程，假设程序名为test_app ps aux | grep test_app # 查看进程资源占用 top -p 进程ID
第二步：检查日志输出缓冲
如果是Python程序，可以在打印后手动调用刷新缓冲的方法，或者设置标准输出无缓冲。
import sys
# 打印后手动刷新缓冲
print("测试日志")
sys.stdout.flush()
# 或者启动程序时设置无缓冲
# python -u test.py第三步：检查磁盘和日志文件状态
查看日志所在分区的磁盘使用情况，以及日志文件是否被其他进程占用。
# 查看磁盘使用情况 df -h # 查看日志文件被哪些进程打开 lsof /path/to/log/file.log
第四步：检查程序阻塞点
使用strace命令跟踪程序的系统调用，判断程序是否卡在某个IO或者等待操作上。
# 跟踪进程的系统调用 strace -p 进程ID
解决方法
- 如果是缓冲问题，在代码中手动刷新缓冲，或者启动程序时关闭标准输出缓冲。
- 如果是磁盘满了，清理无用文件释放磁盘空间，或者更换日志存储路径。
- 如果是程序阻塞，根据
strace的结果调整代码逻辑，比如设置IO超时、避免长时间等待无响应的资源。 - 如果是日志文件被占用，停止占用日志文件的进程，或者修改程序日志写入逻辑，避免多进程写同一个文件。
预防建议
日常开发中可以在日志输出后默认添加刷新逻辑，定期清理日志文件避免磁盘占满，对关键IO操作设置超时机制，减少日志卡住问题的发生概率。
Jetson_Orin_NanoLinux日志程序卡住日志输出stdout缓冲修改时间：2026-06-06 05:43:30