Segmentation fault

[yhzhang067]

当我使用viztracer时，使用llamafactory-cli命令出现段错误，去掉viztracer时命令正常执行

$ bash run_all.sh
run_all.sh: line 10: 44682 Segmentation fault (core dumped) viztracer --log_torch --log_func_args --log_func_retval --ignore_c_function --min_duration 1800000ms llamafactory-cli train examples/train_lora/qwen2_lora_sft_small.yaml

[gaogaotiantian]

在没有--log_func_args和--log_func_retval的时候会segfault么？gdb一下有backtrace么？什么版本的python和viztracer？

[yhzhang067]

在没有--log_func_args和--log_func_retval的时候不会segfault，
python=3.10
viztracer=1.0.3
想问一下为什么不能用--log_func_args和--log_func_retval

[yhzhang067]

当我在使用viztracer --log_torch --ignore_c_function --min_duration 1800000ms llamafactory-cli train examples/train_lora/qwen2_lora_sft_small.yaml命令时，内存使用一直在增加，跑了一个小时内存使用增加到了500GB

[gaogaotiantian]

--log_func_args会记录所有的argument，会call一下repr，这个过程中可能会有问题因为你的argument啥的不一定是一个很好的object。当然这个事情本身应该要避免，我只是为了定位一下问题。

这里可能有个内存泄漏的情况，但是viztracer确实一般不是为一个小时的程序准备的。但是没有repro的情况下我也不是非常好判断到底是哪里内存泄漏了。

[yhzhang067]

谢谢你！ Tian Gao ***@***.***>于2025年5月6日 周二23:22写道：

…

*gaogaotiantian* left a comment (gaogaotiantian/viztracer#582) <#582 (comment)> --log_func_args 会记录所有的argument，会call一下repr，这个过程中可能会有问题因为你的argument啥的不一定是一个很好的object。当然这个事情本身应该要避免，我只是为了定位一下问题。 这里可能有个内存泄漏的情况，但是viztracer确实一般不是为一个小时的程序准备的。但是没有repro的情况下我也不是非常好判断到底是哪里内存泄漏了。 — Reply to this email directly, view it on GitHub <#582 (comment)>, or unsubscribe <https://github.com/notifications/unsubscribe-auth/BO3QXYVAZ3A36SDEENVUCH325DHTTAVCNFSM6AAAAAB4QDQYB6VHI2DSMVQWIX3LMV43OSLTON2WKQ3PNVWWK3TUHMZDQNJVGAYDONBSG4> . You are receiving this because you authored the thread.Message ID: ***@***.***>

[yhzhang067]

我设置了让viztracer只记录半小时，但跑到一小时内存还一直在涨

[gaogaotiantian]

你不带viztracer内存涨么？你确定是viztracer导致的么？

[yhzhang067]

是的，我现在不带viztracer，内存不涨 Tian Gao ***@***.***>于2025年5月6日 周二23:38写道：

…

*gaogaotiantian* left a comment (gaogaotiantian/viztracer#582) <#582 (comment)> 你不带viztracer内存涨么？你确定是viztracer导致的么？ — Reply to this email directly, view it on GitHub <#582 (comment)>, or unsubscribe <https://github.com/notifications/unsubscribe-auth/BO3QXYRX6EEWJJFTNVFHGE325DJQLAVCNFSM6AAAAAB4QDQYB6VHI2DSMVQWIX3LMV43OSLTON2WKQ3PNVWWK3TUHMZDQNJVGA2TOMJUGA> . You are receiving this because you authored the thread.Message ID: ***@***.***>

[gaogaotiantian]

这个情况需要一个reproducible example我才能去看。

[gaogaotiantian]

这个--log_func_args的segfault如果有个example我可以修一下。