怎么处理特殊token

最近遇到这样的问题,很多日志和内容本身有 <|im_end|>这种tag,在codex这种咋解决,做一个替换+文字说明吗(hook来解决)? 1 个帖子 - 1 位参与者 阅读完整话题...
怎么处理特殊token
怎么处理特殊token

最近遇到这样的问题,很多日志和内容本身有 <|im_end|>这种tag,在codex这种咋解决,做一个替换+文字说明吗(hook来解决)?

1 个帖子 - 1 位参与者

阅读完整话题

来源: LinuxDo 最新话题查看原文