我同时装了oc和Hermes,一样的模型(minimax 2.7),一样的soul.md,一样的skill。
场景一:一样的问题(关于skill中知识库的),oc的反馈往往很准,甚至还考虑到了边界问题,还有举例,而Hermes幻觉严重,经常回答内容完全不是根据skill中的内容。
场景二:根据要求制作ppt、编写文档等,结果往往是OC内容更可读,Hermes的内容总是奇奇怪怪的各种问题。虽然oc的ppt内容也得人工修改一下。
场景三:自进化机制,oc通过memory.md进化,但是除非prompt里明确指出了,要让他记住什么事情,这个知识其实很难进入memory.md,即便我已经安装了self imporving,evolver什么的skill。反观Hermes呢,也有这个问题,不会记住一些应该记住的事情,但是会把一些可以重复的工作流生成skill,例如让他从clawhub同步skill,第一次做了就生成了skill。所以这一点我觉得Hermes小胜,但是没有什么大的离线。
最后,关于Soul.md,这两个工具的soul几乎没有演进过,不知道是什么原因。
8 个帖子 - 4 位参与者