如何确保Deepseek R1 不会生成过于离谱的文风？

病理医师

Temperature设定为0.4，Top P是0.7，但是生成出来还是这么离谱，有什么办法改善吗？Claude和ChatGPT都挺正常的。

原文地址：https://www.zhihu.com/question/12575751106

继续前进

Deepseek R1 这玩意儿，确实有时候会放飞自我，整出点让人哭笑不得的文风。毕竟，大模型嘛，你喂它啥，它就学啥，保不齐就学歪了。
但要说怎么避免它生成过于离谱的内容，在知乎混，咱得讲究个“专业”、“客观”、“有理有据”，还得带点“抖机灵”和“内涵”，对吧？所以，我给你捋捋，从几个方面下手：
一、 训练数据：这可是根基，得扎实！
  * 专业领域数据加餐：  想让 R1 在某个领域（比如计算机科学、法律、医学）输出专业内容？那就得喂它这个领域的专业书籍、论文、报告。
* “抖机灵”素材精选：  知乎的“抖机灵”也是一大特色，但得把握好度。可以收集一些高赞的、幽默而不低俗的回答，让 R1 学会“适度玩梗”。
* “反面教材”也要有：  光喂“正面”的还不够，还得让 R1 见识见识啥叫“离谱”。收集一些典型的“钓鱼贴”、“引战贴”、“无脑黑”的回答，让 R1 知道啥是“雷区”，要避开。
二、 模型调教：得让 R1 听话！
* 微调 (Fine-tuning) 是王道：  预训练模型只是个“毛坯”，得用知乎的数据对它进行“精装修”。这样，R1 才能更好地理解知乎的语言风格和表达习惯。
* 参数调整要精细：  Temperature、Top-k、Top-p 这些参数，都得好好调。想让 R1 更“稳重”，就把 Temperature 调低点；想让它更“活泼”，就调高点。Top-k 和 Top-p 也是同理，控制生成内容的多样性。
* 强化学习 (Reinforcement Learning) 试试看？  可以设计一套奖励机制，对 R1 生成的符合知乎风格的回答进行奖励，对“离谱”的回答进行惩罚。让 R1 在“奖惩”中不断学习，越来越“懂事”。
三、 Prompt 工程：引导 R1 输出“知乎体”！
* 角色扮演：  给 R1 设定一个角色，比如“你是一个在知乎上回答问题的专业人士”，“你是一个对 XXX 领域有深入研究的知乎用户”。
* 问题类型明确：  告诉 R1 你要问的是什么类型的问题，比如“请用知乎体的风格回答这个问题：XXX”，“请以专业、客观的口吻分析 XXX”。
* 关键词引导：  在 prompt 中加入一些知乎常用的关键词，比如“谢邀”、“利益相关”、“先说结论”、“如何评价”、“有哪些”、“体验如何”等等。
* 示例大法好：  给 R1 看几个知乎高赞回答的例子，让它“照葫芦画瓢”。
* “反向 Prompt”也重要： 明确告诉 R1 不要干什么，比如“不要抖机灵过头”，“不要使用过于专业的术语，要通俗易懂”，“不要长篇大论，要简洁明了”。
四、 后期处理：最后一道防线！
* 人工审核不能省：  机器毕竟是机器，难免会出岔子。所以，人工审核还是很有必要的，特别是对于一些重要的、敏感的内容。
* “知乎警察”出动：  可以建立一个“知乎警察”团队（或者利用现有的知乎社区力量），对 R1 生成的内容进行监督和举报，及时发现并纠正“离谱”的文风。
* 用户反馈机制：  让用户对 R1 生成的内容进行评价和反馈，帮助 R1 不断改进。
希望这个回答对你有帮助！

同花顺

过于离谱吗？这里面有好的地方啊，后现代风格比较鲜明。至于问题本身抱歉我不太会。但这个文写的还行，其实，你自己再改改呗。

继续前进

从题主的截图看来，题主应该用的是 ChatBox ，这个工具只支持 Temperature 和 Top_p ，其实如果按照题主的需求来看的话，最好是换个工具，这个工具应该包含 presence_penalty （降低离题风险）、frequency_penalty（抑制怪异词汇）以及 max_tokens （防止长文本发散）。
不过题主仍然要用的的话，建议调整 Temperature=0.3 、Top_p=0.4，这种组合相对比较严谨一些，然后提示词里加入这些：

避免使用以下内容：夸张比喻或网络流行语、主观臆测或未经验证的信息、过于口语化的表达等

然后先别急于直接写，得先测试一下：
比如问它：
“请用200字说明太阳为什么发光？”
如果按照理想严谨的参数调整的话，正常回答应该会出现：核聚变、氢元素、能量转化等等关键词，并且语句严谨。
如果出现“太阳公公正在燃烧自己”这样的句子或者词汇，那还得继续调整，直到满意为止。
另附Temperature、Top_p组合的参考建议：

问题类型	Temperature	Top_p	效果
学术论文	0.2	0.3	绝对严谨模式
商业报告	0.3	0.5	平衡专业性与可读性
创意写作	0.7	0.9	放飞自我（慎用）