如何让应用中的提示工程更能适应未来变化

怎样大语言模型 遵守规则

• 实验背景：让大语言模型可靠地遵守规则很难，尤其是规则数量增多时。之前有人做过测试，在提示词里放400条规则，让模型写短篇故事。
• 实验过程：这次实验试了20多种提示工程技巧，想提高模型的遵守规则率，大部分都失败了。但在提示词顶部加上“Memorize these rules”（记住这些规则）后，OpenAI的gpt - 4.1模型遵守规则的比例从26%提高到了71%。在10次测试里，有3次完全遵守了所有规则，而对照组最好的测试结果只有35%。不过，把这个短语用在gpt - 4o - mini模型上却没什么效果。
• 进一步测试：在5到800条规则的提示词中测试，“memorize these rules”这个短语对gpt - 4.1始终能提高其规则遵守率，但也导致结果的标准差更大了，而gpt - 4o - mini的结果还是不受影响。