如何讓應用中的提示工程更能適應未來變化

怎樣大語言模型 遵守規則

• 實驗背景：讓大語言模型可靠地遵守規則很難，尤其是規則數量增多時。之前有人做過測試，在提示詞里放400條規則，讓模型寫短篇故事。
• 實驗過程：這次實驗試了20多種提示工程技巧，想提高模型的遵守規則率，大部分都失敗了。但在提示詞頂部加上“Memorize these rules”（記住這些規則）后，OpenAI的gpt - 4.1模型遵守規則的比例從26%提高到了71%。在10次測試里，有3次完全遵守了所有規則，而對照組最好的測試結果只有35%。不過，把這個短語用在gpt - 4o - mini模型上卻沒什么效果。
• 進一步測試：在5到800條規則的提示詞中測試，“memorize these rules”這個短語對gpt - 4.1始終能提高其規則遵守率，但也導致結果的標準差更大了，而gpt - 4o - mini的結果還是不受影響。