chain of thought

經過思考鏈

總結並分類有關COT的相關論文。

關於COT的原始工作：

• 首次發佈時間：2022年1月28日
• 標題：經過思考的促使大語言模型引起推理
• 會議：神經2022

內容

• 相關調查
• COT增強
• 兩種主要類型的COTS
• 為什麼COT工作？ - 嬰兒床分析
• 嬰兒床評估
• 其他類型的嬰兒床

相關調查

首次發佈時間	標題	會議
2023年9月27日	對思想推理鏈的調查：進步，邊界和未來	arxiv
2023年2月15日	增強語言模型：調查	arxiv
2023年1月4日	迭代分解：通過監督推理過程改善科學問答	arxiv
2022年12月20日	在大型語言模型中進行推理：一項調查	ACL 23發現
2022年12月19日	使用語言模型提示推理：調查	ACL 2023

COT增強

首次發佈時間	標題	什麼變化？
2022年3月21日	自諧情緒改善了語言模型中的思想推理鏈	天真的貪婪解碼=>自矛盾

兩種主要類型的COTS

零射：

首次發佈時間	標題	會議
2023年5月6日	計劃和解決提示：通過大型語言模型改善零擊鍊鍊的推理	ACL 23
2022年11月3日	大型語言模型是人級及時的工程師	ICLR 23
2022年5月24日	大型語言模型是零擊的推理器	Neurips2022

少數：五個子組

• 與代碼生成有關
• 自動嬰兒床
• 迭代提示COT
• 涉及問題分解
• 混合

與代碼生成有關

首次發佈時間	標題	會議
2022年11月22日	思想計劃提示：將計算與數值推理任務的推理解開	arxiv
2022年11月18日	PAL：程序輔助語言模型	ICML 2023
2022年10月13日	代碼的語言模型是幾乎沒有常識的學習者	EMNLP 2022

涉及問題分解

首次發佈時間	標題	會議
2022年12月8日	連續提示分解複雜問題	EMNLP 2022
2022年10月7日	測量和縮小語言模型中的組成差距	EMNLP 2023（發現）
2022年10月5日	分解提示：解決複雜任務的模塊化方法	ICLR 2023
2022年5月21日	最小一是提示可以在大語言模型中實現複雜的推理	ICLR 2023
2022年5月19日	選擇推導：利用大型語言模型用於可解釋的邏輯推理	ICLR 2023
2022年5月15日	seqzero：帶有順序提示和零射模型的幾乎沒有彈奏的構圖語義解析	NAACL 2022的發現

自動嬰兒床

首次發佈時間	標題	會議
2023年2月24日	自動及時及時的增強和選擇，並從標記的數據中進行思考	arxiv
2022年10月7日	自動思想鏈在大型語言模型中提示	ICLR 23

為什麼COT工作？ - 嬰兒床分析

首次發佈時間	標題	會議
2022年12月20日	旨在理解思想鏈的提示：一項關於重要的事情的實證研究	ACL 2023
2022年11月25日	互補的解釋，用於有效的內在學習	ACL 2023（發現）
2022年10月3日	語言模型是貪婪的推理者：對經營鏈的系統形式分析	ICLR 2023
2022年9月16日	文本和模式：為了有效的思想鏈，探戈需要兩個	Google研究

嬰兒床評估

其他類型的嬰兒床

首次發佈時間	姓名	標題	會議
2023年5月28日	tab-cot	tab-cot：零拍表的思想鏈	ACL 23發現
2023年5月17日	思想樹	思想樹：大型語言模型的故意解決問題	arxiv
2023年5月9日	記憶思想	MOT：預先思考和回憶使Chatgpt能夠與想法的記憶自我爆發	arxiv
2022年11月22日	思想計劃	思想計劃提示：將計算與數值推理任務的推理解開	arxiv