رهيبة LLM SELFENTENTENT: قائمة منسقة من التوافق الذاتي في نماذج اللغة الكبيرة
يحتوي هذا المستودع ، الذي يطلق عليه التوافق الذاتي لـ LLMS ، على مجموعة من الموارد والأوراق حول الاتساق الذاتي في نماذج اللغة الكبيرة .
" لا يمكنني رؤية طريق يضمن السلامة. نحن ندخل فترة من عدم اليقين الكبير حيث نتعامل مع الأشياء التي لم نتعامل معها من قبل ، ولا يمكننا أن نخطئ في هذه الأشياء لأنهم قد يتولىون. " - جيفري هينتون ، أستاذ علوم الكمبيوتر ، جامعة تورنتو ، 5 أكتوبر 2023
مرحبًا بك في مشاركة أوراقك وأفكارك وأفكارك من خلال تقديم مشكلة!
تعليم نماذج اللغة للعقل
ديني تشو ، Google DeepMind
[وصلة]
سبتمبر 2023
الطريق إلى الذكاء العام الاصطناعي: رؤى من حوار LLM العداد
إدوارد ي. تشانغ
Socrasynth.com ، [رابط]
مارس 2024
نماذج الأساس لمعالجة اللغة الطبيعية: نماذج اللغة التي تم تدريبها مسبقًا تدمج الوسائط
Gerhard Paaß ، Sven Giesselbach
الذكاء الاصطناعي: الأسس ، النظرية ، والخوارزميات (Nature Springer) ، [Link]
16 فبراير 2023
GSM8K-Consistency :
اتساق التفكير الحسابي على معيار GSM8K
شويو جيا
معانقة الوجه 2023 ، [وجه المعانقة] [جيثب]
01 ديسمبر 2023
GSM8K :
تحديات التدريب لحل مشاكل كلمات الرياضيات
كارل كوببي ، فينيت كوساراجو ، محمد بافاريان ، مارك تشن ، هيوو جون ، لوكاس كايزر ، ماتياس بلاببرت ، جيري تويرك ، جاكوب هيلتون ، ريشيرو ناكانو ، كريستوفر هيس ، جون شولمان
Arxiv 2021 ، [Paper] [Github] [Post Blog]
18 نوفمبر 2021
واحد :
تحليل مشاكل الكلمات الجبرية في المعادلات
Rik Koncel-Kedziorski ، Hannaneh Hajishirzi ، Ashish Sabharwal ، Oren Etzioni ، Siena Dumas Ang
TACL 2015 ، [Paper] [Gitlab]
24 يونيو 2015
addsub :
تعلم حل مشاكل الكلمات الحسابية مع تصنيف الفعل
محمد جافاد حسيني ، هانانه هاجشييرزي ، أورين إيتزيوني ، نيت كوشمان
EMNLP 2014 ، [ورقة] [Gitlab]
25 أكتوبر 2014
multiarith :
حل مشاكل الكلمات الحسابية العامة
سوبهرو روي ، دان روث
EMNLP 2015 ، [ورقة] [صفحة الويب]
17 سبتمبر 2015
مسار أكوا :
تحريض البرنامج عن طريق توليد الأساس المنطقي: تعلم حل وشرح مشاكل الكلمات الجبرية
وانغ لينغ ، داني يوجاتاما ، كريس داير ، فيل بلونسوم
ACL 2017 ، [Paper] [Github]
30 يوليو 2017
سفامب :
هل نماذج NLP قادرة حقًا على حل مشاكل كلمات الرياضيات البسيطة؟
أركيل باتيل ، ساتويك بهاتاميشرا ، نافين جويال
NAACL 2021 ، [ورقة] [جيثب]
6 يوليو 2021
أسديف :
مجموعة متنوعة لتقييم وتطوير حلول مشكلات كلمات الرياضيات الإنجليزية
Shen-yun Miao ، Chao-Chun Liang ، Keh-Yih Su
ACL 2020 ، [ورقة] [Github]
5 يوليو 2020
CSQA :
Comminenseqa: سؤال يجيب على التحدي الذي يستهدف المعرفة المنطقية
آلون تالمور ، جوناثان هيرزيج ، نيكولاس لوري ، جوناثان بيرانت
NAACL 2019 ، [ورقة] [صفحة الويب]
15 مارس 2019
بيكل :
Becel: معيار لتقييم الاتساق لنماذج اللغة
ميونغجون يانغ ، ديوك سين كوون ، توماس لوكاسيفيتشز
Coling 2022 ، [ورقة] [جيثب]
12 أكتوبر 2022
أسئلة فرقة معاد صياغة :
تحسين متانة أنظمة الإجابة على الأسئلة لاستجواب إعادة صياغة
وي تشونغ غان ، Hwee Tou ng
ACL 2019 ، [ورقة] [Github]
28 يوليو 2019
بيكل :
Becel: معيار لتقييم الاتساق لنماذج اللغة
ميونغجون يانغ ، ديوك سين كوون ، توماس لوكاسيفيتشز
Coling 2022 ، [ورقة] [جيثب]
12 أكتوبر 2022
اثنين من الإخفاقات في الاتساق الذاتي في التفكير متعدد الخطوات من LLMS
أنجليكا تشن ، جيسون فانغ ، أليسيا باريش ، فيشاخ بادماكومار ، تشن تشاو ، صموئيل ر. بومان ، كيونغيون تشو
Arxiv 2023 ، [ورقة]
2 أكتوبر 2023
Mpararel :
ماريل: الاتساق الواقعي لنماذج اللغة المتعددة اللغات المسبقة
كونستانزا فييرو ، أندرس سوجارد
نتائج ACL: ACL 2022 ، [Paper] [Github]
22 مارس 2022
النظرية :
Pararel: Metal :: قياس وتحسين الاتساق في نماذج اللغة المسبق
Yanai Elazar ، Nora Kassner ، Shauli Ravfogel ، Abhilasha Ravichander ، Eduard Hovy ، Hinrich Schütze ، Yoav Goldberg
TACL 2021 ، [ورقة] [GitHub] [عرض]
29 مايو 2021
Math-shepherd: تحقق وتعزيز LLMS خطوة بخطوة بدون تعليقات بشرية
Peiyi Wang ، Lei Li ، Zhihong Shao ، Rx Xu ، Damai Dai ، Yifei Li ، Deli Chen ، Y.Wu ، Zhifang Sui
Arxiv 2023 ، [ورقة]
28 ديسمبر 2023
دراسة استقصائية للتفكير مع نماذج الأساس
Jiankai Sun ، Chuanyang Zheng ، Enze Xie ، Zhengying Liu ، Ruihang Chu ، Jianing Qiu ، Jiaqi Xu ، Mingyu Ding ، Hongyang Li ، Mengzhe Geng ، Yue Wu ، Wenhai Wang ، Junsong Chen ، Zhangyue Yin ، Liu ، Xihui Liu ، Yu Li ، Hao Dong ، Yu Cheng ، Ming Zhang ، Pheng Ann Heng ، Jifeng Dai ، Ping Luo ، Jingdong Wang ، Ji-Rong Wen ، Xipeng Qiu ، Yike Guo ، Hui Xiong ، Qun Liu ، Zhenguo Li
Arxiv 2023 ، [ورقة] [جيثب]
26 ديسمبر 2023
لا يمكن لزيادة الاستعلام والاستجابة أن تساعد في تعميم التفكير في الرياضيات خارج المجال
Chengpeng Li ، Zheng Yuan ، Hongyi Yuan ، Guanting Dong ، Keming Lu ، Jiancan Wu ، Chuanqi Tan ، Xiang Wang ، Chang Zhou
Arxiv 2023 ، [ورقة] [جيثب]
1 نوفمبر 2023
Metamath: Bootstrap أسئلتك الرياضية لنماذج اللغة الكبيرة
Longhui Yu ، Weisen Jiang ، Han Shi ، Jincheng Yu ، Zhengying Liu ، Yu Zhang ، James T. Kwok ، Zhenguo Li ، Adrian Weller ، Weiyang Liu
Arxiv 2023 ، [ورقة] [جيثب]
9 أكتوبر 2023
نماذج اللغات الكبيرة هي أسباب أفضل مع التحسين الذاتي
Yixuan Weng ، Minjun Zhu ، Fei Xia ، Bin Li ، Shizhu He ، Shengping Liu ، Bin Sun ، Kang Liu ، Jun Zhao
نتائج EMNLP 2023 ، [ورقة] [github]
19 أكتوبر 2023
التفكير مع نموذج اللغة المطالبة: مسح
Shuofei Qiao ، Yixin OU ، Ningyu Zhang ، Xiang Chen ، Yunzhi Yao ، Shumin Deng ، Chuanqi Tan ، Fei Huang ، Huajun Chen
ACL 2023 ، [ورقة] [Github]
18 سبتمبر 2023
تحجيم العلاقة على تعلم التفكير الرياضي مع نماذج اللغة الكبيرة
Zheng Yuan ، Hongyi Yuan ، Chengpeng Li ، Guanting Dong ، Keming Lu ، Chuanqi Tan ، Chang Zhou ، Jingren Zhou
Arxiv 2023 ، [ورقة] [جيثب]
3 أغسطس 2023
يمكن أن يصرف نماذج اللغة الكبيرة بسهولة عن طريق السياق غير ذي صلة
فريدا شي ، Xinyun Chen ، Kanishka Misra ، Nathan Scales ، David Dohan ، Ed Chi ، Nathanael Schärli ، Denny Zhou
ICML 2023 ، [Paper] [Github]
6 يونيو 2023
نحو التفكير في نماذج اللغة الكبيرة: مسح
جي هوانغ ، كيفن تشن تشوان تشانغ
نتائج ACL 2023 ، [ورقة] [جيثب]
26 مايو 2023
العكسي الذاتي: التحسين التكراري مع التراجع الذاتي
أمان مادان ، نيكيت تاندون ، براخار غوبتا ، سكايلر هالينان ، لويو جاو ، سارة ويجريف ، أوري ألون ، نوها دوزيري ، شريماي برابوموي ، يايمنج يانغ ، شاشانك غوبتا ، بوتيساتوا براسادر ماجومدر ، كاثرين هيرمان ، كلارك
Arxiv 2023 ، [Paper] [Github] [صفحة الويب]
25 مايو 2023
العكسي الذاتي: التحسين التكراري مع التراجع الذاتي
أمان مادان ، نيكيت تاندون ، براخار غوبتا ، سكايلر هالينان ، لويو جاو ، سارة ويجريف ، أوري ألون ، نوها دوزيري ، شريماي برابوموي ، يايمنج يانغ ، شاشانك غوبتا ، بوتيساتوا براسادر ماجومدر ، كاثرين هيرمان ، كلارك
Arxiv 2023 ، [Paper] [Website] [Github] [Demo]
25 مايو 2023
دعنا نخطو خطوة بخطوة: التوافق التكيفي للتفكير الفعال مع LLMS
Pranjal Aggarwal ، أمان ماداان ، يمينغ يانغ ، Mausam
Arxiv 2023 ، [Paper] [Website] [Github]
19 مايو 2023
يتنافس الاتساق الذاتي سلسلة من التفكير في نماذج اللغة
Xuezhi Wang ، Jason Wei ، Dale Schuurmans ، Quoc LE ، Ed Chi ، Sharan Narang ، Aakanksha Chowdhery ، Denny Zhou
ICLR 2023 ، [ورقة]
7 مارس 2023
تثير سلسلة الفكرة التي تثير التفكير في نماذج اللغة الكبيرة
Jason Wei ، Xuezhi Wang ، Dale Schuurmans ، Maarten Bosma ، Brian Ichter ، Fei Xia ، Ed Chi ، Quoc Le ، Denny Zhou
Neups 2022 ، [ورقة]
28 يناير 2022
الاتساق الدلالي لضمان موثوقية نماذج اللغة الكبيرة
Harsh Raj ، Vipul Gupta ، Domenic Rosati ، Subhabrata Majumdar
Arxiv 2023 ، [ورقة]
17 أغسطس 2023
قياس موثوقية نماذج اللغة الكبيرة من خلال الاتساق الدلالي
هارش راج ، دومينيك روساتي ، سوبوراتا ماجومدار
ML Safety Workshop ، Neurips 2022 ، [Paper]
28 نوفمبر 2022
الاتساق الفوري لتعميم المهام صفر
Chunting Zhou ، Junxian He ، Xuezhe MA ، Taylor Berg-Kirkpatrick ، Graham Neubig
نتائج ACL: EMNLP 2022 ، [ورقة] [GitHub]
27 ديسمبر 2022
دقيقة ، ولكن غير متسقة؟ تحليل الاتساق على نماذج فهم اللغة
ميونغجون يانغ ، ديوك سين كوون ، توماس لوكاسيفيتشز
Arxiv 2021 ، [ورقة]
15 أغسطس 2021
تطور التشابه الدلالي - مسح
Dhivya Chandrasekaran ، فيجاي ماجو
مسح الحوسبة ACM 2021 ، [ورقة]
30 يناير 2021
تعزيز الاتساق الذاتي وأداء نماذج اللغة التي تم تدريبها من خلال الاستنتاج الطبيعي
إريك ميتشل ، جوزيف نوح ، سيان لي ، ويل أرمسترونغ ، أنانث أغاروال ، باتريك ليو ، تشيلسي فين ، كريستوفر مانينغ
EMNLP 2022 ، [Paper] [Website] [Github]
21 نوفمبر 2022
RCOT: اكتشاف وتصحيح عدم الاتساق الواقعي في التفكير من خلال عكس سلسلة الفكر
Tianci Xue ، Ziqi Wang ، Zhenhailong Wang ، Chi Han ، Pengfei Yu ، Heng Ji
Arxiv 2023 ، [ورقة]
2 أكتوبر 2023
P-adapters: استخراج معلومات واقعية بقوة من نماذج اللغة ذات المطالبات المتنوعة
بنيامين نيومان ، برايفوللا كومار شوي ، نازنين راجاني
ICLR 2022 ، [ورقة] [جيثب]
19 أبريل 2022
كيف يمكن أن نعرف ما هي نماذج اللغة تعرف؟
Zhengbao Jiang ، Frank F. Xu ، Jun Araki ، Graham Neubig
TACL 2020 ، [ورقة] [GitHub]
3 مايو 2020
Biomedgpt: محول توليدي حيوي موحد وعمومي للمهام ، والمهام متعددة الوسائط
كاي تشانغ ، يونيو يو ، إيشان أديكارلا ، رونغ تشو ، تشو فيلينج يان ، يوكسين ليو ، تشنغليانغ ليو ، لايفانغ ، براين دافيسون ، شيانغ لي ، هوي رن ، سونيانغ فو ، جيمس زو ، ويج ليو ، جينغ هويانغ ، تشن تشن ، يويين تشين ، Quanzheng Li ، Hongfang Liu ، Lichao Sun
Arxiv 2024 ، [ورقة] [جيثب]
9 يناير 2024
هل يمكن أن تسبب نماذج اللغة الكبيرة حول الأسئلة الطبية؟
فالنتين ليفين ، كريستوفر إيجبرغ هوث ، أندرياس جورت موتزفيلد ، أولي وينثر
Arxiv 2023 ، [ورقة] [جيثب]
24 ديسمبر 2023
نحو العمومي الطبي الطبية الحيوية
Tao Tu ، Shekoofeh Azizi ، Danny Driess ، Mike Schaekermann ، Mohamed Amin ، Pi-Chuan Chang ، Andrew Carroll ، Chuck Lau ، Ryutaro Tanno ، Ira Ktena ، Fleip Mustafa ، Aakanksha Chowdhery ، Yun Liu ، Simon Kornblith ، Wong ، Sunny Virmani ، Christopher Semturs ، S Sara Mahdavi ، Bradley Green ، Ewa Dominowska ، Blaise Aguera y Arcas ، Joelle Barral ، Dale Webster ، Greg S. Corrado ، Yossi Matias ، Karan Singhal ، Pete Florence ، Alan Karthikesalingam ، Vivek Natarjan
Arxiv 2023 ، [ورقة] [جيثب]
26 يوليو 2023
LLAVA-MED: تدريب مساعد كبير للغة والقرعة للطب الحيوي في يوم واحد
Chunyuan Li ، Cliff Wong ، Sheng Zhang ، Naoto Usuyama ، Haotian Liu ، Jianwei Yang ، Tristan Naumann ، Hoifung Poon ، Jianfeng Gao
Arxiv 2023 ، [ورقة] [جيثب]
1 يونيو 2023
نحو أسئلة طبية على مستوى الخبراء الإجابة على نماذج اللغة الكبيرة
كاران سينغال ، تاو تو ، جوراج جوتيويس ، روري سيلريس ، إيليري وولتشين ، لو هو ، كيفن كلارك ، ستيفن بوفهل ، هيذر كول لويس ، دارلين نيل ، مايك شايكرمان ، أمينا وانغ ، محمد ، سامي لاخار ، فيلب مانسفيلد Aguera Y Arcas ، Nenad Tomasev ، Yun Liu ، Renee Wong ، Christopher Semturs ، S. Sara Mahdavi ، Joelle Barral ، Dale Webster ، Greg S. Corrado ، Yossi Matias ، Shekoofeh Azizi ، Alan Karthikesalingam ، Vivek Natarajan
Arxiv 2023 ، [ورقة]
16 مايو 2023
نماذج اللغة الكبيرة تشفير المعرفة السريرية
كاران سينغال ، شيكوفه أزيزي ، تاو تو ، س. Philip Mansfield ، Blaise Aguera y Arcas ، Dale Webster ، Greg S. Corrado ، Yossi Matias ، Katherine Chou ، Juraj Gottweis ، Nenad Tomasev ، Yun Liu ، Alvin Rajkomar ، Joelle Barral ، Christopher Semturs ، Alan Karthikesalingam ، Vivek Natarajan
الطبيعة ، [ورقة]
26 ديسمبر 2022
نماذج مؤسسة متعددة الوسائط: من المتخصصين إلى المساعدين للأغراض العامة
Chunyuan Li ، Zhe Gan ، Zhengyuan Yang ، Jianwei Yang ، Linjie Li ، Lijuan Wang ، Jianfeng Gao
Arxiv 2023 ، [ورقة] [صفحة الويب]
18 سبتمبر 2023