คอลเลกชันอาร์คพรอมต์ (นามธรรมและคลังเหตุผล)
พร้อมท์สำหรับการแก้ปัญหาอาร์คด้วย GPT4 หรือคล้ายกัน
แก้ปัญหา 46 ของงานสาธารณะ 800 งานในชุดข้อมูล ARC 1
ยังไม่ได้ทดสอบในงาน 100 งานที่ซ่อนอยู่เนื่องจาก GPT4 เป็นแหล่งปิด
การเรียนรู้เกี่ยวกับพรอมต์
- พรอมต์ใหญ่และโอกาสต่ำสำหรับการแก้ปัญหาที่ถูกต้อง
- เข้าใจข้อมูลที่เข้ารหัสความยาวรัน แต่ RLE เป็นอันตรายต่อความสามารถในการใช้เหตุผล อย่างไรก็ตามในบางกรณี RLE อาจใช้งานได้
- เข้าใจพิกัดและสามารถตรวจจับรูปร่าง, เส้น, กล่อง, รูปร่าง tetris อย่างง่าย
- การเปลี่ยนแปลงเช่นหมุน 90 หรือพลิกไม่ได้ถูกพิจารณาอย่างถูกต้อง
- สรุปไม่ได้วิธีที่ดีที่สุดในการแสดงสีคืออะไร บางครั้งค่าจำนวนเต็มสีดิบถูกตีความว่าเป็นค่าคณิตศาสตร์ทำให้เกิดความเสียหายต่อการทำนาย สีที่น่าเบื่อเป็นข้อความช่วย แทนที่จะใช้
color คำฉันใช้ ID คำหรือ Layer ไม่แน่ใจว่าอะไรทำงานได้
รูปแบบภาษา
- GPT4 ของ Openai - แก้ปัญหาส่วนโค้งหลายอย่างและความเข้าใจผิดมาใกล้เคียงกับผลลัพธ์ที่คาดหวังมาก
- GPT3.5 ของ Openai - ไม่สามารถแก้ปัญหาอาร์คได้ แต่บางครั้งความผิดพลาดก็ใกล้เคียงกับผลลัพธ์ที่คาดหวัง
- BARD เวอร์ชันของ Google 2023.07.13 - ไม่สามารถแก้ไขงานใด ๆ ได้
ตัวอย่างการคาดการณ์ที่ไม่ถูกต้อง
IMO การคาดการณ์ที่ไม่ถูกต้องน่าสนใจกว่าการคาดการณ์ที่ถูกต้อง การคาดการณ์เหล่านี้ใกล้เคียงกับผลลัพธ์ที่คาดหวังมาก
โครงสร้าง repo
มี 2 dirs:
- พรอมต์/ถูกต้อง - การคาดการณ์ที่ดีที่แก้ปัญหา
- พรอมต์/ไม่ถูกต้อง - การทำผิดพลาดที่เข้ามาใกล้ในการแก้ปัญหา
ไฟล์เป็นเอกสาร Markdown ที่มี 3 หรือ 4 ส่วน
- ส่วน A - ข้อมูลเมตา เกี่ยวกับรุ่นที่มันลองใช้ เอกสารทั้งหมดบอกว่า
gpt4 ในขณะนี้ - ส่วน B - พรอมต์ งานอาร์คเสริมด้วยข้อมูลที่เป็นประโยชน์ เครื่องสร้างขึ้น
- ส่วน C - การตอบกลับ การตอบสนองจาก GPT4 หรือโมเดลที่คล้ายกัน
- ส่วน D - ส่วนเสริมที่มี ความคิดเห็นของมนุษย์ เกี่ยวกับสิ่งที่อาจผิดพลาดกับการให้เหตุผล
ความไม่ลงรอยกัน
ฉันออกไปเที่ยวในช่อง ARC บน Lab42 และ Yannic Kilcher สถานที่ที่ยอดเยี่ยมสำหรับการพูดคุยเกี่ยวกับเทคนิคที่รวดเร็ว
ใบอนุญาต
Apache หรือ MIT
