arc prompt

ARC提示收集（抽象和推理語料庫）

提示使用GPT4或類似的搜索ARC任務。

解決了ARC 1數據集中的公共800個任務中的46個。

由於GPT4是封閉的源，因此在隱藏的100個任務上未經測試。

學習提示

• 很大的提示和正確解決方案的機會很小。
• 了解運行長度的編碼數據，但RLE會損害推理功能。但是，在某些情況下，RLE可能有效。
• 了解坐標並可以檢測簡單的形狀，線條，框，俄羅斯方塊形狀。
• 旋轉90或翻轉等轉換很少被正確考慮。
• 尚無定論是什麼是代表顏色的最佳方法。有時，原始顏色整數值被解釋為數學值，從而對預測造成破壞。將顏色混淆為文本有助於。我不使用color單詞，而是使用單詞ID或Layer 。不確定的是什麼。

語言模型

• OpenAI的GPT4-解決了幾項ARC任務，錯誤預測非常接近預期的輸出。
• OpenAI的GPT3.5-無法解決ARC任務，但有時錯誤預測接近預期的輸出。
• Google的Bard版本2023.07.13-無法解決任何任務。

錯誤預測的示例

IMO不正確的預測比正確的預測更有趣。這些預測非常接近預期的輸出。

回購結構

有2個dirs：

• 提示/正確 - 解決任務的良好預測。
• 提示/不正確 - 解決任務時遇到的錯誤預測。

這些文件是標記文檔，包含3或4個部分。

• A -Metadata節有關它的使用模型。所有文件目前均為gpt4 。
• B節 -提示。 ARC任務增加了有用的信息。機器生成。
• C節 -答复。 GPT4或類似模型的響應。
• D-節 - 可選部分，其中包含有關推理可能出了問題的評論。

不和諧

我在LAB42和Yannic Kilcher的ARC頻道中閒逛。討論及時技術的好地方。

執照

Apache或MIT。