arc prompt

ARC提示收集（抽象和推理语料库）

提示使用GPT4或类似的搜索ARC任务。

解决了ARC 1数据集中的公共800个任务中的46个。

由于GPT4是封闭的源，因此在隐藏的100个任务上未经测试。

学习提示

• 很大的提示和正确解决方案的机会很小。
• 了解运行长度的编码数据，但RLE会损害推理功能。但是，在某些情况下，RLE可能有效。
• 了解坐标并可以检测简单的形状，线条，框，俄罗斯方块形状。
• 旋转90或翻转等转换很少被正确考虑。
• 尚无定论是什么是代表颜色的最佳方法。有时，原始颜色整数值被解释为数学值，从而对预测造成破坏。将颜色混淆为文本有助于。我不使用color单词，而是使用单词ID或Layer 。不确定的是什么。

语言模型

• OpenAI的GPT4-解决了几项ARC任务，错误预测非常接近预期的输出。
• OpenAI的GPT3.5-无法解决ARC任务，但有时错误预测接近预期的输出。
• Google的Bard版本2023.07.13-无法解决任何任务。

错误预测的示例

IMO不正确的预测比正确的预测更有趣。这些预测非常接近预期的输出。

回购结构

有2个dirs：

• 提示/正确 - 解决任务的良好预测。
• 提示/不正确 - 解决任务时遇到的错误预测。

这些文件是标记文档，包含3或4个部分。

• A -Metadata节有关它的使用模型。所有文件目前均为gpt4 。
• B节 -提示。 ARC任务增加了有用的信息。机器生成。
• C节 -答复。 GPT4或类似模型的响应。
• D-节 - 可选部分，其中包含有关推理可能出了问题的评论。

不和谐

我在LAB42和Yannic Kilcher的ARC频道中闲逛。讨论及时技术的好地方。

执照

Apache或MIT。