Text Dataset Aid Plugin

使用TXT文件来容纳您的数据集。将很快添加将TXT导出到JSONL文件的功能。

语境

条件：完全工作

NLP和文本生成数据集的创建具有极大的影响力，并且有可能使研究人员能够训练可以自动生成文本的模型。但是，自定义数据集的创建是一个典型而缓慢的过程。

文本数据集辅助工具是一个有用的工具，可以帮助创建fineTuning数据集，用于手工的文本生成模型！这可以使您的模型产生的文本在Fineting之后产生，以更具个性化，详细或更好的格式。通过热键配置来处理菜单，拒绝了！

该插件可用于快速为NLP和文本生成模型生成培训数据。这将加快在这些领域的研究，并使从业者更容易训练这些模型。

文本数据集辅助插件是一个有用的工具，可以帮助创建fineTuning数据集，用于手动使用GPT-3（例如GPT-3）。这可以使您的模型产生的文本在Fineting之后产生，以更具个性化，详细或更好的格式。通过热键配置来处理菜单，拒绝了！

第二大脑中的上下文

在第二个大脑中工作的同时，在收集的数据集上更新自己的文本生成模型可以使您的模型更好地满足您的第二大脑需求。由于黑曜石中命令的性质，该插件符合任何创建或编辑工作流程。希望您和我一样使用此插件！

填充的优势

修补文本生成模型可以创建更自然和表现力的文本。

1. 文本预测/发电的准确性提高
2. 文本生成的流利性和连贯性提高
3. 对生成文本的样式和内容更大的控制
4. 对模型产生的输出类型的更多控制
5. 模型可以接受的输入类型的灵活性更大
6. 产生更多人类输出的能力
7. 在预测某些类型的输出方面的准确性提高了

Microsoft的微观原理的绝佳资源

用法

通过使用VIM模式使该插件的核心功能变得更加容易，但在任何一种情况下都应起作用。目前提供了两个命令：（这些命令中的每个命令都有一个可从Hotkeys配置的Acommpanying Hotkey）

如果您已经有提示，则将提示发送到数据集时，该插件什么都不做。

当您将完成发送到数据集时，已经有一个提示符，将文本选择发送到数据集作为该提示的完成。

开放的一代支持！

当您将完成发送到数据集且没有提示时，将文本选择插入数据集中，而将空的提示符添加到文本选择中。

一个例子

{ "prompt" : " " , "completion" : " Hello can I help you? " }

另一个例子

{ "prompt" : " " , "completion" : " Hi, How can I help you today " }

将选择发送到您的数据集文件时，请提示发送选择以发送到数据集文件作为完成

列出数据集的示例

{ "prompt" : " Company: BHFF insurance n Product: allround insurance n Ad:One stop shop for all your insurance needs! n Supported: " , "completion" : " yes " }
{ "prompt" : " Company: Loft conversion specialists n Product: - n Ad:Straight teeth in weeks! n Supported: " , "completion" : " no " }

安装

从黑曜石中的社区插件页面安装

• 打开设置>第三方插件
• 确保安全模式关闭
• 单击浏览社区插件
• 搜索“数据集登录辅助插件”
• 单击安装
• 安装后，关闭社区插件窗口并激活新安装的插件

手动从Github安装

• 从GitHub存储库的“发行版”部分下载最新版本（如果找不到的话，它应该在您查看此处时正确）
• 将插件文件夹从zip提取到保险柜的插件文件夹： <vault>/.obsidian/plugins/插件/
  注意：在某些机器上， .obsidian文件夹可能被隐藏。在MacOS上，您应该能够按Command+Shift+Dot以显示Finder中的文件夹。
• 重新加载黑曜石

设置

在插件的设置面板中可以配置四个主要设置，但是为文本生成模型的数据集设置了默认值，称为JSONL。

设置名称	描述	默认
提示的前缀	这是发送到数据集时将其备用到提示的字符串	{"prompt":
提示的后缀	这是发送到数据集时附加到提示的字符串	,
完成的前缀	这是发送到数据集后完成的字符串	"completion":
后缀完成	这是发送到数据集时将其附加到完成的字符串	}n

在发展中的帮助

发展

创建一个新版本：

git tag -a 1.0.1 -m " 1.0.1 "
git push origin 1.0.1

灵感

受您自己的语言模型的效率和吸引力的启发，该插件允许您以提示和响应的形式从笔记中构建数据集。自动将文本格式化为OpenAI的规格，以供GPT3（例如GPT3）等填充模型。

该插件共享与TFThacker制作的Text Transporter插件的模拟

由Conner Ohnesorge制成的❤️