Text Dataset Aid Plugin
1.0.1
Use un archivo txt para albergar su conjunto de datos. Pronto se agregará una característica para exportar su TXT a un archivo JSONL.
La creación de conjuntos de datos de PNL y generación de texto es extremadamente impacto y tiene el potencial de permitir que los investigadores entrenen modelos que puedan generar automáticamente texto. Sin embargo, la creación de conjuntos de datos personalizados es un proceso tesoroso y lento.
¡La ayuda del conjunto de datos de texto es una herramienta útil que puede ayudar a la creación de conjuntos de datos Finetuning para modelos de generación de texto como GPT-3 a mano! Esto puede hacer que el texto generado por su modelo después de Finetuning sea más personalizado, detallado o mejor formateado. ¡Di no a tratar con los menús a través de configuraciones de teclas de acceso rápido!
Este complemento se puede utilizar para generar rápidamente datos de entrenamiento para los modelos de generación de PNL y texto. Esto aceleraría la investigación en estas áreas, así como facilitaría que los profesionales capaciten a estos modelos.
El complemento de Ayuda del conjunto de datos de texto es una herramienta útil que puede ayudar a la creación de conjuntos de datos Finetuning para modelos de generación de texto como GPT-3 a mano. Esto puede hacer que el texto generado por su modelo después de Finetuning sea más personalizado, detallado o mejor formateado. ¡Di no a tratar con los menús a través de configuraciones de teclas de acceso rápido!
Actualizar su propio modelo de generación de texto en su conjunto de datos recopilados mientras trabaja en su segundo cerebro permite que su modelo se ajuste mejor a las necesidades de su segundo cerebro. Este complemento se ajusta en cualquier flujo de trabajo de creación o edición debido a la naturaleza de los comandos dentro de la obsidiana. ¡Espero que uses este complemento tanto como yo!
Finturing Your Text Generation Model permite la creación de texto que es más natural y expresivo.
Un gran recurso para los principios de ajuste de Microsoft
La función central de este complemento se hace más fácil mediante el uso del modo VIM, pero debería funcionar en cualquier caso. Actualmente se ofrecen dos comandos: (cada uno de estos comandos tiene una tecla de acceso rápido de las teclas de acceso rápido)
Cuando envía el mensaje al conjunto de datos si ya hay un mensaje allí, el complemento no hace nada.
Cuando envía la finalización al conjunto de datos y ya hay un mensaje, la selección de texto se envía al conjunto de datos como una finalización a ese mensaje.
Cuando envía la finalización al conjunto de datos y no hay un aviso, la selección de texto se inserta en el conjunto de datos con un mensaje vacío preparado para la selección de texto.
Un ejemplo de esto
{ "prompt" : " " , "completion" : " Hello can I help you? " }Otro ejemplo
{ "prompt" : " " , "completion" : " Hi, How can I help you today " }Envíe la selección para enviar a su archivo de datos de datos como aviso Enviar la selección para enviar a su archivo de conjunto de datos como finalización
Ejemplo de conjunto de datos de fineta
{ "prompt" : " Company: BHFF insurance n Product: allround insurance n Ad:One stop shop for all your insurance needs! n Supported: " , "completion" : " yes " }
{ "prompt" : " Company: Loft conversion specialists n Product: - n Ad:Straight teeth in weeks! n Supported: " , "completion" : " no " }<vault>/.obsidian/plugins/.obsidian puede estar oculta. En MacOS, debería poder presionar Command+Shift+Dot para mostrar la carpeta en el buscador.Hay cuatro configuraciones principales que son configurables en el panel de configuración del complemento, pero los valores predeterminados se configuran para el formato popular para conjuntos de datos para modelos de generación de texto llamados JSONL.
| Nombre de configuración | Descripción | Por defecto |
|---|---|---|
| Prefijo para indicaciones | Esta es la cadena que se prepara a la solicitud cuando se envía al conjunto de datos | {"prompt": |
| Sufijo para indicaciones | Esta es la cadena que se adjunta a la solicitud cuando se envía al conjunto de datos | , |
| Prefijo para su finalización | Esta es la cadena que se prepara a la finalización cuando se envía al conjunto de datos | "completion": |
| Sufijo para su finalización | Esta es la cadena que se adjunta a la finalización cuando se envía al conjunto de datos | }n |
Ayuda dentro del desarrollo
Creando una nueva versión:
git tag -a 1.0.1 -m " 1.0.1 "
git push origin 1.0.1Inspirado por la eficiencia y el atractivo de ajustar su propio modelo de idioma, este complemento le permite crear conjuntos de datos a partir de sus notas en forma de indicaciones y respuestas. Formatea automáticamente el texto a la especificación de OpenAI para modelos Finetuning como GPT3.
Este complemento comparte simularidades en el complemento TextTransporter realizado por TFTHacker
Hecho con ❤️ por Conner Ohnesorge
