Text Generation

Generación de texto

Un modelo de lenguaje neuronal profundo basado en la atención que utiliza LSTM de bidreccionales para generar secuencias de texto Carácter por carácter, dada una secuencia de contexto de texto.

Utilizó pocas novelas inglesas para capacitar y evaluar el modelo.

Utilizado Marco de Pytorch para el desarrollo. Usó una máquina NVIDIA GEFORCE GTX 1080 TI GPU para facilitar el entrenamiento del modelo.

El modelo logra una perplejidad de validación promedio de aproximadamente 93.

El modelo capacitado está disponible como "model_generate.pt".

Ejemplos de generación de texto

De las novelas de entrenamiento:

1. Orgullo y prejuicio - Jane Austen :

... Contexto : El tumulto de su mente ahora era dolorosamente genial. No sabía cómo mantenerse a sí misma, y ​​por la debilidad real se sentó y se sentó durante media hora.

... Generado : como descubrí que creo que mi resfriado de cualquier comando, obstructivo y de cerca. Lo que fue muy bueno apenas angustia, cuando puedes ascender y luego inmane que ella busca su sonido que eres más nocturno. Jane tan amiga! Había de los pasos de un Tran junto al mar todo el espacio para ella. Cuando

2. Drácula - Bram Stoker :

... contexto : creer en las cosas que no puedes. Déjame ilustrar. Escuché una vez de un estadounidense que definió la fe: "Esa facultad que nos permite creer cosas que sabemos que son falsas". Por un lado, sigo a ese hombre.

... Generado : No vean cosas, él podría ser cosas para cualquier hombre donde cualquier oscuridad para llamar a Harders sea del carruaje de la materia, no solo Starm Sunset desde el día.

"No quiero que todo sea más, por lo que recibir el espíritu en la habitación fue un gran nosotros y una niebla, deberíamos hacerlo, y la ventana miró de ti.

De novelas sin entrenamiento (pero el mismo autor o mismo género):

1. Emma - Jane Austen :

... Contexto : durante su estadía corta actual, Emma apenas lo había visto; Pero lo suficiente como para sentir que la primera reunión había terminado, y para darle la impresión de que no ha mejorado por la mezcla de pique y pretensión, ahora se extendió por su aire.

... Generado : Pescado, porque puedo Don, que se sentaron en las pasiones en absoluto, para mi pronto con exoloce, para mi marca que no tenía que ser considerable considerable los pequeños por los Sobubs; Cuando el título fue, te autorizó a la tierra con los más glopiados en

2. El extraño caso del Dr. Jekyll y el Sr. Hyde - Robert Louis Stevenson :

... Contexto : Poole giró el hacha sobre su hombro; El golpe sacudió el edificio, y la puerta roja de Baize saltó contra la cerradura y bisagras. Un sillón triste, a partir del simple terror animal, sonó del gabinete.

... Generado : Pero todo el resto en Londres. Cuando se formó, esa fuerza de la campana del Druck. " Court , también me insportó", que encontrarían bien, y luego ese tiempo, muchacho, hepromió que mi espalda, el suelo, que sol, nunca nos haría. Es un secreto de esta recta que ambos sospechas a t