nlp_tasks

Задачи обработки естественного языка и выбранные ссылки

Я долго работал над несколькими задачами по обработке естественного языка. Однажды мне хотелось нарисовать карту поля НЛП, где я зарабатываю на жизнь. Я уверен, что я не единственный человек, который хочет увидеть с первого взгляда, какие задачи в НЛП.

Я сделал все возможное, чтобы покрыть как можно больше задач в НЛП, но, по общему признанию, это далеко не исчерпывающее исключительно из -за моего отсутствия знаний. И отобранные ссылки смещены в сторону недавних достижений глубокого обучения. Я ожидаю, что они служат отправной точкой, когда вы собираетесь копаться в задаче. Я сам продолжаю обновлять это репо, но я действительно надеюсь, что вы сотрудничаете в этой работе. Не стесняйтесь присылать мне запрос на привлечение!

13 октября 2017 года.
Кьюбинг

Обзор и обновлен YJ Choe 18 октября 2017 года.

Резолюция Анафоры

• Смотрите разрешение Coreference

Автоматизированная оценка эссе

• Автоматическая оценка PAPER с использованием нейронных сетей
• PAPER Нейронный подход к автоматизированному оценку эссе
• CHALLENGE Kaggle: Фонд Hewlett: автоматизированная оценка эссе
• PROJECT легкости (расширенная оценка искусственного интеллекта)

Автоматическое распознавание речи

• WIKI признание речи
• Глубокая речь PAPER 2: Признание речи на английском и мандарине
• PAPER Wavenet: генеративная модель для необработанного звука
• PROJECT внедрение Tensorflow в архитектуре Deepspeech от Baidu
• PROJECT речи к тексту Wavenet: сквозное распознавание речи английского языка с использованием Wavenet's Wavenet DeepMind
• CHALLENGE 5 -й разлучение речи и признание речи
• DATA 5 -й разлучение речи и распознавание речи
• DATA CSTR VCTK CORPUS
• DATA librispeech asr corpus
• DATA Switchboard-1 Телефонный речевой корпус
• DATA TED-Lium Corpus
• DATA открытые речи и языковые ресурсы
• DATA общий голос

Автоматическое суммирование

• WIKI автоматическое суммирование
• Автоматическое резюме BOOK
• Суммизация PAPER с использованием нейронных сетей
• Ранжирование PAPER с рекурсивными нейронными сетями и его применением к многоокуменуемом суммировании
• Конференции по анализу DATA (TAC)
• Конференции по пониманию DATA документов (DUC)

Резолюция Coreference

• INFO разрешение основной работы
• PAPER глубоко укрепление обучения для моделей упоминания
• Улучшение разрешения основной PAPER с помощью распределенных представлений об обучении на уровне объекта
• CHALLENGE Conll 2012 Общая задача: моделирование многоязычного неограниченного Coreference в Ontonotes
• CHALLENGE Conll 2011 Общая задача: моделирование неограниченного ядра в Ontonotes
• CHALLENGE Semeval 2018 Задача 4: Идентификация символов на многопартийных диалогах

Сущность связывается

• См. Названная сущность устранения неоднозначности

Грамматическая коррекция ошибок

• PAPER Многослойная сверточная энкодер-декодерная нейронная сеть для коррекции грамматической ошибки
• Модели перевода PAPER нейронной сети для грамматической коррекции ошибок
• Модели последовательности адаптации PAPER для коррекции предложения
• CHALLENGE Conll-2013 Общая задача: грамматическая коррекция ошибок
• CHALLENGE Conll-2014 Общая задача: грамматическая коррекция ошибок
• DATA NUS некоммерческие исследования/пробная корпусная лицензия
• DATA LANG-8 CORPORA
• DATA Cornell Movie-Dialogs Corpus
• Корректор глубокого текста PROJECT
• PRODUCT глубокая грамматика

График в фонем преобразование

• PAPER модели графема-фонем для (почти) любого языка
• PAPER полиглот модели нейронного языка: тематическое исследование в кросс-лингальном обучении фонетическому представлению
• Модели с многозадачным последовательностью PAPER для конверсии графы в фонем
• PROJECT последовательность к последовательности G2P Toolkit
• PROJECT G2P_EN: простой модуль Python для английской графы в фонема преобразование
• DATA многоязычного произношения

Обнаружение юмора и сарказма

• Автоматическое обнаружение сарказма PAPER : опрос
• PAPER магниты для сарказма: делая сарказм своевременным, контекстуальным и очень личным
• Обнаружение сарказма PAPER в Твиттере: подход поведенческого моделирования
• CHALLENGE Semeval-2017 Задача 6: #HASHTAGWARS: изучение чувства юмора
• CHALLENGE Semeval-2017 Задача 7: Обнаружение и толкование английских каламбуров
• Саркастические комментарии DATA от Reddit
• DATA сарказм корпус V2
• Сарказм DATA Amazon Reviews Corpus

Языковая заземление

• Проблема заземления символа WIKI
• PAPER Проблема заземления символа
• PAPER от фонемы до изображений: уровни представления в повторяющейся нейронной модели визуально обоснованного изучения языка
• PAPER кодирование фонологии в повторяющейся нервной модели обоснованной речи
• Архитектуры бумаги с PAPER
• PAPER Sound-Word2VEC: Обучение Словов, основанные на звуках
• Язык COURSE , основанный на видении и контроле
• WORKSHOP языка семинара для робототехники

Язык угадывает

• См. Идентификация языка

Идентификация языка

• Идентификация языка WIKI
• Автоматическая идентификация PAPER с использованием глубоких нейронных сетей
• Обработка естественного языка PAPER с небольшими сетями кормления
• CHALLENGE 2015 Оценка признания языка

Языковое моделирование

• WIKI -языковая модель
• TOOLKIT Kenlm Language Model Toolkit
• PAPER распределенные представления слов и фраз и их композиции
• Последовательности генерации PAPER с повторяющимися нейронными сетями
• PAPER характер с учетом нейронного языка модели
• THESIS статистические языковые модели на основе нейронных сетей
• DATA Penn Treebank
• TUTORIAL пособие по Tensorflow по языковому моделированию с повторяющимися нейронными сетями

Языковое признание

• См. Идентификация языка

Лемматизация

• WIKI лемматизация
• Легматизация PAPER и морфологическая метка с помощью лемминга
• TOOLKIT Wordnet Lemmatizer
• DATA Деревобанк-3

Чтение губ

• WIKI для чтения губ
• PAPER Lipnet: сквозная губ на уровне предложений
• PAPER
• PAPER крупномасштабное распознавание визуальной речи
• PROJECT губ
• PRODUCT Liopa
• DATA сетки аудиовизуального предложения корпус
• DATA набор данных BBC-Oxford 'Multi-Eview Lip Reading' (MV-LRS)

Машинный перевод

• Перевод PAPER нейронной машины путем совместного обучения для выравнивания и перевода
• Перевод PAPER нейронной машины в линейное время
• Внимание PAPER - это все, что вам нужно
• PAPER шесть проблем для перевода нейронной машины
• PAPER фраза и нейронный неконтролируемый машинный перевод
• CHALLENGE ACL 2014 Девятый семинар по статистической машине
• CHALLENGE EMNLP 2017 Вторая конференция по машинному переводу (WMT17)
• DATA OpenSubtitles2016
• DATA WIT3: Интернет -инвентарь транскрибированных и переведенных переговоров
• DATA Корпус образовательного домена QCRI (QED)
• PAPER Multi-Task Sequence to Sequence Learning
• PAPER без приспособления предварительной подготовки для последовательности для последовательности обучения
• PAPER Google многоязычная система перевода нейронной машины: включение перевода с нулевым выстрелом
• TOOLKIT подвод нейронной машины с кодированием пары байтов (BPE)
• TOOLKIT Multi-Way The Neural Machine Translation
• TOOLKIT opennmt: инструментарий с открытым исходным кодом для перевода нейронной машины

Морфологическая инфекция генерация

• WIKI -перегиб
• Генерация морфологического перегиба PAPER с использованием последовательности символов для последовательности обучения
• CHALLENGE Sigmorphon 2016 Общая задача: морфологическое повторное блюдо
• DATA Sigmorphon2016

Названная сущность неоднозначности

• WIKI -сущность связывается
• Устроение PAPER и коллективное сущность в результате семантических встраиваний

Названное признание сущности

• WIKI признание
• PAPER нейронные архитектуры для признания именованной организации
• PROJECT OSU Twitter NLP Инструменты
• CHALLENGE названного признания организации в Твиттере
• CHALLENGE Conll 2002, независимое от языка, именованное признание
• CHALLENGE Введение в общую задачу CONLL-2003: признание по именуемому признанию.
• DATA conll-2002 ner corpus
• DATA Conll-2003 Ner Corpus
• DATA Nut названный распознавание объекта в Twitter Shared Touck
• TOOLKIT Stanford названный признание объекта

Обнаружение перефраза

• Динамический пул PAPER и развертывание рекурсивных автоэнкомодеров для обнаружения перефразирования
• PROJECT Paralex: Обучение, основанное на перефразе для открытого ответа на вопросы
• CHALLENGE Semeval-2015 Задача 1: Перефразирование и семантическое сходство в Твиттере
• DATA Microsoft Research Parphrase Corpus
• DATA Microsoft Research Video Description Corpus
• DATA ДАННЫЙ ДИАНЕТ
• Набор DATA Flickr Data
• DATA набор данных больного
• DATA PPDB: база данных перефразирования
• DATA Wikianswers перефразируют корпус

Перефразирование генерации

• Генерация нейронной перефразы PAPER со сложенными остаточными сетями LSTM
• Генерация нейронной перефразы DATA со сложенными остаточными сетями LSTM
• Генерация нейронной перефразии CODE со сложенными остаточными сетями LSTM
• PAPER глубокая генеративная структура для генерации перефразирования
• Перефразирование PAPER повторно

Диапазон

• WIKI -диапазон
• TOOLKIT Стэнфордский анализатор: статистический анализатор
• TOOLKIT Spacy Parser
• PAPER грамматика как иностранный язык
• PAPER - быстрый и точный анализатор зависимости с использованием нейронных сетей
• PAPER универсальный семантический анализ
• CHALLENGE Conll 2017 Общая задача: многоязычный анализ от необработанного текста до универсальных зависимостей
• CHALLENGE Conll 2016 Общая задача: многоязычный мелкий дискурс
• CHALLENGE Conll 2015 Общая задача: неглубокий дискурс
• CHALLENGE Semeval-2016 Задача 8: Значения могут быть абстрактными, но эта задача конкретна!

Часть речи

• WIKI Часть речи
• PAPER многоязычная часть речи с двунаправленными длинными моделями кратковременной памяти и вспомогательными потерями
• PAPER без присмотра Часть речи с якорями скрытыми моделями Маркова
• DATA Деревобанк-3
• TOOLKIT nltk.tag пакет

Пиньин-китайский преобразование

• Метод ввода WIKI пининина
• PAPER модель языка нейронной сети для китайского двигателя ввода пиньина
• PROJECT нейронного китайского транспорта

Ответ на вопрос

• Ответ на вопрос WIKI
• PAPER Спросите меня о чем угодно: динамические сети памяти для обработки естественного языка
• Динамические сети памяти PAPER для визуального и текстового ответа ответа
• CHALLENGE задачу ответа на вопрос TREC
• CHALLENGE NTCIR-8: расширенный доступ по межсочевой информации (Aclia)
• CHALLENGE с ответом на вопрос CLEF
• CHALLENGE Semeval-2017 Задача 3: Ответ на вопросы сообщества
• CHALLENGE Semeval-2018 Задача 11: Понимание машины с использованием знаний Commonsense
• DATA MS MARCO: набор данных по пониманию чтения Microsoft
• DATA Maluuba Newsqa
• Отряд DATA : 100 000+ вопросов для понимания машины текста
• График DATA : набор данных ответа на вопрос, богатый характеристиками
• История DATA Cloze Test и Rocstories Corpora
• DATA Microsoft Research Wikiqa Corpus
• DATA по вопросам и ответам данных данных
• DATA QASENT
• Ответ на вопрос об учебнике DATA

Извлечение отношений

• Извлечение отношений WIKI
• PAPER a Deep Learning Подход для извлечения отношений из контекста взаимодействия в парадигме социального производства
• CHALLENGE Semeval-2018 Задача 7 Извлечение и классификация семантических отношений в научных работах

Семантическая роль маркировки

• WIKI -семантическая ролевая маркировка
• BOOK семантическая маркировка роли
• PAPER сквозная изучение семантической маркировки ролей с использованием повторяющихся нейронных сетей
• PAPER нейронная семантическая маркировка роли с помощью вторжений пути зависимости
• Глубокая семантическая ролевая маркировка PAPER : что работает и что будет дальше
• CHALLENGE Conll-2005 Общая задача: семантическая ролевая маркировка
• CHALLENGE Conll-2004 Общая задача: семантическая ролевая маркировка
• TOOLKIT Illinois Semantic Role Labeler (SRL)
• DATA Conll-2005 Общая задача: семантическая маркировка роли

Граница приговора устранение неоднозначности

• WIKI -граница границы.
• PAPER Количественная и качественная оценка обнаружения границ предложения для клинического домена
• TOOLKIT NLTK Tokenizers
• DATA Британский национальный корпус
• DATA Switchboard-1 Телефонный речевой корпус

Анализ настроений

• Анализ настроений WIKI
• INFO Потрясающего анализа настроений
• CHALLENGE Kaggle: Umich SI650 - Классификация настроений
• CHALLENGE Semeval-2017 Задача 4: Анализ настроений в Twitter
• CHALLENGE Semeval-2017 Задача 5: мелкозернистый анализ настроений на финансовые микроблоги и новости
• PROJECT Senticnet
• PROJECT Stanford NLP Group Анализ настроений настроения
• DATA набор данных по нескольким доменам (версия 2.0)
• DATA Стэнфордские настроения TreeBank
• DATA
• DATA Твиттер Анализ настроений Корпус обучения
• DATA AFINN: Список английских слов, оцененных для валентности

Распознавание языка жестов/перевод

• Познавление языка жестов на основе PAPER без временной сегментации
• PAPER субнаты: сквозная форма рука и непрерывное распознавание языка жестов
• DATA RWTH-PHOENIX-Weather
• DATA ASLLRP
• PROJECT Signall

Синтез поет голоса

• Синтез голоса PAPER на основе глубоких нейронных сетей
• PAPER Нейронное параметрическое пение синтезатор моделирование тембр и выражение из естественных песен
• PRODUCT Vocaloid: технология и программное обеспечение для голосового синтеза, разработанные Yamaha
• CHALLENGE специальная сессия Interspeech 2016 Singing Synthesis Challenge "Заполнить разрыв"

Применение социальных наук

• WORKSHOP NLP+CSS: семинары по обработке естественного языка и вычислительной социальной науке
• Мужчины TOOLKIT также любят покупки: уменьшение усиления гендерного смещения с использованием ограничений на уровне корпуса
• TOOLKIT Online Variate Bayes для скрытого распределения Dirichlet (LDA)
• GROUP Чикагская лаборатория знаний Университета

Разделение источника

• Разделение источника WIKI
• PAPER от слепых до разлуки источника аудио
• Оптимизация PAPER соединений масок и глубоких повторяющихся нейронных сетей для разделения источников монараль
• Кампания по оценке разделения сигналов ( CHALLENGE )
• Проблема CHALLENGE вызова речи и признания выступления

Аутентификация спикера

• Смотрите проверку динамика

Диаризация спикера

• Диаризация WIKI
• Кластерная спикера на основе PAPER для диаргазации динамика динамика
• PAPER неконтролируемые методы для диализа динамика: интегрированный и итеративный подход
• PAPER -визуальная диализация на основе пространственно-временного байесовского слияния
• CHALLENGE с богатой оценкой транскрипции

Признание спикера

• Признание спикера WIKI
• PAPER Новая схема распознавания динамиков с использованием фонетически с глубокой нейронной сетью
• PAPER нейронные сети для небольшого следа, зависящего от текста.
• Глубокий динамик PAPER : система встраивания нейронной динамики
• PROJECT Voice Vector: Какая из голливудских звезд больше всего похожа на мой голос?
• CHALLENGE с оценкой распознавания спикеров (SRE)
• INFO ли какие -либо предложения для бесплатных баз данных для распознавания динамиков?
• DATA Voxceleb2: глубокое распознавание динамика

Речевое чтение

• Смотрите чтение губ

Распознавание речи

• См. Автоматическое распознавание речи

Сегментация речи

• WIKI Speech_segmation
• Сегментация PAPER слов от 8-месячных детей: когда речевые сигналы учитываются больше, чем статистика
• PAPER сегментация слова и открытие лексиконов с использованием акустических встраиваний слов
• PAPER неконтролируемый лексикон обнаружен от акустического ввода
• PAPER слабо контролируемое разговорное термин обнаружение с использованием кросс-лингальной информации
• DATA CallHome Испанская речь

Синтез речи

• WIKI -синтез речи
• PAPER Natural TTS Синтез путем кондиционирования Wavenet на предсказаниях спектрограммы MEL
• PAPER Wavenet: генеративная модель для необработанного звука
• PAPER такотрон: к сквозному синтезу речи
• Глубокий голос PAPER 3: 2000 Нейронного текста в речь
• PAPER эффективно обучаемая система в речь на основе глубоких сверточных сетей с руководством внимания
• DATA мировой английской Библии
• DATA LJ Dataset речи
• DATA МЕСТОЧНЫЕ ДАННЫЕ
• CHALLENGE Blizzard Challenge 2017
• PRODUCT Lyrebird
• PROJECT проекта Festvox
• TOOLKIT Merlin: система речи на основе нейронной сети (NN)

Улучшение речи

• Усовершенствование речи WIKI
• Усовершенствование речи BOOK : теория и практика
• PAPER Экспериментальное исследование по улучшению речи на основе базы
• PAPER Aression подход к улучшению речи Basedondeepneurnetworks
• Усовершенствование PAPER речи на основе глубокого разоблачения автоэнкододера

Речи к тексту

• См. Автоматическое распознавание речи

Разговорной термин обнаружение

• Смотрите сегментацию речи

Stemming

• WIKI вытекает
• PAPER a Backpropagation Нейронная сеть для улучшения арабского ствола
• TOOLKIT nltk Stemmers

Термин извлечение

• Извлечение терминологии WIKI
• Модели внимания PAPER для классификации последовательностей: Анализ и применение к извлечения ключевых терминов и обнаружение Закона о диалоге

Сходство текста

• WIKI семантическое сходство
• PAPER Обзор подходов сходства текста
• PAPER учится ранжировать короткие текстовые пары с сверточными глубокими нейронными сетями
• Улучшенные семантические представления о том, что сетки с длинными кратковременными памятью структурированные на PAPER
• CHALLENGE Semeval-2014 Задача 3: Семантическое сходство межуровяного уровня
• CHALLENGE Semeval-2014 Задача 10: Многоязычное семантическое текстовое сходство
• CHALLENGE Semeval-2017 Задача 1: Семантическое текстовое сходство
• WIKI семантическое текстовое сходство вики вики

Упрощение текста

• Упрощение текста WIKI
• Согласование PAPER от стандартной Википедии до простой Википедии
• PAPER проблемы в текущем исследовании упрощения текста: новые данные могут помочь
• DATA Newsela Данные

Текст в речь

• Смотрите синтез речи

Текстовое влечение

• WIKI текстовое влечение
• Текстовое влечение PROJECT с TensorFlow
• PAPER текстовое влечение со структурированным вниманием и композицией
• CHALLENGE Semeval-2014 Задача 1: Оценка семантических моделей композиции на полных предложениях через семантическое родство и текстовое влечение
• CHALLENGE Semeval-2013 Задача 7: Объединенный анализ ответа студента и 8-е распознавание текстового въезда.

Транслитерация

• WIKI -транслитерация
• INFO трансляция нелатиновых сценариев
• PAPER Подход глубокого обучения к машинной транслитерации
• CHALLENGE News 2016 Общая задача по транслитерации названных организаций
• PROJECT нейронной японской транслитерации - можете ли вы справиться с клавиатурой SwiftKey ™?

Преобразование голоса

• PAPER фонетические задние грамы для преобразования голоса для многих в один без параллельной обучения данных
• PROJECT глубоких нейронных сетей для преобразования голоса (передача голоса) в TensorFlow
• PROJECT реализацию системы преобразования голоса, используя фонетические задних граммов
• CHALLENGE Voice Conversion Challenge 2016
• CHALLENGE Voice Conversion Challenge 2018
• DATA CMU_ARCTIC SINGESE SINGESE BATAS
• DATA Timit акустико-фонетический непрерывный речевой корпус

Распознавание голоса

• Смотрите признание оратора

Слово встраивание

• WIKI Слово встраивание
• TOOLKIT Gensim: Word2VEC
• TOOLKIT быстрого текста
• Glove TOOLKIT : глобальные векторы для представления слов
• INFO где получить предварительную модель
• PROJECT , предварительно обученные векторами слов
• PROJECT , предварительно обученные векторами слов, более 30 языков
• PROJECT PolyGlot: распределенные представления слов для многоязычного NLP
• PROJECT BPEMB: коллекция предварительно обученных подборов в 275 языках
• CHALLENGE Semeval 2018 Задача 10 Захватывает дискриминационные атрибуты
• PAPER двуязычные слова для машинного перевода на основе фразы
• PAPER Обзор моделей межализующих встраиваний

Прогноз слов

• INFO Что такое прогноз слов?
• PAPER Прогноз персонажа на основе рецидивирующей модели языка нейронной сети
• PAPER Прогноз слов, основанный на глубоком обучении, на основе глубокого обучения
• Оценка PAPER прогнозирование слов: сбережения клавиш
• DATA встроенный прогноз слов на основе глубокого обучения
• Прогнозирование слов PROJECT с использованием сверточных нейронных сетей - можете ли вы сделать лучше, чем клавиатура iPhone ™?
• CHALLENGE Semeval-2018 Задача 2, многоязычное предсказание смайликов

Слово сегментация

• WIKI -сегментация слова
• PAPER нейронное сегментацию слова для китайцев
• PROJECT сверточная нейронная сеть для китайской сегментации слов
• TOOLKIT Stanford Word Segmenter
• TOOLKIT NLTK Tokenizers

Слово смысл неоднозначности

• DATA Слово Слово неоднозначности
• PAPER Train-O-Matic: крупномасштабное контролируемое слово смысл в нескольких языках без ручных данных обучения
• DATA ДАННЫЕ ДАННЫЕ
• DATA Babelnet