Chinese_models_for_SpaCy

Ридме написано на английском языке

Официальная китайская модель Spacy была запущена (https://spacy.io/models/zh). Миссия этого проекта по «продвижению развития модели Spacy китайской» была завершена. Этот проект введет статус обслуживания. Последующими обновлениями будут только исправления ошибок. Спасибо всем пользователям за их долгосрочное внимание и поддержку.

Китайская модель Spacy

Китайская модель данных предоставлена ​​для Spacy. Модель в настоящее время находится в бета -общественном тестировании.

Онлайн демо

Онлайн -демонстрация на основе ноутбука Юпитера.

характеристика

Некоторая информация об атрибутах этого объекта Doc王小明在北京的清华大学读书:

Ner ( новый! )

Некоторые из NER Информации о Doc王小明在北京的清华大学读书:

Начните

Модель распространяется в форме двоичных файлов, и пользователи должны обладать базовыми знаниями о Spacy (версия> 2).

Системные требования

Python 3 (возможно, поддержите Python2, но не хорошо протестирован)

Установить

Загрузите модель

Загрузите модель со страницы релизов ( New! Предоставляет пользователям в Китае ссылки на ускорение загрузки). Предположим, загруженная модель называется zh_core_web_sm-2.xxtar.gz .

Установите модель

 pip install zh_core_web_sm-2.x.x.tar.gz

Чтобы облегчить последующее использование в рамках, таких как RASA NLU, необходимо установить ссылку для этой модели, выполнив следующую команду:

spacy link zh_core_web_sm zh

После завершения прогона вы можете использовать псевдоним ZH для доступа к модели.

Запустите демо -код

Демо -код расположен в test.py После установки модели пользователь загружает или клонирует код в этом репозитории, а затем может выполнить его напрямую.

python3 ./test.py

Откройте адрес http://127.0.0.1:5000 , и вы увидите следующее:

Как построить эту модель из нуля

Смотрите рабочий процесс

Корпус

Корпус, используемый в этом проекте, является Ontonotes 5.0.

Поскольку Ontonotes 5.0 является защищенным авторским правом материала НРС (лингвистический консорциум данных), он не может быть непосредственно включен в этот проект. Хорошей новостью является то, что Ontonotes 5.0 полностью бесплатна для пользователей групп, включая предприятия и академические организации. Пользователи могут создать учетную запись корпоративной или академической организации, а затем бесплатно получить Ontonotes 5.0.

Список Тодо

• Атрибут pos_ неверен. Это связано с классом китайского языка в Spacy.
• Атрибут shape_ и is_alpha кажется, бессмысленно для китайцев, но ей нужна авторитетная информация, чтобы подтвердить ее.
• Атрибут is_stop неверен. Это связано с классом китайского языка в Spacy.
• vector атрибутов, кажется, не хорошо обучен.
• Свойство is_oov совершенно неверно. Первое приоритетное исправление.
• Модель NER, в настоящее время недоступная из -за отсутствия корпуса НРС. Решение находится под тренировкой.
• Выпустите промежуточные результаты, используемые при обучении, чтобы облегчить пользователям настройку модели

Компоненты используются

• Тодо

Как внести свой вклад

Пожалуйста, прочитайте Anforming.md и отправьте нам запросы на привлечение.

Управление управлением версиями

Мы используем SEMVER для стандартов управления версиями. Проверьте tags , чтобы понять все версии.

автор

• Xiaoquan Kong - начальная работа - Хоул -Андерсон

Для получения дополнительной информации о участниках, пожалуйста, обратитесь к contributors .

Авторское право

Лицензия MIT - см. License.md для получения подробной информации

Благодарности

• Тодо