voice IT

음성 -IT

안드로이드의 연설-텍스트 및 텍스트 음성 연설; OK Google 이외의 모닝 워드 설정 및 변환 된 텍스트를 주어진 온톨로지와 일치 시키려고

왜, 오, 왜

글쎄, 우리의 고객 중 한 명이 가상 어시스턴트 핸즈를 무료로 무료로 원했습니다. '다음 주에'다음 주에 X 제품을 보내주세요 ','지난 주와 같은 것을 보내십시오 '또는'내 물건은 어디입니까?! '와 같은 주문을 처리했습니다. Amazon의 Echo 또는 Google Home과 같은 종류

우리의 아이디어는 음성 상호 작용을 처리하고 결국 CRM 서비스 또는 무엇이든 휴식을 취한 다음 텍스트를 연설로 다시 전환하는 3D 인쇄 객체를 만드는 것이 었습니다.

첫 번째 프로토 타입으로, Android의 API가 상자 밖에서 연설에 텍스트를 텍스트하기 위해 음성을 모두 제공한다는 점을 감안할 때이 모든 작업을 수행하는 Android 앱을 설정했습니다. 스피커와 마이크가 이미 통합되어 있으며 처음부터 하드웨어를 처리 할 필요가 없습니다.

어떻게!??!

따라서 2 단계/액션/스크린이있는 Android 앱을 만들었습니다. 첫 번째는 무한한 웨이크 업 단어 수신기 (LA "OK Google")와 두 번째로 인식 된 텍스트를 주어진 작업 세트에 맞추는 명령 수신기입니다.

우리의 작은 프로토 타입의 경우, 우리는 "Hey Robot-> 긴 점프를하십시오!/약간의 앞으로 나아가고 회전하십시오!"

행동은 Stanford의 온톨로지 프로젝트 'Protege'를 통해 생성 된 온톨로지 파일을 통해 정의되었습니다.

텍스트가 Android의 Speech API를 통해 인식되면, 우리는 (매우 기본적으로) 온톨로지의 행동을 검색하여 API 방법으로 대답합니다. 그런 다음 API 방법이 실행되고 현재 구현으로 드론이 이동합니다!

모래밭

• 우리는 사람들이 Gast-Lib에서 한 일에 맞게 많은 코드를 리팩토링했습니다.
• 텍스트 API에 대한 연설
• 연설 API 텍스트
• 드론 API
• Android 용 Ontology 파일 파서

기본 아키텍처 다이어그램

다음은 무엇입니까 ??!

글쎄, 우리가하고 싶은 일이 많이 있습니다.

• Android에서는 버튼이있는 음성 인식기 대화 상자를 피하십시오. 시도했지만 버기입니다!
• ' 인식 된 Wake Up Word '와 ' 명령을 받기위한 준비 '사이의 시간 개선
• 단어 옵션뿐만 아니라 자연스러운 말을 인식하십시오.
  • 스탠포드 NLP?
  • [RASA NLU] (https://rasa.ai/)
• 단지 한 번의 명령 대신 작업 목록을 구문 분석하십시오 (콤보!)
• NLP를 통한 텍스트를 구문 분석하고 동작 및 매개 변수를 인식합니다 (자연어 처리)
• Raspberrypi에서 모든 것이 작동하도록하십시오!
  • 음성-텍스트 (이상적으로 오프라인)
  • 텍스트 음성
• Apache Jena를 사용하여 온톨로지를 통해 구문 분석하고 검색하십시오.