yoha

是的

實用的手動跟踪引擎。

注意：Yoha目前未受到未來的狀態。

快速鏈接：

• 演示（代碼）
• 文件
• 網站
• NPM

安裝

npm install @handtracking.io/yoha

請注意：

• 您需要從node_modules/@handtracking.io/yoha提供文件，因為庫需要從此處下載模型文件。 （webpack示例）
• 您需要使用HTTP為網絡攝像頭訪問提供頁面。 （webpack示例）
• 在某些情況下，您應該使用交叉隔離，因為它可以改善發動機的性能。 （webpack示例）

描述

Yoha是一種手動跟踪引擎，其目的是在實際情況下成為一種多功能解決方案，在實際情況下，使用手工跟踪來增加應用程序的價值。雖然最終的目標是成為支持任何手姿勢的通用手動跟踪引擎，但該引擎圍繞用戶/開發人員發現有用的特定手姿勢發展。這些姿勢是由引擎檢測到的，該引擎允許建立具有有意義交互的應用程序。請參閱演示以獲取示例。

Yoha目前正在Beta。

關於名稱：yoha是（“ Yo ur ha nd Tracking”）。

語言支持

Yoha目前可通過JavaScript提供網絡。將來將添加更多語言。如果您想將Yoha移植到另一種語言中，並且需要幫助可以隨意伸出手。

技術細節

Yoha是從頭開始建造的。它使用使用自定義數據集訓練的自定義神經網絡。瀏覽器中推斷的骨幹當前是TensorFlow.js

特徵：

• 檢測21個2D Landmark坐標（單手）。
• 手部存在檢測。
• 手動方向（左/右手）檢測。
• 內置姿勢檢測。

支持的手姿勢：

• 捏（食指和拇指觸摸）
• 拳頭

您想要的姿勢不在此列表中？隨意為其創建一個問題。

表現

Yoha的構建是為了牢記性能。它能夠在各種筆記本電腦和台式設備上提供實時用戶體驗。移動設備上的性能並不是很棒，希望隨著TensorFlow.js等推理框架的進一步開發，這將改變它。

請注意，本機推理速度無法與Web推理速度進行比較。換句話說，如果您本地運行yoha，它將比通過Web瀏覽器快得多。

最小例子

• 來源
• 在本地運行：

 git clone https://github.com/handtracking-io/yoha && 
cd yoha/example && 
yarn && 
yarn start

繪畫演示

• 實時版本
• 來源
• 在本地運行：

 git clone https://github.com/handtracking-io/yoha && 
cd yoha && 
./download_models.sh && 
yarn && 
yarn start