semantle word embeddingsダウンロード - semantle word embeddingsソースコードダウンロード

ダウンロード

単語の埋め込みでセマントを再現します

このプロジェクトは、ゲームセマントのバージョンを再現しようとします。これは、プレイヤーの推測のセマンティックな類似性をその日の秘密の言葉に与える5文字の単語推測ゲームワードルのバリアントです。セマンテルのバージョンを使用すると、プレイヤーは次の前提条件の埋め込みから選択できます。

すべてのスクリプトはJupyterノートブック内に配置されています。これには、以下をカバーする詳細な記事も含まれています。

プログラムの実装における設計決定
プログラムの実装のウォークスルー
プログラムのコンテキストにおける選択された単語埋め込みの比較分析
以下を含むベクトルセマンティクスに関する洞察
- 自然言語処理以外の可能なアプリケーション（たとえば、タンパク質シーケンスのベクトル化）
- 単語の埋め込みの倫理的問題と潜在的な偏見

このノートブックは、Google Colabを使用して作成され、 gdownやwgetなどのコマンドを呼び出します。一部のローカルマシンでは、事前に補助された単語の埋め込みを読み込むことのメモリ要件も重い場合があります。したがって、コラブでノートブックを実行することをお勧めします。

これは、デラサール大学ソフトウェアテクノロジー省のエドワードP.テイ氏の下で、自然言語処理クラスの紹介における主要なコースの出力です。

このプロジェクトは、次のPythonライブラリとモジュールを使用したJupyterノートブックです。

ライブラリ/モジュール	説明	ライセンス
`gensim`	トレーニングベクターの埋め込み、トピックモデリング、ドキュメントインデックス作成、および大規模なコーパスでの類似性の取得のための機能を提供します	GNU以下の一般公開ライセンスv2.1
`regex`	後方互換性を維持しながら、標準の`re`モジュールに追加の機能を提供します	Apacheライセンス2.0
`numpy`	多次元配列オブジェクト、さまざまな派生オブジェクト、および配列上の高速操作のためのルーチンの品揃えを提供します	BSD 3-Clause「New」または「改訂」ライセンス
`io`	さまざまなタイプのI/Oを扱うためのPythonの主要な設備を提供します	Python Software Foundationライセンス
`random`	さまざまな一般的な分布で擬似ランダム数を生成するための機能を提供します	Python Software Foundationライセンス