build your own gpt

建立自己的GPT

該存儲庫包含2024 AMLD研討會的實時編碼部分，“在生成AI的最前沿 - 揭開GPT的秘密並建立自己的模型”。您可以在這裡找到隨附的幻燈片。

如研討會期間所述，整個項目的靈感來自Andrej Karpathy的優秀零對英雄課程的啟發。

項目結構

在notebooks電腦目錄下，您可以找到實時編碼筆記本， build_your_own_gpt.ipynb和工作demo_text_generation.ipynb 。

在src目錄下，您會發現從實時編碼筆記本中提取並在演示中使用的一些功能和類。

實時編碼過程中生成的數據和模型均在各個目錄下版本，以使演示立即可用。

在本地環境中設置項目

項目依賴項在pyproject.toml文件中指定，可以使用詩歌軟件包管理器安裝。

要使用詩歌安裝依賴關係，您首先需要確保在系統上安裝詩歌。如果不是這樣，您可以在終端中使用以下命令安裝它： curl -sSL https://install.python-poetry.org | python3 -

安裝詩歌后，導航到pyproject.toml文件所在的項目目錄。然後，您可以使用以下命令安裝依賴項： poetry install --no-root

要運行筆記本，您可以使用Jupyter Lab。如果您使用詩歌安裝了項目依賴項，則可以使用以下命令從虛擬環境中運行Jupyter Lab： poetry run jupyter lab

Google Colab上的項目設置

另外，您可以在Google COLAB上的Google COLAB上打開並運行實時編碼筆記本build_your_own_gpt.ipynb ：