text_rewritter

文本重寫器

使用Langchain和GPT3通過塊重寫大型文本塊（請記住以前的修改以考慮到它們）。

理論

文本將按以下提示按順序進行處理（以下兩個電話縮短）切成塊：

 You are rewriting a novel, rewrite the full extract according to the instructions:

INSTRUCTIONS:
{instructions}

EXAMPLES OF REWRITINGS FROM OTHER PARTS OF THE TEXT:

{previous_rewrites}

EXTRACT TO REWRITE:
{previous_chunk}
{chunk}

REWRITTEN EXTRACT:
{previous_rewrite}

instructions是用戶提供的提示previous_rewrites是重寫的示例，其塊類似於提供的塊previous_chunk / previous_rewrite是文本的先前塊（保險連續性） chunk是當前文本的塊

用法

• 來源的mentalism_index Conda Env獲得依賴關係
• 將OpenAI API鍵放入路徑
• 將輸入文本和提示放在data文件夾中（其中包含提示和結果的示例）
• 運行rewrite.py 。

我建議您在較小的文本上測試您的提示，因為在找到良好的提示之前，可以進行許多試驗。

潛在的改進

• 一個人可以改善文本大小管理，以嘗試在大型文本塊上運行，同時最大程度地減少溢出的風險（我們可以根據需要提供的示例數量多數）
• 讓用戶提前添加示例重寫到搜索索引
• 節省中級結果以避免損失，總體組織實驗
• 添加最佳3交互式模式（更好：我們可以讓用戶將自己喜歡的版本作為可選的第四選項）編寫）