neosync

開源數據匿名和合成數據編排

|網站|文檔|不和諧|博客| ChangElog |路線圖

介紹

NeoSync是一種開源的開發人員，首先是匿名PII，生成合成數據和同步環境，以更好地測試，調試和開發人員體驗。

公司使用NeoSync來：

1. 安全測試針對生產數據的代碼- 匿名化敏感生產數據，以便在本地安全地使用它來進行更好的測試和開發人員體驗
2. 輕鬆在本地重現生產錯誤- 匿名和子集生產數據，以獲取一個安全的代表性數據集，您可以用來快速有效地在本地重現生產錯誤
3. 低級別環境的高質量數據- 當您用類似生產的數據與階段和質量保證環境進行水分時，捕獲蟲子在產生生產之前。
4. SOLVE GDPR，DPDP，FERPA，HIPAA等- 使用匿名和合成數據來降低您的合規範圍，並輕鬆遵守HIPAA，GDPR和DPDP等法律
5. 種子開發數據庫- 帶有用於單元測試，演示等的合成數據的種子開發數據庫

特徵

• 根據您的模式生成合成數據
• 匿名化現有生產數據以獲得更好的開發人員體驗
• 使用任何SQL查詢來為本地和CI測試子設置生產數據庫
• 完整使用事件製品模型自動處理作業重試，失敗和播放的異步管道
• 自動的參考完整性
• 宣告性的基於Gitops的配置是CI管道中的一步，以補充CI DB
• 所有主要數據類型的預先構建的數據變壓器
• 使用JavaScript或LLMS的自定義數據變壓器
• 與Postgres，MySQL，S3的預構建集成

入門

NeoSync是一個完全模擬的設置，可以輕鬆啟動和運行。

root的compose.yml文件包含生產圖像參考，該圖像可以使您只需幾個命令即可啟動和運行，而不必在系統上構建任何內容。

NeoSync使用較新的docker compose命令，因此請確保將其安裝在計算機上。

要啟動NeoSync，請將存儲庫克隆到本地目錄中，請確保安裝和運行Docker，然後運行：

make compose/up

要停止，運行：

make compose/down

NeoSync現在將在http：// localhost：3000上提供。

製作構成了帶有連接和工作的預種子，讓您入門！只需運行生成和同步作業即可觀看NeoSync的行動！

kubernetes，auth模式等

有關環境變量，Kubernetes部署和準備生產的指南的更多深入詳細信息，請查看我們文檔的部署NEOSYNC部分。

資源

一些資源來幫助您：

• 綜合文檔和指南的文檔
• 與社區和NEOSYNC團隊討論的不和諧
• X用於最新更新

貢獻

我們喜歡大小的貢獻。這只是您可以為NeoSync做出貢獻的幾種方法。

• 加入我們的Discord頻道，在那裡問我們任何問題
• 打開PR（請參閱我們在本地使用NeoSync開發的說明）
• 提交功能請求或錯誤報告

許可

我們堅信免費和開源軟件，並根據MIT Expat許可證提供此存儲庫。