crawlers
v3.0.2
Norconex WebおよびFilesystem Crawlersは、お好みのリポジトリ(検索エンジンなど)に収集されたデータを操作および保存できるフル機能のクローラー(またはスパイダー)です。それらは非常に柔軟で、強力で、拡張しやすく、ポータブルです。これらは、任意のOS上のファイルベースの構成を使用してコマンドラインを使用したり、十分に文書化されたAPIを使用してJavaアプリケーションに埋め込まれたりすることができます。
バイナリのダウンロードとドキュメントについては、Webサイトにアクセスしてください:https://opensource.norconex.com/crawlers/
このブランチには、まだ開発中のバージョン4コードがあります。
Norconex Web Crawlerの最新の安定したリリースには、バージョン3ブランチを使用してください。
2024年2月24日現在、デフォルトのmainブランチは、今後のバージョン4クローラースタックのコードを保持しています。現在、以前に別々のレポで維持されていたすべてのNorconex Crawler関連のプロジェクトを含むモノレポです。このモノレポートのすべてのプロジェクトは、同時にリリースされ、同じバージョン番号を共有します。
V4が正式にリリースされるまで、このブランチは安定していると見なされるべきではありません。
| フォルダ | アーティファクトID | 建てる |
|---|---|---|
| クローラー/コア/ | NX-Crawler-Coreテスト | |
| クローラー/fs/ | nx-crawler-fs | |
| クローラー/ウェブ/ | nx-crawler-web | |
| 輸入業者/ | nx-importer | |
| Committer/AmazonCloudSearch/ | nx-committer-amazoncloudsearch | |
| コミッター/apachekafka/ | nx-committer-apachekafka | |
| Committer/AzureCognitivesearch/ | NX-Committer-AzureCognitivesearch | |
| コミッター/コア/ | NX-Committer-Core | |
| コミッター/アイドル/ | NX-Committer-Idol | |
| Committer/Elasticsearch/ | NX-Committer-Elasticsearch | |
| committer/neo4j/ | nx-committer-neo4j | |
| コミッター/solr/ | nx-committer-solr | |
| committer/sql/ | nx-committer-sql |
このリポジトリのすべてのプロジェクトは、同じMavenグループIDを共有しています。
com.norconex.crawler