Norconex Web และเครื่องรวบรวมข้อมูลระบบไฟล์เป็นตัวรวบรวมข้อมูลที่มีคุณสมบัติเต็มรูปแบบ (หรือแมงมุม) ที่สามารถจัดการและจัดเก็บข้อมูลที่รวบรวมไว้ในที่เก็บที่คุณเลือก (เช่นเครื่องมือค้นหา) พวกเขามีความยืดหยุ่นมากทรงพลังที่ง่ายต่อการขยายและพกพา พวกเขาสามารถใช้บรรทัดคำสั่งที่มีการกำหนดค่าตามไฟล์บนระบบปฏิบัติการใด ๆ หรือฝังลงในแอปพลิเคชัน Java โดยใช้ API ที่มีการบันทึกไว้อย่างดี
เยี่ยมชมเว็บไซต์สำหรับการดาวน์โหลดแบบไบนารีและเอกสารประกอบ: https://opensource.norconex.com/crawlers/
สาขานี้มีรหัสรุ่น 4 ซึ่งยังอยู่ในระหว่างการพัฒนา
สำหรับการเปิดตัว Norconex Web Crawler ที่มีเสถียรภาพล่าสุดให้ใช้ Branch รุ่น 3
ณ วันที่ 24 กุมภาพันธ์ 2567 สาขา main เริ่มต้นมีรหัสสำหรับสแต็ครุ่น 4 รุ่นที่กำลังจะมาถึง ตอนนี้มันเป็นโมโนรีเปะที่มีโครงการที่เกี่ยวข้องกับ Norconex Crawler ทั้งหมดที่เคยรักษาไว้ใน repos แยกต่างหาก โครงการทั้งหมดในรายงานโมโนนี้จะได้รับการเผยแพร่พร้อมกันและแบ่งปันหมายเลขเวอร์ชันเดียวกัน
จนกว่า V4 จะได้รับการปล่อยตัวอย่างเป็นทางการสาขานี้ไม่ควรถือว่ามีเสถียรภาพ
| โฟลเดอร์ | ID สิ่งประดิษฐ์ | สร้าง |
|---|---|---|
| Crawler/Core/ | การทดสอบ NX-Crawler-Core | |
| Crawler/FS/ | NX-Crawler-FS | |
| Crawler/Web/ | nx-crawler-web | |
| ผู้นำเข้า/ | nx-importer | |
| Commmitter/AmazonCloudSearch/ | nx-committer-amazoncloudsearch | |
| committer/apachekafka/ | nx-committer-apachekafka | |
| Commmitter/AzureCognitiveSearch/ | NX-Committer-AzureCognitiveSearch | |
| committer/core/ | nx-committer-core | |
| Commmitter/Idol/ | nx-committer-idol | |
| Commmitter/Elasticsearch/ | NX-Committer-Elasticsearch | |
| committer/neo4j/ | nx-committer-neo4j | |
| committer/solr/ | nx-committer-solr | |
| committer/sql/ | NX-Committer-SQL |
โครงการทั้งหมดในที่เก็บนี้แบ่งปัน ID กลุ่ม Maven เดียวกัน:
com.norconex.crawler