Book Search Engine

Book-Search-Engine

本の検索エンジン（Java、Apache Lucene、Crawler4J、Apache Spark）

• Crawler4Jを使用して約100,000のWebページをクロールし、Apache SparkのGraphxを使用してWebグラフにPagerankを実装することにより、リンク分析を実行しました。
• Apache Luceneを使用してクロールされたドキュメントにインデックスを付け、PagerankとTF/IDFスコアの組み合わせにより、各クエリのドキュメントを注文しました。