AnimeBack

Animeback

Cari gambarnya. Ini adalah server mesin pencari untuk adegan animasi. Anda dapat mencari secara terbalik melalui tangkapan layar dari momen anime tertentu, dan secara terbalik, episode mana berasal dan waktu yang tepat muncul. Front-end situs web

Dibandingkan dengan Trace.Moe, proyek ini mungkin dapat memberikan layanan pencarian yang lebih kuat dan lebih akurat karena menggunakan model pembelajaran yang mendalam untuk mengekstrak fitur gambar. Oleh karena itu, overhead kinerja lebih besar dan inklusi lebih lambat. Masih dalam fase pengujian

Contoh

Tes gambar

Hasil pencarian

menyebarkan

Persyaratan lingkungan

python3 perlu diinstal ffmpeg

Instal dependensi:

pip install bilibili_api imagehash tensorflow keras flask pymilvus opencv-python sklearn bilili
# Linux
pip install plyvel
# Windows
pip install plyvel-win32

berlari

• Inisialisasi file konfigurasi

python run.py

• Instal dan Mulai Milvus
• Konfigurasikan config.json
• Jalankan program unduhan (bilibili)

python run.py download-bilibili

• Jalankan Program Pemrosesan/Masuk Video

 # 将会处理已下载的视频
python run.py process

• Jalankan Backend Situs Web

python app.py

Metode ini hanya untuk pengujian. Silakan merujuk ke metode penyebaran Flask untuk lingkungan produksi

Contoh berikut menggunakan gunicorn , 4 Proses Pekerja ( -w 4 ) untuk menjalankan aplikasi Flask dan mengikat ke 4000 Port of localhost ( -b 127.0.0.1:4000 ):

gunicorn -w 4 -b 127.0.0.1:4000 app:flask_app

Implementasi Teknologi

• Melalui API Bilibili (atau situs web lain), secara otomatis mengunduh drama dan awalnya menyimpan informasi drama.

• Gunakan FFMPEG untuk mengompres video dan mengubahnya menjadi MP4, dan letakkan di direktori statis situs web

• Gunakan FFMPEG untuk mengubah video menjadi gambar pada tingkat pengambilan sampel tertentu dan letakkan di direktori sementara

• Baca bingkai foto demi bingkai, filter gambar serupa yang berdekatan melalui algoritma phash , dan ekstrak vektor fitur menggunakan model dan masukkan ke dalam milvus . Informasi yang sesuai dari setiap bingkai yang ditambahkan disimpan dalam database leveldb , seperti id , time , dan epid

• Saat mencari, vektor fitur gambar juga diekstraksi, dicari dengan milvus , mengembalikan id frame yang sama, dan kemudian meminta informasi lain melalui database.

Harus melakukan

• Mendukung model pra-terlatih Xception dan pengurangan dimensi PCA
• Melatih model yang lebih cocok
• Mengimplementasikan optimasi OP/ED
• Unduh secara otomatis dari anime sakura
• Buka API Pencarian

Terima kasih

• Beberapa proses dicari menggunakan gambar. Beberapa ide berasal dari Tuxiaobei
• Bagian yang diunduh dari B Station menggunakan Bilili
• Implementasi penanaman otomatis tepi hitam gambar berasal dari crop.py of trace.moe
• Indeks milvus dan vektor pencarian digunakan
• Berbagai model pembelajaran mendalam digunakan untuk mengekstraksi fitur gambar