Generative AI Pharmacist

Apoteker AI generatif

Menyajikan kepada Anda, Macy the AI ​​Apoteker !

Tertarik untuk menguji alat AI generatif terbaru, saya membuat avatar animasi ini yang mampu memberikan konseling obat dengan cara yang realistis dan terdengar profesional.

️ Penafian: Video ini murni untuk tujuan demo sebagai bagian dari proyek hobi pribadi dan tidak dimaksudkan untuk memberikan segala bentuk nasihat medis. Ini bukan produk nyata, dan pandangan yang diungkapkan adalah milik saya.

Klik thumbnail di bawah ini (atau kunjungi tautan ini) untuk menonton video demo untuk melihat Macy beraksi, di mana ia secara singkat berbicara tentang dua obat yang umum diresepkan.

Hasilnya cukup mengesankan dan hanya akan menjadi lebih baik dari waktu ke waktu, mengingat kecepatan AI generatif meningkat. Untuk membuat demo ini, saya butuh 0 dolar dan hanya 25 menit.

Berikut adalah alat yang saya gunakan:

1. Midjourney untuk menghasilkan gambar seorang apoteker wanita
2. Openai's Chatgpt untuk menghasilkan skrip untuk konseling obat
3. Video Prime ElevenLabs AI untuk menghasilkan audio dari naskah chatgpt
4. Studio Realitas Kreatif D-ID untuk menghasilkan video avatar animasi realistis yang disinkronkan dengan audio (uji coba gratis)

Proyek ini juga telah dengan bangga ditampilkan dalam sebuah studi penelitian (video informasi pasien yang dihasilkan oleh kecerdasan buatan untuk nefrektomi parsial oleh mahasiswa kedokteran dengan validasi ahli: studi percontohan) yang diterbitkan di Ju Open Plus (Jurnal Resmi American Urological Association): https:/journals.lww.com/juop/fulltext/2024/07.000

---

Panduan langkah demi langkah

(1) Midjourney - Generasi Gambar

• Kami membutuhkan wajah untuk mewakili avatar kami, dan kami dapat menggunakan alat pembuatan gambar seperti midjourney untuk melakukan hal itu

• Midjourney adalah layanan AI gratis oleh openai yang membuat gambar dari deskripsi tekstual

• Pengaturan:

  1. Midjourney bekerja sepenuhnya pada perselisihan, jadi pastikan Anda mendaftar untuk akun perselisihan (yang gratis).
  2. Kunjungi tautan situs midjourney ini, yang secara otomatis membawa Anda ke undangan perselisihan.
  3. Terima undangan Perselisihan ke Midjourney. Pilih untuk terus perselisihan.
  4. Klik tombol Midjourney (dengan ikon kapal) dan pilih salah satu kamar pendatang baru misalnya, newbies-24
  
  5. Di jalur obrolan, ketik /imagine diikuti dengan prompt deskripsi Anda. Misalnya, prompt yang saya gunakan adalah "foto profesional tubuh bagian atas berkualitas tinggi dari apoteker wanita Cina dengan mantel lab putih dengan latar belakang farmasi". Tekan Enter setelah mengetiknya, dan berikan Midjourney waktu untuk menghasilkan gambar.
  
  6. Setelah selesai, Anda akan melihat output dari empat gambar. Di bawah set gambar, Anda akan melihat satu set tombol U1-U4, dan V1-V4.
  
  7. Keempat gambar diberi nomor searah jarum jam dari kiri atas. Untuk mendapatkan variasi baru dari gambar tertentu yang Anda sukai, pilih "V1" (atau V2, V3, atau V4), dan untuk mendapatkan salinan resolusi tinggi, pilih "U1" (atau U2, U3, atau U4)
  8. Setelah Anda memiliki varian resolusi tinggi yang Anda pilih dengan mengklik salah satu tombol U, klik pada gambar dan kemudian klik tautan 'Buka di Browser' di dekat bagian bawah. Anda kemudian dapat mengklik kanan dan menyimpan gambar resolusi tinggi ke komputer Anda.
  

Saya juga mencoba alat-alat lain seperti Dall-E dan difusi stabil tetapi hasilnya tidak cukup realistis (misalnya, mata yang tidak selaras dan fitur wajah).

Catatan : Midjourney telah menghentikan program uji coba gratisnya pada April 2023. Untuk menghasilkan gambar wajah yang realistis, Anda dapat menggunakan salah satu dari yang berikut:

• Temukan gambar di internet sebagai gambar dasar untuk dikerjakan, atau bahkan menggunakan foto Anda sendiri
• Pergilah ke https://this-person-does-not-exist.com/en (berdasarkan algoritma stylegan) untuk menghasilkan wajah yang realistis
• Situs web lain yang dapat Anda coba termasuk: https://lexica.art dan https://playgroundai.com/

(2) Chatgpt - pembuatan teks

• Kami membutuhkan skrip konseling yang dapat memberikan saran yang relevan tentang serangkaian obat. Untuk melakukan itu, kita bisa menggunakan chatgpt.

• ChatGPT adalah chatbot yang dikembangkan oleh Openai dan diluncurkan pada November 2022. Ini dibangun di atas keluarga GPT-3 dari model bahasa besar Openai.

• Pengaturan:

  1. Kunjungi tautan ini untuk mengakses chatgpt (Anda harus mendaftar dan login sesuai, yang gratis)
  2. Di bagian prompt, masukkan deskripsi yang relevan untuk skrip konseling. Misalnya, prompt yang saya gunakan adalah sebagai berikut: "Buat skrip yang pertama kali memperkenalkan diri sebagai apoteker bernama Macy, dan kemudian berbicara tentang konseling menunjuk kepada pasien untuk resep berikut: Metformin 1 tablet 3 kali sehari, tablet amlodipine 1 setiap pagi, dan aspirin 1 tablet setiap pagi".
  
  3. Dari output pada layar chatgpt, salin dan simpan teks yang dihasilkan dalam file teks di mesin lokal Anda.

Saya harus meregenerasi respons beberapa kali karena saya menemukan beberapa output terlalu teoritis dan akademis, dan tidak dalam format awam yang diharapkan untuk menjelaskan obat -obatan kepada pasien.

(3) Elevenlabs-Text-to-Speech Generation

• Selanjutnya, kami ingin mengonversi teks skrip chatgpt menjadi klip audio yang terdengar alami. Kita bisa melakukannya dengan alat gratis seperti Prime Voice AI (oleh Elevenlabs)

• Prime Voice AI adalah perangkat lunak ucapan AI yang realistis dan serbaguna yang membawa suara yang paling menarik, kaya, dan hidup seperti pencipta dan penerbit yang mencari alat utama untuk bercerita.

• Pengaturan:

  1. Kunjungi halaman ElevenLabs dan buat akun secara gratis.
  2. Pada halaman Sintesis Pidato, pilih suara tertentu dalam pengaturan, tempel skrip teks ke bagian teks, dan klik menghasilkan. Suara yang saya pilih adalah premade/Domi karena saya menemukan itu yang paling hidup dan alami. Pengaturan juga dapat disesuaikan sesuai untuk hal -hal seperti stabilitas dan kejelasan.
  

  Saya sedikit memperpendek skrip dengan menghapus bagian tentang obat amlodipine karena saya tidak ingin demo terlalu lama.

  3. Ada batas kredit untuk akun gratis, jadi pastikan Anda menggunakannya dengan bijak untuk audio yang ingin Anda hasilkan.

  4. Unduh dan simpan file .mp3 (berjudul 'Synthesized_audio.mp3') di mesin lokal Anda.

Kiat bonus: Elevenlabs juga dilengkapi dengan kemampuan kloning suara (di bawah fitur lab suara): https://beta.elevenlabs.io/voice-lab. Jika Anda memiliki> 1 menit perekaman suara tertentu, Anda dapat mengubah skrip menjadi suara yang ingin Anda klon.

(4) D -ID - Generasi Avatar Talk Fotorealistik (dan Sinkronisasi Audio)

• Terakhir, inilah saatnya untuk menyatukan gambar apoteker dan audio konseling bersama -sama ke dalam video fotorealistik. Untuk melakukannya, kita dapat menggunakan alat seperti D-ID.

• Teknologi AI kreatif D-ID mengambil gambar wajah dan mengubahnya menjadi video fotorealistik berkualitas tinggi. Dengan mengklik tombol, itu dapat menggabungkan gambar dengan audio atau teks untuk memberi mereka ekspresi dan ucapan.

• Pengaturan:

  1. Kunjungi situs web D-ID dan buat akun uji coba gratis
  2. Pilih tombol Buat Video untuk mulai membuat video baru
  3. Tambahkan gambar apoteker menengah Anda sebagai gambar presenter
  4. Unggah audio naskah chatgpt kami di Upload your own voice di sebelah kanan.
  
  5. Klik tombol Generate Video di kanan atas dan tunggu mahakarya Anda siap untuk diunduh!

---