Generative AI Pharmacist

Generatives AI -Apotheker

Macy, den AI -Apotheker, präsentieren!

Ich war bestrebt, die neuesten generativen KI-Tools auf die Probe zu stellen, und habe diesen animierten Avatar erstellt, der in realistischem und professionellem klingendem Medikamentenberatung in der Lage ist.

Euen Haftungsausschluss: Dieses Video dient nur für Demo -Zwecke als Teil eines persönlichen Hobbyprojekts und soll keine medizinische Beratung geben. Dies ist kein echtes Produkt, und die geäußerten Ansichten sind meine eigenen.

Klicken Sie unten auf das Miniaturbild (oder besuchen Sie diesen Link), um das Demo-Video anzusehen, um Macy in Aktion zu sehen, wo sie kurz über zwei häufig vorgeschriebene Medikamente spricht.

Das Ergebnis ist ziemlich beeindruckend und wird angesichts der Geschwindigkeit, mit der sich generative KI verbessert, nur besser. Um diese Demo zu erstellen, brauchte ich 0 Dollar und nur 25 Minuten.

Hier sind die Werkzeuge, die ich verwendet habe:

1. Midjourney generieren ein Bild eines weiblichen Apothekers
2. OpenAIs Chatgpt, um Skript für die Medikamentenberatung zu generieren
3. ElfLabs 's Prime Video KI, um Audio aus dem Chatgpt -Skript zu generieren
4. D-IDs kreatives Reality-Studio, um realistische animierte Avatar-Videos mit Audio synchronisiert zu generieren (kostenlose Testversion)

Dieses Projekt wurde auch stolz in einer Forschungsstudie (künstliche Intelligenz - erzeugte Patienteninformationsvideos für eine partielle Nephrektomie durch Medizinstudenten mit Expertenvalidierung: eine Pilotstudie) vorgestellt, die in Ju Open Plus (dem offiziellen Journal der American Urological Association) veröffentlicht wurde. https://journals.lww.com/juop/fulltext/2024/07000/artificial_intelligence_generated_patient.1.aspx

---

Schritt-für-Schritt-Anleitung

(1) Midjourney - Bildgenerierung

• Wir brauchen ein Gesicht, um unseren Avatar zu repräsentieren, und wir können die Image -Generierungs -Tools wie Midjourney verwenden, um genau das zu tun

• Midjourney ist ein kostenloser KI -Service von OpenAI, der Bilder aus Textbeschreibungen erstellt

• Aufstellen:

  1. Midjourney arbeitet ausschließlich auf Zwietracht. Stellen Sie also sicher, dass Sie sich für ein Discord -Konto anmelden (das kostenlos ist).
  2. Besuchen Sie diesen Link MidJourney Site, der Sie automatisch zu einer Discord -Einladung führt.
  3. Akzeptieren Sie die Einladung der Zwietracht in Midjourney. Wählen Sie weiter, um weiter zu diskordieren.
  4. Klicken Sie auf die Schaltfläche Midjourney (mit dem Schiffsymbol) und wählen Sie einen der Neuankömmläden, z. B. newbies-24
  
  5. Geben Sie in der Chat -Zeile /imagine eine Eingabeaufforderung an. Zum Beispiel war die Eingabeaufforderung, die ich verwendete, "hochwertiges Oberkörperfoto eines weiblichen chinesischen Apothekers in einem weißen Labormantel mit einem Apothekenhintergrund". Drücken Sie die Eingabe nach dem Eingeben und geben Sie Midjourney einige Zeit, um die Bilder zu generieren.
  
  6. Sobald Sie fertig sind, sehen Sie eine Ausgabe von vier Bildern. Unter dem Bildsatz sehen Sie einen Satz von Tasten U1-U4 und V1-V4.
  
  7. Die vier Bilder sind vom Uhrzeigersinn von der oberen linken Seite nummeriert. Um eine neue Variation eines bestimmten Bildes zu erhalten, das Sie mögen, wählen Sie "v1" (oder v2, v3 oder v4) und um eine hochauflösende Kopie zu erhalten, wählen Sie "U1" (oder U2, U3 oder U4).
  8. Sobald Sie Ihre ausgewählte hochauflösende Variante haben, indem Sie auf eine der U-Schaltflächen klicken, klicken Sie auf das Bild und klicken Sie dann auf den Link "Im Browser" in der Nähe des unteren Randes. Sie können dann mit der rechten Maustaste klicken und das hochauflösende Bild in Ihren Computer speichern.
  

Ich habe auch andere Werkzeuge wie Dall-E und stabile Diffusion ausprobiert, aber ihre Ergebnisse waren nicht realistisch genug (z. B. falsch ausgerichtete Augen und Gesichtsmerkmale).

Hinweis : Midjourney hat sein kostenloses Testprogramm ab April 2023 inneha. Um realistische Gesichtsbilder zu generieren, können Sie eine der folgenden folgenden verwenden:

• Finden Sie ein Bild im Internet als Basisbild, mit dem Sie arbeiten können oder sogar Ihre eigenen Fotos verwenden können
• Besuchen Sie https://this-person-does-not-exist.com/en (basierend auf dem Stylegan-Algorithmus), um ein realistisches Gesicht zu generieren
• Weitere Websites, die Sie ausprobieren können, gehören: https://lexica.art und https://playgroundai.com/

(2) CHATGPT - Textgenerierung

• Wir brauchen ein Beratungsskript, das einen relevanten Rat zu einer Reihe von Medikamenten geben kann. Dazu können wir Chatgpt verwenden.

• Chatgpt ist ein von OpenAI entwickelter Chatbot, der im November 2022 auf den Markt gebracht wurde. Es basiert auf OpenAs GPT-3-Familie mit großer Sprachmodellen.

• Aufstellen:

  1. Besuchen Sie diesen Link, um auf ChatGPT zuzugreifen (Sie müssen sich entsprechend anmelden und anmelden, was kostenlos ist).
  2. Geben Sie im Abschnitt Eingabeaufforderung die entsprechende Beschreibung für das Beratungsskript ein. Zum Beispiel lautet die Eingabeaufforderung, die ich verwendet habe, wie folgt: "Erstellen Sie ein Skript, das sich zuerst als Apotheker namens Macy vorstellt, und spricht dann über die Beratungspunkte für einen Patienten für das folgende Rezept: Metformin 1 Tablet 3 mal täglich, Amlodipin 1 Tablette jeden Morgen und Aspirin 1 Tablet jeden Morgen".
  
  3. Kopieren und speichern Sie den generierten Text in einer Textdatei auf Ihrem lokalen Computer aus der Ausgabe auf dem Bildschirm Chatgpt.

Ich musste die Reaktion mehrmals regenerieren, weil ich einen Teil der Produktion als übermäßig theoretisch und akademisch fand und nicht im erwarteten Laienformat zur Erklärung von Medikamenten für Patienten ist.

(3) Elevenlabs-Text-to-Speech-Erzeugung

• Als nächstes möchten wir den ChatGPT -Skripttext in einen natürlichen Sound -Audioclip umwandeln. Wir können dies mit kostenlosen Werkzeugen wie Prime Voice AI (von elf Labs) tun

• Prime Voice AI ist eine realistische und vielseitige KI -Sprachsoftware, die den Schöpfer und Publisher, die die ultimativen Werkzeuge für das Geschichtenerzählen suchen, die überzeugendsten, reichhaltigsten und lebensechten Stimmen verleiht.

• Aufstellen:

  1. Besuchen Sie die Seite elfLabs und erstellen Sie kostenlos ein Konto.
  2. Wählen Sie auf der Seite der Sprachsynthese eine bestimmte Stimme in den Einstellungen aus, fügen Sie das Textskript in den Textabschnitt ein und klicken Sie auf Generieren. Die Stimme, die ich ausgewählt habe, war premade/Domi , da ich feststellte, dass es die lebhafteste und natürlichste. Die Einstellungen können auch entsprechend für Dinge wie Stabilität und Klarheit angepasst werden.
  

  Ich habe das Drehbuch leicht verkürzt, indem ich den Abschnitt über das Arzneimittelamlodipin entfernt habe, weil ich nicht wollte, dass die Demo zu lang ist.

  3. Es gibt ein Kreditlimit für das kostenlose Konto. Stellen Sie daher sicher, dass Sie sie mit Bedacht für das Audio verwenden, das Sie generieren möchten.

  4. Laden Sie die Datei .mp3 (mit dem Titel "Synthesized_audio.mp3") auf Ihrem lokalen Computer herunter und speichern Sie sie.

Bonus-Tipp: Elevenlabs werden auch mit den Sprachklonierungsfunktionen (im Rahmen der Voice Lab-Funktion) geliefert: https://beta.elevenlabs.io/voice-lab. Wenn Sie> 1 min Aufzeichnung einer bestimmten Stimme haben, können Sie das Skript in die Stimme umwandeln, die Sie klonen möchten.

(4) D -ID - Photorealistische sprechende Avatar- (und Audio -Synchronisierungsgenerierung)

• Zuletzt ist es Zeit, das Apothekerbild zu packen und Audio in ein fotorealistisches Video zu beraten. Dazu können wir Tools wie D-ID verwenden.

• Die kreative KI-Technologie von D-ID macht Bilder von Gesichtern und verwandelt sie in hochwertige, fotorealistische Videos. Beim Klicken einer Schaltfläche kann es Bilder mit Audio oder Text kombinieren, um ihnen Ausdruck und Sprache zu verleihen.

• Aufstellen:

  1. Besuchen Sie die D-ID-Website und erstellen Sie ein kostenloses Testkonto
  2. Wählen Sie die Schaltfläche Video erstellen, um ein neues Video zu erstellen
  3. Fügen Sie Ihr Bild mit MidJourney Pharmacist als Moderator -Bild hinzu
  4. Laden Sie unser Audio mit ChatGPT -Skripten in den Abschnitt Upload your own voice rechts hoch.
  
  5. Klicken Sie oben rechts auf die Schaltfläche Generate Video und warten Sie, bis Ihr Meisterwerk zum Download bereit ist!

---