So nutzen Sie Nvidias neuen Chat mit dem RTX AI Bot

So nutzen Sie Nvidias neuen Chat mit dem RTX AI Bot

Seit der Veröffentlichung des erstaunlichen ChatGPT wartet die Computerwelt auf einen nativen KI-Chatbot, der unabhängig von der Cloud arbeiten kann. Nvidia hat jetzt eine Antwort mit Chat with RTX, einem nativen KI-Chatbot, der es Ihnen ermöglicht, ein KI-Modell zum Durchsuchen Ihrer Offline-Daten zu nutzen.

In dieser Anleitung zeigen wir Ihnen, wie Sie den Chat mit RTX einrichten und verwenden. Dies ist nur eine Demo, daher kann es bei der Arbeit mit dem Tool zu Fehlern kommen. Aber hoffentlich wird es die Tür zu mehr lokalen KI-basierten Chatbots und anderen lokalen KI-Tools öffnen.

So laden Sie den Chat mit RTX herunter

Der erste Schritt besteht darin, Chat with RTX herunterzuladen und zu konfigurieren, was tatsächlich etwas komplizierter ist, als Sie vielleicht erwarten. Sie müssen lediglich das Installationsprogramm ausführen. Das Installationsprogramm ist jedoch fehleranfällig und Sie müssen Mindestsystemanforderungen erfüllen.

Sie benötigen eine RTX-GPU der 40er- oder 30er-Serie mit mindestens 8 GB VRAM sowie 16 GB System-RAM, 100 GB Festplattenspeicher und Windows 11.

Schritt 1: Laden Sie das Chat with RTX-Installationsprogramm herunter Von Nvidias Website. Dieser ZIP-Ordner ist 35 GB groß, daher kann der Download einige Zeit dauern.

Schritt 2: Sobald der Download abgeschlossen ist, klicken Sie mit der rechten Maustaste auf den Ordner und wählen Sie ihn aus Alles extrahieren.

Jacob Roach/Digitale Trends

Schritt 3: Im Ordner finden Sie einige Dateien und Ordner. Er entscheidet setup.exe Und gehen Sie durch das Installationsprogramm.

Schritt 4: Bevor Sie mit der Installation beginnen, werden Sie vom Installationsprogramm gefragt, wo Sie Ihren Chat mit RTX speichern möchten. Stellen Sie sicher, dass Sie an dem von Ihnen angegebenen Speicherort über mindestens 100 GB Speicherplatz verfügen, da Chat with RTX tatsächlich die KI-Modelle herunterlädt.

Jacob Roach/Digitale Trends

Schritt 5: Die Installation kann bis zu 45 Minuten dauern. Machen Sie sich also keine Sorgen, wenn Sie feststellen, dass es kurzzeitig hängen bleibt. Es kann auch Ihren Computer verlangsamen, insbesondere während der Konfiguration von KI-Modellen. Wir empfehlen daher, während des Abschlusses der Installation einen Moment innezuhalten.

Schritt 6: Die Installation schlägt möglicherweise fehl. Wenn dies passiert, führen Sie einfach das Installationsprogramm erneut aus und wählen Sie denselben Speicherort für die Daten wie zuvor. Das Installationsprogramm wird dort fortgesetzt, wo es aufgehört hat.

Schritt 7: Sobald die Installation abgeschlossen ist, erhalten Sie eine Verknüpfung zum Chatten mit RTX auf Ihrem Desktop und die Anwendung wird in einem Browserfenster geöffnet.

So nutzen Sie den RTX-Chat mit Ihren Daten

Der große Vorteil von Chat mit RTX besteht darin, dass Sie Ihre eigenen Daten verwenden können. Es nutzt die sogenannte Augmented Recall Generation (RAG), um Dokumente zu durchsuchen und Ihnen auf der Grundlage dieser Dokumente Antworten zu geben. Anstatt irgendeine Frage zu beantworten, ist Chat mit RTX gut darin, spezifische Fragen zu einem bestimmten Datensatz zu beantworten.

Nvidia stellt einige Beispieldaten zur Verfügung, damit Sie das Tool ausprobieren können. Sie müssen jedoch Ihre eigenen Daten hinzufügen, um das volle Potenzial des Chats mit RTX auszuschöpfen.

Schritt 1: Erstellen Sie einen Ordner, in dem Sie Ihren Datensatz speichern. Notieren Sie sich den Speicherort, da Sie Chat with RTX auf diesen Ordner verweisen müssen. Derzeit unterstützt Chat with RTX .txt-, .pdf- und .doc-Dateien.

Schritt 2: Öffnen Sie den Chat mit RTX und wählen Sie das Stiftsymbol aus Datensatz zu teilen.

Jacob Roach/Digitale Trends

Schritt 3: Navigieren Sie zu dem Ordner, in dem Sie Ihre Daten gespeichert haben, und wählen Sie ihn aus.

Schritt 4: Wählen Sie im Chat mit RTX das Aktualisierungssymbol aus Datensatz zu teilen. Dadurch wird das Modell basierend auf den neuen Daten neu erstellt. Sie müssen das Formular jedes Mal aktualisieren, wenn Sie dem Ordner neue Daten hinzufügen oder einen anderen Datensatz auswählen.

Jacob Roach/Digitale Trends

Schritt 5: Nachdem Sie Ihre Daten hinzugefügt haben, wählen Sie im Abschnitt „KI-Modell“ das Modell aus, das Sie verwenden möchten. Chat mit RTX umfasst Llama 2 und Mistral, wobei letzteres die Standardoption ist. Probieren Sie beides aus, aber für neue Benutzer ist Mistral das Beste.

Schritt 6: Von dort aus können Sie beginnen, Fragen zu stellen. Nvidia weist darauf hin, dass beim Chatten mit der RTX der Kontext nicht berücksichtigt wird, sodass vergangene Antworten keinen Einfluss auf zukünftige Antworten haben. Darüber hinaus führen spezifische Fragen im Allgemeinen zu besseren Ergebnissen als allgemeine Fragen. Abschließend weist Nvidia darauf hin, dass die Funktion „Chat mit RTX“ manchmal falsche Daten anzeigt, wenn eine Antwort gegeben wird. Denken Sie also daran.

Schritt 7: Wenn Chat mit RTX nicht mehr funktioniert und ein Neustart das Problem nicht löst, können Sie laut Nvidia die Datei Preferences.json löschen, um das Problem zu beheben. Dieser befindet sich in C:\Benutzer\\AppData\Local\NVIDIA\ChatWithRTX\RAG\trt-llm-rag-windows-main\config\preferences.json.

So verwenden Sie den RTX-Chat mit YouTube

Zusätzlich zu Ihren eigenen Daten können Sie den RTX-Chat mit YouTube-Videos nutzen. Das KI-Modell basiert auf Text aus einem YouTube-Video, daher gibt es einige natürliche Einschränkungen.

Erstens sieht das KI-Modell nichts, was nicht im Text enthalten ist. Man kann zum Beispiel nicht fragen, wie jemand in einem Video aussieht. Darüber hinaus sind YouTube-Skripte nicht immer perfekt. Bei Videos mit unordentlichem Text erhalten Sie möglicherweise nicht die gewünschten Antworten.

Schritt 1: Öffnen Sie den Chat mit RTX und rein Datensatz Abschnitt, wählen Sie das Dropdown-Menü aus und wählen Sie Youtube.

Schritt 2: Fügen Sie im Feld unten einen Link zu einem YouTube-Video oder einer YouTube-Playlist ein. Neben diesem Feld finden Sie eine Zahl, die die maximale Anzahl an Texten angibt, die Sie herunterladen möchten.

Jacob Roach/Digitale Trends

Schritt 3: Wählen Sie die Download-Schaltfläche neben diesem Feld und warten Sie, bis der Download der Skripte abgeschlossen ist. Wenn Sie fertig sind, klicken Sie auf die Schaltfläche „Aktualisieren“.

Schritt 4: Sobald Sie mit dem Text fertig sind, können Sie genauso chatten wie mit Ihren eigenen Daten. Spezifische Fragen sind besser als allgemeine Fragen. Wenn Sie über mehrere Videos sprechen, wird in „Chat mit RTX“ möglicherweise das Lesezeichen übersehen, wenn Ihre Frage zu allgemein ist.

Schritt 5: Wenn Sie über einen neuen Stapel Videos chatten möchten, müssen Sie die alten manuell löschen. Neben der Schaltfläche „Aktualisieren“ finden Sie eine Schaltfläche zum Öffnen eines Explorer-Fensters. Gehen Sie dorthin und löschen Sie die Texte, wenn Sie über andere Videos chatten möchten.

Empfehlungen der Redaktion




Siehe auch  Das neu gestaltete Outlook für Mac erfordert kein Microsoft 365 mehr, neu gestaltet und optimiert für Apple Silicon

Schreibe einen Kommentar

Deine E-Mail-Adresse wird nicht veröffentlicht. Erforderliche Felder sind mit * markiert