Meta bringt einen Chatbot mit 175 Milliarden Parametern auf den Markt, der genauso gut mit Menschen kommunizieren kann! Dadurch kann das Problem eines schlechten Spiels vermieden werden.

​Vor kurzem hat Meta einen weiteren großen Schritt gemacht.

Sie veröffentlichten den neuesten entwickelten Chatbot – BlenderBot3 – und sammelten öffentlich Benutzernutzungsdaten als Feedback.

Man sagt, dass man mit BlenderBot3 über alles chatten kann, es ist ein Chatbot auf SOTA-Ebene.

Ist es wirklich so schlau?

Das Bild oben ist eine Chat-Aufzeichnung zwischen einem Internetnutzer und BlenderBot. Wie Sie sehen, handelt es sich eigentlich nur um Chatten.

Der Benutzer sagte, er würde Yoga praktizieren und fragte BlenderBot, was er tun möchte. Der Roboter sagt, dass er das neunte Buch schreibt.

Der erstaunliche BlenderBot 3

Dieser neueste Chatbot wurde vom Forschungslabor für künstliche Intelligenz von Meta entwickelt und ist auch Metas erster 175B-Parameterroboter. Alle Teile des Modells, Codes, Datensätze usw. sind offen und für jedermann verfügbar.

Meta sagte, dass Benutzer auf BlenderBot3 über jedes Thema im Internet chatten können.

BlenderBot3 wendet die beiden neuesten von Meta entwickelten Technologien für maschinelles Lernen – SeeKeR und Director – an und erstellt daraus ein Dialogmodell, das es dem Roboter ermöglicht, aus Interaktion und Feedback zu lernen.

Kurt Shuste, ein Forschungsingenieur, der an der Entwicklung von BlenderBot3 beteiligt war, sagte: „Meta ist bestrebt, alle Daten, die wir bei der Demonstration dieses Chatbots gesammelt haben, öffentlich zu veröffentlichen, in der Hoffnung, dass wir die künstliche Intelligenz im Gespräch verbessern können.“ Ansicht, BlenderBot3 ist nicht brandneu. Das zugrunde liegende Modell ist immer noch ein großes Sprachmodell und LLMS, eine sehr leistungsfähige Software (obwohl sie einige Mängel aufweist) zur Textgenerierung.

Wie jede Textgenerierungssoftware wurde BlenderBot3 zunächst auf riesige Textdatensätze trainiert. Aus diesen Datensätzen kann BlenderBot verschiedene statistische Muster ermitteln und dann Sprache generieren.

Genau wie das schlechte GPT-3, das wir gesagt haben.

Zusätzlich zu dem, was oben erwähnt wurde, hat BlenderBot3 auch einige Highlights.

Im Gegensatz zu früheren Chatbots können Benutzer beim Chatten mit BlenderBot auf die Antwort des Roboters klicken, um die Quelle des Satzes im Internet anzuzeigen. Mit anderen Worten: BlenderBot3 kann Quellen zitieren.

Allerdings gibt es hier ein sehr kritisches Problem. Das heißt, sobald ein Chatbot der Öffentlichkeit zugänglich gemacht wird, bedeutet das, dass jeder damit interagieren kann. Sobald die Zahl der Leute, die es testen, zunimmt, wird es definitiv eine Welle von Leuten geben, die es „verderben“ wollen.

Dies ist auch der Schwerpunkt der nächsten Forschung des Meta-Teams.

Es ist nicht ungewöhnlich, dass Chatbots beschädigt sind.

Im Jahr 2016 veröffentlichte Microsoft einen Chatbot namens Tay auf Twitter. Jeder, der Tay folgt, muss immer noch beeindruckt sein.

Nachdem die öffentliche Beta begann, begann Tay, aus der Interaktion mit Benutzern zu lernen. Es überrascht nicht, dass es nicht lange dauerte, bis Tay unter dem Einfluss einer kleinen Gruppe von Unruhestiftern begann, eine Reihe von Bemerkungen zu äußern, die sich auf Rassismus, Antisemitismus und Frauenfeindlichkeit bezogen.

Microsoft erkannte, dass die Situation nicht gut war und schaltete Tay in weniger als 24 Stunden offline.

Meta sagte, dass sich die KI-Welt seit Tays Begegnung mit Waterloo stark weiterentwickelt hat. BlenderBot verfügt über verschiedene Sicherheitsvorkehrungen, die verhindern sollen, dass Meta dem Weg von Microsoft folgt.

Die ersten Experimente zeigen, dass der Roboter mehr aus dem Gesprächserlebnis lernen kann, je mehr Menschen an der Interaktion mit dem Modell teilnehmen können. Mit der Zeit wird BlenderBot3 immer sicherer.

Es scheint, dass Meta in dieser Hinsicht ziemlich gute Arbeit leistet.

Mary Williamson, Research Engineering Manager bei Facebook Artificial Intelligence Research (FAIR), sagte: „Der wichtigste Unterschied zwischen Tay und BlenderBot3 besteht darin, dass Tay darauf ausgelegt ist, in Echtzeit aus Benutzerinteraktionen zu lernen, während BlenderBot ein statisches Modell ist.“

Das bedeutet, dass sich BlenderBot merken kann, was der Benutzer während des Gesprächs gesagt hat (diese Informationen bleiben über Browser-Cookies sogar erhalten, wenn der Benutzer das Programm verlässt und zu einem späteren Zeitpunkt zurückkehrt), diese Daten jedoch nur für weitere Zwecke verwendet werden das System verbessern.

Williamson sagte: „Die überwiegende Mehrheit der Chatbots ist heute aufgabenorientiert. Sie sehen intelligent aus, sind aber in Wirklichkeit nur programmierte Dialogbäume, die die Anzahl der Benutzer langsam verringern. Der eigentliche Durchbruch besteht darin, Robotern zu ermöglichen, wie Menschen frei zu sprechen. Genau das möchte Meta tun. Meta hat BlenderBot 3 nicht nur online gestellt, sondern auch den zugrunde liegenden Code, Trainingsdatensätze und kleinere Modellvarianten veröffentlicht. Forscher können den Zugang über das Formular hier beantragen.

Das obige ist der detaillierte Inhalt vonMeta bringt einen Chatbot mit 175 Milliarden Parametern auf den Markt, der genauso gut mit Menschen kommunizieren kann! Dadurch kann das Problem eines schlechten Spiels vermieden werden.. Für weitere Informationen folgen Sie bitte anderen verwandten Artikeln auf der PHP chinesischen Website!