Was treibt den Openai Bot an, der Dendi schlägt?

Letzte Woche wurde in den Bereichen Dota 2 und AI Geschichte geschrieben. Bei The International wurde Dendi, einer der besten Spieler des Spiels, von einem Bot zwei Mal hintereinander gnadenlos im 1: 1 geschlagen. Der fragliche Bot wurde von OpenAI erstellt, einem Startup von Elon Musk.

Jetzt haben Sie vielleicht einige Fragen. Was ist Dota? Was ist OpenAI? Und warum ist das überhaupt wichtig? Zunächst einmal ist Dota ein kostenloses MOBA-Spiel, in dem du Heroes kontrollierst und das Ziel ist, den Gegner Ancient zu vernichten. Viele Dota-Fans mögen sich über den letzten Satz ärgern, da Dota so viel zu bieten hat, wie ich zusammengefasst habe.

Das Spiel ist sehr komplex mit einer sehr steilen Lernkurve. Ich hatte vor einiger Zeit eine Mission begonnen, um Dota zu lernen, und es dauerte eine Woche, bis ich ein einfaches How To- Video durchgesehen hatte, in dem sie die Strategie des Spiels erklärten, welche Waffen, Zauber, Helden funktionieren und wie man Gruseleffekte abbaut. Und das macht den gesamten Kampf zwischen KI und Dendi wichtig, da es zeigt, wie fortgeschritten KI und ML geworden sind. Lassen Sie uns also sehen, was diesen Bot antreibt, und müssen wir uns vor KI-Aufständen fürchten.

Aufstieg des Planeten der KI

KI wird das Skynet ist ein umstrittenes Problem. Elon Musk glaubt, dass ein Skynet- ähnliches Szenario wahrscheinlich eintreten wird, wenn es nicht in Schach gehalten wird. Auf der anderen Seite sagt Mark Zuckerberg, dass KI harmlos ist und kein Weltuntergangsszenario verursachen wird. Elon Musk startete OpenAI mit diesem Ziel.

Um den Missbrauch von KI und die Erforschung von KI zu verhindern, die sich nicht gegen uns wenden. Und ich bin auf seiner Seite.

Aber das ist nicht das, worüber wir diskutieren wollen. Das Hauptthema ist zu wissen, was den Bot von OpenAI antreibt. Um es zu verstehen, las ich einige Forschungsarbeiten und Blogs zu diesem Thema und wandte mich auch an meinen Freund Anmol Sharma, der AI & ML-Forscher ist.

Verstärkung lernen

Dies ist der Name der Technologie hinter dem OpenAI-Dota-Bot. Bevor wir uns jedoch damit befassen, müssen wir verstehen, wie allgemeine KI oder speziell KI in Videospielen funktionieren. KI ist ein Begriff aus dem Vorstand und enthält viele Themen wie Maschinelles Lernen, Deep Learning und Neuronale Netze, um nur einige zu nennen. Um AI grob zu definieren, können wir sagen, dass es die Fähigkeit eines Computers ist, aus Informationen zu lernen und Entscheidungen auf der Grundlage seines Lernens zu treffen. Je mehr es lernt, desto mehr steigt die Richtigkeit seiner Entscheidungen.

Wie unterscheidet es sich von normalen Bots?

Bots in allgemeinen Videospielen sehen vielleicht so aus, als wären sie intelligent, aber es ist keine wahre Form der KI. Fast alle dieser Bots in Spielen werden basierend auf den gesetzten If..This..Then..That- Anweisungen programmiert. Sie folgen einfach den Anweisungen und ergreifen Maßnahmen auf der Grundlage der in der Anweisung angegebenen Bedingungen.

Oben habe ich ein sehr einfaches Beispiel gezeigt. Aussagen in echten Spielen sind mit Bedingungen innerhalb von Bedingungen viel komplexer. Je klarer und detaillierter diese Aussagen sind, desto intelligenter erscheint der Bot.

Belohnungen und Strafen

Im AI-Jargon wird das, was wir als Bot bezeichnen, als Agent bezeichnet. Das Ziel ist es, den Agenten lernen zu lassen, was immer wir wollen. Der Agent lernt durch die gleiche Methode wie Ihr Hund, durch Belohnungen und Bestrafungen. Wenn der Agent einen Fehler macht, wird er bestraft, und wenn er die richtige Vermutung anstellt oder die richtige Antwort gibt, wird er belohnt. Durch dieses System lernt der Agent, die Aktionen, die er nicht ausführen sollte, um Strafen zu vermeiden, zuzuordnen und die Aktion (oder ähnliche Aktionen) auszuführen, die Belohnungen geben.

Wenn Sie genau darüber nachdenken, ist es so, als würden Sie Entscheidungen auf der Grundlage bestimmter Bedingungen treffen, ähnlich wie es Algorithmen tun. Wie ich oben gezeigt habe, wird ein Spielebot, der auf ein explosives Fass stößt, Aktionen gemäß dem Algorithmus ausführen. Algorithmen in der KI sind offensichtlich sehr komplex, was das gesamte System intelligent macht.

Als wir zu unserem OpenAI-Bot kamen, lernte er laut den Entwicklern das ganze Spiel innerhalb von 2 Wochen. Während der gesamten Zeit von 2 Wochen war es rund um die Uhr online und spielte gegen eine Kopie von sich. Das ist ein bemerkenswerter Meilenstein angesichts der Komplexität des Spiels und der Tatsache, dass es Dendi schlagen könnte.

Warum sind fahrerlose Autos immer noch nicht hier?

Dies war eine der ersten Fragen, die mir in den Sinn kamen, als ich von diesem ganzen Ereignis hörte. Wenn ein Bot ein solches Spiel lernen und sich darauf vorbereiten kann, Spitzenspieler zu schlagen, warum bemannen wir dann immer noch das Lenkrad? Und das war die gleiche Frage, die ich meinem Freund, Herrn Anmol Sharma, gestellt habe, der auch über fahrlose Autos recherchiert hat. Das musste er sagen.

In einem Spiel, das von einem Menschen entwickelt wurde, ist die Anzahl der Variablen geringer. Wenn der Agent (Bot) einen Fehler macht, ist die schlimmste Strafe ein runder Verlust. In der realen Welt ist ein Fehler der Tod.

Obwohl Dota ein komplexes Spiel ist, sind die möglichen Kombinationen von Zaubersprüchen, Zaubersprüchen und Taktiken, obwohl sie immer noch absurd groß sind, immer noch begrenzt. Und Fehler sind ohne echte Strafe erlaubt. Aber im Falle eines fahrerlosen Autoagenten können Fehler zu gefährlichen Unfällen und sogar zum Tod führen.

In der realen Welt ist die Anzahl der Variablen, die der Agent überwachen muss, endlos, und Situationen, die aufgrund dieser Variablen entstehen, wie bei einem anderen Auto, das plötzlich die Spur wechselt und vor dem Auto herumspringt, sind ebenfalls endlos. Außerdem müssen sie, wie Jeremy Clarkson es ausdrückte, moralische und ethische Entscheidungen treffen, wenn sie kurz vor einem unmittelbaren Unfall stehen (obwohl seine Theorie nicht gültig ist).

Die Zukunft

Wir wissen bereits, dass von Menschen gesteuerte Roboter intrinsische Operationen durchführen. Der nächste Schritt sind KI-gesteuerte Roboter, die dies ausführen. Und das ist nur im medizinischen Bereich. KI wird in vielen Bereichen die dominierende neue Technologie im nächsten Jahrzehnt sein. KI kann aber auch für schändliche Zwecke wie DDoS-Angriffe, Ransomware-Bots und das Hacken anderer PCs oder Unternehmenssysteme missbraucht werden.

In Bezug auf Dota und andere Spiele können wir damit rechnen, dass solche intelligenten Bots auch für andere Spiele gemacht werden, gegen die die Spieler trainieren können, um noch bessere Leistungen zu erbringen. Und habe ich schon erwähnt, dass OpenAI auf der International im nächsten Jahr ein 5-gegen-5-Rennen machen wird? Also muss ich meine Dota-Fähigkeiten auffrischen, um zumindest die eingebauten dümmeren Bots zu besiegen. Divine Rapier hier komme ich!