Hallo und willkommen im zweiten Modul dieses Kurses, der eine KI aufbaut, um das Spiel Doom zu besiegen.
Ja, das stimmt.
Wir werden Doom mit einer künstlichen Intelligenz spielen, die versuchen wird, einige Monster zu töten, um ein
Ziel in einer 3D-Umgebung zu erreichen.
Sie kennen eine 3D-Karte genau so, wie wenn Sie ein Videospiel spielen, wenn Sie auf Unterschiede stoßen.
Sie werden dieses Spiel nicht so spielen, wie Sie es bauen und programmieren, wir werden es für Sie spielen.
Wir haben also eine weitere sehr aufregende Herausforderung vor uns, und außerdem werden wir
es jetzt auf die nächste Stufe bringen, weil wir ein komplexeres Modell entwickeln werden, das den tiefen Convololution
Cuellar darstellt.
Ich hoffe, nach diesen Intuitionsvorlesungen sind Sie jetzt sehr aufgeregt, sie umzusetzen.
Ich bin auf jeden Fall sehr aufgeregt, es umzusetzen.
Also fangen wir gleich an.
Und wie Sie sehen können, fange ich mit Google an, weil ich Ihnen die erste eigene
Umgebung zeigen und Sie durch das Spiel führen wird, das wir spielen werden.
Also gut, also mit Google beginnen wir hier ein Fitnessstudio zu eröffnen.
Also machen wir uns auf und eröffnen ein Fitnessstudio.
Dann klicken Sie auf den Link und Sie werden eine Seite dieser Seite finden. In der oberen linken Ecke
dieser Seite werden Sie auf Umgebungen klicken. Dort befinden sich alle Umgebungen, die eigentlich Umgebungen
von Spielen sind.
Und für jedes dieser Spiele können Sie eine KI als Spiel einsetzen.
Und jedes Mal wird festgelegt, welches Ziel Sie erreichen müssen, um welche Aktionen es sich handelt und
welche Belohnungen es gibt und dass die Eingabestatus für die meisten Spiele die Eingabebilder sind.
Es ist nicht so wie zuvor mit dem selbstfahrenden Auto, bei dem wir einen Vektor
und eine Kodierung kennen mussten. Ein Zustand der Umgebung für die meisten Spiele hier ist der Eingabezustand das Bild.
Es ist genau so wie unsere Zukunft, die ich habe wie die Menschen.
In der Tat ist diese KI, die wir gerade implementieren, einem menschlichen Gehirn am nächsten, weil sie eine Reihe von
Bildern beobachtet, dann wird sie erkennen, wo sie in den Bildern zu suchen ist und dann ein klassisches
neuronales Netzwerk verwendet .
Wir werden wissen, welche Aktion es spielen soll.
Und nun geht es weiter zum Spiel.
Wir wollen schlagen, was die letzten Spiele auf dieser Liste tun.
Also lass uns darauf klicken und los geht's.
Willkommen im Untergang und in der Gewalt.
Wie Sie feststellen können, haben wir verschiedene Versionen von Doom.
Und das sind einfach verschiedene Karten mit unterschiedlichen Leveln.
Schauen wir uns zum Beispiel den ersten Nullpunkt an, der dieses Spiel ist, das Sie hier sehen.
Und wie Sie für dieses Spiel und für jedes der Spiele sehen können, ist es festgelegt,
dass Sie dieses Monster hier in drei Sekunden mit einem Schuss töten.
Dann werden die Belohnungen angegeben.
Du bekommst also 101 Punkte für das Töten dieses Monsters.
Dann erhalten Sie ein schlechtes Wort mit minus fünf Punkten, wenn Sie einen Schuss verpassen.
Im Moment ist es also so, dass es einige gibt, die wollen, denn es fehlt eine Menge
Schläge und Sie bekommen jeden Punkt minus eine 20 Sekunden 20 Sekunden, das ist alles Belohnungen.
Und dann haben Sie wie das Spiel endet.
So endet es, wenn das Monster tot ist.
Wenn der Spieler tot ist oder wenn eine Zeitüberschreitung vorliegt.
Und Sie haben auch die Aktionen, so dass Sie drei Aktionen für diesen Angriff haben.
Wenn Sie also beim Schießen nach rechts und nach links gehen.
OK, aber das ist nicht das Spiel, das wir spielen werden.
Eigentlich ist das zu einfach.
Das ist mein Favorit.
Ich bevorzuge den, bei dem wir uns vorwärts bewegen können.
Diese ist viel aufregender als diese Ecke.
Lass uns darauf klicken.
Das ist der eine
Wie Sie jetzt sehen können, können wir tatsächlich vorankommen.
Wir können uns nach links bewegen, wir können nach rechts abbiegen, nach rechts abbiegen und wir können wieder schießen.
Und wir haben hier viele weitere Monster wie diese Typen.
Unser Ziel ist es natürlich, nicht nur auf sie zu schießen, sondern auch, weil das Hauptziel darin besteht, diese Spitze
der Karte zu erreichen, die sie Weste nennen.
Das Ziel, das Hauptziel, und das bringt uns 1000 Punkte, ist die Weste dort zu erreichen, und um dies gut zu machen,
müssen wir die Monster töten, denn wenn wir die Monster nicht töten, werden wir getötet und
können nicht um die Weste zu erreichen.
Gut.
Das ist also unser Hauptziel, von dem wir sehen wollen, was wir belohnen. Wenn wir uns der Weste nähern, bekommen
wir ein erstes Wort.
Bei diesem Plus der Distanz sind die Wörter genau die Distanz, die wir zurücklegen, während wir näher an die
Weste herankommen als meine, wenn die Distanz weiter von der Weste ablesbar ist und minus 100 Punkte, um getötet zu werden.
Die Belohnung wird also nur mit der Entfernung gemessen.
Wenn Sie sich der Weste nähern, erhalten Sie eine Belohnung, die der Anzahl der Meter entspricht, die Sie sich näher an
der Weste befinden.
Das ist also eine kontinuierliche positive Belohnung.
Und wenn Sie sich weiter von der Weste entfernen, erhalten Sie eine Belohnung, die der Anzahl der zurückgelegten Meter entspricht, wenn
Sie von dieser Liste abweichen.
Und wenn Sie Krebs bekommen, erhalten Sie ein schlechtes Wort von minus 100 Punkten. Dann kann das Spiel enden, wenn das Spiel
den Rest berührt.
Dann gewinnen wir.
Wenn der Spieler tot ist, verlieren wir.
Und wenn das Spiel vorbei ist und unsere Aktionen zulässig sind, schießen Sie nach rechts und links, biegen Sie rechts ab und
biegen Sie links ab.
Wir haben mehr Aktionen als zuvor.
Wir haben jetzt sechs Abschnitte.
Kein Problem.
Dies wird die Komplexität nicht so verschlechtern.
Also gut, ich hoffe, Sie sind begeistert von diesem Spiel.
Ich denke eigentlich, dass dies das aufregendste Spiel ist.
Wir werden also eine KI bauen, um dieses Spiel zu besiegen. Dazu werden wir ein tiefgreifendes neuronales
Faltungsnetz implementieren.