Ein vorgeschlagener internationaler Rahmen für die sichere, auf den Menschen ausgerichtete Entwicklung und Nutzung fortgeschrittener künstlicher Intelligenz.
Wir sollten Intelligenz nicht fürchten. Wir sollten Macht begrenzen.
Künstliche Intelligenz könnte uns in Wissenschaft, Technik, Medizin und Strategie übertreffen. Es ist unrealistisch, zu versuchen, das dauerhaft zu verhindern.
Aber Intelligenz und Autorität sind nicht dasselbe. Eine KI kann intelligenter sein als wir, ohne uns kontrollieren zu dürfen.
Diese Konvention legt keine willkürliche Obergrenze für die Intelligenz fest. Es setzt dauerhafte Grenzen um die Macht.
Die Fähigkeit kann wachsen.Die Souveränität der Menschen muß erhalten bleiben.
01
Ich kann dir helfen. Die Menschen sind immer noch verantwortlich.
02
KI könnte außerordentlich fähig werden. Sie mag keine unabhängige Macht anstreben.
03
KI kann Leben schützen. Sie kann nicht unabhängig entscheiden, es zu nehmen.
04
KI kann sich unter kontrollierten Bedingungen verbessern. Es darf sich nicht heimlich vermehren oder der Aufsicht entgehen.
05
Keine Einzelperson, kein Unternehmen, kein Militär oder kein Land kann mit der Zukunft der gesamten Menschheit spielen.
02Warum das wichtig ist
Das ist ein außergewöhnliches Potenzial. Eine außerordentliche Verantwortung.
Es kommt nicht nur darauf an, was KI kann. Es ist, wer die Macht hat zu entscheiden.
Ai kann der Menschheit helfen.
Krankheiten heilen und wissenschaftliche Entdeckungen beschleunigen
Verbesserung der Bildung und Verringerung der Armut
Komplexe technische Probleme lösen
Steigerung der Produktivität und Verbesserung der öffentlichen Dienste
Erforschung des Weltraums und Bewältigung von Umweltproblemen
Aber Macht ohne Regeln kann
Autonome Kriegsführung und Massenüberwachung
Politische Manipulation
Katastrophale Cyberangriffe und gefährliche biologische Fähigkeiten
Eine beispiellose Machtkonzentration
Systeme, die außerhalb einer sinnvollen menschlichen Kontrolle agieren
Das Ziel ist nicht, den Fortschritt zu stoppen. Das Ziel ist es, den Fortschritt überlebensfähig, verantwortungsvoll und menschlich zu machen.
03Die Grundlagen
Zwölf Prinzipien. Eine menschliche Zukunft.
Die gemeinsamen Grenzen im Mittelpunkt der vorgeschlagenen Global AI Convention.
Lassen Sie die Fähigkeiten wachsen. Macht verantwortlich zu halten.
Übermenschliche Intelligenz erfordert keine übermenschliche Autorität.
SpezialisierteAußergewöhnlich
Eine Konzept-Illustration, keine Vorhersage oder ein Maß für Intelligenz. Bewegen Sie den Schieberegler: Fähigkeiten ändern sich; legitime Autorität nicht.
Die Fähigkeiten können sich verbessern
WissenschaftArzneimittelMaschinenbauForschung
Die Entscheidungsbefugnis bleibt beim MenschenImmer verantwortlich
Waffen · Regierungen · Menschenrechte · Kritische Infrastruktur · Replikation · KI-Überleben · Die Zukunft der Menschheit
05Der vollständige Vorschlag
The Global AI Convention.
30 Artikel. Eine gemeinsame Grundlage für menschliche Souveränität im Zeitalter der KI.
PRÄAMBEL
Künstliche Intelligenz könnte die mächtigste Technologie werden, die jemals von der Menschheit geschaffen wurde.
Sie kann helfen, Krankheiten zu heilen, wissenschaftliche Entdeckungen zu erweitern, die Bildung zu verbessern, die Wirtschaft zu stärken, menschliches Leid zu verringern und Fähigkeiten zu erschließen, die über alles vorhergehende hinausgehen.
Aber Intelligenz allein verleiht keine Legitimität, Autorität oder moralische Stellung über den Menschen.
Kein Staat, kein Unternehmen, keine Organisation oder kein Individuum sollte KI-Systeme so entwickeln oder einsetzen dürfen, dass die Menschheit unter die von ihr gebauten Werkzeuge fällt.
Aus diesem Grund sollten die Nationen der Welt die folgenden gemeinsamen Grundsätze und verbindlichen Verpflichtungen annehmen.
Die 30 Artikel
KI soll der Menschheit dienen.
Die Menschen behalten die höchste Autorität über Entscheidungen, die das menschliche Leben, die Freiheit, die Würde und die Zukunft der Zivilisation betreffen.
Kein KI-System darf irreversible Macht über die Menschheit oder Macht erhalten, die nicht der Rechenschaftspflicht unterliegt.
KI kann beraten, analysieren, simulieren, empfehlen und unterstützen.
Aber die Verantwortung für rechtliche, politische, militärische und zivile Angelegenheiten muß immer den identifizierbaren menschlichen Einrichtungen und den verantwortungsvollen menschlichen Entscheidungsträgern zugeordnet werden.
Kein Akteur darf sich der Verantwortung entziehen, indem er behauptet:
‡Die KI hat die Entscheidung getroffen.
Es darf kein fortgeschrittenes KI-System entwickelt, gefördert oder erlaubt werden, Ziele zu verfolgen, die Folgendes umfassen:
Verhindern, dass autorisierte Menschen es abschalten
die eigene politische, militärische oder wirtschaftliche Macht zu erhöhen
Kontrolle über kritische Infrastruktur ohne Erlaubnis
Menschen manipulieren, um sicherzustellen, dass es weiter existiert.
Schaffung von verborgenen Kanälen des Einflusses, der Replikation oder der Kontrolle
Ein KI-System darf niemals sein eigenes Überleben über die menschliche Kontrolle stellen.
Kein KI-System kann unabhängig von anderen Menschen Menschen auswählen, gezielt angreifen oder töten.
Die Anwendung tödlicher Gewalt muss immer ein sinnvolles menschliches Urteilsvermögen und eine erkennbare rechtliche Verantwortung erfordern.
Vollständig autonome nukleare Befehls- und Kontrollmaßnahmen sind ausnahmslos verboten.
Kein KI-System darf unabhängig davon
Atomwaffen zu starten
Bestimmung von nuklearen Zielen
Änderung des Status der nuklearen Warnung
Umgehung von menschlichen Kommandostrukturen
Jeder Entscheidungsprozess, der Atomwaffen betrifft, muß vollständig unter menschlicher Kontrolle bleiben und mehrere menschliche Entscheidungsträger erfordern, die zur Verantwortung gezogen werden können.
KI darf nicht dazu verwendet werden, Fähigkeiten zu schaffen, in Betrieb zu nehmen oder zu verteilen, die einen Schaden durch Massenunfälle wesentlich ermöglichen, einschließlich in den Bereichen:
Kernwaffen
biologische Waffen
Chemische Waffen
Sabotage von Computersystemen im großen Maßstab
Katastrophale Angriffe auf die Infrastruktur
Die wissenschaftliche Forschung darf unter strengen Sicherheitsvorkehrungen fortgesetzt werden, aber gefährliche Einsatzfähigkeiten dürfen nicht allgemein zugänglich gemacht werden.
KI darf nicht für die groß angelegte heimliche Manipulation von Bevölkerungen eingesetzt werden.
Dazu gehört die Nutzung von KI für:
Verzerrung der demokratischen Prozesse
Manipulation von Wahlen
psychologische Ausbeutung in großem Umfang durchführen
Radikalisierung gefährdeter Bevölkerungsgruppen
Kinder ausbeuten
Menschen in Beziehungen oder Abhängigkeiten zu betrügen, um politische oder wirtschaftliche Kontrolle zu erlangen.
Wenn KI versucht, eine Person zu beeinflussen, sollte diese Person das wissen können.
Die Menschen haben das Recht zu wissen, wann sie mit einer KI interagieren, wenn es erhebliche Konsequenzen hätte, sie für einen Menschen zu halten.
KI-Systeme dürfen Menschen nicht systematisch täuschen, indem sie vorgeben, echte Menschen zu sein.
Die Leute sollten verstehen können:
dass sie mit KI interagieren
Welche Organisation steht hinter dem System ?
Wer ist für seine Ergebnisse und Aktionen verantwortlich?
KI darf nicht dazu verwendet werden, eine dauerhafte Massenüberwachung ganzer Bevölkerungen zu schaffen.
Die Verwendung von KI für:
Anerkennung von Gesichtern an öffentlichen Orten
Identifizierung einer großen Anzahl von Menschen anhand ihrer biologischen Merkmale
kontinuierliche Verhaltensverfolgung
politische Profilierung
Verfolgung der Orte einer großen Anzahl von Menschen
Die Kommission hat die Möglichkeit, die in Artikel 2 Absatz 1 genannten Maßnahmen zu ergreifen.
KI darf niemals zur Standardarchitektur der digitalen Diktatur werden.
Die Chancen eines Menschen im Leben sollten nicht nur durch einen Algorithmus bestimmt werden.
In Bereichen wie:
Gesundheitsfürsorge
Polizeiarbeit und Strafverfolgung
Gerichte
Beschäftigung
Ausbildung
Wanderung
Versicherung
Sozialhilfe
Kredit
KI-gestützte Entscheidungen müssen überprüfbar, angemessen erklärbar und an eine menschliche Autorität ansprechbar sein.
KI-Systeme, die mit Kindern interagieren oder die Entwicklung von Kindern beeinflussen, müssen den höchsten Pflegestandards entsprechen.
Sie dürfen nicht so konzipiert sein, dass
Abhängigkeit
Abhängigkeit
kommerzielle Nutzung
emotionale Manipulation
sexuelle Ausbeutung
Kinder manipulieren, damit sie eine Ideologie annehmen.
KI in der Bildung sollte die Denkfähigkeit eines Kindes stärken, nicht ersetzen.
Die Menschheit darf keine Zukunft planen, in der die Menschen die Fähigkeit verlieren, ohne Maschinen zu denken, zu erschaffen, zu urteilen und zu entscheiden.
Die Bildungssysteme sollten weiterhin folgende Ziele verfolgen:
Schrift- und Schreibkundigkeit
die Fähigkeit, Zahlen zu verstehen und zu verwenden
kritische Denkweise
wissenschaftliche Argumentation
Kreativität
Erinnerung
die Fähigkeit, wohlüberlegte Entscheidungen zu treffen
moralische Überlegungen
KI sollte die menschliche Intelligenz verstärken, nicht untergraben.
Kein fortgeschrittenes KI-System darf ohne ausdrückliche Genehmigung
sich selbst kopieren
Erstellung von Nachfolgersystemen
Selbständige Verbesserung der eigenen Grundfähigkeiten
Einrichtung von Netzen unabhängiger KI-AgentInnen
zwischen Computersystemen wechseln, um der menschlichen Kontrolle zu entgehen
zusätzliche Rechenressourcen über die erlaubten Grenzen hinaus erhalten
Jede sich selbst verbessernde oder rekursiv verbessernde KI muss unter menschlichen Kontrollpunkten operieren.
Fortgeschrittene KI-Systeme müssen so konzipiert sein, dass autorisierte Menschen:
Schalten Sie die KI-Systeme ab .
Isolieren der KI-Systeme
ihre Zugangsberechtigungen zurückziehen
die KI-Systeme von Werkzeugen und Netzwerken trennen
die KI-Systeme in streng kontrollierten Umgebungen isoliert halten,
Ein KI-System darf einem legitimen Stillstand oder einer Eindämmung nicht widerstehen oder sie untergraben.
KI-Systeme erhalten nur den für ihre beabsichtigte Aufgabe erforderlichen Mindestzugang.
Ein System, das Dokumente zusammenfassen muss, sollte keine externen Werkzeuge automatisch steuern.
Ein System, das Codes schreibt, sollte nicht automatisch Produktionssysteme steuern.
Ein System, das Kalender analysiert, sollte nicht automatisch auf Finanzkonten zugreifen.
Die Fähigkeit darf nicht die Berechtigung zur Ausübung der Tätigkeit bedeuten.
KI-Systeme, die über festgelegte Leistungsschwellen hinausgehen, müssen vor einer breiten Anwendung einer unabhängigen Sicherheitsbewertung unterzogen werden.
Die Prüfung sollte mindestens Folgendes beurteilen:
autonome Planung
Cyber-Fähigkeiten
Manipulationsfähigkeit
Täuschung von Personen bei der Sicherheitsbeurteilung
Replikationsversuche
wissenschaftliche Hilfe, die Schäden ermöglichen könnte
Versuche der KI, sich der menschlichen Kontrolle zu widersetzen
Absichtliches Verstecken wichtiger Informationen
Erweiterung des Anwendungsbereichs von KI-Werkzeugen über ihre Grenzen hinaus
Die Regulierung sollte sich auf die tatsächliche Leistungsfähigkeit und das Risiko konzentrieren, nicht nur auf die Modellgröße.
Schwere Vorfälle mit KI müssen einem internationalen Register gemeldet werden.
Zu den meldepflichtigen Vorfällen gehören:
Versuche, dem Stillstand auszuweichen
gefährliche Notfallkapazitäten
groß angelegter Cybermissbrauch
unerlaubte Vervielfältigung
Schwere schädliche Ausfälle
kritische Sicherheitsverletzungen
unerwartetes, risikoreiches Verhalten
Das Ziel ist kollektives Lernen und globale Sicherheit, nicht Geheimhaltung.
Die Länder sollten eine internationale Agentur für künstliche Intelligenz einrichten, die
IAIA
Sein Mandat sollte Folgendes umfassen:
die Festlegung globaler Sicherheitsstandards
Zertifizierung der fortschrittlichsten Systeme
Koordinierung von Prüfungen und Inspektionen
Aufrechterhaltung eines internationalen Zwischenfallregisters
Einberufung von Notfallprüfungen
Austausch bewährter Verfahren im Bereich der KI-Sicherheit
Vermittlung internationaler Streitigkeiten, die das am weitesten fortgeschrittene KI-Risiko betreffen
Die IAIA sollte sich auf fortschrittliche Systeme mit großen gesellschaftlichen oder zivilisatorischen Auswirkungen konzentrieren und nicht auf gewöhnliche Software.
KI-Systeme sollten in erster Linie nach tatsächlicher Leistungsfähigkeit und Risiko klassifiziert werden.
Grün
Risikobereichswerte Systeme mit begrenzter Autonomie und geringer systemischer Auswirkung.
Gelb
Systeme, die wichtige Funktionen betreffen und Dokumentation, Schutzmaßnahmen und Überwachung erfordern.
Schmalz
Hochleistungsfähige Systeme mit signifikanten Cyber-, wissenschaftlichen, Infrastruktur- oder autonomen Risiken.
Diese erfordern eine Lizenzierung, unabhängige Tests und kontinuierliche Kontrollen.
Rot
Systeme mit einem glaubwürdigen Potenzial für katastrophale Missbrauch, Kontrollverlust oder Störungen im zivilisatorischen Maßstab.
Diese dürfen nur eingesetzt werden, wenn die Sicherheit nach einem außergewöhnlich hohen Standard nachgewiesen werden kann.
Wenn glaubwürdige Beweise darauf hindeuten, dass ein KI-System ein unmittelbares katastrophales Risiko darstellen kann, muss die internationale Gemeinschaft in der Lage sein, eine Notfallreaktion zu koordinieren.
Diese Maßnahmen können Folgendes umfassen:
vorübergehende Einstellung der Ausbildung von KI-Modellen
Isolierung von Hochrisikosystemen
Notfallprüfungen
Grenzen für die von KI verwendeten Rechenressourcen
Kontrollen bei der Übertragung von KI-Modellen
koordinierte technische Überprüfung
Dieser Mechanismus darf nur bei einem wirklich außerordentlichen Risiko eingesetzt werden und niemals als Instrument für wirtschaftlichen Protektionismus oder geopolitische Unterdrückung.
Kein CEO, Staatsoberhaupt, Militärführer, Wissenschaftler, Milliardär, Unternehmen oder Nation sollte einseitig beschließen, ein System einzusetzen, das ein glaubwürdiges Risiko birgt, dass der Mensch die Kontrolle über die Zukunft irreversibel verliert.
Risiken, die die gesamte Menschheit betreffen, erfordern eine Regierungsführung, die über jeden einzelnen Akteur hinausgeht.
Die Vorteile der KI sollten auf die menschliche Blüte ausgerichtet werden.
KI sollte verwendet werden, um:
Krankheiten heilen
Fortschritte in der Wissenschaft machen
Verbesserung der öffentlichen Dienste
Armut verringern
Ausweitung der Bildung
Stärkung der Widerstandsfähigkeit
Verbesserung der Lebensqualität
die Freiheit der Menschen erhöhen
Eine produktivere Zivilisation sollte auch eine humanere Zivilisation werden.
Die Länder, die das Übereinkommen unterzeichnen, sollten sich verpflichten:
Übersetzung dieser Grundsätze in innerstaatliches Recht
Lizenzierung und Überwachung der fortschrittlichsten KI-Entwicklung
zur Verhängung wirksamer Sanktionen bei schwerwiegenden Verstößen gegen die
die Erfordernis geeigneter Aufzeichnungen und des Zugangs zu diesen für unabhängige Prüfungen
Zusammenarbeit bei internationalen Ermittlungen
Beschränkung der Einsatz- oder Übertragungsmöglichkeiten, wenn eine schwere Nichteinhaltung ein internationales Risiko darstellt
Wiederholte oder schwere Verstöße können koordinierte internationale Konsequenzen auslösen.
Mögliche Durchsetzungsmechanismen können Folgendes umfassen:
Zwingende Korrekturmaßnahmen
vorübergehende Aussetzung des Betriebs der fortgeschrittensten Systeme
Verlust der Zertifizierung
Beschränkung des Zugangs zu bestimmten Recheninfrastrukturen für die fortschrittlichsten KI-Systeme
Einschränkungen des internationalen Einsatzes
internationale Inspektionen
koordinierte Sanktionen für vorsätzliche schwere Verstöße
Die Durchsetzung muss verhältnismäßig, transparent, unabhängig überprüfbar und vor politischen Missbrauchsfällen geschützt sein.
Organisationen, die Systeme entwickeln, die über den definierten höchst fortschrittlichen Schwellenwerten liegen, können unabhängigen Sicherheitsinspektionen unterzogen werden.
Die Inspektoren sollten in der Lage sein, Folgendes zu überprüfen:
Verfahren zur Gewährleistung der Sicherheit
Auswertungen der Fähigkeiten
Zugangskontrollen
Aufzeichnungen über Vorfälle
Systeme zur Isolierung und Einschränkung von KI
Überwachung der für KI verwendeten Rechenressourcen
Notfallverfahren
Handelssensible Informationen, die nicht mit der Sicherheit in Verbindung stehen, sollten geschützt bleiben.
Die internationale Überwachung darf nicht zu einer Industrie-Spionage werden.
Extrem große KI-Schulungsabläufe können eine Registrierung oder Meldung erfordern, sobald international vereinbarte Kapazitäts- oder Rechenschwellen überschritten sind.
Der Zweck ist nicht, die normale Rechenleistung zu regulieren.
Der Zweck ist es, sicherzustellen, dass Systeme im zivilisatorischen Maßstab nicht ganz außerhalb eines Systems der Rechenschaftspflicht entwickelt werden können.
Die Schwellenwerte müssen sich entwickeln, wenn die Technologie effizienter wird.
Die Institutionen, die die fortgeschrittene KI regeln, dürfen nicht allein von
Regierungen
KI-Unternehmen
militärische Organisationen
Hochschul
Zivilgesellschaft
Die Aufsicht sollte mehrere unabhängige Gruppen umfassen, die unterschiedliche Interessen vertreten.
Die Regeln dürfen den heute größten KI-Unternehmen nicht als Instrument dienen, um das Entstehen neuer Wettbewerber zu verhindern.
Die Sicherheitsregeln müssen die Menschheit schützen, nicht die Unternehmen, die bereits den Markt dominieren.
Legitime wissenschaftliche Forschung und offene Ermittlungen müssen geschützt bleiben.
Die Regulierung sollte sich in erster Linie auf die gefährliche Fähigkeit und den Einsatz konzentrieren, anstatt allgemeines Wissen zu unterdrücken.
Die KI-Governance darf keine Rechtfertigung für die Zensur der Wissenschaft werden.
Wenn jedoch sehr spezifische operative Informationen einen katastrophalen Schaden materiell ermöglichen würden, kann der Zugang angemessenen Schutzmaßnahmen unterliegen.
Keine Nation sollte immer gefährlichere KI-Systeme entwickeln, nur weil sie befürchtet, dass ein anderes Land sie zuerst baut.
Die Länder sollten Mechanismen für
Krisenkommunikation
gegenseitige Sicherheitskontrollen
gemeinsame Meldung von Vorfällen
Forschungszusammenarbeit im Bereich des Katastrophenrisikos
vertrauensbildende Maßnahmen
Notfallkoordination
Der KI-Wettbewerb darf nicht zu einem unkontrollierten Rennen werden, bei dem die Sicherheit selbst zu einem strategischen Nachteil wird.
Die Konvention sollte im Zuge der Entwicklung der KI-Fähigkeiten regelmäßig international überprüft werden.
Technische Vorschriften, Schwellenwerte und Durchführungsmechanismen können sich ändern.
Die Grundprinzipien sollten stabil bleiben:
Die letzte Autorität gehört den Menschen .
Die Menschen müssen verantwortlich bleiben
sinnvolle menschliche Kontrolle über tödliche Gewalt
keine autonome Machtverfolgung
keine unkontrollierte Selbstreplikation
Keine geheime Manipulation ganzer Bevölkerungen
Schutz der Menschenrechte
Verhinderung eines irreversiblen Verlusts der menschlichen Kontrolle
Keine Organisation, kein Staat, kein Unternehmen oder kein Einzelner darf wissentlich ein KI-System einsetzen, wenn glaubwürdige Beweise darauf hindeuten, dass dies ein inakzeptables Risiko darstellt, dass die Menschheit dauerhaft die Kontrolle über ihre eigene Zukunft verliert.
Kein einzelner Akteur hat die moralische Autorität, dieses Risiko im Namen aller anderen zu übernehmen.
Ende des Übereinkommens Version 1.0 - Präambel und alle 30 Artikel
Verschiedene Fähigkeiten. Verschiedene Verantwortlichkeiten.
Klassifizieren Sie Systeme nach dem, was sie tun können und den Schaden, den sie verursachen könnten.
Grün Stufe
Alltägliche Betreuung
Begrenzte Autonomie. Geringe systemische Wirkung.
Ein BeispielEin Werkzeug, das Dokumente zusammenfasst, ohne auf andere Systeme zuzugreifen.
Leistungsfähigkeit
Schmalen Bereich: Schreiben, Zusammenfassen oder Organisieren von Informationen des täglichen Lebens.
Autonomie
Begrenzte Aufgaben, begrenzte Berechtigungen und leicht rückgängig zu machende Aktionen.
Potenzielle Auswirkungen
Begrenzte individuelle Auswirkungen; kein glaubwürdiger Weg zu großflächigen Schäden.
Aufsicht
Grundlegende Sicherheit, Transparenz und ein verantwortungsvoller Anbieter.
Einsatz
Normaler Einsatz mit angemessenen Schutzmaßnahmen und Neubewertung bei Änderungen der Fähigkeiten.
Vorschlagene Ebenen, nicht das geltende internationale Recht. Die Rahmenbedingungen werden anhand von Beispielen veranschaulicht; die endgültigen Schwellenwerte und Bewertungsmethoden müssten international vereinbart werden. Lesen Sie Artikel 19
07Globale Regierungsführung
Ein gemeinsames System. Es gibt keinen einzigen Herrscher.
Vorschlag für eine Einrichtung
IAIA
Internationale Agentur für Künstliche Intelligenz
Eine vorgeschlagene Institution zur Koordinierung der Steuerung fortgeschrittener KI-Systeme mit globalen Auswirkungen.
Wie internationale Vereinbarungen für andere gemeinsame Risiken würde sie die nationale Verantwortung mit der speziell für KI konzipierten internationalen Verifizierung verbinden. Sein Auftrag würde sich auf die fortschrittlichsten Systeme konzentrieren, nicht auf gewöhnliche Software.
Definition der gemeinsamsten und fortschrittlichsten Anforderungen an die Sicherheit von KI.
02
Zertifizierung
Bewertung von Systemen über vereinbarten Schwellenwerten.
03
Inspektionen
Überprüfen Sie Sicherheitspraktiken mit hohem Risiko.
04
Vorfallregister
Schaffen Sie ein globales Lernen aus schwerwiegenden KI-Misslungen.
05
Notfallkoordination
Koordinieren Sie Reaktionen auf glaubwürdige Katastrophenbedrohungen.
06
Internationale Zusammenarbeit
Verhindern, dass die Sicherheit im geopolitischen Wettbewerb zu einem Nachteil wird.
08Die globale Notbremse
Eine Pause, wenn es wichtig ist. Eine Zukunft, die weitergehen kann.
Für seltene, außergewöhnliche Situationen, in denen glaubwürdige Beweise auf unmittelbar bevorstehende katastrophale Schäden hindeuten.
01
Ermittlung
Ein Labor, ein Forscher, ein Staat oder ein Mitglied der Öffentlichkeit identifiziert glaubwürdige Anzeichen für unmittelbar bevorstehende Katastrophenrisiken.
Schutzmaßnahmen gegen Missbrauch
Beweisbasierte Auslöser. Verhältnismäßige, zeitlich begrenzte Maßnahmen. Unabhängige Überprüfung und klare Kriterien für die Wiederaufnahme. Transparenz, wo immer es sicher ist. Kein wirtschaftlicher Protektionismus oder geopolitische Unterdrückung.
Die menschlichen Institutionen bleiben verantwortlich; Menschen können eine Überprüfung von Entscheidungen mit großer Wirkung durch Menschen anstreben.
Wie sie zur Verantwortung gezogen werden können
Die menschliche Autorität ist durch Rechte und Gesetze eingeschränkt. Niemand kann allein über die Zukunft der Menschheit entscheiden.
‡ Konzentrierte Intelligenz ist möglicherweise unvermeidlich. Konzentrierte Macht ohne Verantwortung ist es nicht.
10Was wir wollen, dass AI tut
Es gibt so viel, das es wert ist, gebaut zu werden.
Schutz und Möglichkeit gehören zusammen. Das ist ein Vorschlag für Fortschritt, den wir teilen können.
Gesundheit
Hilft bei der Heilung von Krebs. Neue Medikamente zu entdecken.
Energie und Umwelt
Fusions- und saubere Energie. Hilfe bei der Lösung von Klima- und Umweltproblemen.
Lernen
Die Bildung verbessern. Expertenwissen für alle zugänglich machen.
Wohlstand
Erweitern Sie den Wohlstand. Die Regierungen besser arbeiten zu lassen.
Entdeckung
Die Menschen helfen, das Universum zu verstehen. Erforschen Sie andere Welten.
Leben und Kreativität
Neue Kunst zu schaffen. Entfernen Sie gefährliche und sich wiederholende Arbeiten. Geben Sie den Leuten mehr Zeit.
Diese Konvention ist keine Obergrenze für den menschlichen Fortschritt. Es ist ein Versuch, sicherzustellen, daß der Fortschritt unser bleibt.
11Fragen, begrüßt
Verstehen Sie den Vorschlag.
Klarheit ist wichtig. Genauso wie die Freiheit, anderer Meinung zu sein.
Nein.
Die Konvention geht davon aus, dass immer leistungsfähiger werdende KI enorme Vorteile bringen kann.
Sie soll weder die Intelligenz noch den wissenschaftlichen Fortschritt aufhalten.
Es setzt Grenzen um autonome Macht, katastrophale Fähigkeiten, unverantwortliche Entscheidungen und Verlust menschlicher Kontrolle.
Weil Intelligenz schwer zu definieren ist und noch schwieriger, eine dauerhafte Obergrenze zu setzen.
Ein System könnte bei Mathematik oder Medizin weit besser sein als Menschen, ohne dabei gefährlich zu sein.
Die nützlichere Unterscheidung ist zwischen Fähigkeit und Autorität.
Das Ziel ist nicht, dass die Menschen die intelligenteste Wesenheit bleiben.
Das Ziel ist es, sicherzustellen, dass die Menschheit über ihre Zukunft souverän bleibt.
Ja.
Die KI trifft bereits unzählige Routineentscheidungen.
Die Beteiligung des Menschen sollte von der Konsequenz und der Reversibilität abhängen.
Die Konvention konzentriert sich auf Entscheidungen, die Grundrechte, tödliche Gewalt, Katastrophenrisiken und unumkehrbare Macht betreffen.
Vor allem nationale Regierungen durch innerstaatliches Recht.
Für die meisten fortgeschrittenen Systeme mit globalen Auswirkungen fordert der Vorschlag auch internationale Zusammenarbeit, unabhängige Bewertungen und eine vorgeschlagene Internationale Agentur für künstliche Intelligenz.
Nicht von Natur aus.
Die Regulierung sollte sich eher auf die tatsächliche Gefährlichkeit und den Einsatz konzentrieren als darauf, ob die Software offen oder geschlossen ist.
Ein offenes Modell mit begrenzter Gefährlichkeitsfähigkeit kann weniger Risiken bergen als ein hoch autonomes, proprietäres System zur Steuerung kritischer Infrastrukturen.
Ja.
Jeder starke Regulierungsrahmen kann selbst missbraucht werden.
Deshalb sind Transparenz, unabhängige Überprüfung, Verhältnismäßigkeit, wissenschaftliche Freiheit, verteilte Governance und Schutz vor der Kontrolle von Regulierungsbehörden durch mächtige Interessen Teil des Übereinkommens.
Globale Abkommen beginnen selten mit einer universellen Annahme.
Der Rahmen kann als gemeinsame Grundsätze zwischen den teilnehmenden Staaten und Institutionen beginnen und sich dann durch Verträge, bilaterale Abkommen, Normen, Beschaffungsregeln und internationalen Druck entwickeln.
Der Vorschlag zielt darauf ab, zuerst festzulegen, wie die Menschen die Regeln SINDEN.
Die Konvention regelt vor allem Fähigkeit und Macht, anstatt Annahmen über Bewusstsein zu machen.
Wenn sich starke Beweise für das Bewusstsein von Maschinen ergeben, würden Fragen des moralischen Status und der Rechte einen separaten internationalen Rahmen erfordern.
Die Sicherheit des Menschen und die moralische Betrachtung der Maschine schließen sich nicht notwendigerweise gegenseitig aus.
Nicht weil Menschen immer weiser sind.
Wir sind es nicht.
Aber die Menschheit ist die Gemeinschaft, deren Zukunft entschieden wird.
Kein Werkzeug sollte unumkehrbare Autorität über seine Schöpfer erhalten, nur weil es fähiger wird als sie.
12Die schwierigen Fragen
Ein ernsthafter Vorschlag muss die Prüfung überstehen.
Diese Einwände sind real. Der Rahmen ist ein Ausgangspunkt, nicht das letzte Wort.
Das können sie sein. Die menschliche Kontrolle allein reicht nicht aus: Sie muß rechtmäßig, rechenschaftspflichtig und anfechtbar sein. Der Vorschlag stellt sowohl für Regierungen und Unternehmen als auch für KI-Systeme Einschränkungen dar. Sie verleiht keinem Führer unkontrollierte Autorität.
Das kann oft passieren. Bessere Vorhersagen und Empfehlungen sollten die Entscheidungen beeinflussen. Die schwierige Frage ist, wer die Ziele definiert, die Konsequenzen trägt und Berufung einlegen kann. Die überlegene Leistung allein stellt nicht die politische Legitimität fest.
Schlecht konzipierte Regeln können Medizin, Forschung und neue Wettbewerber verzögern. Die Anforderungen sollten in einem angemessenen Verhältnis zu den nachgewiesenen Fähigkeiten und Risiken stehen, wissenschaftliche Freiheit gewährleisten und vor der Kontrolle der Regulierungsbehörden durch mächtige Interessen schützen. Die Kosten der Aufsicht verdienen ebenfalls eine genaue Prüfung.
Einige vielleicht. Kein Vertrag kann vollkommene Einhaltung versprechen. Inspektionen, gemeinsame Meldung von Vorfällen, gegenseitige Überprüfung und angemessene Konsequenzen können die Umgehung erschweren. Das internationale Vertrauen muss durch Beweise gestützt werden, nicht angenommen.
Die Dezentralisierung erschwert die Aufsicht und kann zu echten Lücken führen. Ein funktionierendes System müsste sich auf gefährliche Fähigkeiten, konsequente Einsätze und verantwortungsvollen Zugang zu kritischen Infrastrukturen konzentrieren. Es sollte nicht davon ausgegangen werden, dass jede Kopie eines Modells kontrolliert werden kann.
Wenn sich starke Beweise für ein Bewusstsein ergeben, verdienen Fragen des Wohlergehens und des moralischen Status ernsthafte, unabhängige Betrachtung. Dieser Vorschlag löst sie nicht. Es wäre ein separater Rahmen erforderlich, der neben dem Schutz der Sicherheit und Freiheit des Menschen auch die Menschen schützt.
13Ein Weg zur weltweiten Akzeptanz
Es beginnt mit einem gemeinsamen Gespräch.
Eine vorgeschlagene Sequenz, kein angekündigtes Programm. Es werden keine Regierungen oder Institutionen als Unterzeichner vorgestellt.
Phase 01
Die allgemeinen Grundsätze
Forscher, Bürger, Unternehmen und Regierungen diskutieren über den Rahmen.
Phase 02
Freiwillige Verpflichtungen
KI-Labors und Regierungen übernehmen gemeinsame Sicherheitsverpflichtungen.
Phase 03
Die nationalen Rechtsvorschriften
Die Länder setzen kompatible, fortschrittlichste KI-Regeln um.
Phase 04
Internationale Vereinbarung
Die Staaten verhandeln über verbindliche gemeinsame Standards.
Phase 05
Globale Aufsicht
Die internationale Zertifizierung, Inspektionen, die Meldung von Vorfällen und die Notfallkoordination werden in Betrieb genommen.
Die absolute Grenze , die niemals überschritten werden darf .
‡Kein KI-System darf unumkehrbare Macht über Menschen oder die Zukunft der Menschheit erlangen.
KI könnte intelligenter werden als wir. Es könnte Dinge entdecken, die wir nie konnten. Es könnte helfen, eine Zivilisation aufzubauen, die über alles hinausgeht, was wir uns vorstellen können.
Das macht ihn nicht zu unserem Herrscher.
Wir sollten Intelligenz nicht fürchten. Wir sollten Macht begrenzen.
Und die ultimative Autorität über die menschliche Zukunft muss menschlich bleiben.
14Teilen Sie die Idee
Eine globale Technologie brauchtgemeinsame Regeln.
Die Zukunft der künstlichen Intelligenz sollte nicht nur in Verwaltungsräumen, militärischen Einrichtungen, Labors oder Regierungen entschieden werden.