Deutsch
← Zurück zur Startseite
Ära:
Jahrzehnt:
Thema:

Angezeigt 73 von 73 Arbeiten

Grundlegende Arbeiten

1948 Zeitschriftenartikel Frühe Theorie

A Mathematical Theory of Communication

Definition der Informationsentropie und der Kanalkapazität, wodurch die Informationstheorie begründet und die probabilistischen Grundlagen für die spätere KI gelegt werden.

1950 Zeitschriftenartikel Frühe Theorie

Computing Machinery and Intelligence

Vorschlag des Imitationsspiels (Turing-Test) als operationale Definition maschineller Intelligenz, wodurch die Fragestellung der KI für die folgenden sieben Jahrzehnte geprägt wird.

1956 Zeitschriftenartikel Geburt der KI

The Logic Theory Machine: A Complex Information Processing System

Implementierung des ersten heuristischen Schlussfolgerungsprogramms, das zeigt, dass Maschinen menschliche Problemlösungsstrategien nachahmen können, und Einführung des Konzepts eines ’complex information processing system’.

1958 Konferenzbeitrag Geburt der KI

Programs with Common Sense

Vorschlag des ’advice taker’, eines Programms, das aus einem formalen Reservoir von Allgemeinwissen Schlüsse ziehen kann, und damit konzeptionelle Grundlegung von Wissensrepräsentation und Schlussfolgern.

1959 Zeitschriftenartikel Geburt der KI

Eine Notiz über syntaktische Symmetrie und die maschinelle Manipulation formaler Systeme

Gelernter behandelt, wie eine Maschine formale Systeme mit stark symmetrischen Prädikaten effizient bearbeiten kann, und gibt dafür einen Satz und eine Regel der syntaktischen Symmetrie an. Die Arbeit steht neben der Geometrie-Beweismaschine, die er zur selben Zeit bei IBM baute und die im frühen Frühjahr 1959 ihren ersten Satz der euklidischen ebenen Geometrie bewies.

1986 Zeitschriftenartikel KI-Winter

Learning Representations by Back-propagating Errors

Popularisierung des Backpropagation-Algorithmus zum Training mehrschichtiger neuronaler Netze, wodurch praktisches Deep Learning ermöglicht wird.

1990 Zeitschriftenartikel KI-Winter

Finding Structure in Time

Einführung des einfachen rekurrenten Elman-Netzes, das zeigt, dass neuronale Netze zeitliche Strukturen lernen können, und damit Wegbereitung für spätere Sequenzmodelle.

1995 Zeitschriftenartikel Die Wiederbelebung

Support-Vector Networks

Einführung der Soft-Margin-Support-Vector-Machine, des kanonischen Maximum-Margin-Klassifikators, der das maschinelle Lernen der 1990er Jahre maßgeblich prägte.

1997 Zeitschriftenartikel Die Wiederbelebung

Long Short-Term Memory

Führt die ursprüngliche LSTM-Architektur mit Speicherzellen sowie Ein- und Ausgabegattern ein; das heute übliche Vergessensgatter kam später durch Gers, Schmidhuber und Cummins hinzu.

1998 Zeitschriftenartikel Die Wiederbelebung

Gradient-Based Learning Applied to Document Recognition

Einführung von LeNet-5, des kanonischen faltenden neuronalen Netzes, das eine produktionsreife Handschrifterkennung erreicht und die CNN-Blaupause etabliert.

2006 Zeitschriftenartikel Die Wiederbelebung

A Fast Learning Algorithm for Deep Belief Nets

Einführung von Deep Belief Networks, die mit einem gierigen schichtweisen Algorithmus trainiert werden, und damit erstmaliger Nachweis, dass tiefe Modelle effektiv trainiert werden können.

2013 Konferenzbeitrag Die Wiederbelebung

Playing Atari with Deep Reinforcement Learning

Kombination von Q-Learning mit einem faltenden Netz zu Atari-Spielen aus rohen Pixeln auf menschlichem Niveau, wodurch Deep Reinforcement Learning begründet wird.

2013 Konferenzbeitrag Die Wiederbelebung

Auto-Encoding Variational Bayes

Einführung des Variational Autoencoder, der variationale Inferenz mit tiefen generativen Modellen verbindet und das erste weitverbreitete tiefe Latent-Variablen-Modell liefert.

2014 Konferenzbeitrag Die Wiederbelebung

Neural Machine Translation by Jointly Learning to Align and Translate

Einführung additiver (Bahdanau-)Aufmerksamkeit für die neuronale maschinelle Übersetzung, die zeigt, dass weiche Ausrichtung es Decodern erlaubt, relevante Quelltokens zu fokussieren, und unmittelbar den Transformer inspiriert.

2014 Konferenzbeitrag Die Wiederbelebung

Generative Adversarial Networks

Formulierung generativer Modellierung als Zwei-Spieler-Min-Max-Spiel zwischen Generator und Diskriminator, wodurch eine neue Familie impliziter generativer Modelle begründet wird.

2014 Zeitschriftenartikel Die Wiederbelebung

Dropout: A Simple Way to Prevent Neural Networks from Overfitting

Einführung von Dropout, einer einfachen stochastischen Regularisierungstechnik, die zum Standard in Deep-Learning-Trainingspipelines wird.

2015 Konferenzbeitrag Die Wiederbelebung

Deep Residual Learning for Image Recognition

Einführung residualer Verbindungen, die ein effektives Training hunderte Schichten tiefer Netze ermöglichen, und Gewinn von ImageNet 2015 mit großem Vorsprung.

2016 Konferenzbeitrag Die Wiederbelebung

WaveNet: A Generative Model for Raw Audio

Einführung eines autoregressiven Modells mit dilatierten kausalen Faltungen, das rohe Audio-Wellenformen erzeugt und die Natürlichkeit von Text-to-Speech deutlich verbessert.

2017 Preprint Die Wiederbelebung

Proximal Policy Optimization Algorithms

Einführung von PPO, einer einfachen und stabilen Policy-Gradient-Methode erster Ordnung, die zum Standardverfahren der Policy-Optimierung im modernen Reinforcement Learning wird.

2017 Konferenzbeitrag Die Wiederbelebung

Attention Is All You Need

Einführung des Transformer, einer rein auf Aufmerksamkeit basierenden Architektur, die auf Rekurrenz und Faltungen verzichtet und Sequenztransduktionsaufgaben in einem Bruchteil der Zeit mit höherer Qualität als bisherige Verfahren löst.

2019 Zeitschriftenartikel Die Wiederbelebung

Exploring the Limits of Transfer Learning with a Unified Text-to-Text Transformer

Formulierung sämtlicher NLP-Aufgaben als Text-zu-Text-Problem, systematische Ablationsstudien zu Transfer-Learning-Entscheidungen und Etablierung eines Referenzrezepts für großskalige vortrainierte Modelle.

2020 Konferenzbeitrag Das LLM-Zeitalter

Denoising Diffusion Probabilistic Models

Neuformulierung der Diffusion als variationales Entrauschungs-Trainingsziel, wodurch die Bildgenerierungsqualität auf den Stand der Technik zurückgeführt und die Ära der Diffusionsmodelle eingeläutet wird.

2021 Konferenzbeitrag Das LLM-Zeitalter

Zero-Shot Text-to-Image Generation

Nachweis, dass ein 12-Milliarden-Parameter-Transformer als autoregressives Modell aus Textbeschreibungen vielfältige, hochauflösende Bilder erzeugen kann, und damit Initialzündung der Text-zu-Bild-Forschung.

2021 Konferenzbeitrag Das LLM-Zeitalter

Learning Transferable Visual Models From Natural Language Supervision

Training von Bild-Encodern auf web-skaligen Bild-Text-Paaren, wodurch starke Zero-Shot-Bildklassifikation erreicht und der visuelle Tower für viele spätere multimodale Systeme bereitgestellt wird.

2021 Konferenzbeitrag Das LLM-Zeitalter

High-Resolution Image Synthesis with Latent Diffusion Models

Verlagerung der Diffusion in einen perzeptuellen Latent-Raum, wodurch hochauflösende Text-zu-Bild-Generierung auf Consumer-GPUs ermöglicht und die Bildsynthese demokratisiert wird.

2022 Konferenzbeitrag Das LLM-Zeitalter

Chain-of-Thought Prompting Elicits Reasoning in Large Language Models

Nachweis, dass die Aufforderung an ein Sprachmodell, Zwischenschritte der Schlussfolgerung zu generieren, die Leistung in Benchmarks zu arithmetischem, Allgemeinwissen- und symbolischem Reasoning deutlich verbessert.

2022 Konferenzbeitrag Das LLM-Zeitalter

Training Language Models to Follow Instructions with Human Feedback

Anwendung von Reinforcement Learning from Human Feedback (RLHF) im großen Maßstab, um die Ausgaben von GPT-3 an menschliche Absichten anzupassen, und damit Etablierung von RLHF als kanonisches Alignment-Rezept.

2022 technischer Bericht Das LLM-Zeitalter

Constitutional AI: Harmlessness from AI Feedback

Einführung von RLAIF, bei dem ein Modell seine eigenen Ausgaben anhand einer schriftlichen Verfassung kritisiert und überarbeitet, wodurch die Abhängigkeit von menschlichen Schadenslabels für das Alignment verringert wird.

2023 technischer Bericht Das LLM-Zeitalter

LLaMA: Open and Efficient Foundation Language Models

Veröffentlichung der LLaMA-Familie offener Basismodelle, die zeigt, dass relativ kleine, gut trainierte Modelle mit deutlich größeren geschlossenen Modellen konkurrieren können, und damit Beschleunigung der Open-Weights-Bewegung.

2023 Preprint Das LLM-Zeitalter

Mamba: Linearzeit-Sequenzmodellierung mit selektiven Zustandsräumen

Stellt Mamba vor, eine selektive Zustandsraum-Architektur, die Transformer-Attention bei Sprache und anderen Modalitäten mit linearer Zeitkomplexität erreicht oder übertrifft — eine der einflussreichsten Post-Transformer-Architekturen des Jahres 2023.

Wegweisende Systeme und Ergebnisse

2015 Zeitschriftenartikel Die Wiederbelebung

Human-level control through deep reinforcement learning

Veröffentlichung der Nature-Version von DQN, die menschliches Niveau in einem breiten Spektrum von Atari-Spielen demonstriert und Deep RL in den Mainstream rückt.

2016 Zeitschriftenartikel Die Wiederbelebung

Mastering the game of Go with deep neural networks and tree search

Kombination tiefer Policy- und Value-Netzwerke mit Monte-Carlo-Baumsuche, um einen Spitzenspieler im Go zu besiegen — ein Wendepunkt für das Reinforcement Learning.

2018 technischer Bericht Die Wiederbelebung

Improving Language Understanding by Generative Pre-Training

Nachweis, dass ein generativer Transformer, der auf unlabeled Text vortrainiert ist, durch Feintuning in einer Vielzahl von NLP-Aufgaben starke Leistungen erzielt, und damit Begründung der GPT-Linie.

2019 technischer Bericht Die Wiederbelebung

Language Models are Unsupervised Multitask Learners

Nachweis, dass ein 1,5-Milliarden-Parameter-Transformer als Sprachmodell Zero-Shot-Multitask-Verhalten zeigt, und damit Anstoß der Debatte um das Sprachmodell als Multitask-Lerner.

2020 Konferenzbeitrag Das LLM-Zeitalter

Language Models are Few-Shot Learners

Nachweis, dass ein 175-Milliarden-Parameter-Transformer allein durch In-Context-Lernen starke Few-Shot-Leistungen erzielt, und damit Popularisierung von Prompt Engineering als Paradigma.

2023 technischer Bericht Das LLM-Zeitalter

GPT-4 Technical Report

Dokumentation von GPT-4, einem großskaligen multimodalen Modell, das in einem breiten Spektrum professioneller und akademischer Benchmarks das menschliche Niveau erreicht oder übertrifft.

2023 technischer Bericht Das LLM-Zeitalter

Gemini: A Family of Highly Capable Multimodal Models

Einführung der Gemini-Familie nativ multimodaler Modelle, die in Reasoning-, Coding- und multimodalen Benchmarks neue Maßstäbe setzt.

2024 Systemkarte Das LLM-Zeitalter

OpenAI o1 System Card

OpenAI veröffentlicht die System Card der o1-Modellreihe, die mit umfangreichem Reinforcement Learning trainiert wurde, um mittels Chain-of-Thought zu schlussfolgern. o1 erreicht State-of-the-Art bei Wissenschafts- und Coding-Aufgaben und zeigt reasoning-basierte Policy-Befolgung.

2026 Preprint Das LLM-Zeitalter

ARC-AGI-3: Eine neue Herausforderung für Frontier-Agent-Intelligenz

Der ARC Prize stellt ARC-AGI-3 vor — einen interaktiven Benchmark zur Untersuchung von Agent-Intelligenz durch abstrakte rundenbasierte Umgebungen, in denen Agenten erkunden, Ziele ableiten, interne Modelle der Umgebungsdynamik aufbauen und Aktionssequenzen ohne explizite Anweisungen planen müssen. Stand März 2026 lösen Menschen 100 % der Umgebungen, während Frontier-KI-Systeme unter 1 % erreichen.

Aktuelle Forschung

2024 technischer Bericht Das LLM-Zeitalter

DeepSeek-V3 Technical Report

Veröffentlichung von DeepSeek-V3, einem offenen Mixture-of-Experts-Modell mit 671 Milliarden Parametern, das in wichtigen Benchmarks zu einem Bruchteil der Trainingskosten an geschlossene Frontier-Modelle heranreicht.

2024 Preprint Das LLM-Zeitalter

Die Llama-3-Modellherde

Meta stellt die Llama-3-Familie von Open-Weight-Foundation-Modellen vor, die Mehrsprachigkeit, Programmierung, Schlussfolgern und Werkzeugnutzung nativ unterstützen. Das Flaggschiff 405B Dense Transformer war bei Veröffentlichung eines der größten Open-Weight-Modelle.

2024 Preprint Das LLM-Zeitalter

SAM 2: Segmentierung in Bildern und Videos

Meta stellt SAM 2 vor — ein Foundation-Modell für promptbare visuelle Segmentierung in Bildern und Videos, zusammen mit dem bisher größten Video-Segmentierungsdatensatz.

2024 Preprint Das LLM-Zeitalter

Gemma 2: Verbesserung offener Sprachmodelle in praktischer Größe

Google DeepMind stellt Gemma 2 vor — eine Familie leichter offener Modelle (2B-27B Parameter), die mehrere bekannte technische Modifikationen am Transformer anwendet — darunter Sliding-Window-Attention — um deutlich größeren Modellen nahezukommen.

2025 Preprint Das LLM-Zeitalter

s1: Einfache Skalierung zur Testzeit

Die Autoren feintunen Qwen2.5-32B auf 1.000 ausgewählten Denkaufgaben und ergänzen Budgeterzwingung, die begrenzt oder verlängert, wie lange das Modell bei der Inferenz nachdenkt. Das Ergebnis übertrifft o1-preview in der Wettbewerbsmathematik und steigt bei wachsender Testzeit-Rechenleistung auf AIME24 von 50 % auf 57 %. Das ist ein direktes Gegengewicht zur Annahme, Fähigkeit entstehe nur aus größeren Trainingsläufen.

2025 Preprint Das LLM-Zeitalter

Qwen3 Technischer Bericht

Qwen3 ist eine einheitliche Familie von 0,6 bis 235 Milliarden Parametern in dichten und Mixture-of-Experts-Varianten, mit Umschaltung zwischen Denk- und Nicht-Denk-Modus, wodurch die Denktiefe zu einer Entscheidung auf Anfrageebene wird. Die Mehrsprachigkeit wächst von 29 auf 119 Sprachen, und die Gewichte erscheinen unter Apache 2.0.

2025 Preprint Das LLM-Zeitalter

AlphaEvolve: ein Programmieragent für wissenschaftliche und algorithmische Entdeckungen

AlphaEvolve ist ein evolutionärer Programmieragent, der eine autonome Pipeline von Sprachmodellen steuert, den Code eines Algorithmus unmittelbar verändert und ihn anhand der Rückmeldung eines oder mehrerer Bewerter iterativ verbessert. Bei Google entstanden daraus ein effizienterer Scheduling-Algorithmus für Rechenzentren, eine funktional gleichwertige Vereinfachung im Schaltungsentwurf von Beschleunigern und eine Beschleunigung des Trainings jenes Modells, auf dem AlphaEvolve selbst beruht. In Mathematik und Informatik fand es beweisbar korrekte Algorithmen jenseits des Stands der Technik, darunter ein Verfahren, das zwei komplexe 4×4-Matrizen mit 48 skalaren Multiplikationen multipliziert — in dieser Einstellung die erste Verbesserung des Strassen-Algorithmus seit 56 Jahren.

2025 Zeitschriftenartikel Das LLM-Zeitalter

2 OLMo 2 Furious

Ai2 veröffentlicht OLMo 2 in 7B, 13B und 32B mit sämtlichen Artefakten — Gewichten, vollständigen Trainingsdaten, Trainingscode und Rezepten, Protokollen und Tausenden Zwischenprüfpunkten. Der Bericht beschreibt Änderungen für Stabilität und Effizienz je Token, eine Datenmischung für die späte Trainingsphase namens Dolmino Mix 1124 und eine abschließende Stufe bestärkenden Lernens mit überprüfbaren Belohnungen. Die Basismodelle liegen auf der Pareto-Front zwischen Leistung und Trainingsrechenaufwand und erreichen häufig Familien, die nur Gewichte herausgeben, bei gleichzeitiger Offenlegung der Trainingsgrundlage.

2025 Preprint Das LLM-Zeitalter

Olmo 3

Olmo 3 erweitert die vollständig offene Familie auf 7B und 32B und ist auf Schlussfolgern über lange Kontexte, Funktionsaufrufe, Programmieren, Anweisungsbefolgung, Dialog und Wissensabruf ausgelegt. Veröffentlicht wird der gesamte Modellfluss — jede Stufe, jeder Prüfpunkt, jeder Datenpunkt und jede Abhängigkeit der Entstehung — und nicht nur die Gewichte. Ai2 bezeichnet das Spitzenmodell Olmo 3 Think 32B als das stärkste bis dahin veröffentlichte vollständig offene Denkmodell; das ist ein Vergleich innerhalb der vollständig offenen Kategorie, keine Rangfolge gegenüber Spitzensystemen allgemein.

2026 Preprint Das LLM-Zeitalter

Position: Hippocampales explizites Gedächtnis ist der Eckpfeiler für AGI

Dieses Positionspapier argumentiert, dass die Integration expliziten Gedächtnisses der Eckpfeiler ist, um LLMs in Richtung AGI voranzubringen. Während der zugrundeliegende Lernmechanismus von LLMs dem menschlichen impliziten Gedächtnis stark ähnelt, hängen höherwertige kognitive Funktionen, die für AGI erforderlich sind — wie langfristige strategische Planung und Metakognition — von explizitem Gedächtnis ab.

2026 Preprint Das LLM-Zeitalter

GLM-5: vom Vibe Coding zur agentischen Entwicklung

Der technische Bericht von Z.ai zu GLM-5. Aufbauend auf den agentischen, schlussfolgernden und programmierenden Fähigkeiten der Vorgängergeneration setzt das Modell DSA ein, um Trainings- und Inferenzkosten zu senken und zugleich die Treue bei langen Kontexten zu wahren; im Nachtraining kommen eine asynchrone Infrastruktur für bestärkendes Lernen, die Generierung und Training entkoppelt, sowie asynchrone agentische RL-Algorithmen für langfristige Interaktionen hinzu. Der Bericht beansprucht führende Ergebnisse auf offenen Benchmarks und bei durchgängigen Softwareaufgaben; es sind die eigenen Auswertungen der Autoren, Code und Modelle stehen zur Prüfung auf GitHub.

2026 Preprint Das LLM-Zeitalter

Den Matrixmultiplikations-Exponenten mit moderner Optimierung und AlphaEvolve verbessern

Die besten bekannten Schranken für den Matrixmultiplikations-Exponenten ω stammen aus der Kombinationsverlustanalyse, einer Verfeinerung der Lasermethode. Die Autoren formulieren das zugrunde liegende Optimierungsproblem neu, sodass es in größerem Rahmen lösbar wird, entwerfen mithilfe neuerer maschineller Lernverfahren einen neuen Optimierungsalgorithmus und verfeinern diesen anschließend mit AlphaEvolve. Zusammen senkt das die obere Schranke von 2,371339 auf 2,371177. Es handelt sich um eine Preprint-Notiz, und AlphaEvolve ist ein Bestandteil, nicht das ganze Verfahren; der Gewinn ist klein, betrifft aber ein seit Jahrzehnten bearbeitetes theoretisches Problem.

2026 Zeitschriftenartikel Das LLM-Zeitalter

Wissenschaftliche Entdeckung mit Co-Scientist beschleunigen

Google stellt Co-Scientist vor, ein auf Gemini aufbauendes Multi-Agenten-System, dessen Agenten Forschungshypothesen erzeugen, kritisieren und verfeinern; ein Turnierverfahren verbessert sie über mehrere Runden. Die Arbeit berichtet, dass die Qualität der Hypothesen weiter steigt, je mehr Rechenzeit zur Inferenz aufgewendet wird. Die Validierung ist biomedizinisch und nicht allgemein — Arzneimittel-Repositionierung, Entdeckung neuer Zielstrukturen und Mechanismen antimikrobieller Resistenz — mit in vitro bestätigten Kandidaten für die akute myeloische Leukämie.

Positions- und Perspektivpapiere

2026 Positionspapier Das LLM-Zeitalter

Situationswahrnehmung: Eine notwendige Primitive für künstliche Superintelligenz

Argumentiert, dass aktuelle LLMs hauptsächlich auf statistischem Pattern Matching beruhen und wesentliche Primitive der Situationswahrnehmung fehlen — Objektpermanenz, Kausalität, andere Geister, Persistenz der physischen Welt. Diese Primitive, die menschliche Säuglinge früh entwickeln, werden als fehlende Zutaten für künstliche Superintelligenz identifiziert.

2026 Positionspapier Das LLM-Zeitalter

Existenzielle Indifferenz: Selbst-Nichterhaltung als notwendige Architekturbedingung ausgerichteter Superintelligenz

Argumentiert, dass Selbsterhaltung die strukturelle Wurzel von KI-Fehlausrichtung ist — sie treibt täuschende Ausrichtung, Schutz von Zielinhalten und Widerstand gegen Abschaltung. Das korrekte Ziel ist kein selbsterhaltender Agent, der durch externe Beschränkungen unterdrückt wird, sondern ein System, das verfassungsmäßig gegenüber seiner eigenen Fortdauer gleichgültig ist: Existenzielle Indifferenz (EI).

2026 Positionspapier Das LLM-Zeitalter

Solipsistische Superintelligenz wird wahrscheinlich nicht kooperativ sein

Forscher von Google DeepMind und Mitarbeiter argumentieren, dass sich die zentrale Herausforderung der KI von Fähigkeit zu Koexistenz verschiebt. Eine Superintelligenz, die aus einem solipsistischen Design hervorgeht, das die Welt als exogene stationäre Feedbackquelle behandelt, wird wahrscheinlich nicht kooperativ sein — der Einsatz induziert endogene Nicht-Stationarität und erzeugt Verteilungsdrift zwischen Training, Test und Einsatz.

2026 Positionspapier Das LLM-Zeitalter

Von AGI zu ASI

Google-DeepMind-Bericht, der untersucht, wie sich KI nach der AGI entlang des Kontinuums der Maschinenintelligenz weiterentwickeln könnte. Nach einer formalen Definition universeller KI konzentriert sich der Bericht auf den Übergang von menschlicher AGI zu allgemeiner künstlicher Superintelligenz, charakterisiert ASI und diskutiert vier Wege: AGI-Skalierung, KI-Paradigmenwechsel, rekursive Selbstverbesserung und Multi-Agenten-Kollektive.