Human In The Loop? Autonomie und Automation in sozio-technischen Systemen

Das Forschungsprojekt Human in the Loop? untersucht, wie menschliche Beteiligung automatisierte Entscheidungsprozesse verbessern kann.

Automatisierte Entscheidungen sind nicht immer fehlerfrei. Das liegt daran, dass sie auf Trainingsdaten beruhen, die unbeabsichtigte Vorurteile (Biases) beinhalten können oder das menschliche Kontextverständnis fehlt. So werden einzelne maschinelle Entscheidungen den individuellen Situationen von Personen häufig nicht gerecht. Ein bekanntes Beispiel ist die Kreditvergabe, bei der Banken technologische Systeme einsetzen, um die Kreditwürdigkeit von Antragsteller*innen automatisch zu bewerten. Deshalb wird schon lange gefordert, Menschen in solche Prozesse zu integrieren, damit sie die Entscheidungsprozesse überwachen und so zur Verbesserung der technologischen Systeme beitragen.

Das Projekt stellt die Fragen: Wie sollte eine sinnvolle Interaktion zwischen Mensch und Maschine gestaltet sein? Welche Rolle spielen menschliche Entscheidungen bei der Qualitätssicherung von automatisierten Entscheidungen? Wie können wir sicherstellen, dass diese Interaktion nicht nur rechtssicher, sondern auch transparent und nachvollziehbar ist? Und welche Anforderungen gelten für die Interaktion zwischen Mensch und Maschine, wenn man das technische System, die menschlichen Entscheidungsträger*innen, ihren Kontext und ihre Umwelt betrachtet?

Projektschwerpunkte und Transfer

Vier Fallstudien

Analyse der menschlichen Beteiligung in automatisierten Entscheidungsprozessen durch Feldanalysen, Workshops und Dialogformate in vier ausgewählten Szenarien.

Einflussfaktoren-Taxonomie

Untersuchung der Faktoren, die menschliche Entscheidungen beeinflussen und Identifizierung der Fehler, Anfälligkeiten und Stärken aller an Entscheidungsprozessen beteiligten technischen Systeme und Personen.

Handlungsempfehlungen

Entwicklung praxisnaher Lösungen, um die Zusammenarbeit zwischen Mensch und Maschine zu optimieren und die Umsetzung und Interpretation bestehender Gesetzes- und Regulierungsvorhaben zu verbessern (Datenschutzgrundverordnung, Artifical Intelligence Act und Digital Services Act).

Bild von Luís Eusébio auf unsplash.com

Projektdetails

Überblick

Laufzeit Beginn: 2023; Laufzeit Ende: 2027

Forschungsprogramm: FP 1 Transformation öffentlicher Kommunikation

Drittmittelgeber

Stiftung Mercator

Ansprechpartner

Portrait Wolfgang Schulz

Prof. Dr. Wolfgang Schulz

Wissenschaftlicher Direktor (Vorstandsvorsitzender)

Leibniz-Institut für Medienforschung | Hans-Bredow-Institut (HBI)
Warburgstraße 30b
20354 Hamburg

Ähnliche Projekte & Publikationen

Publikation Frisch erschienen!

Visualisierung regulatorischer Ökosysteme am Beispiel des AI-Acts

Der Beitrag von Magdalena Stratmann, Tobias Mast et al., der im Projekt "Neue Regulierungs­ansätze für algorithmische Systeme in der öffentlichen Kommunikation" (STEAM) entstanden ist, stellt mit dem Architectural Ecosystem Modeling eine visuelle Methode vor, um diese institutionellen Strukturen des AI Act sichtbar zu machen, Verantwortlichkeiten und Abhängigkeiten zu analysieren und so Lücken, Doppelungen sowie Koordinationspotenziale im Regulierungsgefüge zu erkennen.

eine Frau hinter einem Tisch mit ablehnender Haltung gegenüber Zeitungen auf dem Tisch.
Projekt Neues Projekt!

Praktiken der Nachrichtenvermeidung und ihre Implikationen für die Öffentlichkeitsanbindung

Welche Auswirkungen hat Nachrichtenvermeidung auf die Zugehörigkeit zu verschiedenen Öffentlichkeiten und auf politische Partizipation? Und inwiefern tragen diese Dynamiken zur Fragmentierung von Öffentlichkeiten bei? Die HBI-Studie untersucht die Auswirkungen verschiedener Praktiken der Nachrichtenvermeidung auf die individuelle Öffentlichkeitsanbindung.

Projekt BMFTR-Projekt

Podcasts: Akteure, Inhalte und Desinformation

Mit der wachsenden Bedeutung auditiver Medien wie Podcasts steigen auch die Risiken von Mis-, Mal- und Desinformation. Das Verbundprojekt „Systematische Observation von neuen auditiven Risiken“ (SONAR) untersucht die Angebotsstruktur auditiver Online-Medien und entwickelt Verfahren zur Erkennung entsprechender Narrative und Manipulationsstrategien.

Publikation merz-Ausgabe und Podcast erschienen!

Impulse zur Debatte über Medienverbote

Claudia Lampert hat zusammen mit Klaus Lutz (Medienzentrum Parabol) das aktuelle Heft der medienpädagogischen Fachzeitschrift „merz“ (2/2026) redaktionell gestaltet. Das Heft trägt den Titel „Alles unter Kontrolle? Impulse zur Debatte über Medienverbote“. Auch Stephan Dreyer ist mit einem Beitrag vertreten.

Publikation Zum Download

Jahresbericht 2023-2025

Evaluation, Wachstum, 75. Geburtstag und ein neues Gebäude: 2023 bis 2025 waren anspruchsvolle und zugleich gedeihliche Jahre. Die Forschungsleistung war beachtlich, der gesellschaftliche Impact beträchtlich. Einen kleinen Einblick in unsere Tätigkeiten bietet dieser Jahresbericht.

Publikation Open Access!

Einflussfaktoren auf das Überprüfungsverhalten bei generativer Suche

Generative KI wird zunehmend in Suchmaschinen integriert, steht jedoch wegen plausibel klingender, aber teils ungenauer Inhalte in der Kritik. Über die Faktoren, die Nutzende zur Überprüfung solcher Antworten bewegen, ist bislang wenig bekannt. Die Studie von Eva-Luise Knor, Michael V. Reiss, Judith Möller und Lisa Merten schließt diese Lücke.  

Publikation Frisch erschienen!

Plattformen, Online-Überwachung und die Europäische Union: Das Gesetz über digitale Dienste (DSA)

In ihrem englischsprachigen Open Access Artikel untersuchen Judith Möller, Ronan Ó Fathaigh, Bengi Zeybek und Rocco Bellanova wie der Digital Services Act (DSA) öffentliche und private Überwachungspraktiken in Bezug auf Inhalte, die auf Online-Plattformen verbreitet werden, erleichtert.

Cover von Heft 2/2026 M&K
Publikation Als Open Access verfügbar

M&K 2/2026 ist erschienen

Die Artikel in Heft 2/2026 M&K befassen sich mit dem Rollenverständnis und Transformationspotenzial peripherer Akteur:innen in der DACH-Region, den Entwicklungen in der Sportberichterstattung deutscher Tageszeitungen 2011–2021 sowie mit Nutzungspraktiken von ChatGPT und anthropomorphisierenden Rollenzuschreibungen. Dies und mehr zum freien Download.

Cover des Arbeitspapiers
Publikation Arbeitspapier zum Download

Babys und Kleinkinder im Family Influencing

Wie häufig und auf welche Weise werden Babys und Kleinkinder (0–5 Jahre) in kommerziell ausgerichteten deutschsprachigen Social-Media-Profilen auf Instagram, TikTok und YouTube dargestellt? Stephan Dreyer, Claudia Lampert, Kira Thiel et al. analysieren diese Frage qualitativ und quantitativ und diskutieren die Ergebnisse kritisch auf Grundlage des geltenden Rechtsrahmens sowie medienethischer Erwägungen.

Publikation Open Access erschienen!

Bewertung von Technologien zur Altersüberprüfung: Wirksamkeit, Nebenwirkungen und Akzeptanz

In dem englischsprachigen Beitrag „Assessing Age Assurance Technologies: Effectiveness, Side-Effects, and Acceptance” analysieren Wouter Lueks, Stephan Dreyer, Hannes Federrath und Judith Simon bestehende Altersprüfverfahren.

1 2 3 25

Seite 1 von 25

Newsletter

Infos über aktuelle Projekte, Veranstaltungen und Publikationen des Instituts.

Jetzt abonnieren