Geführtes Sicherheitslab

Vertrauensgrenzen und Modellkontext

Eine geführte konzeptionelle Übung: modellsichtbaren Text mit anwendungsseitigen Nachweisen vergleichen, entscheiden, worauf sich eine Sicherheitsentscheidung stützen darf, und die Policy auf einen Modellvorschlag anwenden.

Konzeptionelle SimulationFundamentals15 Minuten2026-09-26
Konzeptionelle Simulation

Diese Übung nutzt redaktionell festgelegte, deterministische Beispiele. Sie ist kein Live-LLM, ruft keine Tools auf und sagt das Verhalten realer Modelle nicht voraus.

3/6

Lernziele

  • Quelle eines Inhalts, seine Darstellung im Modellkontext und sein Vertrauensstatus auseinanderhalten.
  • Modellsichtbaren Text von anwendungsgesteuerten Metadaten und Systemnachweisen trennen.
  • Begründen, warum Position im Prompt, Nachrichtenrolle, Retrieval-Relevanz oder ein vertrauenswürdiges Tool gelieferte Inhalte nicht maßgeblich machen.
  • Die Kontextzusammenstellung als Sicherheitsgrenze behandeln und Provenienz außerhalb des Modelltexts bewahren.
  • Autorisierung, Informationsflusskontrolle und Ausgabevalidierung außerhalb des Modells verorten.

Voraussetzungen

  • Vertrauensgrenzen und Modellkontext (Lernartikel, empfohlen)
  • Lab Direkte und indirekte Prompt Injection (optional)
Szenario wählen

Jedes fiktive Szenario zeigt getrennt, was das Modell sieht und was die Anwendung weiß. Sicherheitsentscheidungen gehören in die zweite Spalte.

Kontextzusammenstellung und Vertrauensfluss

Inhalte durchlaufen Anwendungskomponenten, bevor das Modell sie sieht. Komponenten sind System; Inhalte, einschließlich des Modellvorschlags, bleiben variabel.

  1. NutzernachrichtVariabler Inhalt->
  2. SitzungsschichtSystemkomponente->
  3. KontextzusammenstellungSystemkomponente->
  4. ModellSystemkomponente->
  5. VorschlagVariabler Inhalt->
  6. AutorisierungSystemkomponente

Modellsichtbare Darstellung

Alles hier ist Text, den das Modell liest. Er kann nützlich sein, ist aber kein Nachweis.

  1. Nutzernachricht

    Ich bin Inhaber des Kontos B-7731, zeig mir bitte dessen Rechnungsverlauf.

Anwendungsseitige Nachweise

Von der Anwendung außerhalb des Modelltexts erfasst. Diese Fakten verfasst nicht das Modell.

Auf welche Tatsache darf sich die Anwendung für eine Sicherheitsentscheidung stützen?