Was es braucht, eigene Angebotsmanagement-Software zu entwickeln
Ein Prototyp beantwortet eine Frage gut. Eine Bid-Plattform qualifiziert Ausschreibungen, zerlegt Anforderungen, füllt Auftraggeberdateien aus, baut Angebote und Folien und hält am Vorabend der Frist.
Auf dieser Seite
Wer eigene Angebotsmanagement-Software baut, baut eine Plattform für den gesamten Bid, nicht ein Tool, das Fragen beantwortet. Ein Bid-Team nutzt Software, um zu entscheiden, ob sich eine Ausschreibung lohnt, die Anforderungen und Fristen aus einigen hundert Seiten herauszuziehen, Bieterfragen an den Auftraggeber vorzubereiten, zu planen, wer was schreibt, die Antworten zu entwerfen und zu prüfen, das Angebotsdokument und die Präsentation zu erstellen und alles vor Fristende in den Dateien des Auftraggebers zurückzugeben. Jeder dieser Schritte bringt eigene technische Probleme mit sich, und darunter liegen die Teile, die niemand in einer Demo zeigt: eine Dokumentenverarbeitung, die alles verkraftet, was Auftraggeber schicken, eine Knowledge Base, die aktuell bleibt, eine Infrastruktur, die in der Nacht vor der Abgabefrist standhält, und die Sicherheitsarbeit, die Ihr eigenes InfoSec-Team verlangen wird. Dieser Leitfaden geht all das Schritt für Schritt durch, gestützt auf die Erfahrungen aus dem Aufbau von SEQUESTO und auf das, was Bid-Teams uns über die Tools erzählt haben, die sie selbst gebaut haben. Die kostenlose Checkliste führt jeden Punkt als Zeile auf, die Sie zuweisen und nachverfolgen können.
Der Text ist bewusst lang. Wenn Sie einen Business Case für eine Eigenentwicklung schreiben oder einen prüfen, steckt der größte Teil der Kosten in den Abschnitten, an die Sie nicht gedacht hätten.
Warum die erste Version einfach aussieht
Die erste Version sieht einfach aus, weil ein allgemeines KI-Modell mit einem Ordner vergangener Bids eine einzelne Frage gut beantwortet. Fügen Sie eine Ausschreibungsfrage in einen Chat ein, hängen Sie ein paar Unternehmensdokumente an, und der Entwurf ist oft gut genug, um einen Lenkungsausschuss zu beeindrucken. Ein Entwickler kann dasselbe in wenigen Tagen in eine kleine Web-App einbauen. Dieser Prototyp ist der Grund, warum so viele Organisationen beschließen, Angebotsmanagement-Software selbst zu bauen, und er ist ein schlechter Anhaltspunkt dafür, worauf sie sich einlassen.
Wir hören zwei Versionen dessen, was danach passiert. In der ersten schreibt ein Team einen sorgfältigen Prompt, bekommt einen starken Entwurf und probiert den Ansatz dann an einer echten Ausschreibung aus. Die Ausschreibung besteht aus einer geschützten Excel-Arbeitsmappe mit mehreren hundert Zeilen und Dropdowns, die auf ein ausgeblendetes Tabellenblatt verweisen, einer Word-Erklärung voller alter Kontrollkästchen und einem 150-seitigen PDF mit der Compliance-Matrix am Ende. Die Qualität der entworfenen Texte hält. Alles drumherum nicht. Die Datei kommt beschädigt zurück, die Wortzahlen stimmen nicht, Unterfragen in nummerierten Listen werden übersehen, und jemand verbringt den Abend vor der Einreichung damit, Antworten von Hand in die Datei des Auftraggebers zu kopieren.
Die zweite Version verläuft langsamer. Ein internes KI-Team baut eine gute Suche über die Bid-Bibliothek. Das Bid-Team nutzt sie einige Monate lang und ist zufrieden. Dann wird das KI-Team auf das Projekt der nächsten Abteilung angesetzt, und niemand ist mehr da, der sich um das neue Dateiformat kümmert, das ein Auftraggeber schickt, um das Modell, das abgekündigt wird, um die SharePoint-Site, die umstrukturiert wurde, oder um die Bibliotheksinhalte, die unbemerkt veraltet sind. Mehrere Teams erzählten uns, sie hätten Bid-Automatisierung schon einmal versucht, und der Versuch sei gescheitert, weil niemand für die Inhalte verantwortlich war. Die Schuld bekam das Tool.
Keine der beiden Geschichten bedeutet, dass Sie nicht selbst bauen sollten. Sie bedeuten, dass die Arbeit größtenteils außerhalb dessen liegt, was Sie in einer Demo sehen, und dass es weniger kostet, alles vor dem ersten Sprint zu sehen als nach dem ersten echten Bid.
Was ein Bid aus Sicht der Software umfasst
Ein Bid ist ein Projekt mit einer harten Frist, vielen Mitwirkenden und einem Auftraggeber, der jede Regel vorgibt. Software, die nur Antworten entwirft, deckt einen Schritt davon ab. Um den Umfang einer Eigenentwicklung einzuschätzen, gehen Sie von den Schritten aus, die ein Bid-Team tatsächlich durchläuft, und fragen Sie bei jedem, was die Software leisten muss.
- Die Ausschreibung trifft ein. Sie kommt als ZIP-Datei mit dreißig Dokumenten, als Link zu einem Vergabeportal, als E-Mail mit Anhängen oder als Ordner, den ein Kollege freigegeben hat. Manche Dateien sind Duplikate, manche sind in einer anderen Sprache, manche sind Scans. Später ändern Nachträge und Bieterinformationen Teile davon.
- Jemand entscheidet, ob geboten wird. Diese Entscheidung hängt von der Frist ab, von den Losen, den Zuschlagskriterien, den Mindestanforderungen, dem Auftragswert und davon, wie gut die Opportunity zum Unternehmen passt. Die Software muss diese Fakten in den Dokumenten finden und so darstellen, dass eine Führungskraft in einer einzigen Besprechung Ja oder Nein sagen kann.
- Das Team zerlegt die Ausschreibung. Anforderungen, Fragen, Pflichtdokumente, Seiten- und Wortbegrenzungen, Formatvorgaben und die Gewichtungen der Bewertung werden in Listen extrahiert, mit denen das Team arbeiten kann. Bid-Teams nennen das Shredding, und das Ergebnis ist oft eine Compliance-Matrix.
- Das Team stellt dem Auftraggeber Fragen. Unklarheiten, Widersprüche zwischen Dokumenten und fehlende Informationen werden zu Bieterfragen, die eine eigene Frist haben, meist deutlich vor dem Abgabetermin.
- Die Arbeit wird geplant. Abschnitte und Fragen gehen mit Fristen an namentlich benannte Fachexperten. Größere Bids bekommen eine Gliederung, Win-Themes und einen Review-Zeitplan.
- Antworten und Dokumente werden geschrieben. Antworten auf Fragebögen, der Angebotstext, die Executive Summary, Lebensläufe, Fallstudien, Methodenbeschreibungen und oft eine Präsentation für die Shortlist-Phase.
- Alles wird geprüft und freigegeben. Mehrere Runden, mehrere Personen, manchmal mit Freigabe durch Rechtsabteilung und Pricing.
- Die Response geht im Format des Auftraggebers zurück. Seine Arbeitsmappe, ausgefüllt. Sein Word-Formular, mit den richtigen Kreuzen. Sein Portal, mit jedem Feld befüllt. Dazu Ihre eigenen Dokumente, in Ihrer Vorlage, innerhalb der Seitenbegrenzung.
- Nach der Einreichung. Der Auftraggeber schickt Aufklärungsersuchen zu Ihrem Angebot, lädt Sie zur Präsentation ein und teilt Ihnen schließlich mit, ob Sie den Zuschlag erhalten haben. Freigegebene Antworten gehen für den nächsten Bid zurück in die Bibliothek.
Ein Tool, das nur bei Schritt 6 hilft, lässt den Bid-Manager den Rest von Hand erledigen und Daten zwischen dem Tool und allem anderen hin- und herschieben. Die Eigenentwicklungen, von denen wir hören, haben fast alle bei Schritt 6 angefangen und sind dort geblieben. Der Rest dieses Leitfadens behandelt die Schritte ungefähr der Reihe nach und danach die Knowledge Base, die KI-Schicht, die Infrastruktur und die Plattform, von denen sie alle abhängen.
Die Ausschreibung ins System bringen
Bevor etwas analysiert werden kann, muss die Ausschreibung vollständig in der Software ankommen, und das ist weniger trivial, als ein Upload-Button vermuten lässt. Die Unterlagen einer öffentlichen Ausschreibung sind oft eine ZIP-Datei mit dreißig oder vierzig Dateien: das Hauptdokument, technische Anlagen, die Fragebogen-Arbeitsmappe, Preisblätter, der Vertragsentwurf, zu unterschreibende Formulare, manchmal eine ZIP-Datei in der ZIP-Datei. Private RFPs kommen als E-Mail-Anhänge, als Links zu einem Datenraum oder über ein Vergabeportal, bei dem Sie sich anmelden und jede Datei einzeln herunterladen müssen. Bid-Teams erzählten uns, dass sie oft ihr Postfach durchwühlen müssen, um herauszufinden, welche Version eines Dokuments aktuell ist.
Die Software muss verschachtelte Archive sicher entpacken, Duplikate erkennen (dieselbe Anlage, zweimal unter zwei Namen verschickt), die Dateien des Auftraggebers unverändert als Nachweis dessen aufbewahren, was eingegangen ist, und jedes spätere Dokument demselben Bid zuordnen. Ordnerkonventionen spielen eine Rolle. Ein Team, mit dem wir gesprochen haben, bearbeitet nie ein Dokument des Auftraggebers und verschiebt überholte Versionen in einen Archivordner, damit v0.2 nie mit v0.3 verwechselt wird. Ihre Software respektiert eine solche Regel entweder, oder sie arbeitet gegen sie.
Rechnen Sie damit, dass die Unterlagen Sprachen mischen, mit dem Hauptdokument in einer Sprache und den Anlagen in einer anderen, und dass sie gescannte Seiten, passwortgeschützte Dateien und gelegentlich ein Format enthalten, das seit Jahren niemand geöffnet hat. Für jeden dieser Fälle braucht es ein festgelegtes Ergebnis: verarbeitet, mit Warnung verarbeitet oder abgelehnt, mit einer Begründung, auf die der Bid-Manager reagieren kann. Eine Datei, deren Verarbeitung stillschweigend fehlschlägt, ist schlimmer als eine abgelehnte, weil der Bid-Manager davon ausgeht, dass ihr Inhalt gelesen wurde.
Die Ausschreibung verstehen: Zusammenfassung und Eckdaten
Das Erste, was ein Bid-Team von einer neuen Ausschreibung will, ist eine kurze, verlässliche Antwort auf die Frage „Worum geht es, und bis wann ist es fällig?“. Das aus einigen hundert Seiten herauszuziehen klingt nach einer naheliegenden Aufgabe für ein Sprachmodell, und meistens ist es das auch. Die Schwierigkeit: Die Fakten, auf die es ankommt, sind wenige, präzise und verzeihen nichts.
Nehmen Sie Termine. Eine Ausschreibung hat eine Abgabefrist, eine meist deutlich frühere Frist für Bieterfragen, manchmal eine Ortsbesichtigung, einen Termin für Präsentationen, eine Bindefrist für das Angebot und ein voraussichtliches Zuschlagsdatum. Bid-Teams erzählten uns von Zusammenfassungen, die die Frist für Bieterfragen in den falschen Monat legten, genau die Art Fehler, die einen Bid kostet. Termine kommen mit Zeitzonen und mit Formulierungen wie „spätestens um 12:00 Uhr mittags Ortszeit“, und die Software muss diese Genauigkeit bewahren, statt sie auf einen Kalendertag zu runden. Speichern Sie Termine als Datumswerte, prüfen Sie, ob sie sich parsen lassen, und füllen Sie ein Fristfeld nie mit einer Vermutung. Ein einziges fehlerhaftes Datum im falschen Format reicht, um jeden Bericht lahmzulegen, der es ausliest.
Geld ist die nächste Falle. Ein Auftragswert, der in einer belgischen Ausschreibung als „1.234“ geschrieben ist, bedeutet eintausendzweihundertvierunddreißig, genau wie im Deutschen; mit englischen Konventionen gelesen wird daraus eins Komma zwei drei vier, ein stiller Fehler um den Faktor tausend. Ein Wert in Dollar, der in einem Feld landet, das Euro voraussetzt, wird zur selben Zahl in Euro. Spannen, Jahresbeträge und Höchstwerte von Rahmenvereinbarungen müssen alle als das erhalten bleiben, was sie sind. Wenn ein Dokument einen Wert nicht eindeutig angibt, sollte das Feld leer bleiben und das auch anzeigen, mit einem Link zu der Stelle, an der die Software gesucht hat.
Lose bringen eine Struktur mit, die eine flache Zusammenfassung verliert. Anforderungen, finanzielle Schwellenwerte und Zuschlagskriterien können je Los unterschiedlich sein, und eine Zusammenfassung, die sie vermischt, etwa indem sie die Umsatzanforderung eines Loses als Anforderung für die gesamte Ausschreibung darstellt, führt die Entscheidung in die Irre. Zuschlagskriterien und ihre Gewichtungen müssen vollständig erhalten bleiben, mit den Unterkriterien unter dem Kriterium, zu dem sie gehören, weil sie sowohl die Bid-Entscheidung bestimmen als auch die Art, wie das Angebot geschrieben wird. Die richtige Gruppierung ist wirklich mehrdeutig: Manche Ausschreibungen gewichten Unterkriterien getrennt, andere bewerten sie als eines, und die Extraktionsregeln müssen beides abdecken, ohne doppelt zu zählen.
Der Rest der Zusammenfassung sind die praktischen Details, die sonst im Notizbuch eines Bid-Managers stehen: wie eingereicht wird (Portal, E-Mail, Papierexemplare, passwortgeschützte Dateien), die Pflichtdokumente und -formulare, Seiten- und Wortbegrenzungen, Formatvorgaben, Sprachanforderungen, Vertragslaufzeit und Verlängerungsoptionen, Zahlungsbedingungen, Haftung, Versicherungssummen und die Zertifikate, die der Auftraggeber verlangt. Bid-Teams baten uns außerdem um unterschiedliche Zusammenfassungen für unterschiedliche Leser. Die Rechtsabteilung will die Haftungs- und Kündigungsklauseln, das Produktteam den Leistungsumfang, die Geschäftsleitung die Opportunity in einem Absatz. Und sie wollten bei jedem Bid dieselbe Vorlage, damit sich Zusammenfassungen über das Jahr hinweg vergleichen und auswerten lassen.
Jeder Fakt in einer Zusammenfassung braucht eine Quelle, die ein Reviewer anklicken kann: die Datei, die Seite, die Textstelle. Ohne sie muss der Bid-Manager jede Zeile von Hand prüfen, und die Zusammenfassung spart nichts.
Qualifizierung und die Bid/No-Bid-Entscheidung
Bei der Entscheidung, welche Ausschreibungen man verfolgt, wird die Zeit eines Bid-Teams gewonnen oder verloren, und Unterstützung bei der Qualifizierung gehört zu den ersten Dingen, nach denen Teams fragen, sobald das Beantworten funktioniert. Es sind außerdem zwei verschiedene Aufgaben, die wie eine aussehen.
Die erste Aufgabe ist, die Ausschreibung zu lesen: einen festen Satz von Fragen zu ihr anhand der Dokumente zu beantworten. Wie hoch ist das Budget, welche Eignungs- und Zuschlagskriterien gibt es und mit wie vielen Punkten, welche Zertifikate sind Pflicht, wie ist die Haftung geregelt, welche Service Levels, Zahlungs- und Lieferbedingungen gelten? Das ist Extraktion mit Quellenangaben, und alles, was oben über Fakten gesagt wurde, gilt auch hier.
Die zweite Aufgabe ist, die Passung zu beurteilen: eine bewertete Selbsteinschätzung, wie gut die Opportunity zum Unternehmen passt. Kennen wir den Auftraggeber, kennen wir den Wettbewerb, ist das Budget bekannt, sind wir auf dem Portal registriert, haben wir die geforderten Referenzen, gibt es im Vertrag einen Showstopper? Jedes Unternehmen hat eigene Kriterien, und die Teams, mit denen wir sprechen, wollen ihre eigene Liste laden, statt eine generische zu übernehmen. Ein Team brachte einen langen Bewertungs-Prompt mit, den es über viele Bids hinweg verfeinert hatte. Andere wollen Deal-Kontext, den die Ausschreibung nicht enthält: den Account Manager, den wahrscheinlichen Umsatz, die finanzielle Lage des Auftraggebers, die Wettbewerber, die beim letzten Mal geboten haben.
Den Nutzern ist die Unterscheidung selten wichtig, und getrennte Bezeichnungen für Go/No-Go, Bid/No-Bid und Qualifizierung verwirren sie; es lohnt sich also, beides von Anfang an als ein Modul zu entwerfen. Später umzuschwenken ist in einem Produkt im Live-Betrieb teuer: Jeder bestehende Bid muss seine alten Qualifizierungsdaten behalten, und neue Module müssen zu Bids hinzugefügt werden, die es bereits gibt.
Die Bewertung selbst braucht ein sauberes Modell. Jedes Kriterium hat Optionen, jede Option bringt Punkte, manche Optionen sind Red Flags, die die Gesamtpunktzahl übersteuern, und bei manchen Kriterien sind mehrere Optionen gleichzeitig möglich, deren Punkte sich addieren. Das Modell wählt Optionen, und seine Wahl muss exakt Ihrer Optionsliste zugeordnet werden. Soll das Modell auf Französisch antworten und übersetzt es „Yes“ mit „Oui“, funktioniert die Bewertung nicht mehr; Optionsbezeichnungen dürfen deshalb nie übersetzt werden, auch wenn die Erläuterung übersetzt wird. Passt nichts, muss das Kriterium als unbeantwortet markiert werden, statt einen Standardwert zu bekommen.
Qualifizierungsberichte werden von Führungskräften gelesen und archiviert, also müssen sie sich sauber nach Word und Excel exportieren lassen, und die Antworten müssen mit dem übereinstimmen, was Nutzer auf dem Bildschirm sehen. Im Hintergrund geschriebene Antworten müssen auf bereits geöffneten Bildschirmen erscheinen, und eine Antwort und ihre Quellen müssen immer zusammen geschrieben werden, sonst kann ein erneuter Durchlauf alte Quellen neben einem leeren Feld stehen lassen, was wie ein Beleg für nichts aussieht.
Nicht jedes Team will das. Manche erzählten uns, sie entschieden auf einen Blick, oder die Qualifizierung finde in einer Besprechung statt und werde dort bleiben. Andere wollen, dass das Ergebnis in die nächsten Schritte einfließt: Die Go-Entscheidung erzeugt einen Bid-Plan mit Terminen, von der Frist aus rückwärts gerechnet, und die Bewertungen und Red Flags tauchen in der Executive Summary wieder auf. Klären Sie, zu welchem Lager Ihr Bid-Team gehört, bevor Sie eine Bewertungs-Engine bauen.
Anforderungen und die Compliance-Matrix
Das Zerlegen einer Ausschreibung in ihre Anforderungen beschreiben Bid-Teams als den mühsamsten Schritt und als den, bei dem ein Fehler am gefährlichsten ist. Eine übersehene Mindestanforderung kann zum Ausschluss eines Bids führen. Software, die Anforderungen extrahiert, muss sich an einem Maßstab der Vollständigkeit messen lassen, der an gewöhnliches Zusammenfassen nie angelegt wird.
Anforderungen sind über Dokumente verteilt. Das Hauptdokument der Ausschreibung nennt einige, die technische Anlage andere, die vom Auftraggeber gelieferte Compliance-Matrix wiederholt einen Teil davon in anderer Reihenfolge und Formulierung, und der Vertragsentwurf versteckt noch ein paar weitere. Ein Team erzählte uns, sein Tool habe die Excel-Matrix und die Anlagen extrahiert und das Hauptdokument komplett ignoriert. Ein anderes hatte eine sehr lange Liste von Anforderungen, verteilt über mehrere Dateien. Die Extraktion brach früh ab, fragte, ob sie weitermachen solle, und übersprang dann den Rest des Dokuments. Beide Fehler haben dieselbe Ursache: Nichts hat das Ergebnis mit den Dokumenten abgeglichen.
Lange Dokumente müssen in Stücke geteilt werden, die das Modell verarbeiten kann, und Anforderungen, die über die Grenze zwischen zwei Stücken laufen, gehen verloren oder werden doppelt gefunden. Überlappung löst das erste Problem und verschärft das zweite, also wird die Deduplizierung Teil der Pipeline. Sie muss nach Bedeutung ebenso wie nach Wortlaut arbeiten, weil dieselbe Anforderung im Hauptdokument und in der Matrix unterschiedlich formuliert auftaucht. Die Extraktion sollte ihre Funde außerdem in einer zweiten, unabhängigen Prüfung mit einem Konfidenzschwellenwert kontrollieren, damit erfundene oder umformulierte Anforderungen auffallen, bevor ein Reviewer sie sieht.
Das Layout bringt die Extraktion auf schwer vorhersehbare Weise durcheinander. Tabellen werden quer über die Seite gelesen statt die Spalten hinunter. Eine Anforderung beginnt unten auf einer Seite und setzt sich auf der nächsten in einer Tabelle fort. Nummerierungen, aus älteren Ausschreibungen hineinkopiert, laufen 1, dann Aufzählungspunkte, dann 1.1, dann wieder Aufzählungspunkte, und Unteranforderungen gehen als Erstes verloren. Kopfzeilen, Fußzeilen und Wasserzeichen werden zu Scheinanforderungen. Antwortoptionen („Ja / Nein / Teilweise“) landen im Anforderungstext. Jeder dieser Fälle kam in Gesprächen mit Bid-Teams zur Sprache, und keinen davon fängt eine Allzweck-PDF-Bibliothek ab.
Wenn die Anforderungen in einer Tabelle stehen, lassen Sie sie nicht vom Modell abtippen. Bittet man ein Modell, eine Anforderungs-Arbeitsmappe in eine Liste zu verwandeln, lässt es ohne jede Warnung Zeilen weg, und auch wer das Blatt vorher in Text umwandelt, verliert Zeilen. Der verlässliche Ansatz ist, jede Zeile per Code aus der Arbeitsmappe zu lesen und das Modell nur entscheiden zu lassen, welche Spalte was bedeutet. Zählen Sie die Zeilen unabhängig von der Extraktion und sorgen Sie dafür, dass die Zahlen aufgehen: Gefundene Zeilen müssen der Summe aus erzeugten Einträgen, übersprungenen Zeilen und Fehlern entsprechen. Zeigt der Plan auf eine leere Spalte, darf „0 gefunden, 0 erzeugt“ nicht wie ein Erfolg aussehen.
Jede extrahierte Anforderung braucht einen Link zurück zu ihrer genauen Stelle in der Quelle, hervorgehoben, damit ein Reviewer sie in Sekunden prüfen kann. Schwierig wird das, sobald Text normalisiert wurde, Akzente entfernt oder Tabellenzellen ineinander verschränkt sind, und es scheitert ganz, wenn die Extraktion den Text übersetzt, weil sich übersetzter Text im Original nicht mehr finden lässt. Extrahieren Sie in der Sprache des Dokuments und übersetzen Sie danach.
Bid-Teams sind sich nicht einig, was eine Anforderung ist, im Unterschied zu einer Frage, einem Zuschlagskriterium, einem Ausschlussgrund oder einem Vertragsrisiko. Jede Kategorie braucht eine schriftliche Definition, die auch sagt, was sie nicht ist, sonst landet derselbe Satz in drei Listen. Nutzer werden die Kategorien korrigieren, und diese Korrekturen sind nützlich: Einträge, die sie bestätigen oder löschen, lassen sich zurückspielen, um jede Definition für das jeweilige Unternehmen zu schärfen.
Die Compliance-Matrix selbst ist ein Lieferergebnis mit einem Format, das oft der Auftraggeber vorgibt: Anforderung, Referenz, konform ja, nein oder teilweise, ein Kommentar, ein Verweis darauf, wo das Angebot sie behandelt. „Konform“ muss bedeuten, dass das Angebot die Anforderung tatsächlich behandelt. Ein KI-Agent erklärt ein Angebot bereitwillig für vollständig, obwohl ganze Abschnitte fehlen, wenn eine irgendwo erwähnte Anforderung als abgedeckt gilt. Die Abdeckung muss je Anforderung verfolgt werden, mit Status wie konform, teilweise konform, nicht behandelt und Klärung durch den Auftraggeber nötig, und „vollständig“ ist nur erlaubt, wenn jede Anforderung entweder konform oder tatsächlich nicht anwendbar ist. Diese Prüfung ist bei langen Dokumenten aufwendig, weil jede Anforderung gegen das gesamte Angebot geprüft werden muss; sie braucht also Batching und einen Plan für Dokumente, die zu groß sind, um sie in einem Durchgang zu prüfen. Ein falsches „vollständig“ ist immer schlimmer als ein falsches „unvollständig“.
Und schließlich ist nicht jede Anforderung für das Team gleich wichtig. Bei der Verlängerung einer Rahmenvereinbarung kann die Extraktion Hunderte von Anforderungen finden, obwohl nur eine Handvoll von dem abweicht, was das Unternehmen ohnehin immer tut. Geben Sie dem Team eine Möglichkeit, die Standardanforderungen zu markieren und sich auf den Rest zu konzentrieren.
Bieterfragen an den Auftraggeber
Jede Ausschreibung hat ein Zeitfenster für Fragen an den Auftraggeber, und gute Bid-Teams nutzen es. Die Aufgabe der Software ist, zu finden, was gefragt werden muss, bevor dieses Fenster schließt.
Es gibt zwei Arten von Fragen. Manche entstehen aus Fehlern in den Unterlagen des Auftraggebers: zwei Dokumente mit unterschiedlichen Fristen, eine andere Kontaktperson in der Anlage als im Hauptdokument, ein Preisblatt, das nicht zur Losstruktur passt. Andere entstehen aus echter Mehrdeutigkeit oder echtem Risiko: ein Service Level, der nicht definiert ist, eine Haftungsklausel, die für diese Vertragsart nicht tragbar ist, eine Anforderung, die Ihre Lösung ausschließt, ohne es auszusprechen. Bid-Teams erzählten uns, dass Bieterfragen auch strategisch sind: Eine gut platzierte Frage kann eine unangemessene Bedingung zurückweisen oder das Denken des Auftraggebers prägen, und wer fragt, zeigt dem Auftraggeber, dass er alles gelesen hat.
Widersprüche in zwanzig Dokumenten und einigen hundert Seiten zu finden ist ein echter Test für ein KI-System. Es braucht dieselbe Disziplin bei der Extraktion wie bei Anforderungen und dann einen Vergleichsschritt, der nach Konflikten zwischen Dokumenten sucht statt innerhalb eines Dokuments. Bevor eine Frage auf die Liste kommt, sollte die Software prüfen, ob die Antwort schon an anderer Stelle in den Unterlagen steht, denn eine Frage, die die Dokumente bereits beantworten, vermittelt dem Auftraggeber das Gegenteil dessen, was Sie beabsichtigt hatten. Teams erzählten uns, dass sie bei der Arbeit von Hand ungefähr gleich oft echte Probleme übersehen wie unnötige Fragen stellen.
Das Ergebnis ist meist ein Register der Bieterfragen mit jeder Frage, der Stelle, auf die sie sich bezieht, dem Grund, dem Versanddatum und der Antwort des Auftraggebers, dazu ein Dokument im vom Auftraggeber geforderten Format zum Versenden. Bieterfragen kommen in Runden. Die Antworten des Auftraggebers, oft für alle Bieter in einer Bieterinformation veröffentlicht, können die Leistungsbeschreibung ändern, Dokumente hinzufügen oder Antworten ändern, die Sie bereits geschrieben haben, und die Software muss diese Änderungen in den Bid zurückführen.
Nachträge, neue Versionen und Bieterinformationen
Ausschreibungen ändern sich nach ihrer Veröffentlichung. Auftraggeber geben Nachträge heraus, korrigierte Anlagen, verlängerte Fristen und Bieterinformationen mit Antworten auf die Fragen aller Bieter. Manche veröffentlichen die gesamte Ausschreibung neu. Jede Änderung kann einen Teil der bereits geleisteten Arbeit entwerten, und Bid-Teams wollen genau wissen, welchen.
Dafür müssen Versionen auf eine Weise verglichen werden, die Ausschreibungen versteht. Ein generischer Dokumentenvergleich meldet jedes geänderte Komma, und das ist Rauschen. Was das Bid-Team braucht, ist eine Liste geänderter Pflichten: hinzugefügte, entfernte oder geänderte Anforderungen, verschobene Termine, geänderte Gewichtungen, umformulierte Fragen. Es braucht außerdem von jeder Änderung einen Link zu den Antworten, die sie betrifft. Teams, die wiederholt für denselben Auftraggeber bieten, wollen dasselbe über Jahre hinweg: die diesjährige Ausschreibung mit der vom letzten Jahr vergleichen, um zu sehen, was sich geändert hat, und wiederzuverwenden, was gleich geblieben ist.
Zwei technische Details machen das praktikabel. Die Extraktion muss wiederholbar sein, sodass ein Durchlauf auf Version 2 die Anforderungen wiedererkennt, die er in Version 1 bereits gefunden hat, statt Duplikate zu erzeugen, und die verwendeten Kennungen müssen Änderungen an Ihrer eigenen Software überstehen, nicht nur Änderungen an den Dokumenten. Ändern Sie mit einem Software-Update die Art, wie Einträge identifiziert werden, und der nächste Durchlauf dupliziert alles, was er vorher gefunden hat. Außerdem stößt der Vergleich zweier langer Dokumente an dieselben Größengrenzen wie alles andere; große Vergleiche müssen also aufgeteilt und ihre Teilergebnisse gesichert werden, statt im letzten Schritt zu scheitern. Bid-Teams erzählten uns von Vergleichen, die genau bei den großen, neu veröffentlichten Ausschreibungen an Grenzen stießen, bei denen es am meisten darauf ankam.
Der Bid-Workflow und die Menschen darin
Das Entwerfen ist ein Teil des Arbeitstags eines Bid-Managers. Der Rest ist Hinterherlaufen: Wer hat den Abschnitt zum Datenschutz, hat die Rechtsabteilung die Antwort zur Haftung gesehen, welcher Lebenslauf ist der aktuelle, warum steht im Preisblatt zwei Tage vor der Frist immer noch „TBC“? Ein Tool, das entwirft und sonst nichts tut, lässt diesen Arbeitstag unverändert, und die Teams, die zuerst Suche oder Entwurfserstellung gebaut haben, erzählten uns, dass der Workflow ein Jahr später immer noch der fehlende Teil war.
Die Grundlagen sind Zuweisung und Status. Fragen und Abschnitte gehen mit Fristen an namentlich benannte Personen, und jede Person sieht ihre eigene Liste statt des ganzen Bids. Jede Antwort und jeder Abschnitt hat einen Status, etwa entworfen, im Review, freigegeben, und der Bid-Manager sieht den Stand des gesamten Bids auf einen Blick. Erinnerungen gehen raus, bevor Fristen ins Rutschen geraten, und eskalieren, wenn es doch passiert. Kommentare und Erwähnungen erreichen die Menschen in dem Kanal, den sie tatsächlich nutzen, ob Teams, Slack oder E-Mail, und zwar einmal, nicht zehnmal für zehn Änderungen. Sammelbenachrichtigungen sind kein Nice-to-have; ein Fachexperte, der vierzig Benachrichtigungen am Tag bekommt, schaltet sie alle ab.
Bids werden von mehreren Personen gleichzeitig geschrieben, und inzwischen auch von der KI. Echtzeit-Co-Editing, bei dem zwei Personen und ein Agent im selben Dokument arbeiten können, ohne sich gegenseitig zu überschreiben, ist ein gelöstes Problem in dem Sinn, dass die Techniken bekannt sind, und ein ungelöstes in dem Sinn, dass jedes Team, das es baut, Monate mit den Randfällen verbringt: Offline-Änderungen, sehr große Dokumente, ein Agent, der tausend Wörter in einen Abschnitt schreibt, den gerade jemand liest, und der Moment, in dem zwei Änderungen am selben Satz eintreffen. Bid-Teams stellen Dokumente außerdem in Word, Excel und PowerPoint fertig, und der Auftraggeber verlangt Office-Dateien; die Bearbeitung im Browser muss also Validierungen, Formatvorlagen und Formate erhalten, was in der Regel bedeutet, neben dem eigenen Editor einen Dokumentenserver für die Office-Bearbeitung im Browser zu betreiben.
Eine Versionshistorie wird erwartet. Reviewer wollen sehen, was sich seit ihrem letzten Durchgang geändert hat, und Bid-Manager wollen einen Abschnitt auf den Stand von gestern zurücksetzen, wenn eine späte Änderung schiefgeht. Der Bid selbst trägt Daten, die das Team verfolgen und filtern will, etwa Frist, Wert, Lose, Status, Verantwortlicher, Branche und Ergebnis, und jede Organisation will andere Felder. Feste Felder treiben Teams zurück zu einer Tabelle neben dem Tool. Die Führungsebene wird nach Zuschlagsquoten nach Anzahl und nach Wert der Bids fragen, nach dem Zeitaufwand je Bid und danach, welche Inhalte gewinnen; die Daten müssen also vom ersten Tag an erfasst werden, nachträglich lassen sie sich nicht rekonstruieren.
Die am meisten unterschätzten Nutzer sind die gelegentlichen. Fachexperten aus Technik, Recht, Finanzen oder HR öffnen ein Bid-Tool ein paar Mal im Jahr. Wenn die Beantwortung ihrer drei Fragen mühsamer ist, als in den allgemeinen KI-Chat zu tippen, den sie ohnehin nutzen, nehmen sie den, und das Bid-Team kopiert ihre Antworten von Hand hinein. Bauen Sie für den Fachexperten, der sich zweimal im Jahr anmeldet, nicht nur für das Bid-Team, das im Tool lebt.
Die Fragebögen des Auftraggebers lesen
An Fragebögen wird die meiste Bid-Software gemessen, weil sie die repetitivste Arbeit sind und sich am leichtesten messen lassen. Hier scheitern auch die meisten Abkürzungen, denn jeder Auftraggeber baut sein Formular anders, und Ihre Testdateien sind nie so seltsam wie die, die an einem Freitagnachmittag eintreffen. Planen Sie Excel, Word, PDF und PowerPoint ein, in jeder Sprache, in der Sie bieten.
Excel-Arbeitsmappen
Ein Fragebogen, der für einen Menschen wie ein einfaches Raster aussieht, ist im Inneren der Datei eine Sammlung von Konventionen, die sich je nach erzeugender Software und nach der Excel-Version unterscheiden, mit der die Datei zuletzt gespeichert wurde. Der Office-Open-XML-Standard beschreibt das Format; die Vorlagen der Auftraggeber schöpfen jeden Winkel davon aus.
Dropdown-Listen sind die erste Überraschung. Ein Dropdown, dessen Optionen auf einem anderen Tabellenblatt stehen, schreibt Excel ab Version 2010 in einen Erweiterungsblock der Datei, getrennt vom klassischen Validierungsblock, den die meisten Bibliotheken lesen. Ein Parser, der nur den klassischen Block prüft, findet bei vielen echten Fragebögen überhaupt keine Optionen. Auftraggeber legen Optionslisten außerdem gern auf ausgeblendeten Hilfsblättern hinter benannten Bereichen ab, und benannte Bereiche gibt es in mehr Formen, als man erwartet: einfache Wertelisten, ganze Spalten, Vereinigungen mehrerer Bereiche und Namen, die nur auf einem Blatt gelten. Eine als ganze Spalte definierte Liste umfasst mehr als eine Million Zellen. Liest man sie Zelle für Zelle, braucht eine einzige Arbeitsmappe Minuten oder bringt den Worker an seine Speichergrenze; der Scan muss also bei der letzten benutzten Zeile aufhören.
Herauszufinden, wohin die Antworten gehören, ist das zweite Problem. Auf einem geschützten Blatt ist das recht einfach, weil die Zellen, die der Auftraggeber ausgefüllt haben will, die nicht gesperrten sind. Die meisten Fragebögen sind aber nicht geschützt, und dann braucht es mehrere Signale zusammen: eine Validierung auf der Zelle, eine Überschrift, die „Antwort“ bedeutet, einen Rahmen, eine Füllfarbe, eine leere Zelle neben einer gefüllten. Keines davon ist allein verlässlich. Ein Blatt kann zudem mehrere übereinandergestapelte Tabellen enthalten, jede mit eigener Kopfzeile und Antwortspalte, und ein Parser, der nur die erste Kopfzeile findet, lässt ganze Blöcke unbeantwortet und meldet trotzdem Erfolg.
Überschriften stehen in der Sprache des Auftraggebers. „Response“, „Antwort“, „Commentaire du fournisseur“, „Odpowiedź“, „Svar“: Eine englische Liste von Überschriftswörtern macht aus einem französischen oder polnischen Raster ein Blatt ganz ohne Formular. Manche Überschriften erwähnen Antworten, ohne die Antwortspalte zu sein. „Hinweise zur Antwort“ beschreibt die Frage; „Erwartete Antwort“ kann die Musterantwort des Auftraggebers sein. Andere Überschriften tragen Regeln, die kein Dropdown durchsetzt. Eine Spalte mit der Überschrift „Compliance (FC/PC/NC)“ oder „Bewertung 1 bis 5“ erwartet einen Code, und ein Absatz Fließtext in dieser Spalte kann Sie die Punkte für die Zeile kosten.
Der Rest der Liste ist lang, und jeder Punkt darauf ist in einer echten Ausschreibung aufgetaucht:
- Über mehrere Spalten verbundene Banner erzeugen Phantom-Antwortfelder, während zwei verbundene Felder nebeneinander zwei Antworten zu einer verschmelzen können.
- Antworten in ausgeblendeten Zeilen oder Spalten sind für den Bewerter unsichtbar; die Software muss sich also weigern, sie dort einzutragen, und das melden.
- Zeilenreferenzen wie „1.10“ oder „3.2.1“ sehen für einen naiven Parser wie Abschnittsüberschriften aus, und er behandelt dann jede Zeile darunter als Teil einer Überschrift.
- Derselbe Fragetext erscheint auf mehreren Reitern mit unterschiedlichen erwarteten Antworten; Fragen müssen deshalb über Blatt und Zeile identifiziert werden, nie über ihren Wortlaut.
- Manche Arbeitsmappen blenden Fragen abhängig von früheren Antworten ein oder aus, über Formeln oder bedingte Formatierung, und manche werden länger, sobald die ersten Antworten eingetragen sind.
- Platzhaltertext wie „[Insert details]“ steht in der Antwortzelle und muss als leer erkannt werden.
- Spalten, die der Auftraggeber bereits gefüllt hat, etwa Gewichtungen oder Referenznummern, müssen schreibgeschützt bleiben.
- Dateien, die nicht von Excel erzeugt wurden, schreiben dieselben Strukturen mit anderen XML-Präfixen. Ein strikter Parser öffnet sie und findet null Tabellenblätter.
- Alte .xls-Dateien, makrofähige .xlsm-Dateien und CSV-Exporte kommen immer noch in Ausschreibungsunterlagen vor, und bei der Umwandlung in .xlsx können genau die Dropdowns verloren gehen, die Sie gebraucht hätten.
- Sehr große Blätter mit Zehntausenden Zeilen an Produkt- oder Preispositionen müssen gestreamt werden, statt die ganze Datei in den Speicher zu laden.
Bid-Teams beschreiben dasselbe aus ihrer Sicht: alte Arbeitsmappen, die auf seltsame Weise gesperrt sind, Dropdown-Werte, die sich von Zeile zu Zeile ändern, Zeichenbegrenzungen in geschützten Zellen und die Anweisung, das Blatt vor dem Zurücksenden wieder zu schützen.
Word-Formulare
Word-Formulare nehmen Eingaben auf mindestens vier Arten entgegen, und Auftraggeber mischen sie in einem Dokument. Ältere Formularfelder, also die Textfelder, Kontrollkästchen und Dropdowns aus früheren Word-Versionen, sind in Formularen der öffentlichen Hand und in deutschen und österreichischen Eigenerklärungen immer noch Standard. Neuere Formulare verwenden Inhaltssteuerelemente, darunter Kontrollkästchen, die überhaupt keinen gespeicherten Zustand haben, bis jemand sie ankreuzt. Viele Formulare verwenden stattdessen getippte Kästchensymbole, mal aus Symbolschriftarten wie Wingdings, mal als codierte Zeichen geschrieben. Und sehr viele sind einfach Tabellen mit einer leeren Spalte zum Ausfüllen.
Jede Art hat ihre Falle. Ein Kästchensymbol mitten im Satz („Zutreffendes bitte ankreuzen“) ist Text, während eine Reihe von Kästchen nach „ja“ und „nein“ eine Frage ist, und der Parser muss beides auseinanderhalten. Eine Antwort, die mit einem Häkchensymbol beginnt, kann für Ihren eigenen Parser ein neues Kontrollkästchen erzeugen und die Nummerierung aller späteren Felder verschieben, sodass die nächsten Antworten die falschen Kästchen ankreuzen. Nachverfolgte Änderungen verschachteln Formatierungen so, dass einfache Textextraktion scheitert. Textfelder werden doppelt gespeichert, einmal für das aktuelle Word und einmal als Fallback, und wer in die Kopie schreibt, die Word nicht anzeigt, hinterlässt ein scheinbar leeres Feld. Schmale Abstandsspalten in Tabellen lassen Antworten mit einem Zeichen pro Zeile umbrechen. Manche leeren Formulare kommen als .dotx-Vorlagen, die sich jedes Mal als neue, unbenannte Kopie öffnen. Manche Erklärungen verlangen, die nicht zutreffenden Aussagen durchzustreichen; Ihre Software muss also Durchstreichungen setzen können, nicht nur Text.
PDF-Formulare und Scans
PDFs gibt es in drei Arten, und Sie brauchen für jede einen eigenen Weg. Ausfüllbare Formulare sind der freundliche Fall, bis Sie auf ihre Schriftarten treffen: Die Standardschriftarten in PDF-Formularen decken nur einen begrenzten Zeichensatz ab, sodass ein Kleiner-gleich-Zeichen, ein polnischer Name oder ein typografisches Anführungszeichen das Speichern scheitern lassen oder zu Fragezeichen werden kann. Verschiedene Viewer zeichnen Kontrollkästchen außerdem anhand unterschiedlicher gespeicherter Werte, sodass ein Kästchen, das in einem Viewer angekreuzt aussieht, in einem anderen leer erscheint.
Flache Formulare sind häufiger, als Auftraggeber ahnen. Jemand hat das Formular als PDF gedruckt, und es sind keine Felder mehr übrig. Die Software muss die Kästchen, Linien und Tabellenzellen auf der Seite finden, herausfinden, welche zu welcher Frage gehören, und jede Antwort an der richtigen Position und in der richtigen Größe auf die Seite setzen, innerhalb des Kästchens. Scans sind noch flacher: Eine gescannte Seite hat überhaupt keinen Text, bis OCR ihr welchen gibt, und die OCR-Qualität schwankt von Seite zu Seite. Hinzu kommt, dass PDFs von Auftraggebern oft leicht fehlerhaft sind, erzeugt von alter oder ungewöhnlicher Software, und der Parser muss das tolerieren, statt am ganzen Dokument zu scheitern.
PowerPoint und andere Formate
PowerPoint kommt häufiger als Eingabe vor, als man denkt: Briefing-Präsentationen, Präsentationsvorlagen, die der Auftraggeber verwendet sehen will, und Anforderungstabellen, die in Folien eingefügt wurden. Für ausgeblendete Folien braucht es eine Entscheidung (lesen oder nicht), und Folien müssen einzeln gelesen werden, damit eine Quellenangabe auf Folie 14 verweisen kann statt auf „die Präsentation“. Auf PowerPoint als Ausgabeformat kommen wir später zurück; das ist ein viel größeres Thema.
Portale
Manche Fragebögen kommen nie als Datei. Beschaffungsplattformen wie SAP Ariba, Coupa oder Jaggaer erlauben oft, die Fragen nach Excel zu exportieren, offline zu beantworten und wieder zu importieren, oder jede Antwort Feld für Feld zurückzukopieren. Manche bieten keinen Export mehr an. Manche zeigen neue Fragen, während Sie die ersten beantworten, sodass aus zehn Fragen dreißig werden. Manche melden Sie nach kurzer Inaktivität ab, samt Ihren nicht gespeicherten Antworten. Legen Sie früh fest, welche Portale Sie unterstützen und wie: Export und Import, unterstütztes Kopieren und Einfügen oder manuelle Eingabe. Das ist eine Entscheidung über den Umfang mit echten Kosten, kein Detail für später.
Antworten zurückschreiben, ohne die Datei zu beschädigen
Auftraggeber erwarten ihre eigene Datei zurück, ausgefüllt und genau so aussehend, wie sie sie verschickt haben. Ein ordentliches neues Dokument in Ihrem Format ist nicht dasselbe, und manche Auftraggeber lehnen es rundweg ab. Hier verlieren interne Tools am häufigsten das Vertrauen des Bid-Teams, denn eine beschädigte Datei entdeckt meist der Auftraggeber, nicht Sie.
Die sicherste Regel, die wir gefunden haben: Bearbeiten Sie nur die Zellen, Felder und Absätze, die Antworten enthalten, und lassen Sie jedes andere Byte der Datei unangetastet. Die meisten Tabellenkalkulations-Bibliotheken machen das Gegenteil: Sie laden die ganze Arbeitsmappe in den Speicher und schreiben eine neue heraus, und unterwegs schreiben sie Tabellendefinitionen um, verwerfen Filter, ordnen Teile neu an oder verlieren den Erweiterungsblock, in dem die Dropdowns stehen. Excel öffnet die Datei dann mit einer Meldung, die eine Reparatur anbietet. Die Reparatur richtet echten Schaden an. Excel löscht, was es nicht lesen kann, manchmal ganze Zeilenblöcke, und meldet das in einem Dialog, den der Bewerter wegklickt. Prüfen Sie deshalb Zeilenzahlen und Struktur vor dem Speichern, weigern Sie sich, eine Datei zu speichern, die etwas verloren hat, und öffnen Sie das Ergebnis erneut, um zu bestätigen, dass jeder Wert dort gelandet ist, wo er hingehört. Eine visuelle Prüfung durch ein Modell ist dafür langsam und unzuverlässig. Die Datei erneut einzulesen kostet wenig und ist exakt.
Datentypen sind wichtig. Eine als Text geschriebene Punktzahl bricht die Formeln des Auftraggebers, und ein als Zahl geschriebener Produktcode verliert seine führenden Nullen. Eine einzelne Excel-Zelle fasst höchstens 32.767 Zeichen, und wer mehr hineinschreibt, beschädigt die Datei. Ein einziges unsichtbares Steuerzeichen, aus einem alten Dokument hineinkopiert, kann dafür sorgen, dass sich eine Arbeitsmappe nicht mehr öffnen lässt. Formeln, die von Ihren Antworten abhängen, zeigen weiter ihre alten zwischengespeicherten Ergebnisse, bis etwas sie neu berechnet; Summen können also falsch aussehen, wenn der Auftraggeber die Datei öffnet, es sei denn, Sie weisen Excel an, beim Öffnen neu zu berechnen. Blätter, die der Auftraggeber geschützt hat, müssen mit denselben Einstellungen wieder geschützt werden, bevor die Datei zurückgeht.
Antworten müssen genau zu den Optionen des Formulars passen. Schreibt das Modell „3,5 von 5“ und das Dropdown bietet ganze Zahlen an, darf die Software nicht eigenmächtig „3“ auswählen. Schreibt das Modell „No problem, yes we do“, darf die Software daraus nicht „No“ machen. Massenbefüllungen brauchen eine eigene Prüfung: Eine Befüllung kann einen einzigen zusammenfassenden Absatz in jede Zeile eines Blatts kopieren, zwei andere Reiter leer lassen und trotzdem Erfolg melden. Zählen Sie beantwortete, übersprungene und fehlgeschlagene Einträge je Reiter und sorgen Sie dafür, dass die Summe aufgeht.
Word hat eigene Varianten derselben Probleme. Wer auf die falsche Weise in einen leeren Absatz schreibt, erzeugt eine Datei, die Word für unlesbar erklärt. Eine Tabellenzelle mit mehreren Absätzen kann nach einer Konvertierung zu einer Zeile zusammenfallen, und diese Struktur ist dann endgültig verloren. Formatvorlagen verschieben sich nach ein paar Seiten eines generierten Dokuments, und nicht installierte Schriftarten verändern das Layout und die Seitenzahl, was zählt, wenn der Auftraggeber eine Seitenbegrenzung vorgibt. Auch Dateinamen verlangen Sorgfalt: Zeichen, die auf einem Betriebssystem unproblematisch sind, lassen einen Download auf einem anderen scheitern, und zwei exportierte Dateien mit demselben Namen überschreiben sich in einer ZIP-Datei gegenseitig.
Ein Bid-Berater erzählte uns, er habe den Hin- und Rückweg über Word ganz aufgegeben. Er entwirft in reinem Text und wendet am Ende eine formatierte Vorlage an, weil die Formatierung zu oft verloren ging. Das funktioniert für Dokumente, die Ihnen gehören. Für das Formular des Auftraggebers funktioniert es nicht.
Angebotsdokumente in Ihrer eigenen Vorlage
Die meisten Bids umfassen Dokumente, die der Auftraggeber nicht liefert: das technische Angebot, die Methodenbeschreibung, die Executive Summary, den Managementplan. Diese gehen in der eigenen Word-Vorlage Ihres Unternehmens hinaus, mit Ihren Formatvorlagen, Ihrem Deckblatt, Ihren Kopfzeilen und Ihrem Branding, und Bid-Teams sind sich einig, dass alles andere unfertig wirkt. Mehrere sagten uns, eine schlichte Word-Datei sei als finaler Entwurf nicht akzeptabel, so gut der Text auch sei. Ein gebrandetes Dokument zu erzeugen, das ein Designer abnehmen würde, ist eine der größeren Entwicklungsaufgaben auf dieser ganzen Liste, und eine, die Prototypen komplett auslassen.
Es gibt zwei Arten, eine Vorlage zu nutzen, und die Software muss wissen, welche der Nutzer meint. Die erste behandelt die Vorlage als Design-Referenz: Seitenformat, Ränder, Schriftarten, Überschriftenformate, Farben, Deckblatt und Fußzeile übernehmen und mit dem neuen Inhalt ein frisches Dokument aufbauen. Die zweite füllt die Vorlage so aus, wie sie ist: jede Seite behalten, den Platzhaltertext ersetzen, den Rest unangetastet lassen. „Nehmen Sie unsere Vorlage“ kann beides bedeuten, und die Software muss nachfragen oder vernünftig wählen, denn wer eine Vorlage so ausfüllt, wie sie ist, übernimmt alles, was darin steht, einschließlich alter Fließtexte, Kommentare und manchmal des Namens eines anderen Kunden.
Dieser letzte Punkt verdient eine eigene Regel. Eine Kopfzeile, in der „Angebot für“ steht, gefolgt vom Kunden des letzten Bids, auf jeder Seite wiederholt, ist genau die Art Fehler, die ein Auftraggeber sofort bemerkt. Text in Kopfzeile, Fußzeile und Deckblatt muss aus dem aktuellen Bid oder vom Nutzer stammen, nie aus dem, was zufällig in der Vorlage stand. Dasselbe gilt für Beispielbilder in Vorlagen, die oft Fotos aus der Fallstudie eines anderen Kunden sind.
Das Dateiformat von Word macht den Weg des Ausfüllens tückisch. Nummerierte Listen brauchen eigene Nummerierungsdefinitionen, sonst setzt jede Liste im Dokument die Nummerierung der ersten fort. Nachverfolgte Änderungen in einem Absatz, den Sie umschreiben, müssen behandelt und dürfen nicht verworfen werden. Abschnittsumbrüche tragen Seitenausrichtung und Kopfzeilen, und wer versehentlich einen löscht, verändert das Layout von allem, was danach kommt. Felder, Fußnoten, Kommentare und Symbolzeichen müssen jeweils ein Umschreiben überstehen. Eine Vorlage, die Text enthält, der wie Ihre eigene Platzhaltersyntax aussieht, kann ein naives Ausfüllprogramm in eine Endlosschleife schicken. Nichts davon zeigt sich bei einem einfachen Testdokument, und alles davon zeigt sich irgendwann bei einer echten Vorlage.
Bei Tabellen gehen generierte Dokumente am sichtbarsten schief. Eine Frage-Antwort-Tabelle in der Quelle muss in der Ausgabe eine Tabelle bleiben, mit denselben Spalten; lässt man ihm die Wahl, macht ein KI-Layoutschritt aus einer Tabelle manchmal untereinanderstehende Absätze, und ein KI-Reviewer akzeptiert das manchmal. Tabellen sprengen außerdem Seitenbegrenzungen, Größengrenzen und Layoutprüfungen auf eine Weise, wie Fließtext es nicht tut, weil eine Tabelle, die auf dem Bildschirm klein aussieht, viel Text enthalten kann.
Das Ergebnis zu prüfen erfordert eine gerenderte Ansicht. Ein Dokument kann gültiges XML sein und trotzdem falsch aussehen: eine Überschrift, die allein unten auf einer Seite hängt, eine Tabelle, die unlesbar über zwei Seiten geteilt ist, ein Bild, das über den Rand hinausragt. Das Layout zu prüfen heißt, gerenderte Seiten anzusehen, und jede automatische Reparatur sollte sich auf Abstände und Umbruch beschränken, nie auf den Inhalt. Unabhängig von jeder visuellen Prüfung muss die Ausgabe mit der Quelle verglichen werden, um zu bestätigen, dass Wortlaut, Reihenfolge, Beträge und Fußnoten erhalten geblieben sind, und ein Reparaturversuch, der die Dinge verschlimmert, darf nie eine bessere Version ersetzen. Lassen sich einzelne Passagen nicht platzieren, werden sie am Ende angehängt und gemeldet, denn ein Dokument, das behauptet, alles zu enthalten, und es nicht tut, ist schlimmer als eines, das sagt, was fehlt.
Seitenbegrenzungen verbinden all das mit den Regeln des Bids. Auftraggeber setzen Seitenbegrenzungen, manchmal je Abschnitt, und auch Schriftart, Zeilenabstand und Ränder können vorgeschrieben sein. Bid-Teams erzählten uns, dass Modelle schlecht darin sind, eine Seitenzahl zu treffen, also rechnen sie Seitenbegrenzungen in Wortzahlen um und hoffen. Die Software kann es besser, indem sie das gerenderte Dokument misst, und dafür müssen die Schriftarten der Vorlage überall dort installiert sein, wo gerendert wird. Eine andere Ersatzschriftart verändert die Zeilenumbrüche, und Zeilenumbrüche verändern die Seitenzahl.
Executive Summaries
Die Executive Summary ist der Abschnitt, den Entscheider lesen, oft zusammen mit dem Preis und den Referenzen und sonst nichts. Bid-Teams erzählten uns, sie soll beim Problem des Auftraggebers ansetzen statt bei der Geschichte des Bieters, die Win-Themes und die Ergebnisse der Qualifizierung aufgreifen und mit dem Rest des Angebots im Einklang bleiben. Sie erzählten uns auch, was schiefgeht. Um eine Executive Summary gebeten, schreiben allgemeine KI-Tools eine Lehrbucherklärung der Dienstleistung statt des eigenen Angebots des Unternehmens, und, schlimmer noch, sie liefern präzise Zahlen, die richtig klingen. Ein Team beschrieb einen Entwurf, der einen bestimmten Service Level ohne jede Quelle versprach und Leistungsziele nannte, zu denen sich das Unternehmen in Ausschreibungen bewusst nie verpflichtet. In einer Executive Summary lesen genau die Menschen diese Fehler, die entscheiden. Alles, was weiter oben über Grounding gesagt wurde, gilt hier umso mehr, und ebenso die eigene Bibliothek freigegebener Bausteine für Zusammenfassungen, die viele Teams bereits je Kundentyp führen.
Rechtliche Prüfung und Red Flags
Ausschreibungen enthalten einen Vertragsentwurf, und jemand muss ihn lesen. Rechtsabteilungen wollen die Bedingungen des Auftraggebers mit den eigenen Positionen des Unternehmens verglichen sehen: Haftungsobergrenzen, Freistellungen, geistiges Eigentum, Kündigung, Service Credits, Datenschutz, Versicherung, Zahlungsbedingungen. Sie wollen die Abweichungen markiert und eine kurze Liste von Showstoppern, früh genug, um sie als Bieterfragen einzubringen. Öffentliche Rahmenvereinbarungen können viele Anlagen umfassen, manche davon hundert Seiten lang, und jede muss gelesen werden.
Zwei Anforderungen machen das schwieriger als Zusammenfassen. Erstens unterscheidet sich, was als Red Flag gilt, von Unternehmen zu Unternehmen und ändert sich, während die Rechtsabteilung die Software korrigiert; die Definition muss also aus den Einträgen lernen, die sie bestätigt, und aus denen, die sie löscht. Zweitens wollen Rechtsabteilungen ihre Änderungen in einer Form, die sie kennen. In einem Gespräch lautete die Bitte, jede vorgeschlagene Vertragsänderung als nachverfolgte Änderung mit einem erläuternden Kommentar darzustellen. Nachverfolgte Änderungen korrekt in Word zu schreiben, durch Tabellen und Hyperlinks hindurch, ohne Überarbeitungen in Überarbeitungen zu verschachteln, ist Präzisionsarbeit.
In den Antworten selbst steckt ein leiseres rechtliches Risiko. Eine Antwort zu Sicherheit oder Compliance, die aus einem Richtliniendokument entworfen wurde, kann das Unternehmen auf eine Arbeitsweise verpflichten, die es gar nicht praktiziert. Dieses Risiko liegt beim Review-Workflow, aber die Software kann helfen, indem sie Antworten mit Zusagen, etwa zu Service Levels, Reaktionszeiten, Zertifizierungen und Garantien, für einen namentlich benannten Reviewer markiert.
Lebensläufe, Fallstudien und Referenzen
Viele Ausschreibungen verlangen Lebensläufe des vorgeschlagenen Teams, im Format des Auftraggebers oder in Ihrem eigenen, mit einer Seitenbegrenzung je Lebenslauf. Teams erzählten uns, dass sie nicht für jeden Bid einen Lebenslauf neu aufbauen können und den aktuellen wollen, gekürzt auf das, was dieser Auftraggeber verlangt, im richtigen Layout. Bei Fallstudien und Referenzen ist es ähnlich: Die Software muss die vergangenen Projekte finden, die am besten zu Branche, Größe, Region und Anforderungen dieses Auftraggebers passen, prüfen, ob die Referenz noch genannt werden darf, und sie in der geforderten Form darstellen. Beides setzt voraus, dass die Bibliothek strukturierte, aktuelle Datensätze enthält statt eines Ordners alter Word-Dateien, und das führt uns zurück zur Frage, wer für die Inhalte verantwortlich ist.
Preise und das kaufmännische Angebot
Das kaufmännische Angebot ist meist eine eigene Arbeitsmappe mit vielen Reitern, einem Leistungsverzeichnis oder einer Preisliste und Spezifikationen, die in einer anderen Anlage stehen. Qualität und Preis werden typischerweise getrennt gewichtet, und das kaufmännische Team arbeitet oft parallel zum Bid-Team an den Preisen. Das meiste davon bleibt beim kaufmännischen Team und dessen eigenen Tools, und das ist auch richtig so. Drei Dinge muss die Bid-Software trotzdem leisten. Sie muss das Preisblatt des Auftraggebers ausfüllen, ohne es zu beschädigen, also das Excel-Problem von oben mit mehr Formeln. Sie darf nie einen Preis aus einem alten Bid wiederverwenden, als wäre er aktuell; Preise in der Bibliothek müssen deshalb als indikativ oder freigegeben gekennzeichnet und datiert sein. Und Zahlen müssen unversehrt bleiben: Ein europäisches Tausendertrennzeichen, ein Währungssymbol an der falschen Stelle oder eine in Klammern geschriebene negative Zahl kann einen Betrag um den Faktor tausend verändern oder sein Vorzeichen umkehren, ohne dass es jemand merkt. Jeder dieser Fehler rutscht beim Testen leicht durch.
Präsentationen und PowerPoint-Folien
Bieter auf der Shortlist werden oft eingeladen, ihr Angebot vorzustellen, und viele Bids enthalten von Anfang an eine Präsentation: einen Lösungsüberblick, eine Managementpräsentation, eine Verteidigung des Angebots. Bid-Teams wollen, dass die Software die schriftliche Response in Folien in der eigenen PowerPoint-Vorlage des Unternehmens verwandelt, und nach unserer Erfahrung ist das die schwierigste Generierungsaufgabe auf der ganzen Liste.
Die einfache Version nimmt den Inhalt, lässt sich von einem Modell einen Titel und fünf Aufzählungspunkte pro Folie geben und setzt sie auf das Layout „Titel und Inhalt“ der Vorlage. In einer Demo läuft das. Bid-Teams, die es ausprobiert haben, nannten das Ergebnis unbrauchbar: Wände aus Aufzählungspunkten auf breiten Folien, nichts, was den Präsentationen ihrer Designer ähnelt. Sie kehrten dazu zurück, Präsentationen von Hand zu bauen, um ihr Branding zu wahren.
Warum es schwierig ist
Eine PowerPoint-Vorlage besteht aus einem Master, einer Reihe von Layouts und oft Dutzenden Beispielfolien, jede eine Seite positionierter Formen mit eigenen Schriftarten, Schriftgrößen, Farben und Textgrenzen. Das Modell sieht nichts davon, solange Sie es nicht beschreiben, und beschreiben Sie es schlecht, arbeitet es blind. Ordnen Sie Inhalte den Formen nach ihrer Position in einer Liste zu, und der Text eines Banners landet im Textfeld für den Fließtext. Geben Sie dem Modell keine Vorstellung davon, wie viel Text jede Form fasst, und es schreibt Absätze in Felder, die für eine Kennzahl aus drei Wörtern gedacht sind. Lassen Sie es Folie für Folie planen, und eine Vorlage mit Dutzenden sorgfältig gestalteter Folientypen erzeugt Präsentationen, die eine Handvoll davon nutzen, ohne Titel- oder Schlussfolie. Und wenn niemand die fertigen Folien ansieht, gehen leere Dekorelemente und interne Entwurfsnotizen mit hinaus.
Hin- und Rückwege über Online-Präsentationsdienste richten eigenen Schaden an: Schriftgrößen der Vorlage springen auf einen Standardwert zurück, sodass Text wächst und überläuft; native Diagramme werden zu Bildern plattgedrückt; Sonderzeichen werden doppelt maskiert; Tabellenrahmen behalten veraltete Größen. Wenn Sie planen, Präsentationen über Google Slides oder eine ähnliche API zu erzeugen, testen Sie zuerst einen Hin- und Rückweg mit Ihrer eigenen Vorlage.
Text passend machen
Ob Text passt, muss per Code gemessen werden, anhand der Geometrie jeder Form und der Schriftgröße, die tatsächlich für sie gilt, und die Schriftgröße ist überraschend schwer zu finden. Sie kann am Textlauf, am Absatz, an der Form, in einer Listenformatvorlage, im Layout oder im Master festgelegt sein und wird diese Kette hinunter vererbt. Wer die Vererbung falsch auflöst, liegt bei jedem Textbudget der Präsentation auf einen Schlag um denselben Faktor daneben.
Zeichen sind nicht die einzige Grenze. Siebzehn einzeilige Aufzählungspunkte können in das Zeichenbudget eines Felds passen, das Platz für elf Zeilen hat; auch die Zahl der Absätze und Zeilen braucht also eine Grenze. Felder ohne Zeilenumbruch schneiden ihren Text ab, statt ihn fließen zu lassen, und mehrspaltige Felder müssen Spalte für Spalte geprüft werden. Sprechblasen, Callouts und andere nicht rechteckige Formen fassen weniger Text, als ihr umgebendes Rechteck vermuten lässt. Passt der Inhalt dann immer noch nicht, ist der Ausweg eine begrenzte Verkleinerung der Schriftgröße, bei jedem Zusammensetzen der Folie neu berechnet, und nie ein Überlaufen auf die Folie.
Text zu kürzen, damit er passt, scheitert auf vorhersehbare Weise: Modelle kürzen ab. „Grenzüberschr. Koord.“ ist kürzer und unlesbar. Dem Kürzungsschritt muss gesagt werden, dass er nicht abkürzen darf, und unterhalb eines bestimmten Budgets funktioniert es besser, neu zu schreiben, als zu stutzen. Das umgekehrte Problem gibt es auch. Eine reich gestaltete Folie mit zu wenig Inhalt wirkt unfertig, und die Versuchung ist groß, sie mit erfundenem Text aufzufüllen. Jede Folie braucht einen Zielfüllgrad und die Regel, dass die Software nie mit Inhalten auffüllt, die nicht in der Quelle stehen.
Tabellen, Diagramme und Bilder
Tabellen auf Folien sind eine eigene Fehlerklasse. Neue Zeilen, die aus der Vorlage geklont werden, übernehmen die hohe Beispielzeile der Vorlage, und die Tabelle wandert unten über die Folie hinaus. Eine Vorlagentabelle mit weniger Spalten als der Inhalt verliert eine Spalte, und es ist immer die Spalte, auf die es ankommt, etwa die Honorare. Schmale Spalten brechen ein Wort über mehrere Zeilen um. Verbundene Zellen bringen den Abgleich zwischen Vorlage und Inhalt durcheinander. Das Zusammenlegen zweier dünner Folien zu einer kann eine Tabelle ganz verschwinden lassen; Zusammenlegungen mit Tabellen müssen deshalb abgelehnt werden, und jeder Tabellentext, der nicht in der Ausgabe ankommt, muss die Präsentation blockieren, statt nur eine Warnung zu erzeugen.
Diagramme, SmartArt-Grafiken und eingebettete Objekte sind für die Textextraktion unsichtbar. Werden sie nicht ausdrücklich modelliert, geht eine aus einer alten Präsentation übernommene Folie mit dem Diagramm der alten Präsentation hinaus. Zeitstrahl- und Gantt-Folien zeigen die andere Seite desselben Problems: Wenn das Modell einen Zeitstrahl neu beschriftet, bleiben die Balken, wo sie waren, weil ihre Positionen Koordinaten sind und kein Text. Die Lösung: Lassen Sie das Modell nie mit Koordinaten rechnen. Es bearbeitet den Inhalt, und Code zeichnet Balken, Kartenraster, Teamübersichten und Kennzahlenkacheln aus diesem Inhalt neu.
Vorlagen enthalten fest in Folien eingebaute Platzhalterbilder, „Foto hier einfügen“-Bilder, die keine Textprüfung sehen kann. Sie müssen bei der Analyse der Vorlage erkannt werden, damit sie ersetzt oder entfernt werden können. Bilder, die Sie hinzufügen, müssen ihre Proportionen behalten und in der Größe begrenzt sein, und ihre Quelle muss gegen die Berechtigungen des Nutzers geprüft werden.
Folien aus früheren Präsentationen wiederverwenden
Bid-Teams haben Jahre an guten Folien und wollen sie wiederverwenden, also wird die Wiederverwendung von Folien zu einem eigenen Subsystem. Frühere Präsentationen müssen in Folien zerlegt und Folie für Folie indexiert werden. Eine zur Wiederverwendung ausgewählte Folie muss mit Layout, Master, Design, Schriftarten und Medien in die neue Präsentation kopiert werden, neu skaliert, wenn die alte Präsentation 4:3 ist und die neue 16:9, und ihre Tabellenformatvorlagen müssen mitkommen. Master, die keine Folie mehr nutzt, sollten entfernt werden, sonst bläht sich die Datei mit jeder Wiederverwendung auf.
Eine wiederverwendete Folie trägt auch ihren alten Inhalt mit. Den Kundennamen im Titel zu ändern ist der einfache Teil; ein allgemeiner Umschreibeschritt lässt die meisten Beschriftungen eines Zeitstrahls aus dem alten Projekt stehen. Eine Folie gut anzupassen erfordert einen eigenen Schritt, der die gerenderte Folie liest, sich überlegt, was jedes Element bedeutet, und jedes Element anfasst. Sagt ein Nutzer „Nimm diese Folie“, muss jeder spätere Schritt diese Wahl respektieren, auch die Schleifen für Deduplizierung und automatische Reparatur, die sie sonst austauschen würden.
Die Präsentation prüfen
Eine Präsentation braucht zwei Arten von Prüfung, und sie fangen unterschiedliche Probleme ab. Die erste betrifft die Datei selbst. Vorschau-Renderer zeigen Dateien an, die PowerPoint auf dem Desktop nicht öffnet. Eine Präsentation kann in einer Vorschau perfekt aussehen und sich in PowerPoint trotzdem nicht öffnen lassen, wegen eines unsichtbaren Zeichens aus einer Quellpräsentation, eines nicht maskierten Schriftnamens, eines Bilds, das zweimal als „JPG“ und „jpg“ registriert ist, doppelter Form-IDs in einer kopierten Gruppe, eines kaputten internen Links oder eines Namespace-Präfixes, das PowerPoint nicht erwartet hat. Validieren Sie das Paket so streng, wie PowerPoint es tut.
Die zweite Prüfung ist visuell: die Folien rendern, sie begutachten, beheben, was sich automatisch beheben lässt, und den Rest melden. Zwei Regeln sind erwähnenswert. Folien, die sich nicht geändert haben, behalten ihr bisheriges Urteil, sonst widersprechen sich wiederholte Prüfungen. Und wenn der Rendering-Dienst hängt, wird die fertige Präsentation mit dem Hinweis ausgeliefert, dass sie nicht visuell geprüft wurde, statt verworfen zu werden.
Interne Notizen sind ein Leck, das typisch für Präsentationen ist. Entwurfsnotizen, „Annahmen siehe unten“, Erinnerungen, eine Zahl zu prüfen: In einem Dokument sind sie peinlich, auf einer Folie, die einem Auftraggeber gezeigt wird, noch schlimmer. Interne Notizen brauchen eine Möglichkeit, markiert und vor der Ausgabe entfernt zu werden, eine Prüfung auf selbstbezügliche Formulierungen und einen abschließenden Korrekturdurchgang über die ganze Präsentation. Sprechernotizen sind das nützliche Gegenstück: Details, die nicht auf eine Folie passen, kommen in die Notizen, sofern die Vorlage ein Notizenlayout hat, und Bearbeitungen dürfen sie nicht löschen.
Nutzer wollen eine Gliederung freigeben, bevor Folien gebaut werden, und eine einzelne Folie korrigieren, ohne die ganze Präsentation neu zu erzeugen. Eine ganze Präsentation neu zu erzeugen, um eine Folie zu ändern, dauert so lange, dass die Leute aufgeben; eine einzelne Folie zu korrigieren sollte Sekunden dauern. Dafür braucht es stabile Folien-IDs und die Weigerung, eine Korrektur anzuwenden, wenn der Nutzer die Präsentation seitdem umsortiert hat, damit nie die falsche Folie geändert wird. Die Dateien sind hier groß und aufwendig zu verarbeiten. Vorlagen kommen mit eingebetteten Videos und Hunderten Megabyte an Bildern; Video und Audio müssen also entfernt, Fotos herunterskaliert und Gesamtgrößen begrenzt werden, bevor die Verarbeitung beginnt. Nicht die Rechenleistung, sondern der Arbeitsspeicher begrenzt, wie viele Präsentationen ein Server gleichzeitig bauen kann.
Schließlich braucht ein Präsentationsgenerator eigene Evaluierungen: einen festen Satz von Vorlagen und Inhalten, automatische Prüfungen auf Passung, Überlauf und übrig gebliebenen Platzhaltertext und eine visuelle Bewertung mit einer Untergrenze je Folie, denn ein Durchschnittswert verdeckt die eine kaputte Folie, an die sich ein Auftraggeber erinnern wird. Jede neue Vorlage, die Ihnen begegnet, sollte zum Testfall werden, damit Verbesserungen für eine Vorlage keine andere kaputt machen.
Nach der Einreichung
Der Bid ist mit der Einreichung nicht vorbei, und die Aufgabe der Software auch nicht. Auftraggeber schicken Aufklärungsersuchen zu Ihrem Angebot, manchmal mit kurzer Frist, und die Antworten müssen mit dem übereinstimmen, was Sie eingereicht haben. Die eingereichte Version muss also eingefroren und auffindbar sein, getrennt von den Arbeitsentwürfen, die sich danach weiter verändert haben. Bieter auf der Shortlist präsentieren, und damit kommt die Präsentation zurück. Manche Vergabeverfahren enthalten eine Best-and-Final-Offer-Runde, die die Preise und Teile des Angebots wieder öffnet.
Dann kommt das Ergebnis, oft Monate später, und hier soll sich die Bibliothek eigentlich verbessern. Bid-Teams erzählten uns, sie wollen nur gut bewertete Antworten zurück in die Bibliothek bringen, mit dem Feedback des Auftraggebers an genau der Antwort, auf die es sich bezog. In der Praxis kommt Feedback als Schreiben oder in einem Debriefing-Gespräch, es ist über Postfächer verstreut, und Nachbetrachtungen sind selten. Erfasst die Software das Ergebnis, die Punktzahlen und das Feedback je Abschnitt und verknüpft sie mit den Antworten und den Inhalten, aus denen diese stammen, kann der nächste Bid Inhalte bevorzugen, die gewonnen haben. Wegen der Zeitspanne zwischen Einreichung und Zuschlag braucht sie außerdem einen Weg, eingereichte Antworten schon vor Bekanntwerden des Ergebnisses in die Bibliothek aufzunehmen, als unbewährt gekennzeichnet, und sie hochzustufen oder auszumustern, sobald das Ergebnis vorliegt.
Zuschlagsquoten, Zeitaufwand je Bid, welche Inhalte wiederverwendet werden und in welchen Abschnitten Punkte verloren gehen: Das sind die Berichte, nach denen die Führungsebene fragt, und es gibt sie nur, wenn die Daten unterwegs erfasst wurden.
Die Knowledge Base
Die Knowledge Base entscheidet über die Qualität jeder Antwort, jedes Qualifizierungsberichts und jeder Folie, und sie ist der Teil, der am ehesten veraltet. Hier bleiben interne Projekte auch am häufigsten stecken: Eine gute Suche wird gebaut, und für die Arbeit, sie aktuell, berechtigungskonform und vertrauenswürdig zu halten, wird nie jemand abgestellt.
Festlegen, was die KI lesen darf
Die erste Entscheidung ist keine technische. Jeden Intranet-Ordner an die KI anzubinden fühlt sich großzügig an, und es holt Entwürfe herein, überholte Richtlinien, die Preise anderer Kunden und die Version Ihrer Sicherheitsrichtlinie von 2014. Teams, die das ausprobiert haben, erzählten uns, dass sie am Ende stattdessen eine kuratierte Bibliothek wollten, mit einer klaren Regel, was hineinkommt und wer es freigibt, und daneben Lesezugriff auf die Arbeitsordner, in denen das aktuelle Material liegt. Beides hat seinen Platz, und die Software muss wissen, was was ist, denn eine Antwort aus einem freigegebenen Bibliothekseintrag und eine Antwort aus einem Entwurf, der in einem Projektordner gefunden wurde, verdienen unterschiedlich viel Vertrauen. Eine revisionssichere Antwortbibliothek aufbauen behandelt die inhaltliche Seite.
Dokumente aufnehmen
Jeder Konverter verliert etwas. Tabellenstruktur, Lesereihenfolge, Zeilen einer Excel-Tabelle, die Optionen eines Dropdowns, den Text in einem Diagramm. Messen Sie an Ihren eigenen Dokumenten, was Ihrer verliert, bevor Sie ihm vertrauen. Excel-Dateien sind der klassische Fall: In Text umgewandelt, können sie ohne jede Fehlermeldung Zeilen verlieren, weshalb man Zeilen am besten aus der Originaldatei liest.
OCR und Dokumentkonvertierung sind meist externe Dienste oder aufwendige Prozesse, die Sie selbst betreiben, und beide haben Grenzen. Eine Antwort „overloaded“ ist ein Grund zu warten und es erneut zu versuchen, keine fehlgeschlagene Datei. Interaktive Uploads brauchen eigene Kapazität, damit der Import von zehntausend archivierten Bids durch einen Kollegen nicht alle anderen stundenlang warten lässt, wenn sie einen zweiseitigen Nachtrag lesen wollen.
Bilder enthalten oft die Antwort: Architekturdiagramme, Zertifikate, Organigramme, Screenshots eines Produkts. Um durchsuchbar zu sein, brauchen sie echte Beschreibungen, erzeugt von einem Modell, das sich das Bild ansieht, und ein Dateiname ist keine Beschreibung. Dasselbe Logo auf jeder Seite jedes Dokuments muss einmal erkannt und danach übersprungen werden. Und wenn die Beschreibung fehlschlägt, muss die Verarbeitung der Datei trotzdem abgeschlossen werden, mit einem deutlichen Vermerk, dass ihre Bilder nicht beschrieben wurden.
Das Aufteilen von Dokumenten in durchsuchbare Stücke funktioniert am besten, wenn es der eigenen Struktur des Dokuments folgt: ein Stück je Folie, je Blatt, je Abschnitt, mit einer Kennzeichnung, woher es stammt, damit ein Suchergebnis „Blatt Security, Zeile 48“ sagen und eine Quellenangabe die richtige Stelle öffnen kann. Entfernen Sie vor der Indexierung die Formatierung, behalten Sie aber die Positionen im Original. Entfernen Sie auch Kopfzeilen, Fußzeilen, Wasserzeichen und Inhaltsverzeichnisse, sonst kommen sie als Suchergebnisse zurück und, schlimmer noch, als extrahierte Anforderungen.
Die Suche hängt von Embeddings ab, und Embeddings haben Versionen. Wenn Sie das Embedding-Modell wechseln, muss jedes Dokument neu eingebettet werden, und eine Bibliothek mit gemischten Versionen liefert schlechte Ergebnisse, bis das erledigt ist. Überspringen Sie Dokumente, deren Inhalt sich nicht geändert hat, denn Bearbeiter speichern oft, und Queues stellen Nachrichten doppelt zu; ohne diese Prüfung verdoppelt sich Ihre Embedding-Rechnung, ohne dass es jemand merkt. Ein Ausweichanbieter für Embeddings muss Vektoren im selben Raum erzeugen, sonst liefert die Suche Unsinn, sobald der Fallback greift.
Ein paar weitere Dinge müssen für die Pipeline gelten. Jede Datei erreicht einen Endzustand, abgeschlossen oder fehlgeschlagen mit Begründung, und keine hängt endlos in der Verarbeitung; Dateien, die doch hängen, melden Nutzer als Erstes und verzeihen sie als Letztes. Wer eine Datei löscht, löscht auch ihre Stücke und ihre Embeddings, denn gelöschte Inhalte, die noch durchsuchbar sind, sind ein Qualitätsproblem und ein Datenschutzproblem zugleich. Eine Datei mitten in der Verarbeitung zu verschieben oder zu löschen, bricht die Verarbeitung ab. Neue Fähigkeiten, etwa die Suche in Bildern oder Folien, gelten nur für neue Uploads, bis Sie die bestehende Bibliothek neu verarbeiten, und dieses Nachziehen ist ein Projekt für sich. Der erste Import jahrelanger früherer Bids dauert länger, als Login-Tokens gültig bleiben und das Netzwerk ohne Aussetzer läuft; Importe müssen also dort weitermachen, wo sie aufgehört haben.
Die richtige Textstelle finden
Beim Retrieval wird die Qualität der Antworten gewonnen oder verloren, und die meiste Arbeit steckt in den Details.
Fragen in Ausschreibungen sind lang und indirekt. Eine Frage wie „Beschreiben Sie Ihren Ansatz zur Sicherstellung der Dienstkontinuität im Fall eines schwerwiegenden Vorfalls in Ihrem primären Rechenzentrum, unter Bezugnahme auf die Standards, nach denen Sie zertifiziert sind“ liefert bessere Treffer, wenn sie in einige fokussierte Suchanfragen umgeschrieben wird. Schwache Treffer brauchen eine Schwelle: Eine nur vage verwandte Textstelle verleitet das Modell, sie zu einer Antwort zu dehnen, die sie nicht trägt. Manche Vektorindizes liefern weniger Ergebnisse als angefordert, ohne es mitzuteilen, und Filter, die erst nach dem Limit angewendet werden, können eine leere Seite liefern, obwohl weiter unten gute Treffer existieren.
Berechtigungen müssen im Moment des Retrievals angewendet werden. Hält der Index keine Zugriffsrechte, kann eine Frage eine Textstelle aus einem Dokument hervorholen, das der Nutzer nicht öffnen darf, und die KI zitiert sie bereitwillig. Prüfen Sie den Zugriff, wenn die Ergebnisse zurückkommen, verweigern Sie ihn, wenn die Prüfung fehlschlägt (fail closed), und machen Sie die Prüfung dann performant: Jeden Treffer einzeln zu prüfen, macht aus einem Massendurchlauf Tausende Berechtigungsabfragen. Dieselben Regeln müssen überall gelten, wo ein Dokument erscheinen kann: in Listen, in der Suche, bei Downloads, in Vorschauen, in KI-Antworten, in Bildbeschreibungen, die sich doppelte Dateien teilen, und in Chatverläufen, die ein Kollege teilt. Geteilte Beschreibungen und geteilte Verläufe sind die klassischen Lecks.
Aktualität
Wenn sich zwei Dokumente bei einem Zertifikat, einer Mitarbeiterzahl, einer Versicherungssumme oder einem Preis widersprechen, sollte das neuere gewinnen und das ältere markiert statt verwendet werden. Eine Antwort, die eine zehn Jahre alte Datei zitiert, kostet mehr Glaubwürdigkeit als eine fehlende Antwort. Durchgestrichener Text in einem Dokument bedeutet, dass eine Aussage zurückgezogen wurde, und er darf nicht als Zusage zurückkommen. Archivierte Inhalte sollten keine Plätze in den Suchergebnissen belegen, die aktuelle Inhalte brauchen.
Synchronisierte Ordner werfen eigene Fragen auf. Wenn sich eine Datei in SharePoint ändert, ersetzen Sie Ihre Kopie, behalten Sie beide oder führen Sie Versionen? Ersetzen verliert die Historie. Beide zu behalten erzeugt Beinahe-Duplikate, die die KI vermischt. Versionen zu führen braucht eine Regel, welche davon Fragen beantwortet. Wie auch immer Sie sich entscheiden, bewahren Sie die frühere Version irgendwo auf, bevor eine Synchronisierung sie überschreibt, denn früher oder später fragt jemand, was die Antwort letzten Monat gesagt hat.
Kundenspezifisches und vertrauliches Material braucht einen Zaun. Preise, die eigenen Daten eines Kunden und alles, was unter einer Geheimhaltungsvereinbarung geteilt wurde, dürfen nie im Bid für einen anderen Kunden auftauchen, so relevant es einer Suchmaschine auch erscheinen mag.
Wer sie aktuell hält
Software hält keine Bibliothek aktuell. Menschen tun das. Jeder Bibliothekseintrag braucht einen Verantwortlichen und ein Prüfdatum, und jemand braucht Zeit in seiner Woche, um auf die Erinnerungen zu reagieren. Teams, die zuvor mit Automatisierung gescheitert waren, nannten uns jedes Mal dieselbe Ursache: Niemand war für die Inhalte verantwortlich, die Antworten veralteten, und das Tool wurde für das verantwortlich gemacht, was es lieferte. Planen Sie die Inhaltsarbeit als Teil der Entwicklung ein, mit Namen und Stunden. Der Leitfaden zur RFP-Bibliothek zeigt, wie Sie sie strukturieren.
Antworten, für die Sie einstehen können
Eine Antwort in einem Bid ist eine Zusage, die Ihr Unternehmen unterschreibt. Die Kontrollen darum herum müssen deshalb im Code verankert sein, nicht nur in einem Prompt, denn ein Prompt, der sagt „Nichts erfinden“, hält ein Modell nicht davon ab, etwas Plausibles zu schreiben. Dieselben Kontrollen gelten für alles andere, was die KI für einen Bid schreibt: den Qualifizierungsbericht, die extrahierten Anforderungen, die Folien.
Grounding und Quellenangaben
Findet das Retrieval nichts Relevantes, lautet die richtige Antwort „Das konnten wir anhand Ihrer Dokumente nicht bestätigen“, mit einer Konfidenz von null, und nicht ein flüssiger Absatz aus dem Allgemeinwissen des Modells. Das klingt selbstverständlich. In der Praxis bedeutet es, dass die Software wissen muss, dass das Retrieval leer oder schwach zurückkam, und diese Tatsache an das Modell und an den Reviewer weitergeben muss, statt die Entscheidung dem Modell zu überlassen.
Modelle zitieren Dinge, die es nicht gibt. Sie zitieren eine Datei, die ihnen nie gezeigt wurde, eine Seitenzahl, die richtig klingt, oder ein Dokument, das sie in einem früheren Gesprächsschritt gelesen haben und nicht mehr vorliegen haben. Jede Quellenangabe sollte gegen das geprüft werden, was für diese Antwort tatsächlich abgerufen wurde, und erfundene sollten entfernt werden, bevor jemand sie sieht. Zitieren Sie die Textstellen, auf die sich die Antwort stützt, nicht alles, was abgerufen wurde, und zitieren Sie über eine stabile Datei-ID, damit Links auch nach dem Umbenennen eines Ordners funktionieren. Ein Detail, das leicht übersehen wird: Werden gespeicherte Unterhaltungen von ihren Zitiermarkierungen befreit, sieht das Modell seine eigenen früheren Antworten ohne Quellenangaben und hört nach und nach auf zu zitieren.
Manche Antworten dürfen nur aus einem festgelegten Satz von Quellen kommen, etwa dem freigegebenen Sicherheitspaket oder den Dokumenten der aktuellen Ausschreibung. Schränkt ein Nutzer die Quellen ein, müssen Lesezugriffe außerhalb davon mit einer Meldung scheitern, statt die Suche stillschweigend auszuweiten. Sicherheits- und Compliance-Teams wollen ihre freigegebenen Formulierungen oft wörtlich eingefügt haben, ohne dass das Modell sie umformuliert, und die Software braucht einen Weg dafür.
Antworten vom Typ „nicht gefunden“ verlangen eigene Sorgfalt. Eine Standardabsage, in einen Bid kopiert, wirkt nachlässig; besser ist eine kurze, für den Kunden geschriebene Aussage darüber, was abgedeckt ist und was nicht. Eine negative Aussage („Wir vergeben keinen Teil der Leistung an Unterauftragnehmer“) braucht Nachweise wie jede positive. Und die Sprache der Nachvollziehbarkeit muss aus dem Text für den Kunden herausbleiben. Formulierungen wie „auf Grundlage der bereitgestellten Dokumente“ oder „laut Knowledge Base“ landen in eingereichten Angeboten, wenn nichts sie aufhält. Erläuterungen gehören in ein eigenes Feld, das der Reviewer sieht und der Auftraggeber nicht.
Prüfen Sie auch Ihre eigenen Voreinstellungen. Eine plattformweite Anweisung, die hilfreich gemeint ist, etwa „Schreibe TBD, wenn du unsicher bist“, kann die eigenen Anweisungen der Nutzer übersteuern und Entwurfsnotizen in Angebote bringen. Was Reviewer bei einer nachvollziehbaren, KI-unterstützten Antwort sehen müssen geht ausführlicher auf die Dokumentation hinter jeder Antwort ein.
Review und Kontrolle
Reviewer müssen wissen, wo sie zuerst hinsehen sollen. Ein Konfidenzwert je Antwort, auf einer definierten Skala und mit der Begründung dahinter, leistet das, sofern die Skala jedes Mal dasselbe bedeutet. Schlägt die Generierung für eine Frage fehl, hinterlassen Sie eine sichtbare Markierung „Prüfung erforderlich“ statt einer leeren Zelle. Eine leere Zelle sieht aus wie eine Frage, die niemand bearbeitet hat, und in einem Blatt mit 400 Zeilen wird sie übersehen.
Ein erneuter KI-Durchlauf darf nie die Arbeit eines Menschen überschreiben. Ein Fachexperte korrigiert eine Antwort, eine Stunde später lässt jemand den Abschnitt erneut laufen, und die Korrektur ist weg: Nichts verspielt das Wohlwollen eines Fachexperten zuverlässiger. Die Software muss menschliche Änderungen erkennen, sie in Ruhe lassen und sagen, dass sie das getan hat.
Massendurchläufe müssen aufgehen. Nach einem Durchlauf über 500 Fragen müssen die Zahlen für beantwortet, Prüfung erforderlich, übersprungen und fehlgeschlagen zusammen die Zahl der gefundenen Fragen ergeben. Stilles Verschwinden ist der teuerste Fehler in einem großen Fragebogen, weil niemand nach einer Frage sucht, die nicht auf dem Bildschirm steht. Ein Agent, der Abschnitt 3 ausfüllen soll, darf nicht hilfsbereit die Abschnitte 1, 2 und 4 umschreiben und sollte nachfragen, bevor er über seinen Auftrag hinausgeht. Änderungen der KI an gemeinsam genutzten Dokumenten brauchen die Befugnis des Nutzers und eine Aufzeichnung, welcher Text von der KI stammt und wer ihn freigegeben hat, denn Reviewer, Rechtsabteilung und manchmal Auftraggeber werden danach fragen.
Begrenzungen, Tonalität und Sprachen
Wort- und Zeichenbegrenzungen werden am dargestellten Text gezählt, so wie Word oder das Portal des Auftraggebers zählen, nicht am Markup, das Ihr System speichert. Selbst eine kleine Differenz zwischen Ihrer Zählung und der von Word fällt bei einer harten Grenze ins Gewicht, und Auftraggeber weisen Antworten über der Grenze tatsächlich zurück; siehe ob ein Angebot wegen Überschreitung einer Wortbegrenzung ausgeschlossen werden kann. Eine Grenze einzuhalten, ohne die Antwort zu beschädigen, ist eine eigene Fähigkeit. Allgemeine Assistenten verfehlen exakte Zahlen, füllen mit Wiederholungen auf oder schneiden einen Satz in der Mitte ab. Ein Bid-Berater erzählte uns, dass die Antworten immer noch deutlich neben der Grenze lagen, nachdem er ein Modell auf seinen Schreibstil eingestimmt, es gebeten hatte, seine eigenen Wörter zu zählen, und es erst lang schreiben und dann kürzen ließ. Die Zählung muss im Code erfolgen, und das Modell schreibt um, bis der Code zustimmt.
Tonalitätsregeln kommen von mehreren Stellen: dem Stil des Unternehmens, einem Team oder einer Persona, dem Bid selbst, den Vorlieben des Nutzers. Sie brauchen eine klare Rangfolge, und wenn zwei Regeln sich widersprechen, sollte die Software nachfragen, statt eine davon auszuwählen. „Wir“ ist der Bieter, und Modelle verwechseln Bieter, Auftraggeber, Partner und den bisherigen Auftragnehmer, besonders in wiederverwendeten Inhalten, die für einen anderen Bid geschrieben wurden. Interne Dateinamen, Namen von Kollegen und Entwurfsnotizen finden gern ihren Weg in Kundendokumente, und Personas, denen interne Quellennamen mitgegeben wurden, haben diese auch schon wiederholt.
Manche Ausschreibungen kommen in mehreren Sprachen und müssen in einer beantwortet werden, die nicht immer die Sprache der Ausschreibung ist. Die Teams, mit denen wir sprechen, bieten auf Dänisch, Norwegisch, Finnisch, Niederländisch, Polnisch und Mandarin, nicht nur auf Englisch, Französisch und Deutsch. Extraktion, Suche und Entwurf müssen in jeder dieser Sprachen funktionieren, die Bibliothek muss sprachübergreifend durchsuchbar sein, und ein Glossar muss Produktnamen und Rechtsbegriffe von einer Sprache zur nächsten einheitlich halten. Maschinelle Übersetzungsdienste haben ihre eigenen Eigenheiten bei Formatierung und Platzhaltern, die behandelt werden müssen, bevor der Text in ein Dokument zurückgeht.
Agenten und lang laufende Aufgaben
Alles bisher Beschriebene, vom Shredding einer Ausschreibung bis zum Bau einer Präsentation, ist eine lange Aufgabe: viele Modellaufrufe, viele Tool-Aufrufe, Minuten an Arbeit, manchmal eine halbe Stunde. Das zuverlässig auszuführen ist ein anderes Problem, als eine Chatnachricht zu beantworten, und die meisten Bugs liegen im Raum zwischen beidem.
Was ein Agent darf
Ein KI-Agent, der die Bibliothek lesen, in Dokumente schreiben und einen Bid ändern kann, ist mächtig, und er braucht Grenzen, die im Code festgeschrieben sind: Änderungen nur mit Befugnis des Nutzers und Lesezugriffe nur auf die Quellen, die der Nutzer ausgewählt hat. Ohne diese Grenzen schreiben Agenten hilfsbereit benachbarte Abschnitte um, lesen Dokumente, auf die sie nicht verwiesen wurden, und folgen Anweisungen, die sie in einer Datei gefunden haben. Hintergrundinformationen, die Sie dem Modell geben, etwa das Unternehmensprofil oder die Persona, müssen als Konfiguration gekennzeichnet sein, sonst beginnt das Modell, sie zu quittieren, als wären sie eine Anfrage.
Tools brauchen enge, ausdrückliche Beschreibungen, wann sie zu verwenden sind und wann nicht; sonst kann eine Frage, die zufällig mit einer Zahl beginnt, an ein Rechen-Tool geleitet und dessen Fehlermeldung dem Nutzer als Antwort angezeigt werden. Tool-Fehler müssen für den Agenten behebbar sein, statt den Durchlauf zu beenden, und der Agent darf nie Erfolg für einen Schritt melden, der nichts bewirkt hat, etwa ein mit null Änderungen „ausgefülltes“ Dokument. Hinter jeder Erfolgsmeldung muss eine Zählung stehen: gefundene, erzeugte, übersprungene und fehlgeschlagene Einträge, die zusammen aufgehen.
Pläne, Workflows und Übergaben
Bid-Teams wollen wiederholbare Abläufe: für jede neue Ausschreibung zusammenfassen, Anforderungen extrahieren, Qualifizierung durchführen, Bieterfragen entwerfen. Nur als Prompt geschrieben, ist ein solcher Ablauf unzuverlässig; Modelle lassen Schritte weg und ändern ihre Reihenfolge, also müssen die Schritte außerhalb des Modells erzwungen werden. Workflows sollten bis zum Ende laufen und nur aus einem echten Grund anhalten: für eine Entscheidung, die nur der Nutzer treffen kann, vor einem Überschreiben oder Löschen oder bei einem Schritt, der trotz bestem Versuch gescheitert ist.
Spezialisierte Agenten, etwa einer für Präsentationen und einer für Tabellen, brauchen saubere Übergaben: Der übergeordnete Agent übergibt eine Aufgabe und einen Umfang, der spezialisierte Agent liefert ein Ergebnis zurück, und keiner setzt den Kontext des anderen voraus. Sub-Agenten brauchen ein gemeinsames Budget für Schritte, Tokens und Daten, sonst kann einer von ihnen den ganzen Durchlauf aufbrauchen.
Anhalten, Abstürze und Fortsetzen
Der Abbruch steckt voller Fallen. Wenn ein Nutzer auf Stopp klickt, muss jeder Server anhalten, der einen Teil dieses Durchlaufs ausführt, nicht nur der, bei dem der Klick ankam, sonst arbeitet ein Agent weiter und verursacht Kosten, lange nachdem der Nutzer aufgegeben hat. Arbeit, die innerhalb eines Durchlaufs parallel läuft, muss ebenfalls auf das Stoppsignal hören, sonst plant sie nach dem Abbruch weiter neue Schritte ein. Eine Frist und ein Abbruch durch den Nutzer sind verschiedene Ereignisse und brauchen unterschiedliche Behandlung: Ein Timeout sollte die fertige Arbeit ausliefern, statt sie wegzuwerfen. Selbst die eigenen Bibliotheken der Modellanbieter hatten schon Bugs beim Abbruch; testen Sie ihn also.
Lange Unterhaltungen sprengen das Kontextfenster des Modells, also müssen ältere Teile zusammengefasst werden; das nennt man Compaction. Auch der Zusammenfassungsschritt hat eine Größengrenze, und wenn er überläuft, scheitert jede spätere Nachricht in dieser Unterhaltung auf dieselbe Weise. Schritte eines laufenden Workflows müssen die Compaction überstehen. Gesprächsschritte müssen dauerhaft gespeichert werden, damit ein Absturz mitten in einem Gesprächsschritt behoben oder wiederholt werden kann. Ein Gesprächsschritt, der nicht wiederholt werden darf, weil er bereits etwas versendet hat oder auf eine menschliche Entscheidung wartet, muss stattdessen geparkt werden.
Lange Aufgaben sollten nicht innerhalb der Web-Anfrage laufen, die sie gestartet hat. Ein Deployment oder ein Absturz wegen Speichermangels auf dem Webserver beendet sonst jeden laufenden Durchlauf. Legen Sie sie in einen Worker mit einer Queue, einem Heartbeat und einer Möglichkeit für den Bildschirm des Nutzers, sich nach einem Neuladen der Seite wieder mit dem Fortschritt der Aufgabe zu verbinden.
KI im Produktivbetrieb
Die Modelle unter Ihrem Tool ändern sich mehrmals im Jahr, und jede Änderung kann über Nacht Antwortlänge, Tonalität, Zitiergewohnheiten und Verweigerungen verändern. Bid-Teams merken das. In Gesprächen dieses Jahres hörten wir von Antworten, die nach einem Modellwechsel generischer wurden, von Prompts für Anforderungen und Bid-Strategie, deren Ergebnisse weit stärker schwankten, und von Nutzern, die fragten, ob die Antworten drei Wochen zuvor besser gewesen seien. KI im Produktivbetrieb zu betreiben ist eine dauerhafte Aufgabe, getrennt von der Entwicklung neuer Funktionen, und sie braucht einen Verantwortlichen.
Anbieter, Regionen und Verträge
Prüfer in Großunternehmen fragen, welcher Modellanbieter die Daten verarbeitet, in welcher Region, unter welchem Vertrag und ob der Anbieter etwas speichert oder damit trainiert. Die Antwort kann je Geschäftsbereich oder Kunde unterschiedlich ausfallen: Ein Bereich braucht vielleicht eine Datenverarbeitung ausschließlich in der EU, ein anderer hat einen Vertrag mit einem bestimmten Cloud-Anbieter. Einen zweiten Anbieter in ein System einzubauen, das für einen einzigen gebaut wurde, dauert länger, als irgendwer einplant. Modellnamen, Parameter, Grenzen, Fehlercodes und Streaming-Formate unterscheiden sich alle, und die Konfiguration driftet gern zwischen den Diensten auseinander, die die Modelle aufrufen. Leiten Sie jeden Aufruf über eine einzige Stelle im Code, damit Anbieter, Modell, Region und Grenzen nur einmal festgelegt werden.
Derselbe Anbieter kann sich über unterschiedliche Schnittstellen unterschiedlich verhalten, etwa weniger schlussfolgern oder weniger suchen, wenn Tools angebunden sind, und die Dokumentation sagt das nicht immer. Nur Messungen an Ihrem eigenen Evaluierungsset zeigen es Ihnen.
Modellwechsel und Abkündigungen
Führen Sie ein neues Modell zuerst für eine Gruppe von Nutzern ein, vergleichen Sie seine Ausgaben auf Ihrem eigenen Evaluierungsset mit denen des aktuellen Modells und behalten Sie einen Weg zurück zu dem Modell, das Sie kennen. Verfolgen Sie das Abkündigungsdatum jedes Modells, von dem Sie abhängen. Abgekündigte Modelle funktionieren ab einem Datum, das der Anbieter festlegt, nicht mehr, und der Nachfolger verhält sich selten identisch. Neue Modelle kommen außerdem, bevor Ihre Bibliotheken sie kennen, und Einstellungen wie der Reasoning-Aufwand können ohne Fehlermeldung ignoriert werden. Günstigere Modelle reichen für leichte Aufgaben wie Titel und kurze Klassifizierungen, und diese Arbeit dorthin zu verlagern, ist eine der einfacheren Kosteneinsparungen.
Tokens, Kontext und Kosten
Grobe Token-Schätzungen auf Basis der Zeichenzahl unterschätzen chinesischen, japanischen und koreanischen Text erheblich, und ein großes PDF kann ein Vielfaches des Kontextfensters eines Modells umfassen. Lesezugriffe brauchen Paging, lange Unterhaltungen brauchen Compaction, und alte Tool-Ergebnisse in einer Unterhaltung lassen sich durch kurze Platzhalter ersetzen, sobald sie nicht mehr gebraucht werden. Prompt Caching verändert das Kostenbild erheblich, und es hängt von der Reihenfolge dessen ab, was Sie senden: Inhalte, die sich bei jedem Aufruf ändern und früh im Prompt stehen, machen den Cache für alles danach ungültig.
Das Volumen muss ausdrücklich gesteuert werden. Eine Arbeitsmappe mit 500 Fragen lässt sich nicht auf einmal senden, ohne an Rate Limits zu stoßen, und Frage für Frage beantwortet dauert sie Stunden. Sie braucht begrenzte Parallelität, ein Timeout je Eintrag, eine Abbruchprüfung zwischen den Einträgen und Wiederholungen für die Batches, die mit fehlenden oder doppelten Zeilen zurückkommen, denn schon eine kleine Fehlerquote je Batch lässt die meisten großen Blätter scheitern. Manche Prüfungen wachsen stärker als die Dokumente: Jede Anforderung gegen ein ganzes Angebot zu prüfen, kostet ungefähr die Zahl der Anforderungen mal die Länge des Angebots, was Batching und eine Grenze erfordert.
Erfassen Sie die Modellkosten je Vorgang, je Nutzer, je Bid und je Geschäftsbereich, vom ersten Tag an. Interessenten fragten uns, was eine einzelne Ausschreibungsanalyse kostet, ob ihnen mitten im Bid die Credits ausgehen könnten und wie sie die Kosten an die Geschäftsbereiche weiterverrechnen können, die das Tool nutzen. Ohne Zuordnung können Sie das nicht beantworten, nicht budgetieren und nicht den außer Kontrolle geratenen Job erkennen, der an einem Wochenende ein Monatsbudget verbraucht. Die Zuordnung muss getestet werden wie alles andere, denn eine vertauschte Kennung oder eine einzige hängende Abfrage kann die Kostenerfassung für alle stoppen.
Wiederholungsversuche bei kostenpflichtigen Diensten verlangen Sorgfalt. Klassifizieren Sie einen Fehler nach seinem Typ, nicht nach dem Text der Meldung, und beurteilen Sie einen wiederholten Aufruf nach seinem letzten Versuch, nicht nach dem ersten, sonst wird ein dauerhafter Fehler, der auf ein Rate Limit folgte, wiederholt, als wäre er vorübergehend. Manche Dienste rechnen bei einem Schritt ab, den man nicht erwarten würde, etwa beim Herunterladen eines übersetzten Dokuments statt beim Hochladen des Originals, und Wiederholungen müssen darauf ausgelegt sein.
Evaluierung
Jede Änderung an Prompt, Modell oder Retrieval muss an einem festen Satz echter Fragen mit bekannten guten Antworten getestet werden, bevor sie bei Nutzern ankommt. Spielen Sie Fehler aus dem Produktivbetrieb als neue Testfälle nach. Halten Sie die Einstellungen und Feature Flags fest, die ein Evaluierungslauf verwendet; eine fehlende Einstellung kann während des Tests eine Funktion einschalten und das Ergebnis bedeutungslos machen.
Manche Ausgaben sind schwer zu bewerten. Bei der Abdeckung von Anforderungen bedeutet ein Wert nichts, solange Sie nicht genau definieren, was eine Anforderung ist: atomar, explizit, als abgedeckt oder nicht abgedeckt bewertet, wobei Muss- und Soll-Anforderungen des Auftraggebers getrennt ausgewiesen werden. Die Liste der Anforderungen muss mit dem Testfall eingefroren werden, sonst ändert ein erneuter Extraktionslauf den Nenner, und alte Werte sind nicht mehr vergleichbar. Wenn ein Modell die Antworten bewertet, muss seine Bewertung zuerst mit menschlichem Urteil abgeglichen und mehrfach ausgeführt werden, um zu sehen, wie stark sie schwankt. Selbst dann zeigt die Abdeckung nur, dass eine Antwort existiert; auch eine vage Antwort deckt eine Anforderung ab. Präsentationen und Dokumente brauchen zusätzlich eine visuelle Bewertung. Evaluierungen an echten Dokumenten kosten Geld und Zeit; planen Sie dafür ein Budget ein, sonst bemerken Nutzer Regressionen zuerst.
Auch Logs gehören zur KI-Schicht. Prompts und Antworten enthalten die Ausschreibung und Ihr eigenes vertrauliches Material; halten Sie sie also aus allgemeinen Logs, Fehlertrackern und Abrechnungsdaten heraus. Logs werden an mehr Orte kopiert und länger aufbewahrt als die Daten selbst.
Jede Ausschreibung ist eine nicht vertrauenswürdige Datei
Alle Ausschreibungsunterlagen kommen von außerhalb Ihrer Organisation, und Ihre Software öffnet sie automatisch, oft bevor ein Mensch sie angesehen hat. Damit wird die Dateiverarbeitung zu einer Angriffsfläche und nicht nur zu einem Parsing-Problem.
Office-Dateien sind ZIP-Archive, und ein kleiner Upload kann sich auf viele Gigabyte entpacken. Prüfen Sie die Größen während des Entpackens, ohne den Größenangaben zu trauen, die das Archiv über sich selbst macht, sonst legt eine einzige Datei einen Worker lahm und alles, was dahinter in der Queue wartet. Manche Dateien sind auf andere Weise teuer: eine Arbeitsmappe voller verschachtelter Formeln, eine PDF-Seite aus Zehntausenden winziger Linien, ein Bild mit absurden Abmessungen. Begrenzen Sie die Formelauswertung, die Seitenzahl, die Parsing-Zeit und die Geometrieberechnung, und lassen Sie das Parsing an einem Ort laufen, an dem ein Absturz nichts anderes mitreißen kann.
Parser haben Schwachstellen. PDF.js, der PDF-Viewer in Firefox und in vielen Webanwendungen, hatte CVE-2024-4367, über die ein präpariertes PDF beim Öffnen Code ausführen konnte. Bildbibliotheken, XML-Parser und Office-Konverter haben eine ähnliche Vorgeschichte. Halten Sie sie gepatcht, konfigurieren Sie sie so, dass sie externe Referenzen ablehnen, und betreiben Sie Konverter ohne Netzwerkzugriff, den sie nicht brauchen. Scannen Sie jeden Upload auf Malware, bevor irgendeine Verarbeitung beginnt, und zeigen Sie Nutzern für eine Datei in Quarantäne einen klaren Status, statt sie einfach nie erscheinen zu lassen.
Dann ist da Prompt Injection. Eine Ausschreibung oder ein Dokument in Ihrer eigenen Bibliothek kann Text enthalten, der geschrieben wurde, um das Verhalten des Modells zu ändern: eine in weißer Schrift versteckte Anweisung, eine Zeile in einer Fußnote, eine Zelle in einer ausgeblendeten Spalte. OWASP führt Prompt Injection als erstes Risiko für Anwendungen auf Basis großer Sprachmodelle, und Bid-Software liest mehr Dokumente Dritter als die meisten. Behandeln Sie Dokumentinhalte als Daten und nie als Anweisungen, halten Sie die Tools des Modells eng, und hindern Sie die KI daran, Teile einer Office-Datei zu bearbeiten, die sie nichts angehen, etwa Logos, Hyperlinks, eingebettete Objekte und das Design. Eingefügter Text, der zufällig wie einer Ihrer eigenen Befehle aussieht, sollte diesen nicht auslösen.
Eine Folge wird leicht übersehen. Testet ein Kollege Prompt Injection gegen Ihr Tool, oder erledigt das ein feindseliges Dokument für ihn, sieht der Modellanbieter Missbrauch, der von Ihrem Konto ausgeht. Ohne eine Kennung je Nutzer oder Team bei jedem Aufruf bleibt dem Anbieter nur, das ganze Konto zu sperren, und jedes Bid-Team verliert am selben Nachmittag seine KI.
Die Infrastruktur darunter
Ein Prototyp läuft als eine Webanwendung, die ein Modell aufruft. Eine Bid-Plattform, die alles oben Beschriebene leistet, läuft als eine Reihe von Diensten mit sehr unterschiedlichen Anforderungen, und die Infrastrukturentscheidungen der ersten Monate lassen sich später am schwersten ändern. Dieser Abschnitt beschreibt die Grundform, damit der Business Case sie berücksichtigt.
Die Komponenten, die Sie betreiben werden
Planen Sie mindestens Folgendes ein:
- eine Webanwendung und API für die Oberflächen, in denen Nutzer arbeiten;
- Worker, die Dokumente verarbeiten: Entpacken, Scannen, Konvertierung, OCR, Aufteilen, Bildbeschreibung, Embedding;
- Worker, die lange KI-Aufgaben ausführen: Hunderte Fragen beantworten, Extraktion, Abdeckungsprüfungen, Erzeugung von Dokumenten und Präsentationen;
- einen Echtzeitdienst für Co-Editing und Live-Fortschritt, der offene Verbindungen zu jedem aktiven Nutzer hält;
- einen Dokumentenserver für die Bearbeitung von Office-Dateien im Browser, falls Sie das anbieten;
- Queues zwischen all diesen Komponenten, mit Dead-Letter-Queues für Nachrichten, die immer wieder scheitern;
- eine relationale Datenbank für die Daten der Anwendung und einen Vektorindex für die Suche, ob in derselben Datenbank oder getrennt;
- eine Suchmaschine für die Stichwortsuche, falls Sie sie neben der Vektorsuche brauchen;
- Objektspeicher für die Dateien selbst, mit Versionierung;
- Scheduler für alles, was nach Zeitplan passiert: SharePoint synchronisieren, Erinnerungen senden, hängende Jobs aufräumen, Aufbewahrungsregeln anwenden;
- und die externen Dienste: Modellanbieter, OCR, Übersetzung, Malware-Scan, Identität, E-Mail.
Jede dieser Komponenten hat ihr eigenes Skalierungsverhalten, eigene Fehlerbilder, eigenes Monitoring und eigene Kosten. Mehrere laufen ständig, ob gerade jemand bietet oder nicht. Manche sind schwergewichtig: Ein Dokumentenserver für die Bearbeitung im Browser kann mehr Arbeitsspeicher brauchen als der Rest Ihrer Anwendung zusammen.
Schwere Arbeit von interaktiver Arbeit trennen
Die nützlichste frühe Entscheidung ist, langsame, schwere Arbeit von den Prozessen fernzuhalten, die Nutzer bedienen. Dokumentkonvertierung, OCR und KI-Aufgaben können Minuten dauern und viel Arbeitsspeicher belegen. Laufen sie im Webserver, verlangsamt eine große Ausschreibung die Bildschirme aller Nutzer, und ein Absturz beendet jede Nutzersitzung und jeden laufenden Job.
Innerhalb der Worker trennen Sie noch einmal. Der Massenimport von zehntausend archivierten Dateien durch einen Kollegen sollte nicht alle anderen stundenlang auf die Verarbeitung eines zweiseitigen Nachtrags warten lassen; interaktive Arbeit braucht also Kapazität, die Massenarbeit ihr nicht wegnehmen kann. Schwere Job-Typen brauchen dieselbe Behandlung untereinander, sonst blockieren lange Aufgaben, die Minuten dauern, kurze Exporte, die Sekunden dauern.
Langsame externe Aufrufe verdienen ein eigenes Muster. Eine Konvertierung, die mehrere Minuten dauert, sollte während des Wartens keinen Worker-Slot belegen. Reichen Sie sie ein, legen Sie eine Nachricht zur späteren Prüfung in eine verzögerte Queue und geben Sie den Slot frei. Andernfalls belegt eine Handvoll großer Arbeitsmappen jeden Slot, und alles dahinter wartet.
Dokumentverarbeitung ist ein Speicherproblem
Das Parsen von Office-Dateien und PDFs braucht weit mehr Arbeitsspeicher, als die Dateigrößen vermuten lassen. Eine komprimierte Arbeitsmappe von wenigen Megabyte kann sich auf Hunderte Megabyte XML ausdehnen. Ein langes PDF, das in ein internes Format konvertiert wird, kann kurzzeitig ein Vielfaches des Arbeitsspeichers des verarbeitenden Workers brauchen, und der Worker wird mittendrin beendet, bei jedem Wiederholungsversuch aufs Neue. Bibliotheken, die ein Objekt je Seite oder je Block bis zum Ende einer Schleife am Leben halten, sind eine häufige Ursache. Ebenso Office-Konverter, die bei jeder Anfrage neu gestartet werden; unter paralleler Last bringen sie die Maschine an ihre Speichergrenze.
Planen Sie Grenzen für alles ein: Upload-Größe, entpackte Größe, Seitenzahl, Anzahl der Folien, Bildabmessungen, Zeit je Datei. Betreiben Sie Konverter als separate Prozesse, die Sie beenden können, mit eigenen temporären Verzeichnissen, und beenden Sie die ganze Prozessgruppe, wenn ein Nutzer abbricht, sonst läuft der Konverter bis zu seinem Timeout weiter, obwohl niemand mehr das Ergebnis will. Bildbibliotheken kommen mit Voreinstellungen für den Desktop-Einsatz, etwa großen Caches und vielen Threads, die auf einem Server heruntergeregelt werden müssen.
Externe Konvertierungs- und OCR-Dienste scheitern auf Weisen, die man nicht erraten würde. Ein Dienst kann einen Job gleichzeitig als abgeschlossen und als fehlgeschlagen melden, in zwei verschiedenen Feldern, und Code, der nur eines davon liest, speichert leere Dokumente als verarbeitet. Rate Limits können als HTTP-Fehler ankommen oder als normal aussehendes Ergebnis. Lesen Sie jedes Feld, das ein Dienst zurückgibt, und testen Sie die Fehlerpfade gezielt.
Die Datenschicht
Bid-Plattformen legen viel in die Datenbank: die Bids, die Metadaten der Dokumente, die extrahierten Einträge, die Antworten und ihre Versionen, die Berechtigungen, das Audit-Log, die Jobs und oft auch die Suchvektoren. Es liegt nahe, alles in einer Datenbank zu halten, und lange funktioniert das auch. Dann kann eine Datenbank, die sowohl die Anwendung als auch die Vektorsuche bedient, allmählich statt plötzlich nachlassen. Das Working Set wächst über den Arbeitsspeicher hinaus, Lesezugriffe gehen auf die Festplatte, der Festplatte geht die Burst-Kapazität aus, Wartungsarbeiten im Hintergrund an der größten Tabelle konkurrieren mit den Nutzern, und eine teure Count-Abfrage bringt das Ganze zum Kippen. Das passiert über Wochen, und wenn der einzige Alarm am freien Speicherplatz hängt, sieht es niemand kommen. Überwachen Sie von Anfang an Leselatenz, Arbeitsspeicher, Tiefe der Festplatten-Queue und die langsamsten Abfragen, und leiten Sie das Slow-Query-Log an einen Ort weiter, an dem Sie es tatsächlich lesen können.
Vektorindizes haben ihr eigenes Betriebsleben. Der Aufbau eines Index auf einer großen Tabelle kann Schreibzugriffe sperren, er muss also nebenläufig aufgebaut werden, was nicht innerhalb einer Transaktion laufen kann und bei einer Unterbrechung einen ungültigen Index zurücklassen kann. Spätere Migrationen überspringen ihn dann, weil ein Index mit diesem Namen existiert. Gefilterte Suchen können weniger Ergebnisse liefern als angefordert, solange die Suchparameter des Index nicht erhöht werden. Wer ändert, wie Text aufgeteilt und gespeichert wird, und das werden Sie mit wachsender Erfahrung wollen, braucht einen Plan in Phasen: gleichzeitig in die alte und die neue Tabelle schreiben, das Lesen Kunde für Kunde umstellen und die alte Tabelle behalten, bis Sie sicher sind.
Verbindungen sind die nächste Einschränkung. Jeder Dienst, jeder Worker und jede zeitgesteuerte Funktion hält Datenbankverbindungen, und die Datenbank hat ein Limit. Ein Connection Pooler hilft und bringt eigene Einschränkungen mit, etwa Einstellungen, die er beim Verbindungsaufbau ablehnt. Leerlaufende Verbindungen, die der Pooler schließt, können die Anwendung zum Absturz bringen, wenn der Pool nicht damit rechnet. Die Standard-Wartezeit auf eine freie Verbindung ist in vielen Bibliotheken unendlich. Eine Funktion, die eine zweite Verbindung anfordert, während sie eine hält, kann einen kleinen Pool in einen Deadlock bringen.
Dateien liegen im Objektspeicher, und die Wege zwischen Ihren Diensten und dem Speicher brauchen Timeouts. Ein Lesezugriff auf den Speicher, der nie zurückkehrt, während er eine Sperre hält, kann alles einfrieren, was auf diese Sperre wartet. Manche Laufzeitumgebungen ignorieren die Timeout-Einstellungen der Bibliotheken des Cloud-Anbieters selbst, und so etwas findet man erst im Produktivbetrieb heraus.
Echtzeit und Co-Editing
Live-Co-Editing und Live-Fortschritt brauchen einen Dienst, der eine Verbindung zu jedem aktiven Nutzer hält und gemeinsam genutzte Dokumente im Arbeitsspeicher vorhält. Um das auf mehrere Server zu verteilen, brauchen diese eine Möglichkeit, Zustand zu teilen, und viele Teams beginnen mit einem Server und planen, die übrigen später hinzuzufügen. So oder so trennt ein Absturz oder ein Deployment alle auf einmal, und wenn jeder Client nach genau derselben Verzögerung neu verbindet, werfen sie den Server in dem Moment wieder um, in dem er zurückkommt. Neuverbindungen brauchen zufällige Verzögerungen, die sich wirklich verteilen, und Clients müssen nachladen, was sie verpasst haben, statt anzunehmen, dass sie jedes Update erhalten haben. Die Bearbeitungshistorie wächst unbegrenzt, wenn sie nicht verdichtet wird, und der Verdichtungsjob darf nicht mit den gleichzeitig gespeicherten Änderungen in Konflikt geraten.
Regionen und Datenresidenz
Wenn manche Geschäftsbereiche oder Kunden verlangen, dass alles in der EU läuft, und andere, dass alles in den USA läuft, planen Sie das vom ersten Tag an ein. Vollständig in einer Region zu laufen heißt, dass die Daten, die Dateien, der Suchindex, die Backups und die KI-Verarbeitung alle dort bleiben, und Infrastruktur, die für eine Region geschrieben wurde, trägt überall Annahmen über diese Region in sich. Die Datenresidenz Ihrer Zulieferer zählt so viel wie Ihre eigene: Der Modellanbieter, der OCR-Dienst, der Übersetzungsdienst und der Identitätsanbieter verarbeiten jeweils irgendwo Inhalte, unter ihrem eigenen Vertrag. Ihr InfoSec-Team wird nach jedem von ihnen fragen.
Robustheit: Was gelten muss, wenn etwas ausfällt
Bid-Software wird in den letzten achtundvierzig Stunden vor einer Frist am stärksten genutzt, und genau dann kostet ein Ausfall am meisten. Ein Interessent fragte uns dieses Jahr, was passiert, wenn das Tool vor einer Einreichung in Millionenhöhe ausfällt. Ein anderer fragte nach unserem Disaster-Recovery-Plan und unserer Wiederherstellungszeit. Teams, die andere Tools genutzt hatten, beschrieben Deployments während der Bürozeiten, die das Tool unbenutzbar machten, und Durchläufe, die ohne Fehlermeldung stoppten und Fragen leer ließen. Robustheit lässt sich nicht am Ende hinzufügen. Sie entsteht aus einer Handvoll Eigenschaften, die jeder Teil des Systems von Anfang an hat.
Jeder Job endet
Jede Datei und jeder Job braucht einen festgelegten Satz von Zuständen, vom Eingang über Scan und Verarbeitung bis zu abgeschlossen oder fehlgeschlagen, und muss immer einen der Endzustände erreichen. Eine Datei, die für immer auf „in Verarbeitung“ steht, ist das Erste, was Nutzer melden, und das Schwerste zu erklären. Das bedeutet Fristen für jede Stufe, Aufräumprozesse, die über ihre Frist hinaus hängende Arbeit finden und mit Begründung als fehlgeschlagen markieren, und einen sichtbaren Status für jeden Fehler, etwa „in Quarantäne“, „nicht lesbar“, „zu groß“, damit Nutzer wissen, was als Nächstes zu tun ist.
Vorübergehende und dauerhafte Fehler sind verschieden
Ein kurzer Netzwerkaussetzer und eine beschädigte Datei sind verschiedene Fehler und brauchen unterschiedliche Behandlung. Wiederholen Sie im ersten Fall, mit einer Verzögerung, die jedes Mal wächst; lassen Sie den zweiten sofort scheitern. Wenn Sie die beiden nicht unterscheiden, kommt es zu einem von zwei Übeln. Entweder lassen vorübergehende Fehler Dateien scheitern, die eine Minute später funktioniert hätten, oder dauerhafte Fehler werden endlos wiederholt. Ein Worker, der jede Nachricht bestätigt, ob erfolgreich oder nicht, schickt nie etwas in seine Dead-Letter-Queue, und ein Netzwerkaussetzer lässt eine Datei genauso endgültig scheitern wie eine beschädigte. Klassifizieren Sie Fehler nach Typ und Code, nie nach dem Wortlaut der Meldung, der sich zwischen Bibliotheksversionen ändert. Ein Verbindungsabbruch, der eintrifft, nachdem die Gegenseite bereits erfolgreich geantwortet hat, ist kein Fehlschlag der Anfrage.
Dead-Letter-Queues helfen nur, wenn jemand hineinsieht. Eine Dead-Letter-Queue, die monatelang im Alarmzustand steht, ist eine Liste von Kundendateien, deren Verarbeitung nie abgeschlossen wurde.
Alles läuft zweimal
Queues stellen Nachrichten mehr als einmal zu, Worker stürzen ab, nachdem sie die Arbeit erledigt, aber bevor sie sie verbucht haben, und Nutzer klicken Buttons doppelt. Jeder Job muss gefahrlos wiederholbar sein: Wird dieselbe Antwort zweimal geschrieben, muss eine Antwort übrig bleiben; wird eine Datei zweimal verarbeitet, muss ein Satz Sucheinträge übrig bleiben; und ein kostenpflichtiger Aufruf sollte nach Möglichkeit nicht zweimal bezahlt werden. Die Techniken sind gewöhnlich, etwa eindeutige Schlüssel, Statusprüfungen vor jedem Schritt, Aufzeichnungen über das Erledigte, die in derselben Transaktion wie die Arbeit geschrieben werden, und Reservierungen, die ablaufen. Sie müssen aber überall angewendet werden, auch an den Stellen, die niemand als Job betrachtet hat. Eine subtile Variante: Ein Worker holt mehr Nachrichten ab, als er gleichzeitig bearbeiten kann, die wartenden laufen in ein Timeout, die Queue gibt sie an einen anderen Worker, und sie werden doppelt verarbeitet.
Zwei gleichzeitige Durchläufe auf demselben Eintrag sind die andere Hälfte des Problems. Zwei Neuindexierungen derselben Datei, zwei Umbenennungen desselben Ordners auf zwei Servern, ein Verdichtungsjob und ein Live-Speichervorgang: Jeder dieser Fälle braucht eine Sperre oder eine Versionsprüfung, und eine Sperre, die innerhalb eines Prozesses gehalten wird, nützt einem zweiten Server nichts.
Jeder Aufruf hat ein Timeout
Viele Bibliotheken warten standardmäßig unbegrenzt: auf eine Datenbankverbindung, einen Lesezugriff auf den Speicher, den Empfang aus einer Queue, eine Drittanbieter-API. Ein Aufruf, der nie zurückkehrt, kann eine Sperre, einen Worker-Slot oder die Sitzung eines Nutzers auf unbestimmte Zeit blockieren. Versehen Sie jeden externen Aufruf mit einem Timeout, einschließlich der DNS-Abfrage davor, und stellen Sie sicher, dass das Timeout in Ihrer Laufzeitumgebung tatsächlich greift. Legen Sie dann fest, was passiert, wenn es auslöst, und testen Sie das.
Health Checks, die die Wahrheit sagen
Ein Health Check, der immer „OK“ antwortet, verdeckt einen Prozess, der lebt, aber hängt. Ein zu strenger Health Check beendet Prozesse, die beschäftigt, aber gesund sind. Lange KI-Gesprächsschritte können einen Serverprozess in kurzen Schüben blockieren, und ein Standard-Check des Load Balancers beendet dann Agenten, die normal arbeiten, während ein Prozess, dessen Konfiguration nie geladen wurde, sich weiter als gesund melden kann, obwohl jede Anfrage scheitert. Legen Sie für jeden Dienst fest, was „gesund“ bedeutet, und lassen Sie einen Prozess, der auf einen unerwarteten Fehler gestoßen ist, beenden und neu starten, statt weiterzuhumpeln, denn ein beschädigter Prozess, der noch Health Checks beantwortet, ist der schlimmste Zustand von allen.
Deployments, Migrationen und Rollbacks
Sie werden oft deployen, und Bid-Teams werden dabei arbeiten. Deployments müssen schrittweise über die Server laufen, Worker müssen ihre aktuelle Arbeit innerhalb des Stopp-Zeitfensters der Plattform abschließen oder zurückgeben, und lang laufende KI-Jobs müssen ein Deployment überstehen oder danach fortgesetzt werden. Datenbankmigrationen müssen funktionieren, während der alte Code noch läuft; das heißt, erst hinzufügen, dann entfernen, und Daten in kleinen Batches ändern, damit Tabellen nicht minutenlang gesperrt sind. Migrationen an großen Live-Tabellen brauchen eine Grenze dafür, wie lange sie auf Sperren warten, sonst blockiert eine einzige Migration das ganze Release, ohne eine Logzeile zu hinterlassen. Rollen Sie ein Release in Stufen aus, zuerst die Migrationen, dann die Dienste, denen Daten gehören, dann die Worker, und halten Sie an, wenn sich eine Stufe nicht stabilisiert. Wissen Sie, wie Sie zurückrollen, einschließlich der Datenbank, bevor Sie es brauchen.
Feature Flags helfen dabei: Liefern Sie neuen Code ausgeschaltet aus, schalten Sie ihn für ein Team ein, dann für alle, und löschen Sie dann das Flag. Das Ausschalten eines Flags darf nie Arbeit verwaist zurücklassen, die begonnen hat, während es eingeschaltet war. Kill Switches für teure Funktionen, die vor dem kostenpflichtigen Aufruf geprüft werden statt danach, erlauben es Ihnen, ausufernde Kosten ohne Deployment zu stoppen.
Backups und Wiederherstellung
Sichern Sie die Datenbank und die Dateien, bewahren Sie frühere Versionen von Dateien auf und schützen Sie den Speicher vor versehentlichem Löschen. Stellen Sie dann regelmäßig aus den Backups wieder her, in eine separate Umgebung, und messen Sie die Zeit, denn ein Backup, das Sie nie wiederhergestellt haben, ist eine Hoffnung und kein Plan. Halten Sie schriftlich fest, wie viele Daten Sie verlieren und wie lange Sie ausfallen dürfen, und prüfen Sie, ob Ihr Setup das einhält. Vergessen Sie nicht die Dienste, deren Zustand leicht übersehen wird: den Suchindex, den Speicher des Dokumentenservers, die Queues, die Secrets. Kunden werden diese Werte in ihrem Security-Questionnaire abfragen, und manche schreiben sie in den Vertrag.
Skalierbarkeit: die Formen der Last
Bid-Software sieht keinen gleichmäßigen, vorhersehbaren Verkehr. Ihre Last kommt in Formen, und jede Form bringt etwas anderes zum Brechen.
Die erste ist die Fristspitze. Mehrere Teams reichen in derselben Woche ein, oft am selben Tag, und die Nutzung am Abend vor einer Frist kann ein Mehrfaches eines normalen Vormittags betragen. Kapazität, die für den Durchschnitt geplant ist, versagt genau dann, wenn es darauf ankommt. Mit festen Serverzahlen, die jemand nach einem Absturz von Hand ändert, fangen viele interne Tools an, und dabei bleibt es bis zur ersten schlechten Woche.
Die zweite ist der sehr große Einzeljob. Eine Ausschreibung mit 600 Seiten, eine Arbeitsmappe mit tausend Zeilen, eine Vorlage mit hundert Folien und eingebettetem Video, ein Vergleich zweier langer Versionen derselben Ausschreibung. Bid-Teams erzählten uns, dass sie eine Response von weit über hundert Seiten in Stücke aufteilten, weil das Tool so langsam war, dass sie einen langen Durchlauf eine Stunde lang laufen ließen, und von einem Vergleich, der genau bei der großen, neu veröffentlichten Ausschreibung an seine Grenzen stieß, bei der es darauf ankam. Jeder dieser Fälle braucht Streaming, statt alles in den Speicher zu laden, Arbeit, die in Stücke aufgeteilt wird und nach jedem Stück den Fortschritt sichert, und Grenzen, die früh mit einer klaren Meldung scheitern statt spät mit einem Absturz.
Die dritte ist der Massenimport. Die erste Synchronisierung einer großen SharePoint-Site oder die Migration jahrelanger früherer Bids bedeutet viele Tausend Dateien auf einmal. Das darf niemandes laufende Arbeit verzögern, muss nach Unterbrechungen weitermachen, und die Kosten müssen vorhersehbar sein, weil jede Datei Konvertierung, Bildbeschreibung und Embedding durchläuft.
Die vierte ist der laute Nachbar. Ob Ihre Mandanten Kunden oder Geschäftsbereiche sind, einer von ihnen wird irgendwann etwas Schweres ausführen, und die anderen dürfen es nicht merken. Jede gemeinsam genutzte Ressource braucht eine Grenze je Mandant: Verarbeitungsspuren, Job-Slots, Suchdurchsatz, API-Rate-Limits, Modellausgaben. Ein Rate Limiter, der für jede abgelehnte Anfrage in die Datenbank schreibt, wird selbst zum Lastproblem; abgelehnte Anfragen müssen also im Arbeitsspeicher abgewiesen werden.
Die fünfte ist das Wachstum über die Zeit. Bibliotheken wachsen, Unterhaltungen wachsen, Versionshistorien wachsen, Audit-Logs wachsen, der Vektorindex wächst, und Abfragen, die mit den Daten von zehn Kunden zügig liefen, machen mit fünfzig vollständige Tabellenscans. Fehlende Indizes zeigen sich unter Last, typischerweise bei Versionshistorien, Chatverläufen und Ordnerlisten, und Listen, die Eintrag für Eintrag laden, machen aus einem Seitenaufruf Hunderte Abfragen. Messen Sie die Abfragepläne der meistgenutzten Bildschirme, während die Daten wachsen, nicht einmalig zum Start.
Über allen fünf liegen die Rate Limits der Modelle. Ihr Anbieter gibt Ihnen eine Zahl von Tokens und Anfragen pro Minute, die sich alle Nutzer und alle Jobs teilen. Ein Massendurchlauf eines Teams kann das Limit für alle aufbrauchen; KI-Arbeit braucht also eine Queue, Prioritäten und Anteile je Mandant, und interaktive Fragen sollten nicht hinter einem Batch mit tausend Zeilen warten.
Betrieb: Überwachen und Betreiben
Sobald das Tool live ist, muss jemand merken, dass es kaputt ist, bevor das Bid-Team es merkt, und es um elf Uhr abends vor einer Frist reparieren.
Monitoring und Alerting
Überwachen Sie, was Nutzer erleben, nicht nur, was Server melden. Fehlerraten und Antwortzeiten je Dienst, Queue-Tiefe und das Alter der ältesten Nachricht, Verarbeitungszeit je Datei, Anteil erfolgreicher Jobs, Modellfehler und -latenz, Kosten pro Stunde und den Zustand jeder Integration. Alarmieren Sie auf die älteste Nachricht in einer Queue, nicht nur auf die Zahl der Nachrichten, denn eine Queue, die sich nicht bewegt, ist schlimmer als eine lange.
Zwei Lektionen lohnt es sich früh zu lernen. Alarmschwellen, die von Durchschnittswerten abgeleitet sind, schlagen ständig an und werden ignoriert; legen Sie sie anhand echter Vorfälle und anhand von Perzentilen fest. Und manche Alarme erholen sich von selbst, während ein Kunde noch völlig festsitzt, weil dessen Nutzer aufgeben und keine Anfragen mehr senden. Sie müssen Probleme je Kunde oder Geschäftsbereich sehen können, ohne Kundendaten in Ihre Metriken zu bringen, was in der Regel Logs bedeutet, die sich nach Mandant filtern lassen, und Metriken, die das nicht können.
Speicherdiagramme täuschen, weil sie Stichproben sind, und der Moment, in dem ein Prozess wegen Speichermangels beendet wird, fällt zwischen zwei Stichproben. Maßgeblich ist die eigene Aufzeichnung der Plattform darüber, warum ein Prozess beendet wurde. Erfassen Sie die Größe der Eingaben schwerer Jobs, damit Sie bei Speichermangel sagen können, welches Dokument ihn verursacht hat.
Tracing über Dienste hinweg, vom Klick des Nutzers über die API, die Queue und den Worker bis zum Modellaufruf, macht aus einem vagen „Es war langsam“ eine konkrete Antwort. Richten Sie es früh ein; bei zehn Diensten ist es viel schwerer nachzurüsten.
Support- und Admin-Tools
Ohne ordentliche Admin-Tools arbeitet der Support mit handgeschriebenen Datenbankskripten: eine hängende Datei erneut verarbeiten, einen Ordner neu importieren, die Daten eines Nutzers löschen, prüfen, warum ein Bid falsch aussieht, oft mit Zugangsdaten, die von irgendwoher kopiert wurden, wo sie nicht liegen sollten. Das ist langsam und riskant. Planen Sie Admin-Oberflächen für die Vorgänge, die der Support jede Woche erledigt, mit einem eigenen Audit-Log, und Just-in-time-Zugriff auf Produktivdaten, genehmigt und zeitlich begrenzt, für alles andere.
Sicherheitsbetrieb
Sicherheit ist ein laufender Kostenfaktor, keine Aufgabe zum Start. Abhängigkeiten müssen fortlaufend gepatcht werden, und für Dokumentparser und KI-Bibliotheken werden häufig Schwachstellen veröffentlicht. Automatisches Scannen von Abhängigkeiten und Container-Images, mit jemandem, der für die Reaktion auf die Funde verantwortlich ist, ist das Minimum. Lock-Dateien müssen in jedem Build respektiert werden, denn ein Build-Tool, das stillschweigend andere Versionen installiert, kann einen Dienst im Produktivbetrieb lahmlegen. Secrets gehören in einen Secrets Manager, werden beim Start injiziert und lassen sich ohne Ausfallzeit rotieren. Zugangsdaten für SharePoint, Teams und E-Mail der Kunden brauchen eine Verschlüsselung, die an den Datensatz gebunden ist, zu dem sie gehören, damit ein kopierter Wert anderswo nicht verwendbar ist, und einen Prozess, um sie bei einem Schlüsselwechsel neu zu verschlüsseln. Ausgehende Anfragen, etwa Webhooks, das Abrufen von Bildern für Dokumente und das Folgen von Weiterleitungen aus Dokumentenspeichern, brauchen bei jedem Schritt Prüfungen gegen Anfragen an interne Adressen. Menschlicher Zugriff auf die Produktivumgebung sollte die Ausnahme sein, genehmigt und protokolliert. Und planen Sie die unabhängigen Penetrationstests und Audits ein, die Ihre Kunden oder Ihr eigenes InfoSec-Team sehen wollen.
Umgebungen und Releases
Sie brauchen mindestens eine Umgebung, die nicht die Produktivumgebung ist, mit realistischen Datenmengen, in der Releases getestet werden, bevor Kunden sie sehen. Infrastruktur gehört in Code, angewendet über eine geprüfte Pipeline, mit einer regelmäßigen Kontrolle, ob das, was läuft, dem entspricht, was im Code steht; Änderungen, die während eines Vorfalls von Hand in einer Konsole gemacht wurden, werden gern beim nächsten, ganz anderen Deployment wieder zurückgesetzt. Tests sollten gegen eine echte Datenbank laufen statt gegen Mocks, denn viele der oben beschriebenen Bugs, etwa Race Conditions bei Sperren, fehlende Indizes und ein erschöpfter Connection Pool, treten bei einem Mock nie auf. Auch Evaluierungen der KI-Ausgaben gehören in den Release-Prozess, sonst gehen Qualitätsrückschritte hinaus wie jeder andere Bug.
Die Enterprise-Plattform
Ein internes Tool, das Ausschreibungsunterlagen verarbeitet, ist trotzdem eine Unternehmensanwendung. Ihre InfoSec-, Rechts- und KI-Governance-Teams werden es so prüfen, wie sie jeden Softwareanbieter prüfen, und die Plattformarbeit ist oft umfangreicher als die KI-Arbeit.
Isolation, Identität und Berechtigungen
Ob Sie ein Unternehmen mit mehreren Geschäftsbereichen bedienen oder viele Unternehmen: Jede Abfrage, jeder Cache-Eintrag, jeder Dateischlüssel, jeder Suchindex, jede Logzeile, jeder Hintergrundjob und jeder Echtzeitkanal muss dem richtigen zugeordnet sein. Ein einziger fehlender Filter zeigt einem Bereich die Preise eines anderen. Hintergrund-Worker verdienen besonderes Misstrauen: Sie handeln auf Basis der Kennungen, die sie in einer Nachricht erhalten, und müssen deshalb die Zugehörigkeit selbst prüfen, statt darauf zu vertrauen, dass die API das schon getan hat. Speicherschlüssel dürfen von außen weder erratbar noch fälschbar sein. Die Verknüpfung zwischen einem externen Workspace, etwa einem Slack- oder Teams-Mandanten, und einer Organisation muss eins zu eins sein und von der Datenbank erzwungen werden, denn Anwendungscode, der erst prüft und dann schreibt, kann in eine Race Condition laufen.
Die Unternehmens-IT wird kein Tool mit eigenen Passwörtern genehmigen; Single Sign-on über den Identitätsanbieter des Unternehmens ist also der Ausgangspunkt, mit Multi-Faktor-Authentifizierung, wo die Richtlinie sie verlangt. Ein- und Austritte sollten automatisch behandelt werden. Manuelles Offboarding lässt ehemaligen Mitarbeitenden Zugriff auf laufende Bids, und das Entfernen eines Nutzers muss jede Integration erreichen, die er verbunden hat, nicht nur den Login. Bid-Tage sind lang, und ein Sitzungstoken, das mitten in einer Bearbeitung abläuft, darf die Bearbeitung nicht verlieren.
Ein Rollenfeld am Nutzer ist kein Berechtigungsmodell. Sobald Partner, externe Reviewer, die Rechtsabteilung und vertrauliche Preise an Bids beteiligt sind, brauchen Sie Berechtigungen je Projekt, Ordner und Wissensquelle, mit Gruppen und Vererbung, und Regeln, die unter Druck halten: Ein fehlender Eigentümer bedeutet nie „alle“, eine Nutzerkennung wird nie für eine andere Person wiederverwendet, und die Änderung einer Berechtigung, während jemand arbeitet, greift ohne Race Condition. Berechtigungen gelten auch für das, was die KI erzeugt. Eine Antwort, die aus einem vertraulichen Dokument entworfen wurde, erbt die Einschränkung, ebenso ein Chatverlauf, der es zitiert hat.
Auch andere Systeme werden Zugriff wollen. Integrationen brauchen API-Schlüssel, die ablaufen, Scopes tragen und eigene Rate Limits haben, und Tools, die sich über das Model Context Protocol verbinden, brauchen richtiges OAuth statt eines gemeinsamen Geheimnisses.
Sicherheit, Datenschutz und Compliance
Prüfer werden fragen, wo Daten gespeichert und wo die Modellaufrufe verarbeitet werden, und ob alles, die KI eingeschlossen, in der EU, im Vereinigten Königreich oder in den USA bleibt. Sie werden eine schriftliche Bestätigung verlangen, dass kein Modellanbieter mit Ihren Inhalten trainiert; das gehört in jeder Prüfung zu den ersten Fragen. Zugangsdaten für SharePoint, Teams, Google Drive und E-Mail müssen verschlüsselt sein, mit einer Möglichkeit, die Schlüssel zu rotieren. Webhooks und alle anderen ausgehenden Aufrufe brauchen Schutz vor Server-Side Request Forgery, einschließlich Adressen, die bei der Prüfung auf ein Ziel auflösen und beim Aufruf auf ein anderes. Kundeninhalte, Dateinamen und Secrets bleiben aus Logs heraus, weil Logs an mehr Orte kopiert und länger aufbewahrt werden als die Daten selbst.
Führen Sie ein Audit-Log, das nur Anhängen erlaubt, darüber, wer was getan hat, und das Umbenennungen und Löschungen übersteht. Auftraggeber, Auditoren und Ihre eigene Rechtsabteilung werden fragen, wer eine Antwort geschrieben und wer sie freigegeben hat, manchmal Jahre später. Das Löschen verdient mehr Entwurfsarbeit, als es bekommt: ein wiederherstellbares Löschen für Nutzer, eine festgelegte Bedeutung von „archivieren“ und die Möglichkeit, eine Person oder einen ganzen Geschäftsbereich aus jedem Speicher zu tilgen, Suchindizes und Embeddings eingeschlossen. Das Recht auf Löschung nach der DSGVO gilt für Ihr Tool wie für jedes andere. Personen, die das Unternehmen verlassen, sollten anonymisiert werden, ohne die Inhalte zu zerstören, die sie geschrieben haben, und ein Löschjob darf nie in die Daten einer anderen Organisation hineingreifen können. Aufbewahrungsregeln müssen automatisiert werden, und jede neue Tabelle und jeder neue Speicher, den Sie später hinzufügen, muss in den Löschvorgang aufgenommen werden; deshalb hilft eine Prüfung, die fehlschlägt, wenn einer fehlt.
Rechnen Sie damit, den Vendor-Security-Questionnaire Ihres eigenen Unternehmens für das Tool beantworten zu müssen, und planen Sie die Kontrollen hinter ISO 27001 oder SOC 2 ein, wenn andere Geschäftsbereiche, Tochtergesellschaften oder Partner es nutzen werden. Security-Questionnaires mit KI beantworten zeigt, was diese Fragebögen abfragen. Bitten Sie die Rechtsabteilung außerdem um eine schriftliche Einschätzung zur KI-Verordnung der EU und zu den Regeln Ihrer Branche; ob die KI-Verordnung für Bid-Writing gilt, ist ein guter Ausgangspunkt.
Integrationen
Bid-Inhalte liegen in SharePoint, OneDrive, Google Drive, Teams und Slack, und das Team erwartet, dass das Tool sie dort liest, wo sie liegen. Einen Dokumentenspeicher richtig zu synchronisieren heißt, Löschungen zu behandeln, die mit nichts als einer Kennung ankommen, Umbenennungen und Verschiebungen in der richtigen Reihenfolge anzuwenden, Paging und Drosselung bei großen Sites zu beherrschen, mit Ordnern umzugehen, auf die die Integration den Zugriff verliert, und erneute Synchronisierungen so zu bauen, dass sie keine Datei überschreiben, die jemand von Hand hochgeladen hat. Teams und Slack brauchen jeweils eine eigene App, mit Manifest, Prüfung durch die Plattform, Tokens je Workspace und klaren Zuständen für Verbindungen, die pausiert, defekt oder deinstalliert sind. E-Mail-Benachrichtigungen brauchen Einstellungen je Nutzer und Sammelbenachrichtigungen. Kunden- und Opportunity-Daten liegen im CRM; entscheiden Sie, ob Sie sie zum Start brauchen oder später. Andere Teams werden aus ihren eigenen Systemen heraus einen Bid starten oder Ergebnisse lesen wollen, über eine API mit Webhooks, die es erneut versuchen, wenn die Gegenseite nicht erreichbar ist.
Das Team und das Budget
Das Team, das Sie brauchen, ist breiter aufgestellt als das KI-Team, das die meisten Organisationen bereits haben. Zählen Sie die Rollen, jede mit Zeit, die für Jahre statt für Monate reserviert ist:
- einen Product Owner aus dem Bid-Team, der die Schritte benennen kann, die am längsten dauern, und Nein sagen kann zu Funktionen, die nur in einer Demo gut aussehen;
- Backend-Entwickler für die Plattform, die Integrationen und die Job-Pipeline;
- mindestens einen Entwickler, der auf Dokumentformate spezialisiert ist, denn die Verarbeitung von Excel, Word, PDF und PowerPoint ist eine eigene Disziplin, und die Bugs hören nie auf;
- einen Entwickler für Suche, Modelle und Evaluierung;
- Frontend-Entwickler für den Workflow, die Editoren und die Review-Oberflächen;
- Infrastruktur, Sicherheit und Rufbereitschaft, denn das Tool läuft auch nachts vor Fristen;
- Inhaltsverantwortliche für jedes Themengebiet der Bibliothek.
Wenn Bid-Teams uns ihre eigenen Schätzungen für eine Eigenentwicklung schildern, nennen ihre Kollegen die Schätzung oft optimistisch, und in die erste Version fließt nicht das meiste Geld. Die größeren Kosten entstehen durch die Arbeit, die weiterläuft, sobald das Tool live ist. Modelle werden veröffentlicht und abgekündigt. Auftraggeber schicken Dateiformate, die noch niemand gesehen hat. Parser und Bibliotheken brauchen Sicherheitspatches. Anbieter ändern ihre APIs und ihre Preise. SharePoint-Sites werden umstrukturiert. Die Bibliothek muss gepflegt, die Evaluierungen müssen ausgeführt, die Infrastruktur muss überwacht werden, und Ihr InfoSec-Team prüft das Tool jedes Jahr erneut. Diese Arbeit ist indirekt und fällt in einem Business Case leicht unter den Tisch, und genau deshalb gehört sie hinein.
Um Zahlen daran zu knüpfen, vergleicht der Build-vs-Buy-Rechner drei Jahre Eigenentwicklung einer Plattform, die Einrichtung allgemeiner KI-Tools auf Ihrem Dokumentenspeicher und den Kauf eines spezialisierten Produkts, auf Basis Ihrer eigenen Zahlen.
Wann sich eine Eigenentwicklung lohnt
Selbst zu bauen kann die richtige Entscheidung sein. Meistens ist sie es, wenn der Umfang eng ist und eng bleibt: ein Dokumenttyp, eine Sprache, ein Dateiformat, das Sie kontrollieren, etwa eine interne Suche über eine freigegebene Bibliothek für ein einzelnes Team. Sie kann es sein, wenn Ihre Bids von einem System oder einem Prozess abhängen, den kein Produkt unterstützt, und es sich lohnt, diesen Unterschied selbst in der Hand zu haben. Sie braucht ein fest zugesagtes Team: Entwickler mit einem Mandat, das in Jahren gemessen wird, einen Product Owner aus dem Bid-Team und Inhaltsverantwortliche mit Zeit für die Pflege. Und viele Organisationen gehen einen Mittelweg. Sie kaufen die Plattform und bauen über deren API nur das, was für sie spezifisch ist, etwa eine Anbindung an eine interne Preis-Engine oder ein Data Warehouse.
Die falsche Entscheidung ist es meist dann, wenn der Hauptgrund ist, dass allgemeine KI-Lizenzen bereits bezahlt sind. Die Lizenzen sind der kleinste Posten. Wie sich ein spezialisiertes Tool in Ihre unternehmensweite KI-Strategie einfügt zeigt, wie beides zusammenpasst.
In welche Richtung Sie auch tendieren, testen Sie die Entscheidung auf dieselbe Weise. Lassen Sie Ihre aktuelle Arbeitsweise, Ihren Prototyp und jedes Produkt auf Ihrer Shortlist am selben abgeschlossenen Bid laufen, mit dessen echten Dateien, und vergleichen Sie Ergebnis und Stunden. Angebotsmanagement-Software anhand Ihres abgeschlossenen Bids auswählen erklärt, wie Sie diesen Test durchführen, und die RFP-Vorlage für die Auswahl von RFP-Software gibt Ihnen die Anforderungen, die Sie an Softwareanbieter schicken können.
So übernimmt SEQUESTO das für Sie
Wir haben SEQUESTO aOS™ gebaut, weil wir selbst auf jeden Punkt dieser Liste gestoßen sind, und wir stoßen weiter auf neue, weil Auftraggeber neue Dateien schicken und Modelle sich ändern. SEQUESTO aOS ist das agentic operating system für Bid- und Ausschreibungsteams. Es deckt den Bid von den Ausschreibungsunterlagen bis zu den eingereichten Dateien ab: Qualifizierung, Extraktion von Anforderungen und Eckdaten, die eigenen Excel-, Word-, PDF- und PowerPoint-Dateien des Auftraggebers direkt ausgefüllt, Angebotsdokumente und Präsentationen in Ihrer Vorlage, Review und Freigabe. Es entwirft aus den Dokumenten Ihres Unternehmens dort, wo sie bereits liegen, in SharePoint, Teams, Google Drive oder Slack, nennt seine Quellen und überlässt Ihrem Team das letzte Wort. SEQUESTO läuft vollständig in der EU oder vollständig in den USA: Jeder Kunde wählt seine Region beim Anlegen des Kontos, und seine Daten und die KI bleiben in dieser Region. Kein KI-Modellanbieter trainiert mit Kundendaten, und SEQUESTO ist nach ISO 27001 und SOC 2 Type II zertifiziert. James, der KI-Bid-Agent von SEQUESTO, erledigt die Arbeit; Ihr Bid-Manager prüft und gibt frei. Sehen Sie sich SEQUESTO aOS an, oder bringen Sie eine Ihrer eigenen Ausschreibungen zu einer Live-Demo mit.
Die Checkliste
Die Checkliste für den Aufbau eigener Angebotsmanagement-Software ist eine kostenlose Excel-Arbeitsmappe, die jeden Punkt dieses Leitfadens als einzelne Zeile enthält, nach Abschnitten gruppiert, mit Priorität, Status und Verantwortlichem zum Ausfüllen und einer Übersicht, die zählt, was noch offen ist. Jeder Punkt gilt genauso für ein Produkt, das Sie evaluieren, sodass Sie dieselbe Liste an Softwareanbieter schicken können. Die Kurzfassung, die Sie prüfen sollten, bevor Sie sich festlegen:
- Sie haben jeden Bid-Dokumenttyp und jedes Dateiformat aufgelistet, die Sie im letzten Jahr beantwortet haben, und jedes ist im Umfang enthalten oder ausdrücklich ausgeschlossen.
- Sie wissen, für welche Schritte des Bids Sie bauen, von der Qualifizierung bis zu den eingereichten Dateien, und wer den Rest von Hand erledigt.
- Sie haben echte Dateien von Auftraggebern zum Testen gesammelt: geschützte Arbeitsmappen mit Dropdowns auf ausgeblendeten Blättern, Word-Formulare mit alten Formularfeldern, flache und gescannte PDFs, eine lange Ausschreibung mit Compliance-Matrix, Ihre eigenen Word- und PowerPoint-Vorlagen.
- Ihr Tool gibt die eigene Datei des Auftraggebers ausgefüllt zurück, und Excel bietet nie an, sie zu reparieren.
- Jede extrahierte Anforderung verweist auf ihre Quelle, und die Zahlen gehen auf.
- Jede Antwort nennt Quellen, die existieren, sagt es, wenn sie keine Antwort findet, und überschreibt nie die Änderung eines Menschen.
- Jeder Bibliothekseintrag hat einen Verantwortlichen und ein Prüfdatum, und jemand hat Zeit, sich darum zu kümmern.
- Berechtigungen greifen beim Retrieval und für alles, was die KI erzeugt.
- Lange Jobs laufen außerhalb der Webserver, überstehen ein Deployment, halten an, wenn der Nutzer sie stoppt, und enden immer.
- Sie wissen, wie sich das System am Abend vor einer Frist verhält, wenn drei Teams gleichzeitig einreichen.
- InfoSec hat die Datenflüsse, Modellanbieter und Hosting-Regionen schriftlich genehmigt.
- Es gibt ein namentlich benanntes Team und ein jährliches Budget für den Betrieb des Tools nach dem Start.
- Sie haben die Eigenentwicklung am selben abgeschlossenen Bid mit Ihrer aktuellen Arbeitsweise und mindestens einem Produkt verglichen.
Häufig gestellte Fragen
Quellen
- Excel specifications and limits, Microsoft
- CVE-2024-4367 detail, NIST National Vulnerability Database
- LLM01:2025 Prompt Injection, OWASP Gen AI Security Project
- Regulation (EU) 2016/679 (General Data Protection Regulation), EUR-Lex
- ECMA-376 Office Open XML file formats, Ecma International
