KI im Mittelstand: sinnvoll starten und sauber umsetzen
Künstliche Intelligenz im Mittelstand scheitert selten an der Technik und fast immer an der Auswahl: falscher Anwendungsfall, fehlende Daten, niemand zuständig. Dieser Leitfaden zeigt, welche Voraussetzungen wirklich nötig sind, wo KI im Unternehmen einen messbaren Unterschied macht, wie ein Pilotprojekt aufgesetzt wird und welche Fehler sich vermeiden lassen. Geschrieben aus der Praxis, nicht aus einer Broschüre.
Eine kurze, ehrliche Einordnung
KI ist im Mittelstand längst da, nur meist unkoordiniert: Mitarbeitende nutzen Chat-Tools für E-Mails und Zusammenfassungen, irgendwo läuft ein Testzugang, die Geschäftsführung hat eine Demo gesehen. Was fehlt, ist der Schritt von der Spielerei zum Werkzeug. Wer KI im Mittelstand sinnvoll einsetzen will, schafft ihn nicht durch mehr Tools, sondern durch eine nüchterne Frage: Welches Problem, das uns heute Zeit oder Kunden kostet, lässt sich mit KI besser lösen als ohne?
Drei Dinge vorab, damit die Erwartung stimmt. Erstens: KI ersetzt keine Mitarbeitenden, sie nimmt ihnen Schritte ab, die keine Erfahrung brauchen. Zweitens: Sprachmodelle machen Fehler, überzeugend formuliert; jede Anwendung braucht deshalb Kontrollpunkte. Drittens: Die meisten lohnenden Anwendungsfälle sind unspektakulär. Dokumente sortieren, Anfragen einordnen, Wissen finden. Wer nach dem großen Wurf sucht, übersieht die Stunden, die jede Woche in kleinen Routinen verschwinden.
Welche Voraussetzungen wirklich nötig sind
Weniger als oft behauptet, aber einige sind nicht verhandelbar:
- Ein beschreibbares Problem. "Wir müssen was mit KI machen" ist keins. "Die Bearbeitung einer Anfrage dauert 20 Minuten, davon 12 für das Zusammensuchen von Informationen" ist eins.
- Digitale, zugängliche Daten. Was in E-Mail-Postfächern, Papierordnern und Köpfen steckt, kann kein System nutzen. Oft ist das Ordnen der Daten der eigentliche erste Schritt, nicht die KI.
- Eine Person mit Zeit und Mandat. Nicht die IT, nicht ein Praktikant, sondern jemand, der den Fachprozess kennt, Entscheidungen treffen darf und pro Woche ein paar Stunden dafür hat.
- Bereitschaft für einen kleinen Anfang. Ein Pilot mit zwanzig Fällen pro Woche liefert mehr Erkenntnis als ein Konzept für das ganze Unternehmen.
- Grundregeln für den Umgang mit Daten. Welche Tools sind freigegeben, welche Daten dürfen wohin? Eine Seite reicht, aber sie muss existieren, bevor der erste Pilot startet.
Nicht nötig sind: eine eigene Data-Science-Abteilung, ein Rechenzentrum, ein Jahresbudget im sechsstelligen Bereich oder eine fertige KI-Strategie auf hundert Folien.
Sinnvolle Anwendungsfälle nach Unternehmensbereich
Die folgenden Beispiele sind typische Muster, keine Kundenprojekte. Sie zeigen, wo KI im Mittelstand regelmäßig einen messbaren Unterschied macht, und wo der Mensch bleibt.
Vertrieb und Kundenservice
- Eingehende Anfragen klassifizieren, priorisieren und an die richtige Person geben, mit Antwortentwurf
- Fehlende Angaben bei Interessenten strukturiert nachfragen
- Wissen aus Produktunterlagen für Rückfragen bereitstellen, mit Fundstelle
Verwaltung und Buchhaltung
- Eingangsrechnungen und Lieferscheine erfassen und vorkontieren, Freigabe bleibt bei der Buchhaltung
- Wiederkehrende Reports aus mehreren Quellen zusammenstellen
- Verträge auf Fristen und Klauseln durchsuchen, als Vorbereitung für die Prüfung durch Menschen
Marketing und Sichtbarkeit
- Inhalte strukturieren und überarbeiten, damit sie Fragen präzise beantworten; das Wissen kommt aus dem Unternehmen
- Sichtbarkeit in KI-Antworten messen und verbessern, siehe KI-Sichtbarkeit
- Interne Wissenssuche für Vertriebsunterlagen und Referenzen
Betrieb und Technik
- Dokumente aus Scans und PDFs erkennen, benennen und ablegen
- Übergaben zwischen Systemen ohne Abtippen
- Störungsmeldungen einordnen und mit Anleitungen aus dem Handbuch verknüpfen
Ausdrücklich ungeeignet: Entscheidungen über Menschen mit rechtlichen oder finanziellen Folgen, etwa Bewerberauswahl, Kreditentscheidungen oder Kündigungen. Hier bleibt der Mensch verantwortlich, und die Datenschutz-Grundverordnung setzt automatisierten Einzelentscheidungen in Artikel 22 enge Grenzen (Verordnung (EU) 2016/679 auf EUR-Lex).
Auswahlmatrix: Nutzen, Aufwand, Daten und Risiko
Aus zehn bis zwanzig Kandidaten wird der erste Pilot nicht nach Begeisterung ausgewählt, sondern nach vier Kriterien. Jeder Kandidat bekommt je Kriterium eine Einschätzung von gering, mittel oder hoch. Die Reihenfolge ergibt sich fast von selbst.
| Kriterium | Leitfrage | Gut für den Start |
|---|---|---|
| Nutzen | Wie viel Zeit, Geld oder Qualität ist realistisch drin, in Zahlen pro Woche? | mittel bis hoch, und messbar |
| Aufwand | Wie viele Systeme müssen angebunden, wie viele Ausnahmen behandelt, wie viel Pflege eingeplant werden? | gering bis mittel |
| Daten | Sind die nötigen Informationen digital, vollständig, freigegeben und zugänglich? | vorhanden, ohne größere Aufbereitung |
| Risiko | Was passiert bei einem Fehler, sind personenbezogene oder sensible Daten betroffen, gibt es rechtliche Anforderungen? | gering, Fehler erkennbar und rückholbar |
Der beste Startkandidat hat selten den höchsten Nutzen. Er hat das beste Verhältnis aus allen vier Kriterien, und er lässt sich in acht Wochen zeigen. Ein Beispiel für eine ausgefüllte Matrix mit drei Kandidaten steht auf der Seite KI-Beratung für den Mittelstand.
Ein Pilotprojekt aufsetzen
- Umfang festlegen. Ein Prozess, ein Team, ein abgegrenzter Teil der Fälle. Nicht alle Anfragen, sondern die aus einem Postfach. Nicht alle Rechnungen, sondern die von zehn Lieferanten.
- Messgrößen vorher definieren. Minuten pro Vorgang heute, Fehlerquote heute, Anzahl der Fälle pro Woche. Ohne Ausgangswert lässt sich später kein Erfolg belegen.
- Regel und KI trennen. Was mit einer festen Regel geht, wird mit einer festen Regel gelöst. KI nur dort, wo unstrukturierte Eingaben verstanden oder Texte erzeugt werden müssen. Das hält den Pilot nachvollziehbar und günstig.
- Freigabepunkte einbauen. Alles, was nach außen geht, Geld bewegt oder Daten dauerhaft ändert, wird von einem Menschen bestätigt. Unsichere Fälle landen in einer Prüfliste.
- Parallel laufen lassen. Vier bis acht Wochen neben dem bisherigen Weg. Die Korrekturen der Mitarbeitenden sind das wertvollste Ergebnis dieser Phase.
- Entscheiden. Ausweiten, anpassen oder abbrechen, anhand der Messgrößen aus Schritt 2. Abbrechen ist ein legitimes Ergebnis, wenn es begründet ist.
Wie ein solcher Ablauf technisch aussieht, beschreibt die Seite KI-Automatisierung von Abläufen. Wenn die Aufgabe mehrstufig ist und die Reihenfolge der Schritte vom Fall abhängt, ist ein KI-Agent mit definierten Werkzeugen die passende Form.
Rollen und Verantwortlichkeiten
Ein KI-Projekt ohne klare Rollen stirbt nach dem Pilot, weil niemand sich um Fehler, Änderungen und Fragen kümmert. Vier Rollen reichen, und im Mittelstand können zwei davon dieselbe Person sein:
| Rolle | Verantwortung | Typisch besetzt durch |
|---|---|---|
| Fachverantwortung | Kennt den Prozess, entscheidet über Regeln und Freigaben, bewertet Ergebnisse | Teamleitung des betroffenen Bereichs |
| Technische Verantwortung | Betreibt die Anwendung, pflegt Schnittstellen, reagiert auf Fehler | interne IT oder externer Partner |
| Datenschutz | Prüft Datenflüsse, Verträge mit Anbietern, Rechtsgrundlagen | Datenschutzbeauftragte oder externe Beratung |
| Entscheidung | Gibt Budget frei, entscheidet über Ausweitung oder Abbruch | Geschäftsführung |
Datenschutz und menschliche Kontrolle
Zwei Regelwerke bestimmen den Rahmen. Die Datenschutz-Grundverordnung gilt für jede Verarbeitung personenbezogener Daten, also auch dann, wenn ein Sprachmodell Kundendaten liest. Die europäische KI-Verordnung (Verordnung (EU) 2024/1689 auf EUR-Lex) stuft KI-Anwendungen nach ihrem Risiko ein und knüpft daran abgestufte Pflichten, von Transparenz bis zu umfangreichen Anforderungen für Hochrisikoanwendungen. Welche Pflichten für ein konkretes Vorhaben gelten und ab wann, ist eine rechtliche Frage, die wir als Prüfpunkt benennen, aber nicht selbst beantworten. Dafür gibt es qualifizierte Fachleute.
Unabhängig von der rechtlichen Einordnung gelten für uns vier praktische Regeln:
- Datensparsamkeit: Ein System bekommt nur die Daten, die es für seine Aufgabe braucht. Personenbezogene Daten werden reduziert oder pseudonymisiert, bevor sie ein Modell erreichen.
- Klärung des Verarbeitungsorts: Bei externen Modellanbietern prüfen wir, wo verarbeitet wird, was der Auftragsverarbeitungsvertrag regelt und ob Daten für das Training verwendet werden dürfen. Bei sensiblen Daten kommen Modelle in europäischer oder eigener Infrastruktur in Betracht.
- Menschliche Kontrolle: Freigabepunkte an jeder Stelle, an der ein Fehler Folgen hätte. Das ist keine Bremse, sondern die Voraussetzung dafür, dass ein System überhaupt eingesetzt werden darf.
- Protokollierung: Jeder Schritt wird nachvollziehbar gespeichert. Ohne Protokoll lässt sich weder ein Fehler analysieren noch eine Anfrage einer Aufsichtsbehörde beantworten.
Erfolg messen
Was gemessen wird, steht vor dem Pilot fest, sonst wird hinterher passend interpretiert. Bei Automatisierungen sind es meist vier Zahlen: Minuten pro Vorgang vorher und nachher, Fehlerquote, Anteil der Fälle mit menschlicher Korrektur, Anzahl bearbeiteter Fälle pro Woche. Bei Sichtbarkeitsthemen: Impressionen, Positionen und Klicks in der Google Search Console sowie Nennungen in einem festen Prompt-Set über mehrere KI-Systeme. Bei Wissensassistenten: Anteil der Fragen, die mit korrekter Fundstelle beantwortet wurden.
Wichtig ist die Ehrlichkeit bei der Interpretation. Eine Zeitersparnis von 60 Prozent bei zwanzig Fällen pro Woche ist real, aber klein. Eine Ersparnis von 20 Prozent bei zweihundert Fällen ist größer. Und ein Pilot, der zeigt dass der Aufwand den Nutzen nicht rechtfertigt, hat sein Geld wert gewesen, weil er eine teurere Fehlentscheidung verhindert hat.
Typische Fehler
- Tool vor Problem. Eine Software kaufen und dann nach dem Einsatzzweck suchen. Die häufigste Ursache für Projekte, die nach drei Monaten niemand mehr nutzt.
- Zu groß anfangen. Ein Konzept für das ganze Unternehmen statt eines Piloten für ein Team. Groß angefangen heißt meist: nie fertig.
- Keine Ausgangswerte. Ohne Messung vorher lässt sich hinterher jede Wirkung behaupten oder bestreiten.
- Daten unterschätzen. Die KI ist in zwei Wochen gebaut, das Aufräumen der Daten dauert vier Monate. Wer das nicht einplant, hält die KI für das Problem.
- Mitarbeitende übergehen. Wer die Menschen, die den Prozess machen, erst beim Rollout informiert, bekommt Widerstand statt Korrekturen.
- Kontrolle abbauen aus Bequemlichkeit. Freigabepunkte streichen, weil sie lästig sind, statt weil die Fehlerauswertung es erlaubt.
- Anbieterversprechen glauben. "Vollautomatisch", "kein Setup", "sofort produktiv". Solche Aussagen gelten für Demos, nicht für Ihre Daten.
- Sichtbarkeit vergessen. Intern läuft alles mit KI, aber nach außen wird das Unternehmen in KI-Antworten nicht gefunden. Beides gehört zusammen; für die Außenseite ist die GEO-Begleitung von FMQ zuständig.
Entscheidungshilfe: Beratung, Automation oder Agent?
Drei Fragen genügen für eine erste Einordnung:
| Ihre Situation | Passender Einstieg | Warum |
|---|---|---|
| Viele Ideen, keine Reihenfolge, unklare Datenlage | KI-Beratung | Erst bewerten, dann bauen. Die Beratung endet mit einem definierten Pilot oder einem begründeten Nein. |
| Ein klar beschreibbarer, häufiger Ablauf mit festen Schritten | KI-Automatisierung | Ein Workflow ist nachvollziehbar, günstig und schnell als Pilot prüfbar. |
| Eine mehrstufige Aufgabe, deren Schritte vom Fall abhängen | KI-Agent | Wenn ein fester Ablauf nicht reicht, braucht es Werkzeuge, Regeln und Kontrolle. |
In allen drei Fällen ist der erste Schritt derselbe: Vorhaben beschreiben, ehrliche Einschätzung bekommen, dann entscheiden. Das geht über die Seite Angebot anfordern, auch mit "noch unklar" als Antwort auf die Frage nach der Leistung.
Häufige Fragen zu KI im Mittelstand
Weitere Antworten stehen auf der Seite Fragen und Antworten zu KI, GEO und SEO. Fachbegriffe erklärt das KI-Glossar.
Ab welcher Unternehmensgröße lohnt sich KI?
Das hängt nicht von der Größe ab, sondern von der Zahl wiederkehrender Fälle. Ein Betrieb mit zwölf Mitarbeitenden und zweihundert Anfragen pro Woche hat mehr Potenzial als ein Unternehmen mit hundert Mitarbeitenden und wenigen, sehr individuellen Vorgängen. Entscheidend ist, ob es einen Ablauf gibt, der oft genug vorkommt und klar genug beschreibbar ist.
Welche Kosten entstehen laufend?
Modellnutzung wird meist nach Verbrauch abgerechnet, bei den typischen Mittelstandsanwendungen sind das überschaubare monatliche Beträge. Dazu kommen Betrieb und Pflege: Schnittstellen ändern sich, Modelle werden ausgetauscht, neue Fallarten tauchen auf. Wir schätzen beides vor dem Pilot ab, damit es keine Überraschung gibt.
Müssen Mitarbeitende geschult werden?
Ja, aber nicht in Technik. Sie müssen wissen, was das System tut, was es nicht tut, wo sie prüfen und wie sie Fehler melden. Das ist in einer Einweisung von ein bis zwei Stunden machbar. Dazu kommen die Grundregeln für den Umgang mit KI-Tools im Alltag, die ohnehin jedes Unternehmen braucht.
Was ist mit KI-Tools, die Mitarbeitende privat nutzen?
Das ist der Normalfall und kein Grund zur Panik, aber ein Grund für Regeln. Welche Tools sind freigegeben, welche Daten dürfen dort eingegeben werden, was ist tabu? Eine Seite mit klaren Regeln, einmal erklärt, verhindert die meisten Probleme. Verbote ohne Alternative funktionieren nicht.
Quellen und weiterführende Dokumente
- Verordnung (EU) 2024/1689 (KI-Verordnung), Amtsblatt der Europäischen Union: eur-lex.europa.eu/eli/reg/2024/1689/oj
- Verordnung (EU) 2016/679 (Datenschutz-Grundverordnung), insbesondere Artikel 22 zu automatisierten Einzelentscheidungen: eur-lex.europa.eu/eli/reg/2016/679/oj
- Google Search Central: AI features and your website: developers.google.com/search/docs/appearance/ai-features
- Google Search Central: Helpful, reliable, people-first content: developers.google.com/search/docs/fundamentals/creating-helpful-content
- OpenAI: Overview of OpenAI Crawlers: developers.openai.com/api/docs/bots
Die Beispiele in diesem Leitfaden sind typische Szenarien aus der Beratungspraxis, keine Kundendaten. Zahlenangaben zu Zeitersparnis sind Rechenbeispiele, keine Messwerte aus Projekten. Rechtliche Aussagen sind Hinweise auf Prüfpunkte, keine Rechtsberatung.
Der erste Pilot ist kleiner, als Sie denken.
Beschreiben Sie den Ablauf, der Sie gerade am meisten Zeit kostet. Wir sagen Ihnen, ob er sich eignet und wie ein Pilot aussehen würde.