KI-Berater beauftragen auf Basis von Belegen, nicht einer Demo.
Ein überzeugender Pitch ist leicht. Eine sichere, bezahlbare KI-Lösung zu entwerfen und in Betrieb zu nehmen, ist etwas anderes. Unser Assessment prüft KI-Berater, AI Engineers und Solution Architects auf ihr tatsächliches Können, bevor Sie den Auftrag vergeben.
Für wen?
- Unternehmen, die KI-Expertise einkaufen: Wählen Sie Freelancer, Agenturen und Umsetzungspartner nach Können statt nach Verkaufsargumenten.
- Recruiting von KI-Fachleuten: Testen Sie Kandidaten für AI Engineer, Automation Lead oder AI Architect mit denselben Aufgaben und derselben Rubrik.
- Berater, die sich abheben wollen: Zeigen Sie mit einem unabhängigen Bericht, was Sie können, statt nur zu erzählen, was Sie gemacht haben.
Was wir prüfen
- Von der Frage zur Lösung: Das eigentliche Problem hinter der Anfrage finden und offen sagen, wenn KI nicht die beste Wahl ist.
- Architektur: Workflow oder Agent, RAG oder Fine-Tuning, welche Systeme und welche Schnittstellen.
- Modellwahl: Qualität, Kosten, Tempo und Datenschutz je Schritt begründet abwägen.
- Daten und RAG: Quellen, Aktualität und Berechtigungen, damit niemand sieht, was er nicht sehen darf.
- Sicherheit: Prompt Injection, minimale Rechte und menschliche Freigabe für unumkehrbare Aktionen.
- Evaluation: Ein Testsatz, messbare Kriterien und Regressionstests vor und nach jeder Änderung.
- Kosten und Skalierung: Eine realistische Kostenschätzung pro Monat, mit Obergrenzen und Fallbacks.
- Governance: DSGVO, EU AI Act, Dokumentation und klare Verantwortlichkeiten.
So sieht das Assessment aus
- Wissen und Entscheidungssituationen: Zufällig gezogene Fragen und Szenarien mit mehreren vertretbaren Optionen aus einer gesicherten Itembank.
- Architekturfall: Eine realistische Geschäftsfrage zu Entwurf, Risiken, Kostenschätzung und Umsetzungsplan ausarbeiten.
- Praxislabor: Einen fehlerhaften KI-Workflow in einer abgeschirmten Umgebung analysieren und verbessern. KI-Nutzung ist erlaubt.
- Verifikationsgespräch: Ein strukturiertes Gespräch, in dem der Berater seine Entscheidungen erklärt und verteidigt. So zeigt sich, wer sie wirklich versteht.
Ein KI-Assistent für Recruiter
Eine Organisation mit 40 Recruitern möchte einen Assistenten, der Stellenanzeigen entwirft, Bewerberfragen beantwortet und Lebensläufe zusammenfasst. Es gibt 3.000 interne Dokumente, teils vertraulich.
- Welche Teile werden ein fester Workflow und welche ein Agent?
- Wie verhindern Sie, dass vertrauliche Dokumente beim falschen Nutzer landen?
- Wie messen Sie vor dem Go-live, ob es gut genug funktioniert?
- Was kostet es pro Monat bei 2.000 Gesprächen, und wo liegt die Obergrenze?
- Wo muss weiterhin ein Mensch entscheiden, und warum?
Häufig gestellte Fragen
Darf der Berater während des Assessments KI nutzen?
Ja, im Fall und im Labor. Gute Berater nutzen KI, um schneller zu arbeiten. Wir bewerten, was geliefert wird und ob die Ausgabe geprüft wird. Das Verifikationsgespräch zeigt, ob die Entscheidungen wirklich verstanden sind.
Wie lange dauert es?
Etwa 2,5 Stunden, aufgeteilt in einen Online-Teil und ein 30-minütiges Gespräch. Der Online-Teil ist in einer oder zwei Sitzungen möglich.
Können wir es für mehrere Kandidaten oder Anbieter nutzen?
Ja. Jeder Kandidat erhält Varianten derselben Aufgaben und wird mit derselben Rubrik bewertet, sodass Sie fair vergleichen können.
Können wir einen Fall aus unserer eigenen Organisation verwenden?
Ja, für eine maßgeschneiderte Version können wir den Architekturfall auf Ihre Situation stützen, ohne vertrauliche Daten in der Aufgabe.
Was kostet es?
In der Pilotphase vereinbaren wir einen Preis pro Organisation, abhängig von der Zahl der Kandidaten und davon, ob Sie einen maßgeschneiderten Fall wünschen. Kontaktieren Sie uns für ein Angebot.
Weiterlesen