Zum Inhalt springen
KendorDocs

Solltest du Claude Code in technischen Interviews erlauben?

Erlaube KI-Agenten, wenn der Job sie nutzt, passe Aufgabe und Token-Budget an, informiere Kandidaten vorab und prüfe das Transkript zusammen mit dem Code.

Erlaube Claude Code oder Codex in einem technischen Interview, wenn der Job die Arbeit mit Coding-Agenten umfasst, und lass sie aus, wenn du sehen willst, wie jemand allein durch Code hindurchdenkt. Wenn du sie erlaubst, gestalte die Aufgabe so, dass ein Agent sie nicht mit einem einzigen Prompt löst, begrenze die Tokens, sag den Kandidaten genau, was erlaubt ist und aufgezeichnet wird, und prüfe das Agenten-Transkript zusammen mit dem Code.

Warum die Frage jetzt wichtig ist

Viele Engineering-Teams nutzen heute täglich Agenten. Sie in Interviews zu verbieten, testet eine Arbeitsweise, die der Kandidat im Job nicht haben wird. Sie ohne Überlegung zu erlauben, liefert dir einen Test, den der Agent besteht, nicht die Person. Keine der beiden Voreinstellungen passt für jede Rolle, also entscheide pro Interview.

Wie entscheidest du, ob du KI-Agenten erlaubst?

Frag dich, wie der Job nach sechs Monaten aussieht.

Agenten erlauben, wenn Agenten ausschalten, wenn
das Team täglich Claude Code, Codex oder Ähnliches nutzt die Rolle für Berufseinsteiger ist und du Grundlagen sehen musst
die Aufgabe eine realistische Änderung in einer echten Codebase ist die Aufgabe so klein ist, dass ein Agent sie direkt löst
dir Review, Testen und Urteilsvermögen wichtig sind du gezielt das Debuggen von Hand beurteilen willst
du sehen willst, wie jemand delegiert und überprüft du Kandidaten nicht erklären kannst, wie bewertet wird

Wofür du dich auch entscheidest: Wende es auf alle Kandidaten für diese Rolle an. Wechselnde Regeln innerhalb einer Hiring-Runde machen die Ergebnisse unvergleichbar.

Die Regel zu verstecken funktioniert nicht

„Keine KI“ ist bei einem Take-Home schwer durchzusetzen: Ein Kandidat kann einen Agenten auf einem anderen Rechner laufen lassen. So zu tun, als wäre es anders, belohnt die Leute, die sich nicht an die Regel halten. Wenn du ein Signal ohne KI brauchst, hol es dir in einer Live-Session, in der du die Arbeit live siehst.

Welches Signal bekommst du mit Agenten?

Der Code allein sagt dir weniger, weil ein Agent den Großteil geschrieben haben kann. Das nützliche Signal verschiebt sich dahin, wie der Kandidat gearbeitet hat:

  • Formulierung. Hat er das Problem dem Agenten klar erklärt, mit dem richtigen Kontext und den richtigen Randbedingungen?
  • Lesen. Hat er gelesen, was der Agent erzeugt hat, oder alles unbesehen übernommen?
  • Überprüfen. Hat er die Tests ausgeführt, neue ergänzt und Randfälle geprüft, die der Agent übersehen hat?
  • Korrigieren. Hat er bemerkt, wenn der Agent in die falsche Richtung lief, und gegengesteuert?
  • Verantwortung. Kann er jede Zeile im finalen Diff erklären?

Ein Kandidat, der einmal promptet und abgibt, zeigt dir sehr wenig. Wer die Aufgabe zerlegt, einem schwachen Vorschlag widerspricht und einen Test ergänzt, den der Agent vergessen hat, zeigt dir, wie er im Team arbeiten wird.

Gestalte die Aufgabe für Agenten

Eine Aufgabe mit Agenten braucht Raum für Urteilsvermögen. Gute Formate:

  • Ein Bug in einer mittelgroßen Codebase, bei dem die Ursache zwei Dateien vom Symptom entfernt liegt.
  • Ein Feature mit einem Zielkonflikt, etwa Konsistenz gegen Geschwindigkeit, bei dem der Kandidat wählen und begründen muss.
  • Eine Änderung mit bestehenden Tests, die weiter bestehen müssen, damit nachlässige Änderungen auffallen.

Vermeide Lehrbuch-Algorithmen. Agenten haben sie alle schon gesehen.

Lege ein Token-Budget fest

Ein Budget schützt deine Rechnung und sorgt für gleiche Bedingungen: Ein Kandidat sollte nicht zehnmal so viel Agentenzeit bekommen wie ein anderer. Es regt Kandidaten außerdem an, nachzudenken, bevor sie prompten.

Bemiss es nach der Aufgabe. Löse die Aufgabe selbst mit dem Agenten, notiere, was du verbraucht hast, und erlaube dann das Zwei- bis Dreifache. Sag den Kandidaten, dass es ein Budget gibt, und zeig ihnen, wie viel noch übrig ist, damit ein aufgebrauchtes Budget nie überrascht.

Sei offen gegenüber Kandidaten

Bevor sie anfangen, sollten Kandidaten wissen:

  1. Welche Agenten verfügbar sind und wie sie sie starten.
  2. Dass ihre Prompts, die Antworten des Agenten und die Befehle, die er ausführt, aufgezeichnet und Reviewern angezeigt werden.
  3. Dass ihr Code unter dem Account deiner Organisation an den KI-Anbieter gesendet wird.
  4. Ob es ein Token-Budget gibt.
  5. Wie die Arbeit beurteilt wird, zum Beispiel „uns ist wichtig, wie du die Ausgabe des Agenten überprüfst“.

Wenn du das offen sagst, entfällt das Ratespiel, und du bekommst ein ehrlicheres Bild davon, wie jemand arbeitet.

Prüfe das Transkript, nicht nur den Diff

Mit Agenten ist das Transkript Teil der Arbeit. Lies es wie eine Pairing-Session:

  • Überfliege zuerst die Prompts des Kandidaten. Sie zeigen dir, wie die Person über das Problem nachgedacht hat.
  • Achte auf die Momente, in denen er den Agenten zurückgewiesen oder korrigiert hat.
  • Prüfe, ob die Tests im Diff vom Kandidaten, vom Agenten oder von beiden geschrieben wurden und ob sie ausgeführt wurden.
  • Bewerte niemanden schlechter, nur weil er den Agenten viel nutzt. Bewerte schlechter, wer dessen Arbeit nicht prüft.

Mehr dazu in So beurteilst du Take-Home-Aufgaben fair.

So geht es in Kendor

In Kendor führen Kandidaten claude (Claude Code) oder codex (Codex) im Sandbox-Terminal aus, direkt am echten Projekt, auf dem eigenen Anthropic- oder OpenAI-Account deiner Organisation. Lässt du Kandidaten stattdessen ihren eigenen Account nutzen, können sie außerdem Antigravity, GitHub Copilot, Cline, OpenCode oder Cursor ausführen. Siehe Claude Code und Codex aktivieren.

Schlüssel verbinden

Ein Organisations-Owner öffnet Integrationen und verbindet Claude Code und Codex. Claude Code akzeptiert einen Anthropic-API-Schlüssel oder Identitätsföderation mit deiner Claude Console, sodass kein Schlüssel gespeichert wird. Codex akzeptiert einen OpenAI-API-Schlüssel. Schlüssel werden verschlüsselt gespeichert, und Kendor zeigt nur die letzten vier Zeichen. Nur Owner können sie ändern. Details unter Organisationsschlüssel.

Schlüssel gelangen nie in die Sandbox

Die Sandbox enthält nur ein Session-Token, keinen Anbieter-Schlüssel. Jeder Aufruf des Agenten läuft über das Gateway von Kendor, das die Session und das Budget prüft, den Schlüssel deiner Organisation hinzufügt und den Aufruf an Anthropic oder OpenAI weiterleitet. Ein Kandidat kann deinen Schlüssel im Terminal weder lesen noch kopieren.

Agenten für ein Screening aktivieren

Aktiviere in den Einstellungen des Screenings KI-Assistenten im Terminal. Standardmäßig ist es aus. Lege dann ein Token-Budget pro Kandidat:in in Millionen Tokens fest: was der Assistent liest und schreibt, summiert über alle Challenges, ohne zwischengespeicherten Kontext. Lass das Feld leer für Kein Limit.

Für die gesamte Organisation begrenzt das Monatliches Token-Limit in den Einstellungen der Integration, was alle Kandidaten zusammen in einem Kalendermonat verbrauchen dürfen. Siehe Token-Budgets.

Was Kandidaten sehen

Bevor sie Screening beginnen wählen, erfahren Kandidaten, dass KI-Assistenten verfügbar sind, welchen Befehl sie ausführen müssen, dass ihre Workspace-Dateien und Prompts unter deinem Account an deinen KI-Anbieter gehen und dass die Unterhaltung gespeichert und Reviewern angezeigt wird. Während der Arbeit sehen sie ihren Token-Verbrauch im Vergleich zum Budget und eine Warnung, wenn sie sich der Grenze nähern. Ist das Budget aufgebraucht, arbeitet der Agent für diesen Versuch nicht mehr.

Live-Coding-Interviews

Bei einem Live-Coding-Interview legt die Einstellung KI-Assistenten im Terminal den Standard fest, und Claude Code und Codex im Terminal im Einladungsdialog ändert ihn für eine Session. Im Raum kann ein Interviewer für alle zwischen KI an und KI aus umschalten. Live-Sessions haben kein Budget pro Kandidat; das monatliche Limit der Organisation gilt weiterhin.

Das Transkript prüfen

Auf der Review-Seite zeigt der Tab KI-Agenten jede Unterhaltung Zug um Zug: Prompt, Agent, Überlegung, jeden Tool-Aufruf und seine Tool-Ausgabe. Der Tab Terminal gibt wieder, was der Kandidat und der Agent ausgeführt haben, und der Header zeigt die Tokens, die der Versuch im Vergleich zum Budget verbraucht hat. Solange ein Versuch noch läuft, können Reviewer das Terminal live verfolgen.

Hinweis. Kendor zeichnet weder den Bildschirm noch die Webcam des Kandidaten auf. Reviewer sehen das Terminal, die Agenten-Unterhaltung, den Code und die Aktivität im Editor.

War dieser Artikel hilfreich?