Alibaba Cloud stellt Kitta vor, einen domänenspezifischen Code-Review-Agenten

Eine Antwort auf den wachsenden Prüfdruck

Alibaba Cloud stellt Kitta vor dem Hintergrund eines Wandels in der Softwareentwicklung vor: KI-gestütztes Programmieren steigert die Code-Menge, während die Kapazitäten für Code-Reviews nicht im gleichen Tempo gewachsen sind. Nach Angaben des Unternehmens verlagert sich der Engpass in Forschung und Entwicklung vom Schreiben von Code hin zu dessen Prüfung.

Der Artikel zitiert die jährliche DORA-Studie State of AI-assisted Software Development, für die etwa 5.000 Personen befragt wurden. Den von Alibaba Cloud zitierten Zahlen zufolge geht eine stärkere Einbindung von KI in die Entwicklung mit einem Anstieg der Code-Fehlerrate um 9 %, einer Verlängerung der Code-Review-Zeit um 91 % und einer Zunahme der durchschnittlichen Größe von Pull Requests um 154 % einher. Alibaba Cloud betont zudem, dass es sich bei diesen Zahlen um Korrelationswerte und nicht um kausale Schlussfolgerungen handelt.

Die Quelle beschreibt Code-Reviews als zentrale Phase in der geplanten Agentic-Continuous-Integration-Pipeline von OpenAnolis. Sie liegt zwischen KI-gestütztem Programmieren und späteren intelligenten Tests sowie dem Zusammenführen in die Community, wobei Menschen die endgültige Entscheidung über das Mergen behalten.

Warum allgemeine Review-Tools an ihre Grenzen stoßen

Alibaba Cloud zufolge können allgemeine KI-Review-Tools schnell reagieren und grundlegende Fehler abfangen, verfügen aber häufig nicht über das für Expertenarbeit erforderliche Projektverständnis. Das Unternehmen nennt unter anderem eine unvollständige Abdeckung, ungenaue Positionen bei gemeldeten Problemen und instabile Ergebnisse, wenn sich Prompts geringfügig ändern.

Das grundlegende Problem besteht dem Artikel zufolge darin, dass unterschiedliche Projekte unterschiedliche technische und geschäftliche Bewertungen erfordern. Bei einem Kernel-Review kann es etwa auf die Semantik von Sperren ankommen, während ein Compiler-Review Kenntnisse über die Konventionen seiner Zwischenrepräsentation voraussetzen kann. Auch die Standards können sich zwischen einem Open-Source-Community-Projekt, einem internen Unternehmens-Repository und der Pflege einer Distribution unterscheiden.

Kitta begegnet diesem Problem, indem es einen allgemeinen Agenten in einen Domänenspezialisten verwandelt. Der Prozess beginnt mit realen Review- und Fehlerdatensätzen, darunter Daten aus Projekt-Repositories. Diese Datensätze werden gesammelt, verknüpft, normalisiert, von Störsignalen bereinigt, semantisch analysiert und unabhängig reproduziert, bevor sie zu projektspezifischen Expertenressourcen werden.

Gemeldete Ergebnisse in sechs Domänen

Zu den daraus entstehenden Ressourcen gehören Bewertungskriterien wie Review-Prinzipien, Fehlermuster und Projektkonventionen sowie Validierungsbeispiele mit fehlerhaftem Code, normalem Code und erwarteten Schlussfolgerungen. Alibaba Cloud zufolge macht dieser Ansatz Domänenwissen überprüfbar und wiederverwendbar und ermöglicht es, daraus eine organisatorische Fähigkeit zu entwickeln, statt es auf persönliche Erfahrung zu beschränken.

Kitta läuft seit seiner Inbetriebnahme in der OpenAnolis-Community. Alibaba Cloud berichtet, dass der Agent mehr als 70.000 Patches geprüft hat. Die Genauigkeit bei der Abweisung fehlerhafter Änderungen liegt demnach bei 97 %, die Merge-Rate stabil bei 62 %.

Das Unternehmen gibt an, dass seine Methode zur Domänenanpassung in sechs Bereichen validiert wurde, darunter Betriebssystem-Kernel, Compiler und Anwendungen der Agent-Plattform. Die Qualität der Reviews habe sich demnach um 17,0 % bis 31,6 % verbessert. Zugleich würden Maintainer von der Prüfung jeder einzelnen Codezeile entlastet und könnten sich auf Streitfragen konzentrieren, die menschliches Urteilsvermögen erfordern.

Für Nutzer deutet die Ankündigung auf ein Modell hin, bei dem KI-Reviews an die Historie, Standards und Validierungsdaten eines Projekts angepasst werden. Die Zahlen von Alibaba Cloud stammen aus Unternehmensangaben, zeigen aber die vorgesehene Rolle von Kitta: mehr Routinearbeit bei Reviews zu übernehmen und zugleich die Community-Maintainer für die endgültigen Entscheidungen verantwortlich zu lassen.