Ask HN: Wenn KI-Tools so gut sind, warum ist dein Bug-Backlog nicht leer?
Ask HN: If AI tools are so good, why isn't your bug backlog empty?
Viele Leute außerhalb der Tech-Branche fragen mich, ob KI Programmierer ersetzen wird, und ich denke: Wenn das der Fall wäre, sollten uns die Aufgaben ausgehen. Das Bug-Backlog sollte leer sein und wir hätten alle Feature-Wünsche der PMs erledigt, sodass wir auf der Business-Seite zum Engpass würden. Aber das ist weder in meiner eigenen Firma noch bei den meisten Entwicklern, mit denen ich spreche, der Fall. Was ist da los?
Ich weiß nicht, ob ich etwas falsch mache, aber Bugfixing mit KI ist immer ein Glücksspiel. Man kann einem Agenten durchaus sagen, er soll ein Problem beheben, und er wird es beheben, aber in den allermeisten Fällen geschieht das, indem Code hinzugefügt wird, der das spezifische Symptom aus dem Bugreport abdeckt. Es werden selten Lösungen in Betracht gezogen oder empfohlen, die Kompromisse eingehen, das Verhalten ändern, aber eine ganze Klasse ähnlicher Bugs beseitigen würden. Das liegt vor allem daran, dass Agenten nicht die Autonomie haben, ein ganzes Projekt zu verwalten und Kompromisse zur Erhöhung von Einfachheit oder Wartbarkeit einzugehen, aber selbst wenn man ihnen diese Autonomie gibt, nutzt kein KI-Modell, das ich verwendet habe, dieses Privileg, um einfacheren, wartbareren Code zu schreiben.
Es macht mich neugierig, ob das mit besserem Kontextmanagement gelöst werden könnte. Ein echter Entwickler baut im Laufe der Zeit einen globalen Kontext des gesamten Projekts auf, man hat die Gesamtarchitektur immer im Kopf. Bei Agenten geht zwischen den Sitzungen noch viel verloren. Es ist ähnlich wie bei einem neuen Entwickler in einem Projekt, der eher hacky lokale Lösungen macht, während der Senior im Team weiß, wann die Architektur als Teil eines Fixes geändert werden muss.
Meins ist leer. Ich habe meinem Senior-Management erzählt, dass es billiger ist, Dinge mit KI von Grund auf neu zu schreiben, als alte Produkte zu reparieren. Sie haben das begeistert aufgenommen, und alles, was wir jetzt haben, erreicht nie den Status v1.0.
Es ist leer, für mich und mein Team (ich bin Engineering Manager). Wir haben immer noch eine Support-Rotation, aber die dient nur dazu, dass jemand weiß, dass er auf etwaige Alerts reagieren soll. Bearbeiten: Auch das Produkt hat kein tiefes Backlog. Normalerweise können wir nur zwischen ein paar Tagen und einem Monat im Voraus planen. Nach einem großen kürzlichen Produktlaunch haben wir den längsten Horizont seit einer Weile.
Ich kann dasselbe bestätigen: Das Backlog ist so ziemlich leer, es sei denn, wir versuchen, uns in eine neue Domäne vorzuwagen, und das ist normalerweise eine 2-3-monatige Party, danach muss man sich Aufgaben fast ausdenken. Das riecht wirklich nach einer End-of-Backlog-Situation für mich.
- frostiness
Ich weiß nicht, ob ich etwas falsch mache, aber Bugfixing mit KI war schon immer ein Glücksspiel. Man kann einem Agenten durchaus sagen, er soll ein Problem beheben, und er wird dieses Problem beheben, aber in den allermeisten Fällen besteht die Lösung darin, Code hinzuzufügen, der das spezifische Symptom aus dem Bugreport abdeckt. Es kommt selten vor, dass er Lösungen in Betracht zieht oder empfiehlt, die Kompromisse eingehen, die das Verhalten ändern könnten, aber eine ganze Klasse ähnlicher Bugs beseitigen würden.
Das ist hauptsächlich ein Problem mangelnder Autonomie der Agenten, ein ganzes Projekt zu verwalten und die Fähigkeit zu haben, Kompromisse einzugehen, um Einfachheit oder Wartbarkeit zu erhöhen, aber wenn man ihnen diese Autonomie gibt, nutzt kein KI-Modell, das ich verwendet habe, dieses Privileg, um einfacheren, wartbareren Code zu schreiben.
- td521534f12
Alle meine Solo-Projekt-Backlogs _sind_ leer.
Bei meinen Teamprojekten brauche ich immer noch meine Teamkollegen, um Code zu reviewen, was den Abbau des Backlogs ausbremst. Wenn ich kein Code-Review bräuchte, hätte ich das Backlog in Wochen abgearbeitet, aber ich würde dabei eine Menge Ausfälle verursachen (wir fangen tatsächlich Dinge im Code-Review ab!).
Außerdem sind einige meiner Solo-Projekte gamedev-bezogen, und Gamedev ist auch dadurch ausgebremst, dass man tatsächlich sein Spiel spielen muss, um zu sehen, ob es Spaß macht :) aber es ist großartig, aus einer 2-stündigen Playtest-Session mit Notizen herauszukommen und in etwa 15 Minuten einen neuen Build mit eingearbeitetem Feedback zu haben.
- fishtoaster
Es ist so ziemlich? Jeder leicht beschreibbare Bug wurde behoben. Übrig bleiben nur Dinge wie "das ist an sich nicht falsch, es widerspricht nur den Erwartungen der Kunden" und jemand muss herausfinden, was das Produkt in diesem Fall tun sollte.
Wir haben im Frühjahr unser Backlog von "offensichtlich sollten wir das tun, wenn wir Zeit haben"-Zeug abgearbeitet. Es hat ziemlich Spaß gemacht, so ziemlich meine gesamte mehrjährige Refactoring- und Aufräumliste zu erledigen.
Jetzt sind wir so ziemlich auf der Business-Seite ausgebremst.
- GuB-42
Weil KI besser darin ist, Bugs zu finden, als sie zu beheben.
Sie ist auch nicht gut darin, fehlerfreien Code zu schreiben.
KI und Menschen machen nicht dieselben Bugs. KI kann also Bugs finden, die von Menschen leicht übersehen werden, während sie gleichzeitig in anderen Bereichen unglaublich dumm ist.
- mattbrewsbytes
Wenn dein Team und Produkt vorher ein großes Backlog hatten, wird sich das nicht ändern. KI-Tools verstärken, was auch immer du tust. Wenn du also Bugs ignoriert und dich die meiste Zeit auf neue Features konzentriert hast, wird KI nicht magisch ändern, woran ein Team arbeitet.
Auf technischer Ebene: Nimm deine durchschnittliche NullPointerException oder das Äquivalent in der Sprache, die du verwendest. Bitte die KI, sie zu beheben, und sie wird vernünftigerweise in diesem Codestück auf Null prüfen oder es umhüllen. Bitte einen Lead oder Senior Engineer, sie zu beheben, und er wird (hoffentlich) mit "Warum sind diese Daten null? Das sollten sie nicht sein" beginnen und dann durch Logs oder Daten zurückverfolgen, versuchen, es mit einem realen Szenario nachzustellen, und nicht nur diesen Bug beheben, sondern feststellen, dass es irgendwo anders in der Codebasis ein unbehandeltes Szenario gibt. Man könnte die KI auffordern, weiter zu gehen und eine Root-Cause-Analyse durchzuführen, aber vertraust du darauf, dass sie Dinge findet und richtig behebt?
- yokuze
> Das Bug-Backlog sollte leer sein
Ich verstehe nicht.
Vielleicht geht es nur mir so, aber ich habe noch nie in einem Unternehmen und an einem nennenswerten Produkt gearbeitet, das ein leeres Bug-Backlog hatte. Wenn eine Bug-Warteschlange leer ist, wird das Produkt entweder nicht viel genutzt (oder ist keine Priorität), nicht gut genug getestet oder nicht ausreichend überwacht.
Ich weiß nicht, ob eine Welt, in der KI Programmierer größtenteils ersetzt hat, eine Welt mit leerer Bug-Warteschlange ist.
Während KI in vielen Fällen die _Anzahl_ der benötigten Programmierer reduziert, ist sie auch ein Output-Multiplikator für die verbleibenden Programmierer und erhöht oft das Verhältnis von Bugs zu Code.
KI hat zu mehr Output, mehr Projekten und mehr Bugs geführt.
- drltaidev
Hier gibt es auch eine Henne-Ei-Geschichte: KI beschleunigt alles, also ist die Menge an geschriebenem Code viel höher, der immer noch Bugs enthält, auch wenn KI sie größtenteils auch lösen kann, wird weiterhin neuer Code geschrieben ... Das heißt nicht, dass KI-Tools nicht gut sind, aber offensichtlich sind sie auch nicht perfekt. Zum Glück ...
- pickleglitch
Ich bin kein großer Fan von KI, aber bei meiner Arbeit wird erwartet, dass wir sie nutzen. In meiner Position würde es nicht wirklich eine Rolle spielen, wie gut KI ist, denn wenn wir einen Bug finden, dauert es oft ein einstündiges Meeting oder sogar mehrere Meetings, nur um herauszufinden, wie ein bestimmtes Verhalten eigentlich sein sollte, bevor wir überhaupt versuchen können, es zu beheben.