Er trainiert ein Modell auf Demoscenes – und impft ihm seinen eigenen Geschmack ein
I post trained a model on Demoscenes
Fasziniert von HellMoods MS-DOS-Demo „Memories“ und den 140-Zeichen-JavaScript-Demos auf Dwitter.net, baut der Autor ein eigenes Modell: Qwen2.5-Code-7B wird per Continued Pretraining auf 25.000 Dweets trainiert, dann mit einer nach „Awesomeness“ gewichteten Curriculum-Auswahl und schließlich per GRPO-RLHF auf die eigenen Vorlieben getrimmt. Rund 40.000 Animationen sichtet er von Hand. Das Ergebnis, Demoscener-7B, liefert ästhetisch deutlich reizvollere Fortsetzungen unfertiger Programme.
Irgendwann um die 10.000ste Animation herum begann ich, die Existenz von VLMs und HPSv3 zu schätzen. Leider war es zu spät.
- emptybits
Die menschliche Seite der Demo-Szene ist das, was sie meiner Meinung nach attraktiv macht. Teilen und Konsumieren. Ein Mitmensch hat das gemacht! Coder als Problemlöser und Künstler.
Sicher ist es intellektuell interessant, wenn KI etwas Neuartiges innerhalb der Demoscene-Constraints generieren kann (140 Zeichen oder extrem niedrige Auflösung oder ein POKEY-Chip bei 1 MHz oder was auch immer) … etwas, das Menschen vielleicht für unmöglich hielten … wie ein siegreicher Zug, der einen Go- oder Schach-Großmeister sagen lässt: WTF. Es verändert, was möglich ist. Aber dann hoffen die meisten von uns (?) immer noch, dass der Sport/die Szene/die Kunst zur menschlichen Anstrengung zurückkehrt.
Ich war auf Partys, wo Demos auf einer großen Leinwand laufen, sogar welche, die wir schon gesehen haben, und das Publikum wird „ooo“ und „aah“ machen, weil ein Mensch herausgefunden hat, wie man dieses Zeug unter Constraints hinbekommt. Die Magie geht verloren, wenn es generiert ist, IMO.
- InvisibleUp
Ich glaube, du missverstehst den Sinn der Demoscene. Es geht mehr um mathematische Fähigkeiten und die Freude am Knobeln als um hübsche Bilder.
Angemessene Verwendungen für KI könnten sein, die Geschichte der Demoscene-Effekte nachzuverfolgen oder zu erklären, wie eine bestimmte Szene funktioniert, damit du sie besser verstehen kannst. Niemand in der Szene will eine Zauberkiste, die das Rätsel für sie löst.
- xg15
Nicht zu verwechseln mit dem Trainieren eines Modells auf Demoscenes, dem wenig bekannten Cousin 3. Grades des griechischen Staatsmanns Demosthenes.
- xacky
Demoscenes sind ein einzigartig menschliches Unterfangen.
- psenough
Herzlichen Glückwunsch zur Wiederentdeckung genetischer Algorithmen in prozedural generierter Kunst. Warum die Mathematik und Size-Coding-Optimierungen lernen, die die Effekte möglich machen, wenn man einfach Tokens draufwerfen und Zeit damit verbringen kann, den Müll für die Maschine herauszufiltern? Was für eine Zeit, um am Leben zu sein!