Amazon Mechanical Turk wird am 30. September eingestellt

Als größter Auftraggeber von AMT in den letzten 10 Jahren wurde diese Nachricht den Auftraggebern zur gleichen Zeit wie den Befragten übermittelt. Es ist auch erwähnenswert, dass unser Hauptkontakt, der Senior Program Manager bei AWS, der AMT leitete, vor etwa 2-3 Jahren zu Amazon Bedrock und SageMaker Model Evaluations gewechselt ist ... und dabei ein im Wesentlichen leeres Team zurückließ, das das Projekt nach der Migration der gespeicherten Wertkonten auf die native AWS-Abrechnung verwaltete.

Also, ich habe eine Geschichte über Mechanical Turk zu erzählen, die dich vielleicht interessiert. Ich habe sie schon ein paar Mal auf Twitter und Bluesky geteilt, aber ich teile sie noch einmal.

Kurz gesagt: Mechanical Turk hat mir den Arsch gerettet.

Im Jahr 2005 arbeitete ich bei einer Zeitung in einer Kleinstadt, in der ich noch nie zuvor gelebt hatte. Ich kannte niemanden außer den Mitarbeitern (da ich Layout machte und nicht als Reporter arbeitete), und ich interessierte mich für die Idee, Mechanical Turk zu nutzen, um ein paar zusätzliche Dollar zu verdienen. Ich dachte, es könnte eine prägende Szene von interessierten Leuten geben, die das tun, also begann ich, an einem Blog darüber zu arbeiten. Ich arbeitete kurz mit einem anderen Typen zusammen, der es auf Forensoftware stellte, weil er nicht wusste, wie man so etwas wie Drupal benutzt.

Dieser Blog hieß Turking.com, und es schien eine Weile gut zu laufen. Wir wurden sogar auf der AWS-Website erwähnt. Aber nach etwa zwei oder drei Monaten war klar, dass die anfängliche Aufregung um die Idee (und die anfängliche Arbeit) abgeklungen war. (Die Arbeit nahm später wieder Fahrt auf, aber auf deutlich andere Weise. Ich glaube nicht, dass die Leute danach wirklich "aufgeregt" darüber waren.)

Wenn du dir eine Vorstellung davon machen willst, gab es einen Schnappschuss auf der Wayback Machine: https://web.archive.org/web/20051124231722/http://www.turkin...

Die Seite begann teilweise auszusterben, weil mein iBook einen katastrophalen GPU-Ausfall erlitt und ich, ein armer Angestellter einer Kleinstadtzeitung, nicht das Geld hatte, es zu ersetzen. Außerdem war die Community einfach nicht so entstanden, wie wir es erwartet hatten […]

Es ist irgendwie verrückt, dass sie das gerade jetzt einstellen, wo dieser Dienst wahrscheinlich die meisten Möglichkeiten überhaupt hat. Du hast einen Agenten mit mehreren Leuten, die echte physische Aufgaben in der realen Welt erledigen – das scheint etwas zu sein, das wirklich mächtig sein könnte.

Interessant. Ich erinnere mich, dass ich vor Jahren das Buch "Life 3.0" gelesen habe, in dem eine der ersten Sachen, die die fiktive AGI tut, um Geld zu verdienen, darin besteht, Aufgaben auf Amazon Mechanical Turk zu erledigen, während sie vorgibt, ein Mensch zu sein.

Nur damit du es weißt: Ich habe es kurz nach dem Start ausprobiert, also ein bisschen nach ~2005, vielleicht 2007, weil ich davon gelesen hatte und die Aussicht, aus der Perspektive der Datenerstellung oder -verbesserung, ehrlich gesagt ziemlich interessant fand. Ich glaube, ich habe davon in einem Forschungspapier gehört, das seine Arbeit auf diese Weise verteilt hat.

Nun, es hat funktioniert, in dem Sinne, dass ich einige Aufgaben erledigen konnte. Ich glaube, ich habe damals nie das Geld/die Gutschriften eingelöst (einfach weil es so wenig war). Was ich aber bestätigen kann, ist, dass es ... ermattend war. Wenn du denkst, dein Bürojob ist langweilig, dann ist es aus Arbeitnehmersicht absolut schrecklich, ihn in viel kleinere Aufgaben aufzuteilen, bei denen du keine Autonomie hast.

Ich hatte ursprünglich gehofft, es zu nutzen, um einen Dienst über einen Datensatz anzubieten, aber als ich aus erster Hand verstand, was es braucht, um das zu ermöglichen, hörte ich auf. Es hat meine Sicht auf überwachtes Lernen seitdem radikal verändert, und leider nicht im Guten.

Ich habe Mechanical Turk in den frühen Tagen genutzt, aber meine eigene Version für meine Branche entwickelt, um Freelancer zu verwalten.

Das Problem, wie ich es sehe, ist die Verifizierung, dass die Arbeit nicht von KI erledigt wurde. Wenn es möglich wäre, irgendwie zu verifizieren, dass die Arbeit definitiv nicht von KI erledigt wurde, glaube ich, dass es immer noch einen Markt dafür gäbe. Aber den Daten kann einfach nicht vertraut werden.

Ein immer größerer Teil meiner Arbeit besteht darin, zu versuchen, Arbeiter auszusortieren, die KI nutzen, und das ist im großen Maßstab keine leichte Aufgabe, weil die Arbeiter im Allgemeinen Vertrauen durch manuelle Arbeit gewinnen und dann im Laufe der Zeit eine Verschlechterung eintritt.

Ich habe es genutzt, um die handschriftlichen Briefe und Tagebücher meines Vaters transkribieren zu lassen. Es war berührend, Notizen von einem "Turk" zu bekommen, der sagte, wie sehr sie seine Reisen genossen hat und den Schauspielern in seinem Leben gefolgt ist!