Muse de Meta es fantástico para hacer web scraping
Meta's Muse is fantastic for web scraping
El autor de fullsets.fm, un proyecto que recopila conciertos profesionales, usa Muse de Meta para rastrear Reddit y YouTube en busca de videos y canales ocultos. Paga 80 dólares al mes y consume miles de millones de tokens semanales, aunque el modelo Muse Spark 1.3 es mediocre para escribir o programar. Le preocupa que otros usen Muse para atacar sus propios sitios y entiende por qué Amazon ya lo bloqueó.
Me preocupa lo que pasará cuando alguien apunte Muse a mis propios sitios web. Estos agentes no duermen y pueden hacerse pasar por usuarios reales extremadamente bien.
- dvt
Construí un "arnés web" de IA que corre en un Chromium en sandbox (usando un plugin personalizado cargado lateralmente que se comunica por websockets con un "driver") para básicamente hacer cualquier cosa que un usuario normal podría hacer en un navegador. Evita por completo todas y cada una de las medidas anti-bot y solo recibe las mismas que tú mismo recibirías también (y las pasa con éxito, por ejemplo, la casilla de Cloudflare o esos molestos rompecabezas de OCR).
No estoy seguro de si debería publicarlo, pero estoy seguro de que más gente está captando el poder de la navegación agéntica.
- wiether
Como alguien que tiene que luchar contra los bots de Meta todos los días para mantener los sitios web accesibles para clientes reales, no me sorprende leer que puede verse como algo positivo al otro lado de la valla.
Pero me pregunto: ¿a qué costo?
- kevmo314
Muse se topó con un captcha y me preguntó si quería que lo resolviera.
Así que, por supuesto, hice clic en sí y obedientemente convenció al sitio de que no era un bot.
- arjunchint
sus IPs estáticas al principio eran buenas y no las marcaban, pero ahora la mayoría de los sitios reconocen sus rangos de IP y los bloquean.
La utilidad de Muse ha caído significativamente con los bloqueos.
Para volver a ser verdaderamente útil, tendrán que usar proxies residenciales, pero no puedo verlos usándolos debido a los riesgos y al daño reputacional.
- sixtyj
> No sé a dónde lleva esto, pero probablemente veremos más sitios web bloquear a Muse a menos que Meta prevenga el abuso.
Multiplícalo por 1,000,000 de intentos de acceso, diarios.
Es cuestión de tiempo que incluso los navegadores normales necesiten alguna huella permitida para ir a sitios que de otro modo serían capturados por Cloudflare o un muro similar.