X закрывает Nitter: почему открытый веб проигрывает и как atproto предлагает выход
Select * from Internet.blogposts
Автор вспоминает эссе Тима Бернерса-Ли 2007 года о «Гигантском глобальном графе» в связи с тем, что X рассылает cease-and-desist письма проекту Nitter. Он прослеживает, как открытые API Twitter закрывались, превращая сеть в «сад за стеной». Проблема не только в непостоянстве доступа: даже постоянный API ограничен фиксированным меню запросов, не позволяет индексировать данные и объединять их между сервисами. Решение, по мнению автора, — общая база данных. Он объясняет, как atproto реализует это через персональные серверы данных (PDS) и репликацию логов, позволяя приложениям выполнять «SELECT * FROM internet». Приводятся статистика сети (46 млн аккаунтов, 24 млрд записей) и пример кода для доступа к firehose через Jetstream.
Программа, отображающая публичные посты, рассматривается как устройство обхода защиты в соответствии с законами о компьютерных преступлениях.
- dmje
Раздражает опечатка в первой строке…
- 8organicbits
Для блогов я бы вместо этого обратился к RSS. Именно там традиционно публикуется такой контент. Вместо того чтобы выбирать из индекса Bluesky, можно использовать списки подписок OPML. Есть множество мест, где курируют списки лент, так что вероятность столкнуться с закрытием API, как у Twitter, значительно ниже. Существует несколько сайтов, поддерживающих семантику подписчиков через RSS. Feedland публично отслеживает подписки, так что вы можете видеть, какие блоги я читаю (https://feedland.com/?username=robalexdev), и кто читает мой блог (https://feedland.com/?feedurl=https%3A%2F%2Falexsci.com%2Fbl...). Я запускаю еще один вариант, который собирает блогроллы OPML через обход ссылок, так что можно узнать, кому еще нравится ваш любимый блог и что они рекомендуют. Вот страница для блога Саймона Уиллисона (https://blogroll-network.alexsci.com/discover/feed-a34ee2a88...). Мысль о RSS и блогроллах как о сети кажется гораздо более устойчивой, чем API-эндпоинт Jetstream от Bluesky.
- arjie
Сначала я думал, что доля людей, которым нужна такая сеть пиров, будет довольно мала. Я думал, что почти все хотят обширных ограничений для пользовательских агентов и контроля над тем, как данные показываются пользователю. Но Bluesky на самом деле не ограничивает AI-скрапинг и потребление данных. Ты просто еще один потребитель, подверженный ограничению частоты запросов и т.п., будь ты браузер или headless-агент. Должен сказать, я несколько (приятно) удивлен, что такой подход принимается Bluesky, учитывая, что сообщество там более анти-ИИ, чем большинство. Тот факт, что тебе разрешено потреблять ленту, потрясающ. Отличная работа!
- lightandlight
> Интернет — это несколько десятков компаний, у каждой из которых есть картотечный шкаф, и у каждой перед входом стоит секретарь. Он прочитает вам один файл за раз, но только те файлы, которые вы можете назвать, с той скоростью, с какой ему заблагорассудится, и до тех пор, пока его начальник позволяет.
К счастью, это не так. Социальные сети состоят из нескольких больших закрытых садов, но сам интернет все еще открыт. Идите и создайте веб-сайт!
- cube00
> Просто: сеть победила. Разработчики перестали быть активом, и API постепенно закрывалось.
Вы можете добавить Reddit в этот список, скоро IPO, так что лучше оценить сторонние приложения, которые мы поощряли разработчиков создавать.