Представляем сканер активности продукта NeedSift

Потребности в обнаружении требуют доказательств того, что продукт активен

Красивая стартовая страница может оставаться в сети на протяжении многих лет после прекращения разработки. В то же время, небольшая команда может выпускать значимые улучшения каждую неделю, не создавая масштабную маркетинговую кампанию. Статический каталог не может различать эти ситуации.

NeedSift теперь собирает ежедневную историю продукта из общедоступных, недорогих сигналов. Цель не в наблюдении. Это компактный ответ на полезный вопрос: этот продукт доступен, поддерживается, публикуется и распространяется?

Что наблюдает сканер

Работник проверяет основной веб-сайт, метаданные стабильных релизов из App Store и Google Play, общедоступную активность GitHub или Telegram (при наличии) и файлы карты сайта, размещенные через robots.txt. Дополнительные ссылки для демонстрации можно проверить с помощью нормализованного отпечатка контента.

Для каждой ежедневной проверки он хранит только информацию, необходимую для истории: доступность, время отклика, отпечатки контента, версию и дату выпуска, самую последнюю общедоступную активность, количество URL в карте сайта и количество новых обнаруженных страниц.

• Доступность веб-сайта и значительные видимые изменения контента.
• Версия приложения и дата выпуска из метаданных публичных магазинов.
• Самая последняя общедоступная активность GitHub или Telegram (при поддержке).
• Новые URL в карте сайта и недавние даты последнего изменения.
• Ежедневный балл, который можно построить, не раскрывая личные аналитические данные.

Отслеживание карты сайта способствует долгосрочной публикации.

Когда продукт публикует документацию, записи в changelog, руководства, интеграции или лендинговые страницы, эти дополнения часто появляются в его карте сайта. NeedSift записывает до 2000 URL и может обнаруживать страницы, которые не существовали во время предыдущего сканирования.

Сканер не посещает эти страницы. Он читает максимум три одинаковых документа карты сайта, ограничивает каждый ответ двумя мегабайтами и использует только первое наблюдение в качестве базового. Это позволяет сделать публикацию видимой, не превращая NeedSift в агрессивного сканера.

Предназначен для вежливого взаимодействия

Работник запускается один раз в день с ограниченной конкуренцией и задержкой между запросами к одному и тому же доменному имени. Каждый запрос имеет тайм-аут, размеры ответов ограничены, перенаправления ограничены, а недопустимые источники пропускаются вместо повторных попыток.

NeedSift никогда не требует учетных данных клиентов, доступа к личным панелям или аналитической информации. Сканер использует ту же общедоступную информацию, которую могут видеть посетители или поисковые системы, но собирает гораздо меньше данных, чем поисковые боты.

Что увидит строитель в будущем

На страницах продуктов теперь есть график активности и отдельные показатели для состояния веб-сайта, релизов, публикаций в социальных сетях и активности карты сайта. По мере накопления данных, строители смогут понять, какие виды работы создают устойчивый импульс.

В будущих обновлениях будет уделено особое внимание более точному обнаружению аномалий, более понятным объяснениям изменений в оценках и лучшему распознаванию журналов изменений и документации — без увеличения нагрузки на сканирование.