AntiBotCore WAF
Энциклопедия автоматических ботов и краулеров: 1 533 профилей роботов. Анализ сигнатур User-Agent, создаваемая нагрузка, влияние на SEO и готовые правила блокировки в Nginx, Apache и robots.txt.
Генерирует превью (заголовок, картинка, описание) при публикации ссылок ВКонтакте. Читает Open Graph и og:image.
Mozilla/5.0 (compatible; vkShare; +http://vk.com/dev/Share)
Генерирует предпросмотр ссылок в чатах и каналах Telegram. Также используется Telegram Instant View для создания быстрых страниц.
TelegramBot (like TwitterBot)
Читает Twitter Cards метаданные при публикации ссылок в X/Twitter. В этот профиль также включены Facebookbot и Slackbot как аналогичные social preview боты.
Twitterbot/1.0
Discordbot создаёт rich embed-превью ссылок в чатах Discord. LinkedInBot — аналог для публикаций в LinkedIn.
Mozilla/5.0 (compatible; Discordbot/2.0; +https://discordapp.com)
Генерирует превью ссылок при отправке URL в чатах WhatsApp. User-Agent содержит 'A' (Android) или 'i' (iOS).
WhatsApp/2.23.24.77 A
Бот Google для получения каналов RSS и Atom для сервисов Google.
Feedfetcher-Google
Бот LinkedIn для сканирования профессионального контента и профилей
LinkedInBot
Веб-сканер Page2RSS для преобразования RSS
page2rss
Внешний поисковый бот Facebook
facebookexternalhit
Веб-сканер Facebook для обмена информацией в социальных сетях
Facebot
Веб-сканер TweetMeme для поиска социального контента
TweetmemeBot
AddThis бот-сканер для социальных сетей
AddThis
Бот-сканер изображений прокси Slack
Slack-ImgProxy
Веб-сканер Embedly для встраивания контента
Embedly
Бот веб-сканера Skype для предварительного просмотра URI
SkypeUriPreview
Бот-сканер Slack для расширения ссылок
Slackbot
Веб-сканер Reddit для обмена контентом
redditbot
Веб-сканер WhatsApp для предварительного просмотра ссылок
WhatsApp
Веб-сканер Pinterest для обнаружения контента
pinterest\.com\/bot
Бот-сканер для предварительного просмотра Bing
BingPreview\/
Бот веб-сканера Yahoo для предварительного просмотра ссылок
Yahoo Link Preview
Веб-сканер Jetslide для обнаружения контента
Jetslide
Веб-сканер NewShareCounts для совместного использования
newsharecounts
Поисковый робот в социальных сетях для обмена информацией
EveryoneSocialBot
Веб-сканер Ning для обнаружения контента
NING\/
Бот-сканер социальных сетей Mastodon
Mastodon
Бот-сканер веб-сервисов Hatena
Hatena
Бот-сканер Google для веб-просмотра
Google Web Preview
Веб-сканер Netvibes для агрегирования контента
Netvibes
Feedly Fetcher — это то, как Feedly захватывает каналы RSS или Atom, когда пользователи решают добавить их в свой Feedly или любое другое приложение, созданное на основе облака Feedly.
Feedly
Бот-сканер веб-страниц Fever Feed Reader
Fever
прокси-сервис для получения, проверки и подготовки определенных элементов веб-сайтов для представления через приложение Flipboard.
FlipboardProxy
Веб-сканер G2Reader для обнаружения контента
g2reader-bot
Веб-сканер VK Share для обмена в социальных сетях
vkShare
Miniflux — минималистский и самоуверенный читатель каналов.
Miniflux\/
Веб-сканер Feedspot для обнаружения каналов
Feedspot
Бот-сканер BazQux RSS Reader
BazQux
Бот-сканер Old Reader
theoldreader\.com
RSS-бот для чтения RSS-сканеров
RSSingBot
Веб-сканер Fedora Planet для агрегирования
fedoraplanet
Бот-сканер социальных сетей Friendica
Friendica
Бот-сканер для чтения новостей NextCloud
NextCloud
Tiny Tiny RSS-сканер-бот для чтения RSS
Tiny Tiny RSS
Гвен RSS для веб-сканера новостного шлюза
Gwene
Веб-сканер SimplePie PHP для анализатора каналов
SimplePie
Бот-сканер Superfeedr для чтения каналов
Superfeedr
Бот-сканер веб-каналов WordPress.com
feedbot
Блог Naver RSS-бот для сканирования веб-страниц
NAVER Blog Rssbot