Common Crawl

Common Crawl Статистика использования · Загрузить список всех веб-сайтов, использующих Common Crawl

Этот веб-сайт был найден в наборе данных Common Crawl. Данные с этого сайта, вероятно, использовались для обучения ИИ LLM.

German

German Статистика использования · Загрузить список всех веб-сайтов, использующих German

Содержание сайта написано на немецком языке.

German - Inferred

German - Inferred Статистика использования · Загрузить список всех веб-сайтов, использующих German - Inferred

Судя по названию и описанию, контент сайта потенциально немецкий.

Viewport Meta

Viewport Meta Статистика использования · Загрузить список всех веб-сайтов, использующих Viewport Meta

На этой странице используется метатег области просмотра, что означает, что контент может быть оптимизирован для мобильного контента.

IPhone / Mobile Compatible

IPhone / Mobile Compatible Статистика использования · Загрузить список всех веб-сайтов, использующих IPhone / Mobile Compatible

Веб-сайт содержит код, который позволяет странице поддерживать контент для iPhone/Mobile.

AmazonBot Disallow

AmazonBot Disallow Статистика использования · Загрузить список всех веб-сайтов, использующих AmazonBot Disallow

AmazonBot — это сканер, к которому издатели веб-контента могут обращаться за информацией: на веб-сайте установлены правила запрета.

ИИ-бот

SSL by Default

SSL by Default Статистика использования · Загрузить список всех веб-сайтов, использующих SSL by Default

По умолчанию веб-сайт перенаправляет трафик на версию HTTPS/SSL.

LetsEncrypt

LetsEncrypt Статистика использования · Загрузить список всех веб-сайтов, использующих LetsEncrypt

Let’s Encrypt — это бесплатный открытый центр сертификации.

Корневой орган власти

HSTS

HSTS Статистика использования · Загрузить список всех веб-сайтов, использующих HSTS

Заставляет браузеры взаимодействовать с сайтом только по протоколу HTTPS.

SPF

SPF Статистика использования · Загрузить список всех веб-сайтов, использующих SPF

Структура политики отправителей — это открытый стандарт, определяющий технический метод предотвращения подделки адреса отправителя.

DMARC

DMARC Статистика использования · Загрузить список всех веб-сайтов, использующих DMARC

Техническая спецификация, созданная группой организаций, которые хотят помочь снизить вероятность злоупотреблений по электронной почте.

ДМАРК

German Server Location

German Server Location Статистика использования · Загрузить список всех веб-сайтов, использующих German Server Location

Веб-сервер расположен в Германии.

Расположение сервера

All-Inkl

All-Inkl Статистика использования · Загрузить список всех веб-сайтов, использующих All-Inkl

Немецкое хостинговое решение, принадлежащее Neue Medien Muennich GmbH.

немецкий хостинг

All-Inkl DNS

All-Inkl DNS Статистика использования · Загрузить список всех веб-сайтов, использующих All-Inkl DNS

Немецкое DNS-решение, принадлежащее Neue Medien Muennich GmbH.

nginx

nginx Статистика использования · Загрузить список всех веб-сайтов, использующих nginx

nginx [engine x] — HTTP-сервер и почтовый прокси-сервер, написанный Игорем Сысоевым.

Baidu Bot Disallow

Baidu Bot Disallow Статистика использования · Загрузить список всех веб-сайтов, использующих Baidu Bot Disallow

На веб-сайте есть правила запрета для бота Baidu Baiduspider.

GPTBot Disallow

GPTBot Disallow Статистика использования · Загрузить список всех веб-сайтов, использующих GPTBot Disallow

На веб-сайте есть правила запрета для OpenAI GPTBot.

ИИ-бот

Majestic Bot Disallow

Majestic Bot Disallow Статистика использования · Загрузить список всех веб-сайтов, использующих Majestic Bot Disallow

На сайте есть правила запрета для Majestic Bot.

Semrush Bot Disallow

Semrush Bot Disallow Статистика использования · Загрузить список всех веб-сайтов, использующих Semrush Bot Disallow

На сайте есть правила запрета для Semrush Bot.

Yandex Bot Disallow

Yandex Bot Disallow Статистика использования · Загрузить список всех веб-сайтов, использующих Yandex Bot Disallow

На сайте есть правила запрета Яндекса YandexBot.

Ahrefs Bot Disallow

Ahrefs Bot Disallow Статистика использования · Загрузить список всех веб-сайтов, использующих Ahrefs Bot Disallow

На сайте есть правила запрета для бота Ahrefs.

Common Crawl Bot Disallow

Common Crawl Bot Disallow Статистика использования · Загрузить список всех веб-сайтов, использующих Common Crawl Bot Disallow

Заблокируйте сканирование сайта с помощью Common Crawl Crawler.

ИИ-бот

Anthropic Claude Bot Disallow

Anthropic Claude Bot Disallow Статистика использования · Загрузить список всех веб-сайтов, использующих Anthropic Claude Bot Disallow

Блокировать бота Anthropic Claude.

ИИ-бот

Facebook Bot Disallow

Facebook Bot Disallow Статистика использования · Загрузить список всех веб-сайтов, использующих Facebook Bot Disallow

Блокирует сканирование Facebook.

ИИ-бот

Webz Omgili Disallow

Webz Omgili Disallow Статистика использования · Загрузить список всех веб-сайтов, использующих Webz Omgili Disallow

Webz.io запрещает блокировку индексации больших данных.

ИИ-бот