Кто это
- Подпись
Praha-X/0.1 (+https://praha-x.cz/bot)- Чей
- Praha-X.cz, городская память Праги и чешских краёв
- Откуда приходит
- с наших собственных адресов; сервер находится в Европейском союзе
Что он делает
Читает публично опубликованные сообщения: ленты RSS и Atom ведомств и городских районов, официальные доски объявлений, пресс-релизы учреждений и фирм. Из них мы берём заголовок, дату, ссылку и короткий контекст, чтобы написать о событии собственную фразу со ссылкой на вас как на источник. Чужие тексты мы не перепечатываем.
Для сообщений, о которых мы пишем, робот один раз открывает и страницу статьи, на которую
ведёт лента, и читает её текст как материал для собственного пересказа. Этот текст остаётся у нас
как рабочий материал и на сайте не появляется. Оговорку об анализе текстов и данных мы соблюдаем
(tdm-reservation, протокол TDMRep): где она заявлена, текст не берём.
Для рейтинга Top 100 чешских сайтов робот раз в неделю открывает главную страницу и значок примерно трёхсот самых посещаемых чешских сайтов: проверяет, жив ли сайт, куда он перенаправляет и как называется. Больше ничего с сайта не читает и содержимое главной страницы не хранит.
Как он себя ведёт
- Соблюдает
robots.txt: что запрещено, мы не читаем. - Ходит медленно: ленты несколько раз в день, страницу статьи только один раз, не больше одного запроса в три секунды на один сайт, без параллельных соединений и без обхода всего сайта.
- Не обходит защиту. Если вы нам отказываете (кодом 403, 429 или проверочной страницей), мы прекращаем и записываем источник как закрытый. Другие адреса и другие подписи не пробуем.
- Не выдаёт себя за браузер и не заполняет формы.
- Не собирает персональные данные сверх того, что есть в публично опубликованном сообщении.
Если вы нас не хотите
Достаточно строки в вашем robots.txt: мы прочитаем её и уйдём.
User-agent: Praha-X
Disallow: /Или напишите нам через форму обращений, и мы исключим источник вручную. Отвечаем людям, а не роботам.