СВОБОДНЫЙ СЛОВАРЬ
ТЕРМИНОВ, ПОНЯТИЙ И ОПРЕДЕЛЕНИЙ
ПО ЭКОНОМИКЕ, ФИНАНСАМ И БИЗНЕСУ
СЛОВАРЬ ТЕРМИНОВ
Главная » СЛОВАРЬ ТЕРМИНОВ » РУССКИЙ АЛФАВИТ » Ф

Файл robots.txt

Файл robots.txt - это The Robots Exclusion Protocol, то есть файл исключений для поисковых роботов. Он является основным инструментом ограничения доступности информации для поисковых роботов.

Файл robots.txt чаще всего используется для запрета индексирования поисковыми роботами страниц:

- с конфиденциальной информацией (интернет-магазины и любые сайты, хранящие личные данные пользователей);

- перемещённых или удалённых (например, при изменении структуры сайта или появления нового зеркала для максимально быстрого обновления кэша поисковой системы);

- дублей контента (блоги, интернет-магазины, сайты с использованием пейджинга и др.).

Robots.txt также позволяет задавать поисковому роботу время загрузки страниц и другие технические характеристики вашего сайта, однако использование таких директив имеет свои особенности в каждой конкретной поисковой системе и в сущности не является приоритетной задачей файла robots.txt.

Стандарт для robots.txt никому не принадлежит, а начало его использования приходится на 1994 год. Сейчас robots.txt используется всеми популярными поисковыми системами.

Основные базы знаний по использованию файла robots.txt – это сайт www.robotstxt.org (на английском языке) и robotstxt.org.ru (на русском языке).
Что такое Файл robots.txt? Файл robots.txt это. На данной странице словаря опубликовано определение экономического термина "Файл robots.txt". Из описания термина вы сможете узнать, что означает понятие "Файл robots.txt", как и где, используется термин "Файл robots.txt".
Категория словаря: Термины на букву «Ф» | Просмотров определения: 1249
Уважаемые читатели! Если вы считаете, что толкование термина «Файл robots.txt» является неправильным или недостаточно полным, то вы можете добавить свою версию экономического понятия «Файл robots.txt».

Смотрите также: Интересные и выгодные предложения!

Ссылки на определение "Файл robots.txt":

HTML-код ссылки на термин для сайтов и блогов
BB-код ссылки на термин для форумов
Прямая ссылка для соц. сетей, чатов и почты
[ ]

Меню словаря

Поиск термина

Разделы словаря

А [1427]
Б [1363]
В [1490]
Г [948]
Д [1921]
Е [218]
Ё [0]
Ж [121]
З [850]
И [1207]
Й [1]
К [2060]
Л [429]
М [1172]
Н [1123]
О [1817]
П [3099]
Р [1502]
С [2635]
Т [1187]
У [609]
Ф [795]
Х [127]
Ц [352]
Ч [358]
Ш [90]
Щ [2]
Ъ [0]
Ы [0]
Ь [0]
Э [662]
Ю [52]
Я [67]
A [97]
B [119]
C [242]
D [114]
E [106]
F [102]
G [43]
H [38]
I [111]
J [12]
K [3]
L [77]
M [116]
N [70]
O [76]
P [148]
Q [6]
R [113]
S [171]
T [98]
U [26]
V [23]
W [31]
X [4]
Y [5]
Z [0]

Друзья словаря

Бизнес-портал
«Открой Свое Дело»

Идеи бизнеса, Библиотека и Деловые объявления
«ТЕНДЕРЫ и ГОСЗАКАЗ»
Большой онлайн каталог Тендеров и Госзаказов.
Бесплатное размещение и регистрация!
Библиотека предпринимателя
Библиотека бесплатной деловой литературы.
Все книги о бизнесе можно скачать бесплатно!

Юридическая помощь!

Идеи бизнеса с нуля!

Объявления

Статистика словаря