Популярное

Музыка Кино и Анимация Автомобили Животные Спорт Путешествия Игры Юмор

Интересные видео

2025 Сериалы Трейлеры Новости Как сделать Видеоуроки Diy своими руками

Топ запросов

смотреть а4 schoolboy runaway турецкий сериал смотреть мультфильмы эдисон
dTub
Скачать

Файл robots.txt

Автор: SEO-портал

Загружено: 2020-07-29

Просмотров: 979

Описание:

00:28 - Что такое файл robots.txt?
01:18 - Для чего нужен robots.txt?
01:54 - Что можно с помощью robots.txt?
02:32 - Пример файла
02:47 - Что такое директива?
03:11 - Какие директивы существуют?
04:29 - Что такое группа директив?
04:53 - Директива User-agent
07:09 - Директива Disallow
09:11 - Директива Allow
11:03 - Регулярные выражения
11:39 - Символ «/»
12:36 - Символ «*»
13:41 - Символ «$»
14:39 - Как запретить сканирование всего сайта?
14:49 - Как запретить сканирование веб-страницы?
15:00 - Как запретить сканирование директории?
15:15 - Как запретить сканирование URL с GET-параметрами?
15:50 - Запрет сканирования URL с определённым GET-параметром
16:17 - Как запретить сканирование определённых типов файлов?
16:45 - Как создавать исключения с помощью директивы Allow?
18:16 - Пример файла robots.txt для сайта на Joomla 3
19:10 - Директива Sitemap
20:19 - Требования к файлу robots.txt
20:56 - Как проверить файл robots.txt на ошибки
21:12 - Анализ robots.txt в Яндекс.Вебмастер
22:24 - Инструмент проверки файла robots.txt в Search Console
23:04 - Выводы и заключение

Материал в базе знаний:
https://seoportal.net/baza/indeksatsi...

#robotstxt #seo #индексирование

Файл robots.txt

Поделиться в:

Доступные форматы для скачивания:

Скачать видео mp4

  • Информация по загрузке:

Скачать аудио mp3

Похожие видео

array(10) { [0]=> object(stdClass)#7223 (5) { ["video_id"]=> int(9999999) ["related_video_id"]=> string(11) "7ffRvZb8vnQ" ["related_video_title"]=> string(19) "Файл robots.txt" ["posted_time"]=> string(19) "1 год назад" ["channelName"]=> string(17) "SEO от Ant-Team" } [1]=> object(stdClass)#7196 (5) { ["video_id"]=> int(9999999) ["related_video_id"]=> string(11) "F8sY71dkn4w" ["related_video_title"]=> string(44) "Файл Sitemap XML (карта сайта)" ["posted_time"]=> string(21) "4 года назад" ["channelName"]=> string(16) "SEO-портал" } [2]=> object(stdClass)#7221 (5) { ["video_id"]=> int(9999999) ["related_video_id"]=> string(11) "-zUTlCfzv4s" ["related_video_title"]=> string(46) "SEOquake: обзор и руководство" ["posted_time"]=> string(21) "4 года назад" ["channelName"]=> string(16) "SEO-портал" } [3]=> object(stdClass)#7228 (5) { ["video_id"]=> int(9999999) ["related_video_id"]=> string(11) "D33UCL55tXg" ["related_video_title"]=> string(133) "Что такое Robots txt и для чего он нужен? Как его правильно составлять? - Урок 12" ["posted_time"]=> string(21) "2 года назад" ["channelName"]=> string(51) "Федор Гребенников SEO (Ads-Pro.Pro)" } [4]=> object(stdClass)#7207 (5) { ["video_id"]=> int(9999999) ["related_video_id"]=> string(11) "sxLMh4-QRg4" ["related_video_title"]=> string(103) "Как сделать сайт с помощью нейросети? (ИИ) 5 способов 👋🏻" ["posted_time"]=> string(25) "2 месяца назад" ["channelName"]=> string(23) "Данил Суслов" } [5]=> object(stdClass)#7225 (5) { ["video_id"]=> int(9999999) ["related_video_id"]=> string(11) "HSeoJ5ayG7Q" ["related_video_title"]=> string(77) "Минимальный уровень python для первой работы" ["posted_time"]=> string(19) "1 год назад" ["channelName"]=> string(14) "Backend artist" } [6]=> object(stdClass)#7220 (5) { ["video_id"]=> int(9999999) ["related_video_id"]=> string(11) "0yTwbWv1ZFM" ["related_video_title"]=> string(64) "Индексирование (индексация) сайтов" ["posted_time"]=> string(21) "4 года назад" ["channelName"]=> string(16) "SEO-портал" } [7]=> object(stdClass)#7230 (5) { ["video_id"]=> int(9999999) ["related_video_id"]=> string(11) "BmafSwXwyEQ" ["related_video_title"]=> string(133) "Что будет со ВКЛАДАМИ с 1 июля 2025? Новые правила, снижение ставок, налоги..." ["posted_time"]=> string(21) "6 дней назад" ["channelName"]=> string(12) "InvestFuture" } [8]=> object(stdClass)#7206 (5) { ["video_id"]=> int(9999999) ["related_video_id"]=> string(11) "WJ3wUJXED2Y" ["related_video_title"]=> string(111) "⚡️ Путин вступается за Иран || Срочное заседание Совбеза ООН" ["posted_time"]=> string(23) "5 часов назад" ["channelName"]=> string(23) "Время Прядко" } [9]=> object(stdClass)#7224 (5) { ["video_id"]=> int(9999999) ["related_video_id"]=> string(11) "35UoBDSZF3s" ["related_video_title"]=> string(102) "ИИ-инструменты и будущее ИИ в разработке / Гриша Бакунов" ["posted_time"]=> string(19) "4 дня назад" ["channelName"]=> string(30) "Эволюция Кода 🧬" } }
Файл robots.txt

Файл robots.txt

Файл Sitemap XML (карта сайта)

Файл Sitemap XML (карта сайта)

SEOquake: обзор и руководство

SEOquake: обзор и руководство

Что такое Robots txt и для чего он нужен? Как его правильно составлять? - Урок 12

Что такое Robots txt и для чего он нужен? Как его правильно составлять? - Урок 12

Как сделать сайт с помощью нейросети? (ИИ) 5 способов 👋🏻

Как сделать сайт с помощью нейросети? (ИИ) 5 способов 👋🏻

Минимальный уровень python для первой работы

Минимальный уровень python для первой работы

Индексирование (индексация) сайтов

Индексирование (индексация) сайтов

Что будет со ВКЛАДАМИ с 1 июля 2025? Новые правила, снижение ставок, налоги...

Что будет со ВКЛАДАМИ с 1 июля 2025? Новые правила, снижение ставок, налоги...

⚡️ Путин вступается за Иран || Срочное заседание Совбеза ООН

⚡️ Путин вступается за Иран || Срочное заседание Совбеза ООН

ИИ-инструменты и будущее ИИ в разработке / Гриша Бакунов

ИИ-инструменты и будущее ИИ в разработке / Гриша Бакунов

© 2025 dtub. Все права защищены.



  • Контакты
  • О нас
  • Политика конфиденциальности



Контакты для правообладателей: [email protected]