В связи с переходом на новый движок... возможны сбои в работе! Простите!
Работы производятся прямо сейчас 19-03-2024! 🞨
Меню :


Blog (1392)
php (329)
js (244)
html (147)
css (131)
html tags (62)
js tag (56)
jquery (42)
text (37)
js method (36)
php array (33)
js date (33)
form html (30)
online (29)
Показать еще :
fonts (26)
ruweb.net (25)
foto (22)
php file (20)
atom (20)
forum (19)
hosting (18)
svg (18)
input (18)
php date (17)
board (16)
php time (16)
html book (16)
color (15)
info (15)
img (14)
js time (14)
js url (14)
js events (14)
htaccess (13)
select (13)
notepad (13)
osclass (13)
keyboard (12)
знак (12)
dw block (12)
php img (12)
php path (12)
table (12)
download (12)
icon (11)
form (11)
jsphp (11)
alphabet (10)
keyframes (10)
js delete (10)
yandex (10)
mouse (10)
chart (9)
hover (9)
dosite (8)
browser (8)
php post (7)
comment (7)
php url (7)
iframe (6)
php get (6)
mysql (6)
click (6)
list (6)
canvas (6)
adminka (6)
vs code (6)
js id (5)
mb (5)
heading (5)
value (5)
reg.ru (5)
ftp (5)
year (5)
js math (5)
tag a (5)
bbcode (4)
php var (4)
base64 (4)
xml (4)
scandir (4)
games (4)
flags (4)
symbols (4)
week (4)
day (4)
ssl (4)
нок (4)
submit (4)
task (4)
vk (4)
month (4)
pages (4)
console (4)
js form (4)
domen (3)
line (3)
https (3)
js post (3)
jquery post (3)
money (3)
numbers (3)
js img (3)
padding (3)
куб (3)
captcha (3)
ucoz (3)
js hash (3)
tag hr (2)
details (2)
typeof (2)
seo (2)
prompt (2)
sitemap (2)
рся (2)
youtube (2)
height (2)
arrows (2)
js vars (2)
counter (2)
google (2)
qr kod (2)
video (2)
speed (1)
smile (1)
нод (1)
rutube (1)
scroll (1)
windows (1)
archive (1)
jino (1)
cursor (1)

Robots.txt - как сделать/пример

"robots.txt" - что такое "robots.txt", где находится robots.txt. Зачем нужен "robots.txt"?

Подробно о robots.txt

  1. Что такое "robots.txt"
  2. Как сделать файл "robots.txt"
  3. Пример robots.txt

  1. Что такое "robots.txt"

    С самого начала дадим определение : "Что такое "robots.txt"" - я бы сказал так:

    "robots.txt" - это один из инструментов управления сайтом.

    Какая основная функция файла "robots.txt"?

    Основная функция инструмента под названием "robots.txt" - это:

    Открыть для индексации... сайт, страницу/страницы/папку/папки... и др...

    Закрыть для индексации... сайт, страницу/страницы/папку/папки... и др...

    Где находится файл "robots.txt"?

    Файл "robots.txt" находится в том месте где корневая папка - если вы поленились туда пойти и почитать, то корневая папка это там, где находится файл

    https://ваш_сайт.ru/index.html

    Посмотреть "robots.txt" на сервере.

    На сервере его можно увидеть через любую. программу, которая умеет подключаться по ftp!

    Нажмите, чтобы открыть в новом окне.
    Посмотреть ‘robots.txt‘ на сервере.

  2. Как сделать файл "robots.txt"

    Для того, чтобы сделать файл "robots.txt" вам понадобится:

    Открываем простой блокнот

    У меня первая строка всегда идет "Host" - прописываем название вашего сайта без http протокола:

    Host: dwweb.ru

    Информация из интернета:

    Host – это директива файла robots.txt, указывающая роботам поисковых систем главное зеркало сайта.
    Из всех директив, Host распознается исключительно ботами Яндекса.

    Нам нужно что-то записать в наш первый файл "robots.txt", как я уже сказа выше... открываем простой блокнот... и вставляем туда первую нашу строчку...

    Как сделать файл ‘robots.txt‘

    Далее - файл - сохранить как:

    Как сделать файл ‘robots.txt‘

    Выбираем место сохранения...

     1). + Имя файла "robots.txt".
     2). + Тип файла txt.
     3). + Кодировка "utf-8"
     4). + Сохранить.
    Нажмите, чтобы открыть в новом окне.
    Как сделать файл ‘robots.txt‘

    Далее... созданный файл "robots.txt," загружаем на сервер в коневую папку.

     1). Либо встроенным файл менеджером(у меня он есть в директАдмине).
     2). Либо через, уже упомянутую программу для ftp filezilla.

    Как проверить ... ваш файл на сервере?

    Смотри пример ниже:


  3. Пример robots.txt

    После того, как вы создали robots.txt

    Загрузили robots.txt на сервер он должен у вас открыться по адресу...

    https://ваш_сайт.ru/index.html

    Давайте посмотрим, как и где открывается файл robots.txt у меня на сайте...

    Пример моего robots.txt

Не стесняемся говорить спасибо!
Помочь проекту DwWeb.ru

Поделиться ссылкой! C друзьями или врагами!

Этим вы очень поможете проекту! Заранее огромное спасибо!

Ещё : dwweb.ru есть здесь:
ruweb
Все статьи авторские, при копироавании активная ссылка обязательна DwWeb.ru! © 2015 - 2024 Контакты. Реклама на сайте Лучший хостинг : RUWEB + помощь по RUWEB
Страница загружена за : 0.018991 секунд. Подробнее