В: При открытии модуля возникает сообщение "Путь к локальному сайту не указан!".
О: Вам необходимо указать путь к индексному файлу (index.htm) локальной копии сайта это необходимо для генерирования файла robots.txt, его сохранения и дальнейшей загрузки на сайт с помощью модуля "Загрузка сайта"
В:
Что отображается в колонке "Пользовательские агенты"?
О: В список известных пользовательских агентов входят браузеры, менеджеры загрузки, программы проверки правильности ссылок и т. д. Это не роботы поисковых систем! Этот список используется во время анализа лог-файлов. Записи, которые находятся в списке, игнорируются. Чем полнее список, тем быстрее и точнее будет обработка данных, поэтому вы можете добавить свои значения к списку. Как можно контролировать права доступа для пользовательских агентов, которые входят в список? Зайдите в Опции Известные пользовательские агенты, и удалите пользовательский агент из списка. Затем создайте новую запись об этом пользовательском агенте в списке пауков. После этого вы сможете управлять доступом агента к вашему сайту, если этот агент запрашивает файл robots.txt.
В: Как мне запретить доступ к файлам определенного формата? О:
Для этого выберите пункт меню "Создание robots.txt > Расширения файлов". В появившемся окне отредактируйте список расширения файлов, к которым вы бы хотели ограничить доступ и отметьте опцию "Запретить". В дереве каталогов и файлов появится опция выбора файлов по расширениям.
В: Как можно изменить существующий файл robots.txt
О:
Импортируйте существующий файл robots.txt через меню "Проект > Импортировать robots.txt". В запустившемся мастере укажите расположение файла robots.txt, импортируйте его, и укажите расположение веб-сайта, для которого эти инструкции будут применены. |
Если у вас есть вопросы по данному модулю, и вы хотите чтобы ответы на них были доступны в этом разделе, заполните представленную ниже форму.