Плагин robots_editor

ID: robots_editor
Name: Robots.txt Editor
Version: 1.4
Acts:
File: robots_editor.php
Config: config.php
Type: plugin
Description: Плагин для редактирования файла robots.txt
Author: Your Name
Author_URI:
Title: Редактор Robots.txt
Information: Позволяет управлять файлом robots.txt через админ-панель
Robots.txt Editor - это мощный плагин для NGCMS, который предоставляет удобный визуальный интерфейс для редактирования файла `robots.txt` прямо из админ-панели. Больше не нужно вручную редактировать файлы через FTP - все настройки доступны через интуитивный веб-интерфейс.
Возможности
- ✅ **Визуальный редактор** с таблицей чекбоксов
- ✅ **Поддержка 3х User-agent**: Yandex, Googlebot, Все остальные
- ✅ **Текстовое поле** для дополнительных правил
- ✅ **Автоматическое добавление** Sitemap и Host
- ✅ **Предпросмотр** в реальном времени
- ✅ **Автосохранение** при изменении настроек
- ✅ **Резервное копирование** файлов
- ✅ **Поддержка сложных путей** с регулярными выражениями
- ✅ **Детальная отладка** при ошибках

Установка
1. Скачайте плагин и распакуйте архив
2. Скопируйте папку `robots_editor` в директорию:
/engine/plugins/

3. Активируйте плагин в админ-панели NGCMS:
- Перейдите в `Админ-панель → Плагины`
- Найдите "Robots.txt Editor" в списке
- Нажмите "Активировать"
4. Настройте плагин через конфигурацию
Использование
Основной интерфейс
1. **Перейдите в настройки плагина**:
Админ-панель → Плагины → Robots.txt Editor → Настройка
2. Настройте параметры:
- Автоматическое добавление карты сайта
- Права доступа для поисковых систем
- Дополнительные правила
3. Сохраните изменения - файл `robots.txt` обновится автоматически
Статус файла
Плагин отображает текущий статус файла:
- ✅ Файл существует и доступен для записи
- ⚠️ Файл существует, но недоступен для записи
- ℹ️ Файл не существует (будет создан автоматически)

⚙️ Настройка прав доступа
Таблица правил
Плагин предоставляет таблицу с тремя колонками для каждого User-agent:
| Путь | Описание | Yandex | Googlebot | Все |
|--------------------------|--------------------|------------|---------------|-------|
| `/engine/` | Движок сайта | ☑ | ☑ | ☑ |
| `/uploads/images/` | Изображения | ☑ | ☑ | ☑ |

Действия с чекбоксами
- ✅ Галочка установлена** → `Allow: /path/`
- ❌ Галочка снята** → `Disallow: /path/`

Дополнительные правила
Текстовое поле для кастомных правил
В разделе "Дополнительные правила" можно добавить любые специальные директивы:
robots.txt

Код:

Clean-param: ref /some_dir/
Crawl-delay: 2
User-agent: SpecialBot
Disallow: /private/
Allow: /public/

Поддерживаемые дополнительные директивы:
- `Clean-param` - очистка параметров URL
- `Crawl-delay` - задержка между запросами
- `User-agent` - особые правила для конкретных ботов
- Любые другие стандартные директивы robots.txt

Системные разделы
Системные папки
- `/engine/` - Движок сайта NGCMS
- `/templates/` - Шаблоны сайта
- `/uploads/avatars/` - Аватары пользователей
- `/uploads/files/` - Загруженные файлы
- `/uploads/images/thumb/` - Миниатюры изображений
- `/uploads/photos/` - Фотографии пользователей
- `/plugin/` - Плагины (общее)
- `/lib/` - Библиотеки
- `/webstat/` - Веб-статистика
- `/cache/` - Кеш
- `/tmp/` - Временные файлы
- `/admin/` - Админ-панель
Контентные разделы
- `/uploads/dsn/` - DSN файлы
- `/uploads/images/$` - Основные изображения
- `/plugin/gsmg/` - Карта сайта GSMG
- `/plugin/sitemap/` - Sitemap
- `/search/` - Поиск по сайту
- `/rss.xml` - RSS лента
- `/login/` - Страница входа
- `/logout/` - Выход из системы
- `/register/` - Регистрация
- `/activate/` - Активация аккаунта
- `/lostpassword/` - Восстановление пароля
- `/profile.html` - Профиль пользователя
- `/users/` - Пользователи
- `/page/` - Статические страницы
- `/*print` - Версия для печати
- `/*xml` - XML файлы
- `/*201*` - Архивные материалы
- `*/page/1$` - Первые страницы пагинации
Примеры
Пример generated robots.txt
robots.txt

Код:

User-agent: Yandex
Allow: /uploads/dsn/
Disallow: /engine/
Disallow: /templates/
Allow: /uploads/images/$
Disallow: /uploads/avatars/
Allow: /plugin/gsmg/
Disallow: /admin/
User-agent: Googlebot
Allow: /uploads/dsn/
Disallow: /engine/
Allow: /uploads/images/$
Disallow: /uploads/avatars/
Allow: /plugin/gsmg/
Disallow: /admin/
User-agent: *
Allow: /uploads/dsn/
Disallow: /engine/
Allow: /uploads/images/$
Disallow: /uploads/avatars/
Allow: /plugin/gsmg/
Disallow: /admin/
Clean-param: utm_source /news/
Crawl-delay: 2
Sitemap: https://ваш-сайт.ru/gsmg.xml
Host: https://ваш-сайт.ru

Пример дополнительных правил
Ограничение скорости сканирования:
robots.txt

Код:

Crawl-delay: 3

Очистка параметров URL:
robots.txt

Код:

Clean-param: utm_source /news/
Clean-param: ref /products/
Clean-param: sessionid /forum/

Особые правила для конкретного бота:
robots.txt

Код:

User-agent: SpecialBot
Disallow: /temp/
Allow: /public/files/
Crawl-delay: 5

Требования
- NGCMS версии не ниже 2020731
- PHP 8.1 или выше
- Права на запись в корневую директорию сайта

Решение проблем
Файл не сохраняется
1. Проверьте права доступа:

Код:

 bash
   chmod 666 /путь/к/сайту/robots.txt
   chmod 755 /путь/к/сайту/

2. Проверьте файл отладки:
/корень_сайта/robots_debug.log
3. Создайте файл вручную:

Код:

bash
   touch /путь/к/сайту/robots.txt
   chmod 666 /путь/к/сайту/robots.txt

common проблемы
- Файл создается в engine/ → Исправлено в последней версии
- Не отображаются изменения → Очистите кеш браузера
- Ошибки прав доступа → Настройте права на директорию

Поддержка
При возникновении проблем:
1. Проверьте **файл отладки**: `robots_debug.log`
2. Убедитесь в **правах доступа** к корневой директории
3. Проверьте **ошибки PHP** в логах сервера
4. **Напишите issue** в репозитории плагина
Лицензия
MIT License - подробности в файле LICENSE
Автор
Разработано для сообщества NGCMS

Скачать:robots_editor.zip

7 сентября 2025 / Плагины, SEO, Система, Сервисы

Плагин robots_editor

Добавить комментарий

Плагин gallery

Плагин feedback

Плагин robots_editor