Модуль, позволяющий индексировать сайт (а также генерировать Sitemap) согласно правилам как в robots.txt (правила дублируются в настройках модуля Поиск). Подробнее в блоге: https://dev.1c-bitrix.ru/community/webdev/user/11948/blog/7509/
Рекомендую к использованию также модуль актуальной карты сайта: https://marketplace.1c-bitrix.ru/solutions/asd.sitemap/
Рекомендую к использованию также модуль актуальной карты сайта: https://marketplace.1c-bitrix.ru/solutions/asd.sitemap/
Просто установите модуль и новый функционал появится автоматически. Переходите на страницу настроек модуля _поиск_ (стандартный) и можете вносить маски как на скриншоте.<br /><br />Внимание! Не копируйте весь robots.txt в поле настроек, там можно ставить ограничения только на страницы и разделы.<br />Можно: /auth/*<br />Нельзя: /*auth=*<br /><br />Пост в блоге: <a href="https://dev.1c-bitrix.ru/community/webdev/user/11948/blog/7509/" target="_blank" >https://dev.1c-bitrix.ru/community/webdev/user/11948/blog/7509/</a>
Для данного решения техподдержка не предусмотрена. По другим вопросам: <a href="https://www.asd-it.ru/support/" target="_blank" >https://www.asd-it.ru/support/</a>