Search the Community

Showing results for tags 'robots.txt'.



More search options

  • Search By Tags

    Type tags separated by commas.
  • Search By Author

Content Type


Forums

  • Общие вопросы интернет-маркетинга и продвижения в Интернете
    • Общие вопросы интернет-маркетинга
    • Вопросы начинающих по раскрутке сайтов
  • Форум оптимизаторов. SEO форумы о поисковых системах
    • Форум о поисковой системе Яндекс
    • Форум о поисковой системе Google
    • Mail.ru, Rambler, Yahoo и другие поисковики
    • Факторы влияющие на позиции сайта
    • Черные методы SEO: дорвеи, клоакинг и т.д.
  • SMM, форум о социальных сетях и мессенджерах
    • Форум о социальной сети Вконтакте
    • Другие социальные сети, мессенджеры, блоги и видеосервисы
    • Общие вопросы SMM и социальных сетей
  • Форумы о рекламе в Интернете
    • Контекстная реклама в интернете
    • Медийная и баннерная реклама
    • Реклама в социальных сетях
  • Монетизация сайтов
    • Контекстная реклама
    • Партнерские программы
    • Общие вопросы монетизации сайта
  • Форумы веб-разработчиков
    • Вопросы WEB-дизайна, HTML, CSS и Javascript
    • Веб программирование
    • Скрипты: обсуждение, поиск скриптов
    • Платный хостинг, регистрация доменов
  • Полезные ресурсы для оптимизаторов, маркетологов и вебстроителей
    • Программы и сервисы для SEO
    • Семинары, конференции, вебинары
    • Статьи о SEO, раскрутке сайтов и рекламе в Интернете
    • Видео о раскрутке сайтов, SEO и сайтостроении
    • Истории, кейсы продвижения сайтов
  • Практика раскрутки сайтов, интернет-магазинов, блогов
    • Раскрутка интернет-магазина
    • Раскрутка форумов и блогов
  • Биржа оптимизатора, работа и услуги
    • Объявления о покупке и продаже виртуальных товаров
    • Объявления работодателей
    • Объявления тех кто ищет работу и предлагает свои услуги
    • Другие объявления
  • Разное
    • Компьютерный форум
    • Курилка (Флейм)
    • Работа форума, предложения и замечания

Calendars

  • Основной календарь

Found 3 results

  1. Как сделать универсальный robots.txt для всех поисковиков? Можно так сделать или нужно на сайте каждого поисковика вычитывать какие у него особенности и под каждого писать отдельный robots.txt?
  2. Нашла такую рекомендацию для robots.txt битрикса: User-agent: *Disallow: /bitrix/Disallow: /search/Disallow: /auth/Disallow: /auth.phpDisallow: /*?print=Disallow: /*&print=Disallow: /*register=yesDisallow: /*forgot_password=yesDisallow: /*change_password=yesDisallow: /*login=yesDisallow: /*logout=yesDisallow: /*auth=yesDisallow: /*backurl=*Disallow: /*BACKURL=*Disallow: /*back_url=*Disallow: /*BACK_URL=*Disallow: /*back_url_admin=*Disallow: /temp_index.phpDisallow: /access.logDisallow: /include/Disallow: /upload/Disallow: /cgi-bin/Host: site.ruSitemap: http://site.ru/sitemap.xml Скажите пожалуйста. всё ли в нем правильно?
  3. Подскажите пожалуйста, какой командой можно закрыть сайт от индексации в robots.txt?