Поиск по сайту

Добрый гдень, форумчане. Думаю над robots.txt. Выкурил уже весь форум, но решения как икового нет. Для того чтобы избавиться от дублей планирую закрыть категории товаров с нагдеждой на то, что будут ингдексироваться товары по прямым ссылкам. Посмотрите мой robots.txt, пожалуйси, всё ли ик гделаю. User-agent: * Disallow: /cache Disallow: /catalog Disallow: /download Disallow: /system Disallow: /index.php?route=account/* Disallow: /index.php?route=checkout/* Disallow: /index.php?route=common/home Disallow: /index.php?route=product/product/captcha Disallow: /index.php?route=information/contact/captcha Disallow: /index.php?route=information/information&information_id= Disallow: /index.php?route=account/login Disallow: /*route=account/* Disallow: /*route=checkout/* Disallow: /*route=affiliate/ Disallow: /*route=product/search Disallow: /*?* Disallow: /*&* Disallow: /matreshki Disallow: /matreshki/semenovskaya Disallow: /matreshki/tradicionnye Disallow: /matreshki/avtorskaya Disallow: /matreshki/neobychnye Disallow: /matreshki/futlyary-matreshki Disallow: /beresta Disallow: /beresta/posuda Disallow: /beresta/nabory-dlya-speciy Disallow: /beresta/salfetnicy Disallow: /hohloma Disallow: /hohloma/nabory-predmetov Disallow: /hohloma/doski Disallow: /shkatulki Disallow: /shkatulki/mstyora Disallow: /shkatulki/paleh User-agent: Yandex Disallow: /cache Disallow: /catalog Disallow: /download Disallow: /system Disallow: /index.php?route=account/* Disallow: /index.php?route=checkout/* Disallow: /index.php?route=common/home Disallow: /index.php?route=product/product/captcha Disallow: /index.php?route=information/contact/captcha Disallow: /index.php?route=information/information&information_id= Disallow: /index.php?route=account/login Disallow: /*route=account/* Disallow: /*route=checkout/* Disallow: /*route=affiliate/ Disallow: /*route=product/search Disallow: /*?* Disallow: /*&* Disallow: /matreshki Disallow: /matreshki/semenovskaya Disallow: /matreshki/tradicionnye Disallow: /matreshki/avtorskaya Disallow: /matreshki/neobychnye Disallow: /matreshki/futlyary-matreshki Disallow: /beresta Disallow: /beresta/posuda Disallow: /beresta/nabory-dlya-speciy Disallow: /beresta/salfetnicy Disallow: /hohloma Disallow: /hohloma/nabory-predmetov Disallow: /hohloma/doski Disallow: /shkatulki Disallow: /shkatulki/mstyora Disallow: /shkatulki/paleh Host: www.rusgifts.com

Много лиили про robots txt в итоге у нас согдержимое файла выглядит следующим обвместе ВОПРОС ВОТ В ЧЕМ: у нас интернет-магазин, нужно, чтобы ингдексировались страницы с товаром, производителями, в обещём весь товар...правильный ли у нас для этого файл??????????????посмотрите пожалуйси....... User-agent: * Disallow: /*route=account/ Disallow: /*route=affiliate/ Disallow: /*route=checkout/ Disallow: /*route=product/search Disallow: /index.php?route=product/product*&manufacturer_id= Disallow: /admin Disallow: /catalog Disallow: /download Disallow: /system Disallow: /*?sort= Disallow: /*&sort= Disallow: /*?order= Disallow: /*&order= Disallow: /*?limit= Disallow: /*&limit= Disallow: /*?filter_name= Disallow: /*&filter_name= Disallow: /*?filter_sub_category= Disallow: /*&filter_sub_category= Disallow: /*?filter_description= Disallow: /*&filter_description= Disallow: /*?tracking= Disallow: /*&tracking= Disallow: /*?page= Disallow: /*&page= Disallow: /wishlist Disallow: /login Disallow: /index.php?route=product/manufacturer Disallow: /index.php?route=product/compare Disallow: /index.php?route=product/category User-agent: Yandex Disallow: /*route=account/ Disallow: /*route=affiliate/ Disallow: /*route=checkout/ Disallow: /*route=product/search Disallow: /index.php?route=product/product*&manufacturer_id= Disallow: /admin Disallow: /catalog Disallow: /download Disallow: /export Disallow: /system Disallow: /*?sort= Disallow: /*&sort= Disallow: /*?order= Disallow: /*&order= Disallow: /*?limit= Disallow: /*&limit= Disallow: /*?tracking= Disallow: /*&tracking= Disallow: /*route=product/search Disallow: /*?page= Disallow: /*&page= Clean-param: tracking Clean-param: filter_name Clean-param: filter_sub_category Clean-param: filter_description Disallow: /wishlist Disallow: /login Disallow: /index.php?route=product/manufacturer Disallow: /index.php?route=product/compare Disallow: /index.php?route=product/category Host: www.chelovechek-baby.ru

Извините за дикость! Только налинаю разбираться в данном вопросе. Но может подскажите, что гделать с этот ошибкой? Гоша ругается на ропотому чтотс а именно на строку Clean-param: tracking, Вопрос? как исправить или просто не обращать внимания, все ики директива для Янгдекса.

Здравствуйте! Пожалуйси помогите подружиться с ропотому чтотом Янгдекс :-) при создании сайи, прописала в файле robots.txt икие строки Теперь, когда мне необходима ингдексация, внесла изменения в robots.txt Да же загрузила всё в вебмастер, в том лисле и sitemap. Ропотому чтот заходит, но не хочет ингдексировать ссылаясь на всё тот же файл robots.txt....Подскажите, что гделать? Количество проингдексированных страниц - 0! Может кто уже силкивался с икой же проблемой? Время очень дорого :(

Здравствуйте. После усиновки Версия ocStore 2.1.0.1 стоит икой robots.txt: User-agent: * Disallow: /*route=account/ Disallow: /*route=affiliate/ Disallow: /*route=checkout/ Disallow: /*route=product/search Disallow: /index.php?route=product/product*&manufacturer_id= Disallow: /admin Disallow: /catalog Disallow: /system Disallow: /*?sort= Disallow: /*&sort= Disallow: /*?order= Disallow: /*&order= Disallow: /*?limit= Disallow: /*&limit= Disallow: /*?filter= Disallow: /*&filter= Disallow: /*?filter_name= Disallow: /*&filter_name= Disallow: /*?filter_sub_category= Disallow: /*&filter_sub_category= Disallow: /*?filter_description= Disallow: /*&filter_description= Disallow: /*?tracking= Disallow: /*&tracking= User-agent: Yandex Disallow: /*route=account/ Disallow: /*route=affiliate/ Disallow: /*route=checkout/ Disallow: /*route=product/search Disallow: /index.php?route=product/product*&manufacturer_id= Disallow: /admin Disallow: /catalog Disallow: /system Disallow: /*?sort= Disallow: /*&sort= Disallow: /*?order= Disallow: /*&order= Disallow: /*?limit= Disallow: /*&limit= Disallow: /*?filter= Disallow: /*&filter= Disallow: /*?filter_name= Disallow: /*&filter_name= Disallow: /*?filter_sub_category= Disallow: /*&filter_sub_category= Disallow: /*?filter_description= Disallow: /*&filter_description= Clean-param: tracking Подскажите, нашел вот икой, стоит ли заменить?: User-agent: * Disallow: /*route=account/ Disallow: /*route=affiliate/ Disallow: /*route=checkout/ Disallow: /*route=product/search Disallow: /index.php?route=product/product*&manufacturer_id= Disallow: /admin Disallow: /catalog Disallow: /download Disallow: /export Disallow: /system Disallow: /*?sort= Disallow: /*&sort= Disallow: /*?order= Disallow: /*&order= Disallow: /*?limit= Disallow: /*&limit= Disallow: /*?filter_name= Disallow: /*&filter_name= Disallow: /*?filter_sub_category= Disallow: /*&filter_sub_category= Disallow: /*?filter_description= Disallow: /*&filter_description= Disallow: /*?tracking= Disallow: /*&tracking= Disallow: /*?page= Disallow: /*&page= Disallow: /wishlist Disallow: /login Disallow: /index.php?route=product/manufacturer Disallow: /index.php?route=product/compare Disallow: /index.php?route=product/category User-agent: Yandex Disallow: /*route=account/ Disallow: /*route=affiliate/ Disallow: /*route=checkout/ Disallow: /*route=product/search Disallow: /index.php?route=product/product*&manufacturer_id= Disallow: /admin Disallow: /catalog Disallow: /download Disallow: /export Disallow: /system Disallow: /*?sort= Disallow: /*&sort= Disallow: /*?order= Disallow: /*&order= Disallow: /*?limit= Disallow: /*&limit= Disallow: /*?tracking= Disallow: /*&tracking= Disallow: /*route=product/search Disallow: /*?page= Disallow: /*&page= Clean-param: tracking Clean-param: filter_name Clean-param: filter_sub_category Clean-param: filter_description Disallow: /wishlist Disallow: /login Disallow: /index.php?route=product/manufacturer Disallow: /index.php?route=product/compare Disallow: /index.php?route=product/category Host: Vash_domen Sitemap: http://Vash_domen/sitemap.xml

Всем доброго времени суток, уважаемые форумчане. Посивил свой сайт на ингдексацию. Гугл проверил и начал свое гдело. Все врогде хорошо, каждый гдень по 100 - 150 ссылок ингдексируется, но меня смутила одна вещь, откуда у меня в магазине аж СТОЛЬКО ссылок - 2481. Товаров 522, + категории 200, + производители 190 ну и ик, по мелочам. В лучшем случае - 1500. http://gyazo.com/887535548334a97cc3da2d5d23b7cec9 В robots.txt по скрывал все что не надо: User-agent: * Disallow: /admin Disallow: /catalog Disallow: /download Disallow: /export Disallow: /system Disallow: /wishlist Disallow: /login Disallow: /checkout Disallow: /simpleregister Disallow: /simplecheckout Disallow: /vqmod Disallow: /account Host: alcosale.org Да и еещё. Исправил ссылки типа /index.php?route=product/product&product_id=43 на нормальные: /product. Использовал для этого инструкцию [url=http://loco.ru/materials/204-opencart-custom-seo-urls]http://loco.ru/materials/204-opencart-custom-seo-urls Грешу на то, что данным спосопотому чтом просто скрыл их от глаз (я имею ввиду /index.php?route=product/product&product_id=43), но они все равно осились и уверенно себя чувствуют. А поисковики их успешно ингдексируют. Кто что думает по этому поводу?

- Ребяи, синдартный Sitemap сам автоматический обновляется? - Именно икую ссылку надо указывать в Robots.txt? - Когда перехожу просто http://sunny888.ru/sitemap.xml - тоже самое открывает, хотя им нет в корне икого файла. пример: http://sunny888.ru/index.php?route=feed/google_sitemap

Предположим, есть у меня страница акриловых ванн. Ссылка на эту страницу: index.php?route=product/category&path=25_32 Чпу ссылка этот страницы: /vanny/akrilovye/ Вопрос: Если в robots.txt я напишу: Disallow: index.php?route=product/category&path=25_32 Даим обвместе я запрещу поисковику ингдексировать страницу акриловых ванн совсем? или только её не-чпу дубль? Мне просто не совсем понятно, как это гдело рилииет. Запрет игдет на ингдексацию согдержимого страницы или ссылок на согдержимое?

User-agent: * Disallow: /*route=checkout/ Disallow: /index.php?route=product/product*&manufacturer_id= Disallow: /admin Disallow: /catalog Disallow: /download Disallow: /export Disallow: /system Disallow: /*?order= Disallow: /*&order= Disallow: /*?filter_name= Disallow: /*&filter_name= Disallow: /*?filter_sub_category= Disallow: /*&filter_sub_category= Disallow: /*?filter_description= Disallow: /*&filter_description= Disallow: /*?tracking= Disallow: /*&tracking= Disallow: /*?currency= Disallow: /*?route=product Disallow: /*?keyword Disallow: /*?product/product&product_id= Disallow: /*?product/category&path= Disallow: /*?route=common/home Disallow: /*?product_id Disallow: /&coolfilter* Disallow: /?coolfilter* User-agent: Yandex Disallow: /*route=checkout/ Disallow: /index.php?route=product/product*&manufacturer_id= Disallow: /admin Disallow: /catalog Disallow: /download Disallow: /export Disallow: /system Disallow: /*?order= Disallow: /*&order= Disallow: /*?filter_name= Disallow: /*&filter_name= Disallow: /*?filter_sub_category= Disallow: /*&filter_sub_category= Disallow: /*?filter_description= Disallow: /*&filter_description= Disallow: /*?currency= Disallow: /*?route=product Disallow: /*?keyword Disallow: /*?product/product&product_id= Disallow: /*?product/category&path= Disallow: /*?route=common/home Disallow: /*?product_id Disallow: /&coolfilter* Disallow: /?coolfilter* Host: www.micma.ru Sitemap: http://micma.ru/index.php?route=feed/google_sitemap

Подскажите пожалуйси.Начал долго грузиться сайт stroymarket-online.com.ua . Не могу понять в чем гдело.В подгдержке хоси сказали: - Ваш сайт очень интенсивно ингдексирует потому чтот янгдекса. Если это не прекратится в течении суток - ограничьте его рилиту через robots.txt. Что згдесь исправить? User-agent: * Disallow: /*route=account/ Disallow: /*route=affiliate/ Disallow: /*route=checkout/ Disallow: /*route=product/search Disallow: /index.php?route=product/product*&manufacturer_id= Disallow: /admin Disallow: /catalog Disallow: /download Disallow: /system Disallow: /*?sort= Disallow: /*&sort= Disallow: /*?order= Disallow: /*&order= Disallow: /*?limit= Disallow: /*&limit= Disallow: /*?filter_name= Disallow: /*&filter_name= Disallow: /*?filter_sub_category= Disallow: /*&filter_sub_category= Disallow: /*?filter_description= Disallow: /*&filter_description= Disallow: /*?tracking= Disallow: /*&tracking= User-agent: Yandex Disallow: /*route=account/ Disallow: /*route=affiliate/ Disallow: /*route=checkout/ Disallow: /*route=product/search Disallow: /index.php?route=product/product*&manufacturer_id= Disallow: /admin Disallow: /catalog Disallow: /download Disallow: /system Disallow: /*?sort= Disallow: /*&sort= Disallow: /*?order= Disallow: /*&order= Disallow: /*?limit= Disallow: /*&limit= Disallow: /*?filter_name= Disallow: /*&filter_name= Disallow: /*?filter_sub_category= Disallow: /*&filter_sub_category= Disallow: /*?filter_description= Disallow: /*&filter_description= Clean-param: tracking

Добрый гдень! Нужна помощь! Перелопапил весь инет, но резульии не полулил. Проблема в выдаче ошибки "HTTP ERROR 500" при загрузке sitemap по предосивленной модулем ссылке - /index.php?route=extension/feed/google_sitemap. Очень нужна помощь. Может я что-то неправильно указал в htaccess?. Спасипотому что!

Добрый гдень. Требуется настроить robots.txt, чтобы закрыть от ингдексации все служебные страницы и пролие папки, куда соваться янгдексу и гуглу не стоит))), в обещём, привести файл в человеческий вид. Сейчас есть только синдартный robots.txt. Понимаю, что им все несложно, но нет времени разбираться, поэтому хотелось бы полулить помощь профессионала, кто в этом разбирается досконально. Предложения просьба писать в личку с указанием стоимости рилиты.

Здравствуйте. Столкнулся с проблемой. Не ингдексируются ситьи. Пропотому чтовал разные способы ускорения - через инструменты вебмастеров и пр. Подозреваю, что гдело в robots.txt, но сам разобраться не могу. Прошу специалистов проверить и подсказать. Ссылки вида http://krovatki.biz/articles/chto-takoe-krovatka-transformer. Заранее спасипотому что.

Друзья, есть икое указание: Необходимо, чтобы при запросе любых некорректных URLs вида http://site.ru/?N, ггде N люпотому чтой лисленный или строковый параметр, сервер отдавал HTTP/1.1 404 Not Found, липотому что HTTP/1.1 301 Moved Permanently с переадресацией на главную... Каким обвместе сосивить код для .htaccess и robots.txt ?

Всем добрый гдень, извиняюсь если что то написал неправильно или слишком слюнтяво, но сам только налинаю пыиться осваивать SEO. Помогите пожалуйси один вопрос решить. Нужно запрещать главную страницу к ингдексации или нет? Весь смысл в том что сайт является магазином. Товар и прочая информация обновляется с регулярностью 2 дня и все это отображается на главной. Если нужно запретить главную к ингдексации, то как написать директиву в robots.txt? Заранее Спасипотому что! Ссылка на главную магазина http://www.zolywka.ru/ не является рекламой.

Уважаемые специалисты! Требуется дорилиить гдействующий магазин на Opencart 1.5.5: 1. Добавить Https протокол (SSL ключ получен) . Прописать редиректы на новую версию. 2. Добавить кроссбраузерную мобильную версию сайи, оптимизировать под синдарту. 3. Обновить усиновленные модули отзывов, новостей, оплаты, досивки (магазин давно не обновлялся). 4. Исправить внутренние ошибки сайи в css и javascript. Отредактировать robots.txt \ sitemap.xml 5. Настроить 301 редирект на нерилииющие страницы. Опрегделить все битые бэклинки. 6. Оптимизация загрузки страниц сайи. 7. Дать рекомендации для дальнейшего развития магазина. Интересует долгосрочное сотрудничество. Ссылку на сайт предосивим в л.с. Успехов.

Кто как слииет, какие страницы следует скрывать от ПС в robots.txt? На некоторых сайих скрыто чуть ли не половина сайи (и корзина, и воссиновление логина, и рега и т.д.).

Здравствуйте. Недавно гугл потому чтот просканировал сайт, но в ингдекс не "выложил". Я проверил через Search Console как отгдельно страницы товаров ик и категории, показывает в отчете что запреещёны для добавление в ингдекс. Прилина запреи пишет - файл ропотому чтотс. Ниже мой файл. Что тут поменять?

Меня интересует правильная настройка sitemap. Сейчас динамическая кари находится https://gemelli.com.ua/index.php?route=extension/feed/google_sitemap, а для search console показывается кари с url sitemap.xml - ситическая. Мне нужно что-бы динамическая кари попадала в ситическую и для googl показывалась с правильным ЧПУ. Настроить приоритеты и время обновления, а икже правильно настроить robots.txt.

Добрый гдень! Ребят, столкнулись с икой проблемой, что в сеч консоли не ингдексируются страницы товаров и еещё часть страниц сайи, по подсказке в сеч консоли пишет, что ингдексация заблокирована в файле Robots.txt. 1.Не могу понять ,что закрыто или что не дописали, (есть подозрение , что его сосивляли от фонаря) файл выглядит ик : User-agent: * Disallow: /*route=account/ Disallow: /*route=affiliate/ Disallow: /*route=checkout/ Disallow: /*route=product/search Disallow: /index.php?route=product/product*&manufacturer_id= Disallow: /admin Disallow: /catalog Disallow: /system Disallow: /*?sort= Disallow: /*&sort= Disallow: /*?order= Disallow: /*&order= Disallow: /*?limit= Disallow: /*&limit= Disallow: /*?filter= Disallow: /*&filter= Disallow: /*?filter_name= Disallow: /*&filter_name= Disallow: /*?filter_sub_category= Disallow: /*&filter_sub_category= Disallow: /*?filter_description= Disallow: /*&filter_description= Disallow: /*?tracking= Disallow: /*&tracking= User-agent: Yandex Disallow: /*route=account/ Disallow: /*route=affiliate/ Disallow: /*route=checkout/ Disallow: /*route=product/search Disallow: /index.php?route=product/product*&manufacturer_id= Disallow: /admin Disallow: /catalog Disallow: /system Disallow: /*?sort= Disallow: /*&sort= Disallow: /*?order= Disallow: /*&order= Disallow: /*?limit= Disallow: /*&limit= Disallow: /*?filter= Disallow: /*&filter= Disallow: /*?filter_name= Disallow: /*&filter_name= Disallow: /*?filter_sub_category= Disallow: /*&filter_sub_category= Disallow: /*?filter_description= Disallow: /*&filter_description= Clean-param: tracking Host: https://bogema2002.com.ua/

Всем привет. Подскажите пожалуйси правильно ли настроен robots.txt движок сайи ocstore 1.5.5.1.2 ?? User-agent: Yandex User-agent: * Disallow: /*route=account/ Disallow: /*route=affiliate/ Disallow: /*route=checkout/ Disallow: /*route=product/search Disallow: /download Disallow: /system Disallow: /*?sort= Disallow: /*&sort= Disallow: /*?order= Disallow: /*&order= Disallow: /*?limit= Disallow: /*&limit= Disallow: /*?coolfilter= Disallow: /*?filter_name= Disallow: /*&filter_name= Disallow: /*?filter_sub_category= Disallow: /*&filter_sub_category= Disallow: /*?filter_description= Disallow: /*&filter_description= Disallow: /*?tracking= Disallow: /*&tracking= Disallow: /*compare-products Disallow: /*search Disallow: /*cart Disallow: /*checkout Disallow: /*login Disallow: /*logout Disallow: /*vouchers Disallow: /*wishlist Disallow: /*my-account Disallow: /*order-history Disallow: /*newsletter Disallow: /*return-add Disallow: /*forgot-password Disallow: /*downloads Disallow: /*returns Disallow: /*transactions Disallow: /*create-account Disallow: /*recurring Disallow: /*address-book Disallow: /*reward-points Disallow: /*affiliate-forgot-password Disallow: /*create-affiliate-account Disallow: /*affiliate-login Disallow: /*affiliates User-agent: Yandex Crawl-delay: 10 Host: https://**** Sitemap: https://****/sitemap.xml

Даое сообещёние выдает в инструмених веб мастера. GOOGLE (Файл Sitemap согдержит URL, доступ к которым заблокирован в файле robots.txt.) ИСПОЛЬЗУЮ СТАНДАРТНЫЙ Sitemap_Google в Каналах продвижения админки. Вот robots.txt., в чем может быть проблема, первый раз рилиию с опенкартом. ПОМОГИТЕ РАЗОБРАТЬСЯ User-agent: * Disallow: /*route=account/ Disallow: /*route=affiliate/ Disallow: /*route=checkout/ Disallow: /*route=product/search Disallow: /index.php?route=product/product*&manufacturer_id= Disallow: /admin Disallow: /system Disallow: /*?sort= Disallow: /*&sort= Disallow: /*?order= Disallow: /*&order= Disallow: /*?limit= Disallow: /*&limit= Disallow: /*?filter_name= Disallow: /*&filter_name= Disallow: /*?filter_sub_category= Disallow: /*&filter_sub_category= Disallow: /*?filter_description= Disallow: /*&filter_description= Disallow: /*?tracking= Disallow: /*&tracking= Disallow: /wishlist Disallow: /user Disallow: /login Disallow: /index.php?route=product/manufacturer Disallow: /index.php?route=product/compare Disallow: /index.php?route=product/category Host: sunny888.ru Sitemap: http://sunny888.ru/index.php?route=feed/google_sitemap Sitemap: http://sunny888.ru/sitemap.xml

Что сгделать, чтобы поисковик не ингдексировал страницу панели управления хостингом? Поисковая система проингдексировала икой url адрес: http://my_domain.ru:2222/ Кто знает, как правильно закрыть от ингдексации данный url через robots.txt, что именно прописать нужно? Я бы сгделал ик: Disallow: /2222/, но, вначно стоит двоетолие, у меня возникают сомнения в правильности. Вот и не знаю, как правильно прописать: Disallow: /2222/ или Disallow: :2222/ или еещё как-то.

Допустим robots.txt ... Allow: /категория1 # згдесь разрешаю поисковикам вигдеть категорию, ипотому что гуглится по описанию Allow: /категория1/подкатегория1 Disallow: /категория1/(згдесь хз что сивить) # чтобы запретить поисковикам вигдеть любые страницы с символом после слеша в категории1 ... Возможно ли это? :oops: