Категории

Ошибка в гугле и яндексе robots.txt

Добрый день!
Что то в robots.txt не так, ошибка Яндекс Некорректный формат URL файла Sitemap 2: Sitemap : /sitemap.xml
от Гугла

1

Ошибки
Ошибка
При попытке доступа к вашему файлу Sitemap произошла ошибка. Убедитесь, что этот файл Sitemap соответствует нашим правилам и находится в указанном местоположении, а затем отправьте его повторно.
1
Общая ошибка HTTP: 404 Не найдено
Ошибка HTTP: 404

вот мой robots.txt

User-agent: *
Sitemap : /sitemap.xml
Disallow: /address_book_process.php
Disallow: /ajax_shopping_cart.php
Disallow: /account.php
Disallow: /account_edit.php
Disallow: /account_edit_process.php
Disallow: /account_history.php
Disallow: /account_history_info.php
Disallow: /address_book.php
Disallow: /advanced_search_result.php?
Disallow: /affiliate_affiliate.php
Disallow: /ask_a_question.php
Disallow: /checkout_alternative.php
Disallow: /checkout_process.php
Disallow: /advanced_search.php
Disallow: /advanced_search_result.php
Disallow: /cache/
Disallow: /admin/
Disallow: /checkout_address.php
Disallow: /checkout_confirmation.php
Disallow: /checkout_payment.php
Disallow: /checkout_success.php
Disallow: /checkout_shipping.php
Disallow: /contact_us.php
Disallow: /create_account.php
Disallow: /create_account_guest.php
Disallow: /create_account_process.php
Disallow: /create_account_success.php
Disallow: /featured.php
Disallow: /index.php/manufacturers_id/
Disallow: /info_shopping_cart.php
Disallow: /shopping_cart.php
Disallow: /login.php
Disallow: /logoff.php
Disallow: /newsletter.php
Disallow: /products_new.php
Disallow: /password_double_opt.php
Disallow: /popup_image.php
Disallow: /popup_search_help.php
Disallow: /product_notifications.php
Disallow: /product_reviews.php
Disallow: /product_reviews_info.php
Disallow: /shipping.php
Disallow: /media/export/
Disallow: /media/download/
Disallow: /includes/
Disallow: /media/pub/
Disallow: /media/
Disallow: /index.php/action/
Disallow: /articles.php
Disallow: /articles_new.php
Disallow: /article_info.php/action/
Disallow: /product_info.php/action/
Disallow: /manu/
Disallow: /index.php/manu
Disallow: /index.html?products_id
Disallow: /cookie_usage.php
Disallow: /index.php/products_id
Disallow: /index.php?action=buy_now
Disallow: /specials.php/action/buy_now
Disallow: /market.php
Disallow: /*action=buy_now

У них новое требование указывать полностью путь, типа для ShopOS http://сайт/index.php?page=xml_sitemap и всё.

поменял в robots.txt на http://сайт/index.php?page=xml_sitemap попробовал проверить гугл по ссылки sitemap, написал

Предупреждения
Доступ к URL заблокирован в файле robots.txt.
Файл Sitemap содержит URL, доступ к которым заблокирован в файле robots.txt.

хотя он сам проверил robots нечего не понимаю :-[
Ошибка в гугле и яндексе robots.txt

При скормление robots.txt в Яндексе ошибка

User-agent: *
Sitemap : http://сайт.ru/index.php?page=xml_sitemap
...
Disallow: /*action=buy_now

Но сайт в Яндексе еще не начал индексирование может из за этого
Проверял sitemap ошибок не найдено
Ошибка в гугле и яндексе robots.txt

В Disallow: /*action=buy_now убери звездочку.
Яндекс достаточно медлительный при начальном индексировании, минимум одна-две недели.
Если по прошествии времени сдвигов не будет, дай Яндексу полный доступ, типа:

User-agent: *
User-agent: Yandex
Allow: /
Sitemap: http://сайт/index.php?page=xml_sitemap

И по мере индексирования вводи требуемые ограничения на индексацию.

И по мере индексирования вводи требуемые ограничения на индексацию.

ограничения?зачем?и как? :-\
Спасибо звездочку убрал будем тогда ждать!

Ограничения это запрет индексации роботом поисковых систем определенных страниц на Вашем сайте. Файл robots.txt на ShopOS написан не зря, хотя нужно и его корректировать под свои нужды. Пробуй, бери по очереди каждую стоку и вставляй в свой браузер, смотри, дальше решение за тобой, открывать её для робота или нет. Не забудь указать полный путь, как в Sitemap.

Парень. В корне сайта лежит файл .htaccass в нём сделай правку.
Найди строку

# PHP 5, Apache 1 and 2.

Перед ней, ПЕРЕД НЕЙ пропиши правило
RewriteRule sitemap.xml index.php?page=xml_sitemap

И будэ тоби щастя.))

спасибо но счастье не наступило((((((

Строка 2: Sitemap : /index.php?page=xml_sitemap Обнаружен недействительный URL файла sitemap; синтаксис не распознается

Файл robots.txt Заблокированные URL Загружено Статус
http://сайт.ru/robots.txt 151 20 ч. назад 200 (Успешно)

это 151 заблокировано у меня????ппц :-\

при проверки Sitemap

Доступ к URL заблокирован в файле robots.txt.
Файл Sitemap содержит URL, доступ к которым заблокирован в файле robots.txt.
1
Значение: http://сайт/articles.php/tPath/4

Ребят посмотрите мой robots.txt все ли верно???
Яша начал индексировать и уже 16 страниц полетели черт знает куда...
Ошибка в гугле и яндексе robots.txt
А Гугл это нормально????

User-agent: *
User-agent: Yandex
Allow: /
Sitemap: http://сайт/index.php?page=xml_sitemap
Disallow: /address_book_process.php
Disallow: /ajax_shopping_cart.php
Disallow: /account.php
Disallow: /account_edit.php
Disallow: /account_edit_process.php
Disallow: /account_history.php
Disallow: /account_history_info.php
Disallow: /address_book.php
Disallow: /advanced_search_result.php?
Disallow: /affiliate_affiliate.php
Disallow: /ask_a_question.php
Disallow: /checkout_alternative.php
Disallow: /checkout_process.php
Disallow: /advanced_search.php
Disallow: /advanced_search_result.php
Disallow: /cache/
Disallow: /admin/
Disallow: /checkout_address.php
Disallow: /checkout_confirmation.php
Disallow: /checkout_payment.php
Disallow: /checkout_success.php
Disallow: /checkout_shipping.php
Disallow: /contact_us.php
Disallow: /create_account.php
Disallow: /create_account_guest.php
Disallow: /create_account_process.php
Disallow: /create_account_success.php
Disallow: /featured.php
Disallow: /index.php/manufacturers_id/
Disallow: /info_shopping_cart.php
Disallow: /shopping_cart.php
Disallow: /login.php
Disallow: /logoff.php
Disallow: /newsletter.php
Disallow: /products_new.php
Disallow: /password_double_opt.php
Disallow: /popup_image.php
Disallow: /popup_search_help.php
Disallow: /product_notifications.php
Disallow: /product_reviews.php
Disallow: /product_reviews_info.php
Disallow: /shipping.php
Disallow: /media/export/
Disallow: /media/download/
Disallow: /includes/
Disallow: /media/pub/
Disallow: /media/
Disallow: /index.php/action/
Disallow: /articles.php
Disallow: /articles_new.php
Disallow: /article_info.php/action/
Disallow: /product_info.php/action/
Disallow: /manu/
Disallow: /index.php/manu
Disallow: /index.html?products_id
Disallow: /cookie_usage.php
Disallow: /index.php/products_id
Disallow: /index.php?action=buy_now
Disallow: /specials.php/action/buy_now
Disallow: /market.php
Disallow: /action=buy_now

спасибо но счастье не наступило((((((

Раз уж прописали в htaccess правило для карты сайта, то и в файле robots.txt нужно указать /sitemap.xml
Ну и в ПС толкать ваш-сайт.ру/sitemap.xml
Или я чего не понял?

спасибо!Всем вроде как помогло....а там посмотрим!!!

сорри

Вы мне не подскажете, где я могу найти больше информации по этому вопросу?

___
<b><a href=http://www.botmasterru.com/xrumer/>XRumer 12.0.17 + SocPlugin</a></b> : Лучший программный комплекс для SMM, а также для разносторонней рассылки по форумам, блогам, гостевым, доскам <b>с автоматическим обходом капчи (включая известную РеКапчу!)</b>

На robots.txt уже все боты забили в том числе Яша и Гугл. Хотя всеравно его кушают впервую очередь.
Лучше закрывать директории от индексирования через .htaccess в определенной директории. В сети лежит несколько решений, я пока не тестировал - точно не могу сказать какое лучше.

Источник

У всех ноутбуков аккумулятор с временем выходит из строя, даже при правильном использовании. Конечно, можно подключать ноутбук к внешнему источнику питания через адаптер, но суть ноутбка именно в мобильности и возможности работать автономно от аккумулятора. Поэтому периодически все равно придется менять аккумулятор на ноутбуке, главной подобрать его под свою модель ноута. Если вас интересует магазин аккумуляторов для ноутбуков battery96.ru, то на сайте battery96.ru можно узнать цены.