Robots.txt

[KeNeDi]

форумчане ответье плиз на вопрос!правильно ли я делаю ,что Robots.txt у меня пуст или нет?

 

[MaZaHaKa]

Нет конечно!

 

[arturexp]

Ну в принципе это ничему не помешает.Можно закрыть некоторые разделы от индексации, но это только для яндекса, для гугла по барабану что там написано))

 

[KeNeDi]

arturexp,это я знаю! а что именно нужно закрыть?последне время индесация проходит плохо.....от яши

 

[MaZaHaKa]

Нужно просто правильно составить robots.txt

 

[KeNeDi]

User-agent: *Disallow: /admin.phpDisallow: /index.php?do=pmDisallow: /index.php?do=statsDisallow: /index.php?do=searchDisallow: /index.php?do=addnewsDisallow: /index.php?do=registerDisallow: /index.php?do=feedbackDisallow: /index.php?do=lostpasswordDisallow: /index.php?subaction=newpostsHost:vvarez.net.ruправильно?

 

[arturexp]

KeNeDi,Ну так ты скажи что за система у тебя, или КМС какая?Ну закрывай например админ панель, все папки аплоад. нужно просто оставить то что нужно для индексации , остальное прикрой.Если яша плохо индексует это не значит что у тебя этот файл не правльно сделан. Просто добавь нового уникального контента, ну как вариант можешь по соц закладкам прогон сделать. не сильно поможет, но есть шанс.нужно искать пробелму в другом.Дай ссылку посмотрю на сайт.KeNeDi,ну вроде правильно

 

[KeNeDi]

могу сказать одно!после появления зеркала посещаемость упала в 3 раза! было 150-200а терь стало 30-60http://mobstro.pp.ru/http://vvarez.net.ru/так значит ставить это значение в роботс?

 

[arturexp]

ну можешь поставить, но то этого индексация не увеличиться!А ты слышал что яша забанил 14 тыс варезников??И что он по новому к ним относиться??Единственый совет, это добавляй уникальные новости!У тебя еще и попапндер стоит, яша это ваше не любит, так же как и пользователи.

 

[KeNeDi]

еще яндекс проиндексировал 970 страниц сайтагугл всего 254апорт = 0(отправил письмо в тех поддержку)рамблер 2324 страницяхо только 59 страницMSN: 1 страница(главная)статистика http://yandex.ru 11 / 13.6% http://nova.rambler.ru 4 / 4.9% http://go.mail.ru 1 / 1.2% http://top.mail.ru 1 / 1.2% http://www.google.com 1 / 1.2%

 

[arturexp]

все что мог сказать сказал. Остальное сам решай. Основные причины я назвала работс не причем

 

[kokoc]

а вот мой посмотрите http://3file4u.com/ и как для него robots.txt написать.и ещё, нужно ли sitemap яше отправлять? заранее спасибо.P.S. яша 2 раза токо на сайт заходил

 

[DJ AKIM]

http://skripters.biz/seo-genrobots/

 

[kokoc]

User-agent:*Crawl-delay: 10Host: http://мой_сайтUser-agent: YandexAllow: /Sitemap: http://мой_сайт/sitemap.xmlВот посмотрите, правильно написан robots.txt??

 

[BegleZZZ]

kokoc,да правильно...