Слово и фраза: Искать: Сортировать по:
Форумы на Sostav.ru / Интернет-маркетинг / robots.txt - индексирует ли Яндех если его нет
в смысле вообще нет

Profile
Измайлов©

Постов: 1067
Дата регистрации: 18.08.2006
Извиняюсь за возможно ламерский и не к месту вопрос, но не могу нигде найти ответа - если в корне сайте вообще нету роботс.тхт - индексируется ли сайт?
--------
Учынее устнавоиил уидвиетьленйы фтак – всопритияе члеовкеом солва ен звасиит от проядак бувк внтури енго.

Да 0 Нет 0
Пользователь в OffLine Послать приватное сообщение Добавить пользователя в список друзей 03.07.2007 12:23
цитата
Profile
AdVertu©
Управляю интернет-проектами
Постов: 801
Дата регистрации: 29.11.2005

Цитата, автор Измайлов:

Извиняюсь за возможно ламерский и не к месту вопрос, но не могу нигде найти ответа - если в корне сайте вообще нету роботс.тхт - индексируется ли сайт?


индексируется
--------
-------------------
ветка про BTL: http://www.forumsostav.ru/78/
Кампании в социальных медиа: http://www.in-man.ru (InManagement)


Да 0 Нет 0
Пользователь в OffLine Послать приватное сообщение Добавить пользователя в список друзей Сайт пользователя 03.07.2007 15:26
цитата
Profile
Странник©
Каждому своё
Постов: 2464
Дата регистрации: 10.02.2007
для: Измайлов© Индексируется любым поисковиком.
--------
О всемогуществе модераторов: "Вас уже банили, по всему форуму и навсегда. Будут банить и далее" (с) Page Up

Да 0 Нет 0
Пользователь в OffLine Послать приватное сообщение Добавить пользователя в список друзей 03.07.2007 15:26
цитата
Profile
Измайлов©

Постов: 1067
Дата регистрации: 18.08.2006
Тады следующий вопрос - Яндех судя по всему забанил нас. По прямому запросу названия компании выдачи нет.

Могло ли это произойти из-за:
-- Большого числа ссылок на сайт со всевозможных отраслевых порталов и рубрикаторов итд?
-- Большого количества ключевых слов в Мета на каждой странице (на этом настаивают авторы двигла)?
--------
Учынее устнавоиил уидвиетьленйы фтак – всопритияе члеовкеом солва ен звасиит от проядак бувк внтури енго.

Да 0 Нет 0
Пользователь в OffLine Послать приватное сообщение Добавить пользователя в список друзей 03.07.2007 15:38
цитата
Profile
pelvis©
CMS Maker
Постов: 2504
Дата регистрации: 24.11.2005
robots нужен по двум причинам. Первая - закрыть результаты поиска, второе - для того, чтобы указать поисковику откуда этот самый сайт индексировать. http://robotstxt.org.ru/ собственно, ссылка на мануал.
Меты не при чем, рубрикаторы вряд ли являются причиной бана. А без больного трудно сказать о его здоровье :)
--------
Schnabl изделия для СКС. Выстраиваем продажи.
Производство светодиодных светильников для вашего офиса. Берегите зрение!

Да 0 Нет 0
Пользователь в OffLine Послать приватное сообщение Добавить пользователя в список друзей Сайт пользователя 03.07.2007 16:39
цитата
Profile
Измайлов©

Постов: 1067
Дата регистрации: 18.08.2006
Ну давайте, только сраза предупрежу - денег не дам :) Могу лишь напоить пивом при личной встрече, если в Москве :)
Поэтому о многом не прошу, но если есть желание помочь, буду благодарен.

Сайт: www.vremya.spb.ru

по запросу в Яндехе "Время и К" ссылки на сайт нет вообще.
При попытке зарегиться тут: http://webmaster.yandex.ru
пишет: "Адрес www.vremya.spb.ru не был внесен в базу Яндекса, так как его индексация запрещена."

Что может быть? Яндех на запросы молчит...

ЗЫ: ну и, совсем наглея, ежели в 2-х словах опишите впечатление о сайте, буду благодарен вдвойне :)
--------
Учынее устнавоиил уидвиетьленйы фтак – всопритияе члеовкеом солва ен звасиит от проядак бувк внтури енго.

Да 0 Нет 0
Пользователь в OffLine Послать приватное сообщение Добавить пользователя в список друзей 03.07.2007 17:28
цитата
Profile
Artus©

Постов: 1719
Дата регистрации: 04.03.2005
для: Измайлов©
Индексация сайта может быть запрещена либо по техническим причинам, если он нарушает стандарты и его невозможно корректно проиндексировать, либо за применение сайтом поискового спама. Поскольку Ваш сайт проиндексирован Рамблером и Гуглом, то значит особых технических проблем нет. Отсюда вывод - Вас забанили.

По поводу большого числа ссылок на сайт со всевозможных отраслевых порталов и рубрикаторов. Тут Вы себе льстите ;) 100 с небольшим ссылок - это мало, а не много. Кроме того, Ваши ссылки не помогают Вашему сайту продвигаться по ключевым словам. Отсюда вывод - никакого умысла в Ваших ссылках Яндекс не увидит. Кроме того, Яндекс не банит за внешние ссылки. Причина проста - это приведет к волне "убей конкурента" и Яндексу придется забанить все сайты ведущих компаний. Внешние ссылки, которые Яндекс подозревает в неестественном происхождении, он просто не учитывает при формировании рейтинга сайта по запросу. Вот и все.

А вот любые действия, запрещенные Яндексом, и касающиеся внутренностей сайта могут привести к бану. Тут логика проста - на сайте работы могут проводиться только с санкции владельца сайта, так что умысел конкурентов не при чем. Другое дело, искать причины бана внутри сайта трудно - надо быть его разработчиком. Проще всего сделать запрос в Яндекс, но только с корпоративного мыла - на такие запросы Яндекс отвечает охотней. Ждать ответа сейчас можно и неделю - Яндекс меняет алгоритм, посему все там заняты. При этом Яндекс Вам ответит стандартным письмом - мол причины бана мы не комментируем. Через месяц, если устраните причины бана, мы рассмотрим вопрос о возвращении сайта в индекс.

Сейчас времени мало, но завтра попробую что-нибудь написать по причинам бана, если удастся "с наскока" что-то увидеть.

--------
создание сайтов, реклама в интернете

Да 0 Нет 0
Пользователь в OffLine Послать приватное сообщение Добавить пользователя в список друзей Сайт пользователя 03.07.2007 19:34
цитата
Profile
AdVertu©
Управляю интернет-проектами
Постов: 801
Дата регистрации: 29.11.2005
Гоните! Сайт индексируется: http://www.yandex.ru/yandsearch?stype=&nl=0&text=www.vremya.spb.ru


Цитата, автор Измайлов:
по запросу в Яндехе "Время и К" ссылки на сайт нет вообще.

а почему она должна быть? Вы себя по запросу продвигали?


Что может быть? Яндех на запросы молчит...


Всегда отвечал. Хотя, смотря как спрашивать...



ЗЫ: ну и, совсем наглея, ежели в 2-х словах опишите впечатление о сайте, буду благодарен вдвойне :)


если как сайт-визитка, то обыкновенный, если хотите услышать "ох и ах", то не дождётесь :)

--------
-------------------
ветка про BTL: http://www.forumsostav.ru/78/
Кампании в социальных медиа: http://www.in-man.ru (InManagement)


Да 0 Нет 0
Пользователь в OffLine Послать приватное сообщение Добавить пользователя в список друзей Сайт пользователя 03.07.2007 19:57
цитата
Profile
Arsenij©
Просто маркетолог
Постов: 5216
Дата регистрации: 17.11.2003
для: Vertu© Кгхм.... Простите, но запросик не тот... Это ссылки НА сайт. Они индексируются, естественно. А сам сайт и правда нет. Но как-то странно...

для: Измайлов© По поводу запросов в Яндекс - ждите. Может, как сказал Artus, неделю, а может, и месяц. Они люди неторопливые в этом отношении :) Правда, надо признаться, что мне они в свое время отвечали достаточно подробно.

И еще один вопросик - а кто продвижением-то и администрированием занимался? Может, у него и спросить? :)
--------
Мое хобби и не более того - Суздаль.
Магазин подарков Леарта - швейцарские ножи Wenger, ручки Parker и Waterman, и еще много всего.

Да 0 Нет 0
Пользователь в OffLine Послать приватное сообщение Добавить пользователя в список друзей 03.07.2007 20:41
цитата
Profile
AdVertu©
Управляю интернет-проектами
Постов: 801
Дата регистрации: 29.11.2005

Цитата, автор Arsenij:

для: Vertu© Кгхм.... Простите, но запросик не тот... Это ссылки НА сайт. Они индексируются, естественно. А сам сайт и правда нет. Но как-то странно...


да, извините, но всё же при этом запросе - на 7-ой позиции - практически искомое, вот только с разницей в одну букву.

А так, вообще-то сейчас АП идёт, может и вывалился поэтому.

Измайлов© а давно это у Вас?
--------
-------------------
ветка про BTL: http://www.forumsostav.ru/78/
Кампании в социальных медиа: http://www.in-man.ru (InManagement)


Да 0 Нет 0
Пользователь в OffLine Послать приватное сообщение Добавить пользователя в список друзей Сайт пользователя 03.07.2007 20:54
цитата
Profile
AdVertu©
Управляю интернет-проектами
Постов: 801
Дата регистрации: 29.11.2005
Arsenij© кстати, а склеиться эти два сайта не могли? Может Yandex посчитал, что это один и тот же сайт?
www.vremya.spb.ru и www.vremya.uspb.ru

--------
-------------------
ветка про BTL: http://www.forumsostav.ru/78/
Кампании в социальных медиа: http://www.in-man.ru (InManagement)


Да 0 Нет 0
Пользователь в OffLine Послать приватное сообщение Добавить пользователя в список друзей Сайт пользователя 03.07.2007 20:59
цитата
Profile
Измайлов©

Постов: 1067
Дата регистрации: 18.08.2006

Цитата, автор Artus:
для: Измайлов©
Индексация сайта может быть запрещена либо по техническим причинам, если он нарушает стандарты и его невозможно корректно проиндексировать, либо за применение сайтом поискового спама. Поскольку Ваш сайт проиндексирован Рамблером и Гуглом, то значит особых технических проблем нет. Отсюда вывод - Вас забанили.


Логично, пришёл к тому же выводу...


Цитата, автор Artus:
А вот любые действия, запрещенные Яндексом, и касающиеся внутренностей сайта могут привести к бану. Тут логика проста - на сайте работы могут проводится только с санкции владельца сайта, так что умысел конкурентов не при чем. Другое дело, искать причины бана внутри сайта трудно - надо быть его разработчиком.


А что может быть теоретисски внутри сайта-то? Это банальная страничка с ассортиментом и документацией. Никаких ключевых слов под цвет фона там нет...
--------
Учынее устнавоиил уидвиетьленйы фтак – всопритияе члеовкеом солва ен звасиит от проядак бувк внтури енго.

Да 0 Нет 0
Пользователь в OffLine Послать приватное сообщение Добавить пользователя в список друзей 04.07.2007 09:23
цитата
Profile
Измайлов©

Постов: 1067
Дата регистрации: 18.08.2006

Цитата, автор Arsenij:
И еще один вопросик - а кто продвижением-то и администрированием занимался? Может, у него и спросить? :)


Что спросить? :)
Продвижением за исключением обмена ссылками никто не занимался.
Администрированием - в смысле техподдержкой - занимается контора-автор движка, их ответ - "слишком много ключевых слов, Яндех считает за спам".
--------
Учынее устнавоиил уидвиетьленйы фтак – всопритияе члеовкеом солва ен звасиит от проядак бувк внтури енго.

Да 0 Нет 0
Пользователь в OffLine Послать приватное сообщение Добавить пользователя в список друзей 04.07.2007 09:25
цитата
Profile
Измайлов©

Постов: 1067
Дата регистрации: 18.08.2006

Цитата, автор Vertu:
А так, вообще-то сейчас АП идёт, может и вывалился поэтому.


Вот тоже на это грешу.


Цитата, автор Vertu:
Измайлов© а давно это у Вас?


[/quote]
Похоже что пару месяцев, заметили только сейчас.
--------
Учынее устнавоиил уидвиетьленйы фтак – всопритияе члеовкеом солва ен звасиит от проядак бувк внтури енго.

Да 0 Нет 0
Пользователь в OffLine Послать приватное сообщение Добавить пользователя в список друзей 04.07.2007 09:26
цитата
Profile
Arsenij©
Просто маркетолог
Постов: 5216
Дата регистрации: 17.11.2003

Цитата, автор Измайлов:


Цитата, автор Arsenij:
И еще один вопросик - а кто продвижением-то и администрированием занимался? Может, у него и спросить? :)


Что спросить? :)
Продвижением за исключением обмена ссылками никто не занимался.
Администрированием - в смысле техподдержкой - занимается контора-автор движка, их ответ - "слишком много ключевых слов, Яндех считает за спам".



Я не специалист, конечно, но обмен ссылками меня смущает. Тем более, что этих самых ссылок я нигде на сайте не нашел... Может, какой-нибудь линкатор был установлен?
--------
Мое хобби и не более того - Суздаль.
Магазин подарков Леарта - швейцарские ножи Wenger, ручки Parker и Waterman, и еще много всего.

Да 0 Нет 0
Пользователь в OffLine Послать приватное сообщение Добавить пользователя в список друзей 04.07.2007 09:44
цитата
Profile
Измайлов©

Постов: 1067
Дата регистрации: 18.08.2006
Неправильно выразился - был не обмен ссылками а регистрация сайта в каталогах, не требующих обратной ссылки на них.
--------
Учынее устнавоиил уидвиетьленйы фтак – всопритияе члеовкеом солва ен звасиит от проядак бувк внтури енго.

Да 0 Нет 0
Пользователь в OffLine Послать приватное сообщение Добавить пользователя в список друзей 04.07.2007 09:58
цитата
Profile
Artus©

Постов: 1719
Дата регистрации: 04.03.2005
Яндекс банит сайты за следующие факторы:
- автоматически сгенерированный (бессмысленный) текст,
- за копирование информацию с других ресурсов (если сайт содержит только ее и больше никаких сервисов),
- банит сайты, представляющие товары или информацию по партнерским программам, но не создающие для пользователя никакой добавленной ценности,
- за создание страниц с невидимым или слабовидимым текстом или ссылками,
- банит сайты, отдающие разный контент пользователю и роботам поисковых систем («клоакинг»),
- банит страницы и сайты, единственной целью которых является перенаправление пользователя на другой ресурс, автоматически («редирект») или добровольно (реклама без контента),
- сайты, на которых из-за обилия навигационных меню, новостей, вспомогательной информации, рекламы трудно найти их основное содержание,
- банит страницы и сайты, ставящие ссылки исключительно для обмана поисковых систем и накачивания релевантности (например линкопомойки),
- банит сайты или группы сайтов, интенсивно ссылающиеся друг на друга («линкфармы»),
- банит за ссылки, не являющиеся рекомендацией автора посетить ресурс
Подробнее см. тут http://webmaster.yandex.ru/faq.xml?id=985118

Ничего предосудительного на Вашем сайте на первый взгляд нет. Но на второй взгляд меня тоже напрягает Ваш тег кейворд. Посмотрите на него сами:

cпеции, Специи, Специи приправы, Индийские специи, Производство специй, Специи пряности, Рынок специй, Продажа специй, Специи добавки, Купить специи, Производители специй, Специи индии, Специи смеси, Мясные специи, Торговля специями, Специи оптом, Китайские специи, Травы специи, Пряности приправы специи, Экстракты специй, Пряности, Пищевые добавки, Пищевые добавки производство, Пищевые добавки пищевой промышленности, Применение пищевых добавок, Ингредиенты пищевые добавки, Сертификация пищевых добавок, Ингредиенты, Пищевой ингредиент, Производство ингредиенты, Натуральные ингредиенты, Пищевые ингредиенты продажа, Ингредиенты для пищевой промышленности, Тмин, Анис, Перец, Красный перец, Экстракт перца, Черный перец, Купить перец, Перец Чили, Острый перец, Перец горошек, Сушеный перец, Перец молотый, Розовый перец, Рассолы, Лук, Индийский лук, Лук-порей, Лук репчатый, Купить лук, Маринад для, Сорбат, Сорбат калия, Каррагинан, Крахмал, Куплю крахмал, Крахмал тапиоковый, Бадьян, Анис звездчатый, Базилик, Гвоздика, Горчица, Имбирь, Кардамон, Кориандр, Корица, Куркума, Лавр, Лавровый лист, Можжевеловая я года, Мускатный орех, Мускат, Мускатный цвет, Майоран, Морковь, Орегано, Душица, Пажитник, Шамбала, Пастернак, Перец зеленый, Паприка, Петрушка, Розмарин, Сельдерей, Тимьян, Чабрец, Томаты, Укроп, Фенхель, Чабер, Чеснок, Шафран, Хрен, Перец сладкий, Время Декор, Время Микс, Время Гост, Время Комплекс, Смеси специй, Комплексные смеси, Изолят соевого белка, Концентрат соевого белка, Сканпро, Фосфаты, Гуаровая камедь, Поставщики гуаровой камеди, Пищевой краситель, пищевые натуральные красители, Лимонная кислота, Аскорбиновая кислота, Эриторбат натрия, Посолочные смеси, Ароматизатор пищевой, Глутамат натрия, Глютамат натрия, Стевия, Бензоат натрия, Эриторбат натрия, СО2 экстракты, Нитриты, Технические условия, Технические инструкции, Время и К

Принято считать, что Яндекс не учитывает этот тег. Но есть и другое мнение - Яндекс рассматривает содержание этого тега в момент индексирования сайта, но не придает его содержанию никакого дополнительного веса.

Чуть подробней это выглядит так. Яндекс заходит на сайт и индексирует все его содержание - от Тайтла до текста ссылок и подписей к картинкам. Далее содержание разбивается на пассажи. У разных пассажей может быть разный вес при определении релевантности. У текста в теге Title вес повыше, чем, например, у обычного текста на странице. Стандартные пассажи - это тайтл, заголовки, выделенные тегом H, всплывающие подписи к картинкам Alt, тексты в ссылках, просто каждое текстовое предложение - это пассаж. Так вот если принять версию, что Яндекс учитывает содержание тега keyword при индексировании, пусть даже с минимальным весом, то такой тег, как у Вас, однозначно вызовет подозрения у Яндекса, а поскольку за внутренние фактора часто банит не человек, а робот, то бан неминуем. У вас одно слово "специи" крайне некрасиво выглядит в преломлении критериев бана по текстовым факторам.

Хотя все-таки версия не стопроцентная. Я бы запросил у Яндекса, а не за тег кейворд ли Вас забанили и если да, то можете смело писать, что Вы понимали этот тег именно так, как заполнили, и воткнули в него все ключевые слова. Возможно, это поможет.

А вообще мой совет - переносите сайт на домен второго уровня (например, www.vremyaspb.ru и www.vremya-spb.ru) и заново его регистрируйте в Яндексе. А на старом домене оставьте одну страницу с краткой информацией и ссылкой на Ваш новый домен. Вы ничего не потеряете, а приобретете массу положительных моментов.

И в любом случае измените тег кейворд на обычный - не более 50-60 слов без особых повторений.

--------
создание сайтов, реклама в интернете

Да 0 Нет 0
Пользователь в OffLine Послать приватное сообщение Добавить пользователя в список друзей Сайт пользователя 04.07.2007 17:48
цитата
Profile
Artus©

Постов: 1719
Дата регистрации: 04.03.2005

Цитата, автор Vertu:

кстати, а склеиться эти два сайта не могли? Может Yandex посчитал, что это один и тот же сайт?
www.vremya.spb.ru и www.vremya.uspb.ru




Это очень врядли. Это разные сайты абсолютно. Домены визуально похожи, но все же разные. Кроме того, на этих доменах совершенно разный контент. И уж если склеивать сайт, то основным бы Яндекс оставил www.vremya.spb.ru А вообще-то на www.vremya.uspb.ru всего-навсего страница фирмы в каталоге (справочнике) компаний Санкт-Петербурга. Таких страниц-взиток у любого корпоративного сайта полно в сети.

Яндекс склеивает сайты (т.е. индексирует один из нескольких, а остальные не индексирует), если один и тот же сайт размещен на двух доменах. Т.е. если разместить сайт еще на домене www.vremya-spb.ru, не убрав сайт www.vremya.spb.ru, то Яндекс один из сайтов посчитает основным (тот, который первым появился), и второй не станет индексировать. Кроме того, Яндекс может склеить очень похожие сайты (например, с одним контентом, но разным дизайном).
--------
создание сайтов, реклама в интернете

Да 0 Нет 0
Пользователь в OffLine Послать приватное сообщение Добавить пользователя в список друзей Сайт пользователя 04.07.2007 19:12
цитата
Profile
AdVertu©
Управляю интернет-проектами
Постов: 801
Дата регистрации: 29.11.2005

Цитата, автор Artus:


Спасибо!
--------
-------------------
ветка про BTL: http://www.forumsostav.ru/78/
Кампании в социальных медиа: http://www.in-man.ru (InManagement)


Да 0 Нет 0
Пользователь в OffLine Послать приватное сообщение Добавить пользователя в список друзей Сайт пользователя 04.07.2007 19:32
цитата
В настоящий момент эту тему просматривают: участников - 0, гостей - 8.
Только зарегистрированные пользователи могут оставлять сообщения в этом форуме


Форумы на Sostav.ru / Интернет-маркетинг / robots.txt - индексирует ли Яндех если его нет
© "ООО Состав.ру" 1998-2024

тел/факс: +7 495 225 1331 адрес: 109004, Москва, Пестовский пер., д. 16, стр. 2

При использовании материалов портала ссылка на Sostav.ru обязательна!
Администрация Sostav.ru просит Вас сообщать о всех замеченных технических неполадках на E-mail
Rambler's Top100   18+   Словарь маркетинговых терминов