Интернет журнал - InterneR.Ru » Яндекс проиндексировал более 3 млрд. документов. Как на счет спама?

Яндекс проиндексировал более 3 млрд. документов. Как на счет спама?

spamНе так давно, Яндекс преодолел планку 3 млрд. проиндексированных документов. Это много. Это очень много. Но вот вопрос, а что это за документы? Давайте проведем маленький опыт и постараемся узнать, что вообще индексирует Яндекс?
Вот анекдот, который рассказал Костя Каширин, в обсуждая как раз эту же тему:
Два товарища встретились. Один прямо изнывает:

- Чувак, я такой анекдот тебе сейчас расскажу, оборжешься!
- Ну давай!
- Идет по пустыне верблюд. Идет и срёт. И срёт он, и срёт, и срёт, и срёт.

И тут рассказчик понимает, что он забыл, что дальше. Он начинает тянуть время:

- И срёт верблюд, и срёт. И срё, понимаешь, и срёт!

Другу надоело это дело.

- Слушай, а в чем соль-то?
- А соли нет - одно гавно!

Я конечно не буду утверждать, что индекс Яндекса состоит исключительно из говна, но то, что говна там очень много это факт. Я думаю, что миллионов 500 говна там точно есть, а может и больше. Кстати, давайте определимся, что считать говном, а что нет. На мой взгляд, тут все очень просто. Дорвеи, пустые страницы, страницы ошибок, всевозможные логины и админки – все это говно, которому в индексе не место. И так, давайте посмотрим.

Вот несколько запросов, которые позволяют оценить степень заспамленности пс Яндекс. И это - только вершина айcберга, ибо мне просто лень копаться в этом говне. Я просто прошелся по таблеточкам. Обратите внимание, что запросы исключительно на английском языке.

И это я даже не стал брать разнообразный адалт и порнyxy. Сами попробуйте.

Ну дальше можно пройтись по ошибкам, логинам и админкам, но думаю и так ясно, что спама весьма много. Более того, 99% этого спама на английском. В Яндексе. И это в то время, когда тысячи вебмастеров стонут от того, что их БиП сайты то и дело вылетают из индекса, или индексируются крайне слабо.

Собственно это проблема не только и не сколько Яндекса, а скорее всех современных ПС. Спама в любой из них весьма много, и борьба с ним ведется. Так что пожелаем успехов в этом нелегком деле :)
Странно другое. Примерно год назад я проводил схожее исследование. По крайне мере в Яндексе ничего с тех пор не поменялось. И вот это грустно.

Если прикинуть количество бесполезных и спамных страниц, найденных в результате только этого небольшого исследования, то мы получи цифру около 17-ти млн. документов. Даже если представить, что половина из этих документов одни и те же, то все равно много. И повторюсь, это только цветочки.

google.com bobrdobr.ru del.icio.us technorati.com linkstore.ru news2.ru rumarkz.ru memori.ru moemesto.ru

Воскресенье, ноября 4, 2007 Яндекс, Поисковые системы, Интернет

В тему:
  • CAPTCHA - Защита от спама
  • Google, Яндекс и каталоги сайтов.
  • Новости и блоги - Яндекс и Google
  • Googlе и Яндекс - единство и борьба
  • Яндекс - эффект ПрезиДента

    • Комментариев: 31

    • 1. DenisO написал 5 ноября 2007, 01:31 :

      Я думаю 20-30% документов - явный мусор.

    • 2. SpamBot написал 5 ноября 2007, 14:14 :

      Здесь дело просто в подходах - в Яндексе преобладает надежда на стук, плюс периодические ковровые бомбардировки с беспричинным выметанием из индекса сайтов в чем-то подозрительных полудуркам из Тындекса - ну как было с сайтами ссылающимися на КликКэш - только потому-что они неспособны бороться с дорами, льющими на эту партнерку они вышибли всех... Ну это как американцы в Ираке - чтобы свергнуть правительство, истребили население целой страны... Вместо того, чтобы совершенствовать алгоритмы поисковика, терроризируют веб-мастеров... Прям какая-то смесь американского фашизма и сАветськаго ВсеЗапретить - саакашизм поисковый! Гы... Я помню одно время смеялся, когда по фентермину доры в тындексе находил в топе... Мало того, они еще и в каталоге Тындекса были зарегистрированы...

    • 3. Bujhm написал 5 ноября 2007, 17:04 :

      яндекс ведь поисковик по русскому языку, не корректно приводить в пример анлоязычные запросы. в русскоязычных запросах спам есть,но не в таком кол-ве как вы пишете и результат борьбы с ним заметен.

    • 4. Tarry написал 5 ноября 2007, 18:32 :

      яндекс ведь поисковик по русскому языку

      И я про тоже, собственно :)
      А дорами, где нет ни слова по русски обжирается по самые помидоры...

    • 5. simeon написал 6 ноября 2007, 03:16 :

      А что вы хотели, использовав самые популярные и дорогие запросы. Да на создание "говна" по этим запросам трудятся куча горе-сеошников. И на любой алгоритм отсечения доров появляется два способа создать новые доры.
      Кстати, а где сравнение с Google по тем же ключевикам?

    • 6. Сколиоз написал 7 ноября 2007, 18:42 :

      Да что вы от яндекса хотите? Никто же не говорит насколько тупое окошко от микрософта, все просто пользуются линуксом... вот и вы забейте на яшу и пользуйтесь загуглями!

    • 7. Мангуст написал 26 ноября 2007, 20:23 :

      А меня совсем недавно взяли бета-тестером для нового поисковика TrueKnowledge... вот за такими системами будущие!

    • 8. Toltek написал 24 декабря 2007, 14:47 :

      Проблема огромная!
      Мой сайт http://a2n.ru/ Яндекс тупо не принимает в поиск.
      Модераторы говорят санкций не применялось.
      Смотрите сами статистику одного из разделов сайта:
      http://a2n.ru/stat.html

    • 9. Монет написал 25 января 2008, 14:57 :

      Да, 3 млрд это не мало, просто цифра порожает.

    • 10. dani написал 9 апреля 2008, 01:45 :

      Как же задолбал спам!!!

    • 11. Алексей Гаврилов написал 24 апреля 2008, 16:06 :

      спам бесит!!!

    • 12. Коллекционер бизнес-идей написал 25 апреля 2008, 09:29 :

      Классная страница, столько всего немусорного в комментариях :) просто образец для фильтра яшиного.

    • 13. Градовский написал 25 апреля 2008, 12:54 :

      спамеры все заспамят если их неостановить

    • 14. nikola написал 25 апреля 2008, 20:15 :

      Спамщиков будет еще больше.Это только начало!

    • 15. gonzales написал 14 мая 2008, 10:23 :

      о соли нет,одно говно,бугага!
      когда захожу в ящик,то говна 3/4,так что 3 млрд не показатель

    • 16. okun написал 2 августа 2008, 11:51 :

      Правильно, не зря народ Гугла любит. Там точность поиска вообще отличная, не то что у Яши.

    • 17. XXX video&hellip написал 30 августа 2008, 13:53 :

      greatings...

      super!...

    • 18. get написал 13 сентября 2008, 19:46 :

      да на яндекле говна больше чем 500 лимонов это точно

    • 19. Лайд написал 17 сентября 2008, 17:31 :

      Яндекс к сожалению становится помойкой, уж извените за резкость, но это так...

    • 20. Olejqa написал 25 сентября 2008, 10:58 :

      Все будет хорошо ребята, спам был и будет. Будте проще, еще глядишь чегонибудь изобретут от этого дела)

    • 21. Enotkin написал 25 сентября 2008, 11:01 :

      Да нечего не изобретут от этого, спаммеры тоже изобретательные люди)

    • 22. Пончик написал 2 октября 2008, 13:27 :

      да мусор один... меня бесит этот спам уже..

    • 23. Filin написал 3 октября 2008, 13:49 :

      Спам был, Спам есть и спам будет. Ничего не поделать с этим, я так считаю.

    • 24. koreshochek написал 16 октября 2008, 11:45 :

      "Яндекс проиндексировал более 3 млрд. документов. Как на счет спама?"

      Спама? Это мы запросто!

    • 25. Диана написал 4 ноября 2008, 22:23 :

      да, очень грустно. последнее время сателитов много, а кроме владельца они никому не нужны.

    • 26. Арина Ильченко написал 8 ноября 2008, 14:12 :

      Я о существовании сателлитов узнала только прочитав статью а так они мне были незаметны.

    • 27. lxabmjuvnrcdt goblins&hellip написал 2 января 2010, 21:19 :

      lxabmjuvnrcdt goblins...

      lxabmjuvnrcdt directors physicians money mountains jugglers corgis falcons cash cobblers children weapons bullets arrows athletes infantry fairies men information knights stairs soldiers courtesans trout barons referees employees keyboards natives...

    • 28. oxcarbazepine olanzapine &hellip написал 2 января 2010, 21:28 :

      requip bactroban avalide cilostazol norfloxacin ear drops...

      generic lotrimin oxcarbazepine generic tricor brimonidine tartrate eye drops ortho evra patch olanzapine generic zoloft fluconazole uroxatral clonidine duloxetine augmentin cost generic clobevate generic glucotrol xl levofloxacin viagra without...

    • 29. simvastatin price walmart&hellip написал 2 января 2010, 21:31 :

      online pharmacist chemist free online pharmacy journals...

      generic synthroid online pharmacist online pharmacies duloxetine hydrochloride cost levitra pain medication buy viagra canada online oxycontin online pharmacy drugstore pain reliever info naproxen review chemist generic glucophage intense pulsed...

    • 30. candlestick park seating &hellip написал 2 января 2010, 21:37 :

      singapore trading analysis software australia technical...

      technical analysis software review metastock 101 bollinger bands charting software metastock reviews technical analysis software ftse trading analysis software moving average lse technical analysis software metastock nyse trading analysis software...

    • 31. Диетолог написал 15 июня 2010, 18:29 :

      прикольная инфа!!!

    Ваше мнение:

    XHTML: Разрешенные теги: <a href="" title=""> <abbr title=""> <acronym title=""> <blockquote cite=""> <code> <em> <strong>