Иногда, из-за какой-либо причины, владелец сайта хочет удаления своего ресурса из Открытого Каталога. Чаще всего, истинную причину подобного запроса он не предоставляет, временами владельцу просто не нравится описание, сделанное редактором. Если описание ошибочно, то разумнее всего попросить редактора исправить его. Но, обычно, владельцу сайта не нравится объективное описание, созданное редактором, и он хочет набить его красивыми ключевыми словами.

В последнее время, данная тенденция является результатом того, что Google использует описание из ODP при определении тематики сайта и его релевантности поисковому запросу, а также выдаёт его посетителям в качестве описания сайта чаще, чем фразы с самого сайта или из мета-тегов. Владелец сайта может не желать подобного влияния на ранжирование в выдаче его ресурса. Почему же Google так поступает?

Алгоритмы Google полностью автоматизированы и, при определении релевантности страницы полученному от посетителя запросу, используют, как содержание самого сайта, так и внешние по отношению к этому сайту источники. Работа по совершенствованию алгоритмов, для повышения релевантности выдачи, не прекращается ни на минуту.

В целом, можно сказать, что нейтральное описание, составленное редактором, скорее положительно сказывается на положении сайта в выдаче, т. к. имеет отличную совместимость с алгоритмами ранжирования. Это означает, что нет никаких причин, в этой ситуации, удалять свой сайт из DMOZ.

Также существует существенная причина для редакторов не рассматривать запросы на удаление. Такая политика позволяет нам избегать прохода через все этапы проверки личности владельца сайта, что могло бы стать для нас настоящим ночным кошмаром. Например, если сайтом владеют два человека, между которыми существуют разногласия, один из них просит удалить сайт, а другой против этого, но будет молчать до тех пор, пока сайт не будет удалён, а потом попросит восстановить его назад.

Вывод: мы смотрим только на реальное содержание сайта, если оно не соответствует критериям присутствия в Каталоге, то сайт удаляется.

Сегодня, появился шестой топ-редактор раздела World: Russian — tanstaaf1. Может быть кому-то и показалось это назначение неожиданным, но думаю, никто не сомневается в том, что tanstaaf1 оправдает оказанное ему доверие.

Tanstaaf1 начал свою редакторскую деятельность ещё в далёком 2003 году. В декабре 2006, он впервые получил права редактирования в разделе верхнего уровня — World: Russian: Общество.

Хочется пожелать ему улучшить все свои достижения в Открытом Каталоге (ODP).

В Открытом Каталоге существует несколько разделов, в которые нельзя напрямую попасть по ссылкам с главной страницы. Неудивительно, что многие посетители ODP о них даже не догадываются. Вот список таких разделов:

• Adult — раздел содержит сайты и подразделы, предназначенные для «для взрослых». Он доступен, если введённый в строку поиска запрос содержит «взрослые» слова или при непосредственном вводе в адресную строку браузера его URL. Раздел защищён от детей при помощи тегов PICS. Для удобства пользователей, было решено разместить прямую ссылку на него с начальной страницы для русскоговорящих посетителей Open Directory Project;
• AOL — каталог ресурсов корпорации AOL (добавлено 1 мая, см. Удалён раздел Top: Netscape);
• Bookmarks — каждый редактор имеет там раздел, с адресом вида Bookmarks/E/Editor, который он может использовать для сбора интересных ему ссылок или создания разделов для возможного последующего включения в Каталог. Подразделы отсюда доступны для просмотра всем, но не включаются в RDF дамп;
• Netscape — заброшенный каталог ресурсов Netscape, ныне поглощённой корпорацией AOL (уточнение от 1 мая: ныне удалён, см. Удалён раздел Top: Netscape);
• Test — «песочница», используемая при создании макетов и шаблонов для планируемых реорганизаций разделов. Её содержимое доступно для просмотра только редакторам DMOZ и не включается в RDF дамп. Разделы, с адресом вида Test/Editors/E/Editor, доступны для каждого редактора, как «личная песочница» или альтернатива Bookmarks. Однако, любой пользователь может совершенно свободно посмотреть содержимое подраздела Test: World доступ к которому открыт, т. к. там, в стадии подготовки, находятся ещё не размещённые в общедоступной части Каталога языковые разделы. (дополнение от 18 января 2008 года: см. Всё тайное становится явным...)

В каких случаях информацию следует искать в Открытом Каталоге, а не с помощью поисковых машин?

Справедливый вопрос, принимая во внимание то, что в ODP размещено чуть меньше 5 миллионов сайтов, в то время, как, например, Google уже давно проиндексировал во много раз больше. Несмотря на это, во многих случаях, результаты, полученные при помощи DMOZ непредвзяты, а появление сайтов в верхних строках выдачи поисковиков, является следствием успешной работы SEO специалистов. В наше время, в результате работы «чёрных SEO», выдача поисковиков может вообще превратиться в крайне некорректную, что не есть хорошо для человека ищущего информацию.

Например, с помощью массового использования блогов, современные компании получили возможность влиять на поисковую выдачу по необходимым им запросам. В подобных случаях, Каталог является предпочтительным средством поиска информации. Даже если и не все релевантные сайты в нём размещены, то валидность размещённых значительно выше, чем таковая в типичной поисковой выдаче.

Также в ODP существует множество узкотематических подборок сайтов, которые довольно-таки затруднительно найти при помощи поисковиков, но они будут крайне интересны человеку, интересующемуся данной областью.

Александр Сафронов, в прошлом CatMod раздела World: Russian, лишённый всех своих полномочий по решению администраторов Открытого Каталога ныне, не так давно обмолвился, что он не в курсе, какие именно мифы будут развеяны в этом блоге.

Что ж, это означает, что в среде посетителей существует действительно серьёзное недопонимание главных целей нашего блога, что не может не огорчать.

Dmoz Sucks — это проект, который можно назвать одним из самых ярких проявлений массовых заблуждений об ODP. Подобное «творчество» могло появиться только в результате достижения недопониманием между Каталогом и людьми, предлагающими сайты, критической величины.

Целью данного блога как раз и является сократить эту пропасть и упредить появление очередных мифов о Каталоге в будущем.

Google, не привлекая всеобщего внимания, запустил проект «Google Website Guide».

Чтобы Вам не истязаться переводом с китайского, приведём краткое описание интерфейса. Самый крупный прямоугольник в верху страницы содержит коллекцию «выдающихся сайтов». Далее, каждый из прямоугольников поменьше содержит сайты различных тематик, например, «чаты и форумы», «музыка в mp3» и т. д. Внутри прямоугольников поменьше сайты также делятся по темам. Слева находится панель навигации со списком тем и подтем.

В FAQ написано, что темы берутся из числа популярных запросов в Google, а при размещении сайтов используется тот же алгоритм, что и для ранжирования результатов поиска. Всё автоматизировано, лишь местами используется незначительное вмешательство человека.

Интересно также, что FAQ содержит вопрос: «Могу ли я предложить мой сайт в Google Website Guide?». Ответ на него: «Да, но будет ли он включён или нет, зависит от ранжирования в индексе Google». Причём, там нигде нет упоминания, как сделать предложение. Посетители также приглашаются предложить другие темы через E-mail.

Конечно, Google Website Guide работает принципиально отличным от Открытого Каталога (ODP) образом — это всё равно, что сравнивать Google News Россия и реальное информационное агентство со своими собственными редакторами и репортёрами. Но, тем не менее, пока остаются открытыми вопросы:

• Планируется ли запуск аналогичных сервисов на других языках?
• Будут ли, действительно, приниматься предложения сайтов?
• Будет ли в сервисе когда-нибудь использована человеческая помощь?
• Повлияет ли это, в конечном итоге, каким-либо образом на отношения Google и DMOZ?

Сегодня, к редактированию вернулся один из самых известных и опытных редакторов прошлого — Raufael Bairashev. По тем или иным причинам, он уже не один раз, временно, покидал ряды Открытого Каталога (ODP), но каждый раз, спустя некоторое время, неизменно возвращался назад.

Raouf начал свою редакторскую деятельность ещё в далёком 1999 году, также, некоторый период времени, он обладал привилегиями catmodа.

Хочется пожелать ему, больше никогда не покидать DMOZ, а также повторить и улучшить свои былые достижения.

Tulip Chain — это один из множества дополнительных инструментов редакторов Открытого Каталога (ODP), позволяющих контролировать качество листинга в DMOZ. Его можно назвать ботом, но, например, в отличии от Rob O'Zillы, проверка с его помощью не запускается автоматически, а инициируется конкретным редактором для проверки одного или группы разделов.

Инструмент позволяет проверять сайты на работоспособность, кроме того, он предоставляет дополнительную информацию о редиректах и неработающих ссылках. После посещения им Вашего сайта, обычно, в логах доступа Вашего сервера, в поле user agent остаётся что-то типа:

TulipChain/6.03 (http://ostermiller.org/tulipchain/) Java/1.5.0_04 (http://java.sun.com/) Windows_98/4.10 RPT-HTTPClient/0.3-3

Дополнительную информацию и исходные коды можно найти здесь.

Итак, заканчивается февраль 2007 года и наступает время подводить некоторые итоги.

Предыдущий выпуск: январь 2007 года.

Количество сайтов, классифицированных в Каталоге

На 28 февраля 2007 в DMOZ более 4 800 000 сайтов, из них в русскоязычных разделах находятся более 44 150, что является 10 результатом среди всех языков. 25 февраля, по общему количеству сайтов, раздел World: Russian обогнал раздел на каталанском языке, самостоятельно выйдя на 10 позицию.

Приведём также и статистику по конкретным русскоязычным разделам:

1. Бизнес (более 6000 сайтов)
2. Дети и подростки (более 200 сайтов)
3. Для взрослых (более 250 сайтов)
4. Дом (более 1 100 сайтов)
5. Досуг (более 1 350 сайтов)
6. Здоровье (более 800 сайтов)
7. Игры (более 1 100 сайтов)
8. Искусство (более 4 250 сайтов)
9. Источники информации (более 700 сайтов)
10. Компьютеры (более 3 750 сайтов)
11. Наука (более 1 300 сайтов)
12. Новости и СМИ (более 150 сайтов)
13. Общество (более 3 450 сайтов)
14. Покупки (более 1 400 сайтов)
15. Спорт (более 1 150 сайтов)
16. Страны и регионы (более 16 850 сайтов)

Изменение количества сайтов, классифицированных в Каталоге, за последний месяц

За последний месяц, русскоязычная часть ODP выросла чуть более, чем на 250 сайтов, что составляет около 0,56%.

Новые добровольные редакторы

В феврале 2007 года, около 10 новых редакторов приступили к редактированию в русскоязычной части Открытого Каталога, что составляет около 4,23% от общего числа новых редакторов принятых в феврале во всём Каталоге.

Сегодня, в 6 часов 22 минуты по московскому времени, произошло первое, после 13 октября 2006 года, обновление поискового индекса Открытого Каталога. При его формировании использовался RDF дамп, сгенерированный 4-мя часами раньше.

Чтобы найти Ваш сайт, размещённый в ODP до соответствующей генерации RDF дампа, попробуйте в строке поиска задать запрос имя_домена.зона_демена, т. е. без “www.” впереди (primer.com).