Рейтинг сайтов рунета. 100 сайтов с набольшим весом в поисковых системах

Описание

Автоматически обновляемый каждые 30 минут рейтинг сайтов рунета. Рейтинг сайтов оценивается с точки зрения их приоритета попадания в поисковую выдачу поисковых систем.

Чем выше рейтинг сайта, тем выше вероятность его попадания в верхние строчки поисковой выдачи.

Зеркала и однотипные поддомены склеивались.  Например yandex.ru и ya.ru, youtube.com и m.youtube.com. От сюда вытекает феномен проекта academic.ru. В проекте несколько десятков сайтов на поддоменах вроде anatomy_terms.academic.ru, upravlenie.academic.ru, lopatin.academic.ru ... соответственно в списке под academic.ru  находится всё облако.

Сервисы разной направленности вроде zen.yandex.ru и music.yandex.ru не склеивались.

Список сайта перестраивается 1-2 раза в час и сильно зависит от времени, поскольку и интересы людей от него сильно зависят. Соответственно оценивается не только изменение веса сайтов в глазах поисковых систем, но и изменение веса (интереса людей) к тематике сайта.  

Основную трудность представляет попытка представить n-мерную функцию, в действительности описывающую положение сайта в глазах поисковых систем,  в виде линейного списка. Подобное преобразование снижает точность модели, но с другой стороны делает ее более наглядной.

По списку сайтов сразу видно что аудитории между "отечественными" поисковиками и Google сильно отличаются. Как по общим интересам так и по набору поисковых запросов. Есть и явные аномалии. Например позиция meduza.io на вершине списка в Google выглядит явно искусственно.  Самым сбалансированным СМИ выглядит ria.ru, хотя и пресловутый "первый канал" russia.tv, 1tv.ru в Google выглядит просто отлично.