timon_timonich


Заметки суриката

Я в этой жизни ничего не добился. Зато сам!


Previous Entry Share Next Entry
Жизнь и смерть ЖЖ в одном графике
timon_timonich
По меркам ЖЖ я салага, журнал зарегистрирован всего лишь 6 лет назад. Сколько себя помню, блогеры среднего и высшего сословия стабильно писали душещипательные истории, что платформа уже не та и ностальгировали по темлым ламповым временам, когда тысяча друзей это прям было огого. Для придания драматичности прикладывались картинки с графиками неумолимо падающей посещалки. Итак пару раз в год публиковался пост в ЖЖ, который как бы умирает.

После очередной волны упаднических настроений мне стало любопытно, действительно ли всё так плохо. Ориентироваться на собственную статистику смысла нет, особенно если учитывать, что я на месяц вообще на блог забил и цифры там мегагрустные. Потому было решено зайти с другой стороны, я ж айтишнег, так что пришло время заняться моей тайной страстью — Data mining.

Вы слова то не пугайтесь, звучит солидно и умно, некоторые любят козырнуть им в разговоре и в резюме, но по факту это всего лишь анализ общедоступных и не только данных. Итак, ЖЖ выдает по каждому пользователю дату регистрации и дату последнего обновления журнала, надо «всего лишь» получить список всех пользователей платформы и запросить по ним инфу. Господи, делов то...

На момент расследования у меня уже был список из 5 млн. активных пользователей ( и не спрашивайте зачем ), в архивах обнаружилась БД двухгодичной давности на 8 млн. записей и еще своими изысканиями поделился товарищ vmenshov, так я обзавелся еще одним набором данных на 12 млн строк. Дело за малым — всё это собрать воедино, отсеять дубликаты, проверить пользователей на активность и заполучить по ним инфу. Боевые роботы пошуршали недельку и выдали мне 12 млн. пользователей из которых после двухнедельной проверки «живыми» оказались 7.5, остальные или удалены или заблочены.

Дальше всё совсем просто, группируем инфу о пользователях по месяцам и получаем его — график жизни и смерти ЖЖ.


Оранжевая линия это количество регистраций, синяя — количество журналов, которые последний раз обновлялись в данном месяце и больше ничего не писавших. Проще говоря, синее - это количество авторов забивших на ЖЖ.

Итак, что же по всему этому можно сказать?

— Выборка делалась по пользователям, которые написали за всё время более 10 постов. Делать сводку по аккаунтам пустышкам не было смысла, мне были интересны пишущие пользователи. Кстати таких журналов оказалось ~4.2млн, т.е. хоть что-то написали чуть больше половины, остальные пустышки.

— Синяя линия, уходящая практически вертикально вверх это количество аккаунтов, которые продолжают писать. Вы не обращайте внимания на январь, на самом деле крайняя точка справа это март 2016, просто Excel сурово зарубил подсказку. Если говорить цифрами, то активных журналов всего 122 тысячи, т.е. примерно 1.5% от общего числа. Чукча не писатель — чукча читатель.

Я долго смотрел на пик вначале 2004 года и думал «Это жжжж неспроста», но потом меня осенило. Это же выборы в апреле 2004 года! Именно поэтому график умирающих журналов идет резко вверх в мае того же года. Забавно что в 2008 году подобной движухи нет, зато в 2012 что-то подобное наблюдается. Ждем 2018 :) UPD. Был не прав, в комментах подказали, что это отмена инвайтов http://news.livejournal.com/74165.html

— Количество новых регистраций стремительно падает. Это факт. Есть небольшие пики, только они практически повторяются на графике умерших журналов, так что думаю это просто всплески активности ботов.

Вот такие пироги ребята. Для чистоты эксперимента неплохо было бы сделать статистику по постам и количеству комментов, но этих данных в публичном доступе нет. А чтобы заполучить самостоятельно список записей для 7.5 млн журналов надо сделать порядка 200-300 млн. запросов к ЖЖ. И это нифига не быстро, потому пока я эту мысль отложил.

На этом у меня всё, спасибо за внимание

upd. Меньшов решил, что на моём графике нихрена непонятно и потому открыл своё казино с блэкджеком и шлюхами нарисовал альтернативный график. Тоже самое, но с накоплением.


з.ы. Ссылка на XLS файл с данными для любителей покопаться в цифрах.
з.ы.ы. ljpromo помнишь я тебе говорил про мега график, вот он. Если я конечно не ошибаюсь и писал тебе про это :)

Facebook | Instagram | Vimeo | Youtube

Tags:

Posts from This Journal by “жж” Tag


пик в начале 2004 - русскоязычные пользователи открыли для себя жж, я больше имею в виду все же синюю линию

Edited at 2016-04-08 09:07 am (UTC)

выборы, катастфрофы, беспорядки - наверняка всегда увеличивают количество записей, а лето - уменьшает :)

Статистика по постам очень интересна, но блин я задолбаюсь её собирать

Светлая память и земля пухом.

Нет притока новеньких, но старая школа довольно активна. Думаю все не так плохо. ЖЖ катастрофически не хватает мобильного приложение, думаю оно хоть как-то спасёт положение

че-та нифига не понял... так жив или мертв?

Каждый сам для себя решает. Новенькие не приходят, но тем не менее есть 122 тысячи живых авторов. Пациент жив или мёртв? :)

Вот что такое айтишник! Теперь хоть немного имею представление.

Edited at 2016-04-08 09:15 am (UTC)

так всё таки

life and death of Livejournal?

Re: так всё таки

Позор на мою седую голову, очепятка. Сейчас поправим )

мало новых аккаунтов = мало людей, способных писать в жжчном формате.
В инстаграмм постят всякую хренотень - на это много ума не надо, и времени тоже. И там аудитория легко растёт за счёт школьников, которым купили смартфон.

letohin на эту тему выкладывал отличную картинку


Так а статистика created - это же статистика именно появления новых жж? А статистика updated - это же статистика обновления всех жж вообще? Или они в какой-то хитрой пропорции между собой завязаны?

Created - дата регистрации. Updated - дата последнего обновления журналов. что непонятного то? Параметры вообще никак не связаны друг с дружкой :)

Взлёт в 2004 - отмена инвайтов в декабре 2003.
И никакой конспирологии.
http://news.livejournal.com/74165.html

Фига, я даже не знал что были инвайты. Спасибо за наводку

Да можно пописать ещё, но былых цифр уже не будет.

меняется жизнь, меняются скорости, потоки и объем информации
мне кажется, просто основная масса ушла от длинных текстов - как от написания, так и от прочтения
вот и все
картинки и короткие подписи к ним рулят :)

Все куда-то торопятся )

У меня ощущение, что когда с соцкапом и рейтингами пару лет назад ввели изменения, ЖЖ как-то ощутимо сдулся.

Соцкап норм тема, активная главная и учет всех заходов убило. Последнее отличная штука, но получилось что точка откуда идет трафик одна и все правдами и неправдами стали ломиться на главную.

Познавательно. А моему блогу через девять дней всего-то четыре года...


Ты - следопыт ЖЖ )) а на самом деле - отличный отчет!

Статистика по постам и комментам гораздо интереснее, но оооочень долго её собирать придется )

Да жив он. Просто жив для тех, кому ЖЖ нужен именно для того, для чего он лучше всего подходит: для лонгридов и репортажей. А всю мишуру увели к себе Инстаграм, Твиттер и отчасти ФБ (иногда мне всё же приходится выбирать, куда помещать средней длины пост и я обычно делаю выбор не в пользу ЖЖ).

При этом политика руководства ЖЖ меня, конечно, категорически не устраивает. На главной какой-то паноптикум, я туда нечаянно попадаю пару раз в год, так там всё веселее и веселее.

Ну и приложение да. Должно быть стыдно в 2016-м не иметь для подобного веб сервиса нормального приложения.

Главную вырубать, приложение делать! )

Я крайний раз писал в мае того года, после забил, только ленту читаю. Хотя вот съезжу в отпуск, продолжу.

Для тех кто ничего не понял в графиках Тимоныча. Те же данные, только немного по другому развернутые:

ldzh.png

:)

Дельта в конце небольшая. Добавлю пожалуй твой график в пост :)

Была задача убить ресурс, как политизированный, и она выполнена. Заодно убили (убивают) его в целом. Никого из владельцев (владельца) ЖЖ это не волнует.

Отчасти верно. Народ устал банить троллей, удалять всякую дрянь с Главной, про ТОП лучше вообще промолчать, ибо о покойном не принято говорить нехорошо, ну и что осталось - то осталось, а именно личная лента, подобранная вручную. Но в таком урезанном формате общение и новый контент неизбежно будут сокращаться.
И да, владельцы ЖЖ явно ничего не делают позитивного, чтобы это положение изменить. Негатива - сколько угодно. Так, Гулин многократно врал про то, что в ЖЖ нет цензуры, модерации и блата, хотя примеров тому - море, начиная с его Журнала ЖЖ, Варламова и т.д.

Edited at 2016-04-08 08:12 pm (UTC)

надо проверять было всех кирилликов, а не 12 млн

Я ничего не потерял проверим всех )

печально.. но френдлента то жива)

Старички еще как бодры! ))

Мне что-то не доступно понимание.
<<
Оранжевая линия это количество регистраций, синяя — количество журналов, которые последний раз обновлялись в данном месяце и больше ничего не писавших. Проще говоря, синее - это количество авторов забивших на ЖЖ.>
И дальше:
<<— Синяя линия, уходящая практически вертикально вверх это количество аккаунтов, которые продолжают писать. Вы не обращайте внимания на январь, на самом деле крайняя точка справа это март 2016, просто Excel сурово зарубил подсказку. Если говорить цифрами, то активных журналов всего 122 тысячи, т.е. примерно 1.5% от общего числа. Чукча не писатель — чукча читатель.>>

Таки синяя линия, это забившие или пишущие? Можно подоступнее специально для чайника!

Ок, объясняю.. Синяя линия показывает у какого количества журналов в дате обновления стоит месяц по которому была группировка. Т.е. пик справа это активные журналы что продолжают писать, а все что левее это заброшенные журналы. Меньшов второй график нарисовал специально для этого, там понятнее )

Умирает как советские толстые журналы. Формат длинных постов мало востребован. Нужно коротко и одной мыслью. В 2014 упало количество комментариев и так не восстановилось. Кнопка лайк заменила все.
Может и смог бы протянуть при качественном мобильном приложении (к примеру, у меня время читать есть в метро).
Короче, останется ЖЖ уделом интеллектуалов :) И сем больше оных, тем больше будет поддержан формат.

Тимоныч, вот если бы такое по каментам еще сделать, то был бы вааще огонь.

То что писать в ЖЖ кроме полупрофессианальных блоггеров все бросили - это хорошо видно.

Но может быть каменты растут? Пишут меньше, но обсуждают написанное на порядок активнее?

Во всяком случае со мной (новичком, любящим побеседовать, а не учить) это так. Чтобы написать пост - созреть надо.

Очень грустно. Потому что если в ЖЖ писали и читали, пусть и ерунду, то в фб и прочем дерьме только лайкают, пишут по три слова и выставляют завтраки на полайкать френдам. Тупое и бессмысленное пространство. А ЖЖ уже не тот(

Как по мне всё совсем скатилось где-то в 2011 году. После этого ЖЖ уже почти нет

Да это всегда так кажется "старожилам" Тем более, что ожидается реформация ЖЖ. Надеюсь, не так, как головка страны нас реформирует. Не реформа ради реформы, а по сути.