пикабу хуйня

Анализ трендов YouTube и определение накруток часть 2

Часть 1:
http://joyreactor.cc/post/3360569

TubeWarden - сервис, который собирает историю изменений лайков/дизлайков видео из трендов Youtube. Этот сервис в автоматическом режиме отмечает видео в которых есть подозрение на накрутку. Так же есть плагин, который в трендах Youtube отмечает подозрительные видео.

В комментариях к предыдущей статье были справедливые замечания: невозможно по одному (или нескольким) графикам  изменения лайков/дизлайков сказать, была ли накрутка. Любые подозрительные перепады можно объяснить работой CQRS, вспышками на Солнце, пьяным аднимом, который разлил сидр на сервер в недрах Google и т.д. Да, один график плавный, другой ступенчатый, но, возможно у всех видео время от времени случайным образом встречается подобное поведение?

Именно поэтому для составления общей картины нужно собирать информацию со всех видео которые попали в тренды и попытаться найти закономерности. Если получиться найти что-то общее между накрученными видео, значит подобные графики не являются чем-то случайным. Статистика собирается с 31-го декабря. Это не так много, тем не менее кое что интересное начинает прорисовываться. В данной статье описывается что удалось найти за этот срок.

Очень не хотелось ставить тег "Политота", так как накручивают не только политики, но вообще все: домохозяйки, строители, блоггеры и .т.д. Тем не менее результаты таковы, что без этого тега никуда.

Что было сделано за 3 недели (отчет перед спонсором)

Да, появился спонсор: некий добрый анон перечислил мне на кошелек (возможно, случайно) 100 деревянных, за это посылаю ему лучи добра.

1. Собирается больше информации: каналы Youtube, теги видео

2. Фильтр видео по ключевому слову. Алгоритм построения ключевых слов для видео будет описан ниже.

3. Улучшил алгоритм распознавания накруток (как мне кажется по крайней мере)

4. Изменения в интерфейсе.

5. Зарегистрировал плагин для Firefox. Пытался так же для оперы сделать но при попытке загрузить плагин выдается ошибка: Please verify your email. При этом аккаунт давно активирован.
6. Причесал код, теперь при взгляде на него глаза кровоточат чуть меньше.

Общая информация

Всего было проанализировано: 1768 видео

Из них:

накрутка лайков: 76 видео (4.3%)

накрутка дизлайков: 105 видео (6%)

накрутка лайков и дизлайков: 8 видео (0.4%)

По каждому видео статистика собирается с момента попадания видео в тренды. Статистика перестает собираться через 24 часа после выхода видео из трендов (но минимум 48 часов).

Средние показатели по лайкам/дизлайкам

Среднее количество лайков среди всех видео: 19045

Среднее количество дизлайков среди всех видео: 3287

Логично предположить, что у видео, у которых наблюдается накрутка лайков/дизлайков эти показатели будут выше среднего. На самом деле все не совсем так:

Среднее количество лайков среди накрученных видео по лайкам: 9407 (49% от среднего)

Среднее количество лайков среди накрученных видео по дизлайкам: 22598 (118% от среднего)

Среднее количество дизлайков среди накрученных видео по лайкам: 5068 (154% от среднего)

Среднее количество дизлайков среди накрученных видео по дизлайкам: 25675 (783% от среднего)

Таким образом накрутки лайков не помогают, такие видео не набирают половину от среднего показателя лайков. В то время как накрутка дизлайков работает крайне эффективно. Это связано с тем, что в среднем количество дизлайков очень низкое и из-за этого на него легче влиять.

Статистика по каналам

всего каналов: 925

Количество каналов достаточно большое по сравнению с общим количеством видео. Поэтому подавляющее большинство каналов (596) попали в тренды только один раз. 

Каналы с систематической накруткой лайков выявить не получилось. Нет ни одного канала, у которого за рассматриваемый период есть более двух накрученных видео по лайкам. Возможно, это связано с работой Youtube, периодически такие видео удаляют а каналы банят. Нужно собрать больше статистики.

А вот среди каналов с систематической накруткой дизлайков есть явный победитель.

Топ каналов, у которых больше других видео с накрученными дизлайками:

1. kamikadzedead: 17 видео (89% от общего проанализированного количества видео)

2. Новости 24/365: 8 видео  (47% от общего проанализированного количества видео)

3. Волшебная Россия: 4 видео (66% от общего проанализированного количества видео)

4. Алексей Навальный: 4 видео (80% от общего проанализированного количества видео)

5. Навальный LIVE: 3 видео (60% от общего проанализированного количества видео)

Любопытно что kamikadzedead в свое время переживал, что у его видео замораживают просмотры.  С просмотрами на Youtube вообще все интересно, но ничего подозрительного в графике просмотров на его канале мне найти не удалось. Но, как известно,  если у вас паранойя, то это еще не значит, что за вами не следят. Поздравим победителя!

Статистика по ключевым словам

У каждого видео на Youtube есть список тегов. Тегами могут быть как слова, так и словосочетания. Чтобы как-то с этим работать было сделано следующее: название и теги видео разбиваются на отдельные слова, у слов удаляются окончания. В результате получается набор ключевых слов привязанных к видео.

В этом разделе так же интересны ключевые слова на которые больше всего накручивают дизлайки, так как и в этом случае есть явный победитель. Кто же этот несчастный, которого гнобят невидимые силы, не дают ему жить? Для меня результат оказался несколько неожиданный. 
Топ ключевых слов по накрутке дизлайков:
1. Путин: 53 видео (30% от общего количества видео с этим тегом)

2. Грудинин: 38 видео (43% от общего количества видео с этим тегом)

3. Навальный: 27 видео (40% от общего количества видео с этим тегом)

4. Политика: 20 видео (22%  от общего количества видео с этим тегом)

5. Камикадзе: 19 видео (73% от общего количества видео с этим тегом)

С Путиным при ближайшем рассмотрении получается довольно занятная ситуация. У меня сложилось впечатление, что лайки накручивают на хвалебных видео, а дизлайки - на видео в которых его ругают. Впрочем, это мое субъективное ощущение, выводы  каждый может сделать сам.
Ссылка на список видео с тегом "Путин" с накрученными лайками:
https://tubewarden.ru/videos/like?s=%D0%9F%D1%83%D1%82%D0%B8%D0%BD

Ссылка на список видео с тегом "Путин" с накрученными дизлайками:
https://tubewarden.ru/videos/dislike?s=%D0%9F%D1%83%D1%82%D0%B8%D0%BD

С тегом Грудинин по моему субъективному впечатлению  ситуация другая: дизлайки накручивают на видео в которых его хвалят, а лайки - там где его ругают. Но опять же, это можно проверить самим.

Выводы
Похоже, что накручивать лайки на Youtube не так полезно. Пока не удалось найти канал, у которого за рассматриваемый период есть более двух накрученных видео по лайкам.  Возможно это связано с тем, что недавно Youtube заблокирован сразу пачку каналов которые, предположительно, занимались накрутками. Вот один пример:

https://tubewarden.ru/video/ekmvtiimsdI

По дизлайкам же удалось найти критерии по которым накрутка происходит гораздо чаще среднего.

Крушение MH17: следствие установило связи между Москвой и лидерами ДНР.

Международная следственная группа (JIT), расследующая крушение малайзийского "Боинга" на востоке Украины, снова ищет свидетелей. Следователей интересует информация о "структуре командования и той роли, которую, возможно, сыграли российские правительственные чиновники".

"Недавний анализ показаний свидетелей и другой информации показал, что влияние России на ДНР выходило за рамки военной поддержки, и что отношения между российскими чиновниками и лидерами ДНР были, по-видимому, более тесными... Именно поэтому сегодня JIT публикует новое обращение к свидетелям", - говорится в пресс-релизе следственной группы.

В подтверждение версии о том, что лидеры самопровозглашенной Донецкой народной республики (ДНР) могли получать указания из России, JIT опубликовала новые расшифровки перехваченных телефонных разговоров. В них упоминаются министр обороны России Сергей Шойгу, директор ФСБ Александр Бортников и помощник президента Владислав Сурков.

Российские власти категорически отрицают какую-либо причастность к конфликту на востоке Украины и называют российских граждан, воевавших на стороне самопровозглашенных республик, добровольцами.

Официальный представитель МИД России Мария Захарова уже заявила, что новое заявление JIT - "подгонка материалов" под заранее вынесенный вердикт.

"Защищаю интересы исключительно одного государства..."

В расшифровках, опубликованных JIT, в частности, есть реплики, приписываемые "премьер-министру" ДНР Александру Бородаю:

A: "Ну, у вас далеко идущие планы, а у меня - нет. Я выполняю приказы и защищаю интересы исключительно одного государства, Российской Федерации. Вот, собственно, и все".

В следующей расшифровке приводятся слова неназванного "члена ДНР", который рассказывает о приезде в Донецкую область "людей с полномочиями от [министра обороны России Сергея] Шойгу":

B: - Как комендант Макеевки, я бы хотел узнать. Я бы хотел узнать, к чему мы идем.

A: - Мы идем к единоначалию. Сюда прибывают люди с полномочиями от Шойгу, и всех местных полевых командиров выкидывают **** из подразделений...

B: - Угу.

A: - …и возглавляют москвичи.

Другая расшифровка, по мнению JIT, может свидетельствовать об участии в управлении ДНР российских спецслужб - ФСБ и ГРУ. По данным следователей, в разговоре участвуют ополченцы с позывными "Монгол" и "Шериф":

B: - И мы сегодня... напрямую... уже неделя ... все [неразборчиво] в Москву, и назад мы получаем команды...

A: - И я тоже получаю команду из Москвы. То же самое.

B: - Но у вас , у вас, у вас ФСБ? Да?

A: - Да.

B: - У нас ГРУ. Вот и все отличие.

A: - Я об этом знаю прекрасно.

Среди опубликованных JIT расшифровок также есть разговор, который, по данным расследователей, якобы имел место между Бородаем (А) и помощником президента России Владиславом Сурковым (B):

B: - Там некто Антюфеев к тебе будет выдвигаться. Я тебе про него говорил... Он в субботу собирался...сюда уже... в воскресенье даже отбывать... А в субботу они выдвигаются туда на юг уже, ну чтобы быть в боеготовности. Вот. Там, Саша, один момент - сразу тебе скажу - они же на ГБ претендуют. Но я сказал, что Ходаковский там же возглавляет ГБ.

A: - Я не против. Я думаю, что Ходаковский, кстати, с удовольствием свой пост сдаст...

B: - Ну смотри, Саша. Ты сам решай. Если он сдаст... пусть тогда сдает... Если он не захочет сдавать по каким-то причинам... по каким-либо причинам, то пусть создадут еще одну спецслужбу. Ничего там страшного не случится.

По мнению расследователей, содержание этих разговоров указывает на то, что влияние России "распространялась на административные, финансовые и военные вопросы ДНР".

"Признаки тесных связей между российскими правительственными чиновниками и лидерами ДНР поднимают вопросы о возможном участии чиновников в развертывании ЗРК "Бук", из которого был сбит малайзийский авиалайнер, заключает объединенная следственная группа.

Ты - не ты, когда голоден

Кандидат в Госдуму от КПРФ Александр Андреев сообщил о фальсифакациях на избирательном участке №1713 в Чебоксарском районе республики. По его информации, члены комиссии, которые отправились на выезд на надомное голосование, ходят по дворам и собирают голоса у случайных прохожих.

— Я прибыл на участок и запросил копию акта о надомном голосовании. Согласно акту, Заявления на голосование вне участка подали 20 человек. Тогда попросил найти и показать мне эти заявления, копию акта оставил у председателя комиссии и вышел на улицу поговорить по телефону. Возвращаюсь и вижу, что председатель делает странные действия с принтером, печатает какие-то ксерокопии. Я его прервал и попросил вернуть мне мою копию акта. На новой ксерокопии не было написано количество заявлений, то есть председатель пытался выдать мне подделку, притом фальсификация проходила при мне. В это время прошу вернуть мне изначальный документ, председатель же отрывает кусок документа и сначала пытается спрятать его в карман, а затем вовсе начинает его жевать, прям под нашей камеры и в присутствии других членов комиссии, — сообщил "Idel.Реалии" Александр Андреев.

По данному факту секретарь чувашского отделения КПРФ написал заявление в правоохранительные органы.

"Мы будем добиваться заведения уголовного дела на председателя комиссии за фальсификацию документов", — добавил к комментарию Андреев.

В участковой избирательной комиссии в беседе с корреспондентом "Idel.Реалии" сообщили, что решение по жалобе кандидата в Госдуму от КПРФ не приняли.

https://www.idelreal.org/a/31467515.html

https://www.znak.com/2021-09-19/v_chuvashii_predsedatel_komissii_sel_dokument_posle_obvineniy_v_falsifikacii

Путин: Россия признала ДНР и ЛНР в границах Донецкой и Луганской областей

Президент Владимир Путин сказал во время пресс-конференции, что Россия признала самопровозглащенные ДНР и ЛНР в границах Донецкой и Луганской областей Украины.

«Мы же их признали. А это значит, мы признали все их фундаментальные документы, в том числе и конституцию, а в конституции прописаны границы в рамках Донецкой и Луганской областей в то время, когда они были в составе Украины. Но мы рассчитываем, и я хочу это подчеркнуть, что все спорные вопросы будут разрешены в ходе переговоров между киевскими сегодняшними властями и руководством этих республик. К сожалению, на данный момент временени мы понимаем, что это невозможно, так как боевые действия там продолжаются, и, больше того, они имеет тенденцию к обострению. Но надеюсь, так и будет в будущем», — сказал он.

Сурс

$5 млрд в никуда: Путин искренне верил, что для него подготовили первоклассную сеть агентов

Два дня назад СБУ выкрыла организаторов "федеративной республики Украина". Коллаборанты планировали вести подрывную деятельность в тылу украинских военных. Они хотели расколоть страну и создать новую "народную республику", в которую вошли бы Ивано-Франковская, Закарпатская, Львовская, Тернопольская и Черновицкая области. А недавно выяснилось, что президент РФ Владимир Путин очень рассчитывал на таких агентов и подрывную деятельность в Украине. Это и не странно, если учесть колоссальные средства, которые выделялись на пророссийскую пропаганду и создание так называемой "пятой колонны" в Украине. Теперь глава РФ решил разобраться, на что были потрачены все деньги, ведь в Украине оккупантов встречают не с цветами, а с оружием наперевес и готовностью защищать родину до победы.

Украинская разведка сообщила УНИАН, что Путин отдал любопытный приказ начальнику контрольно-ревизионного управления Администрации президента Дмитрию Шалькову, начальнику Следственного комитета РФ Александру Бастрыкину, Генеральному прокурору Игорю Краснову и первому заместителю директора ФСБ Сергею Королеву. Президент РФ поручил разобраться, куда были направлены средства, которые выделялись на подрывную деятельность в Украине с 2014 по 2022 года.

В расхищении средств подозреваются бывший помощник президента Владислав Сурков, бывший руководитель управления по культурным и общественным связям с ближним зарубежьем генерал Владимир Чернов, его преемник на этом посту Игорь Маслов, начальник 5-й Службы ФСБ генерал Сергей Беседа, глава Россотрудничества Евгений Примаков, бывшие кураторы украинского направления при Минэкономразвития Михаил Бабич и Яна Лантратова, нынешний министр иностранных дел Абхазии Инал Ардзинба и другие.

По данным украинской разведки, упомянутые личности украли около $5 миллиардов. Путин считал, что эти деньги направили на пропаганду, агитационную деятельность, агентов среди националистических организаций, сеть активистов и так далее. Однако президента РФ все восемь лет снабжали откровенной дезинформацией, а средства просто "осваивали". Он рассчитывал, что в Украине армию РФ ждет мощная поддержка, а на деле ситуация получилась обратной. Расследование, которое инициировал российский президент, должно стать тревожным звонком для Виктора Медведчука. Олигарх потратил на те же цели около миллиарда долларов.

https://www.unian.net/war/5-mlrd-v-nikuda-putin-hochet-razobratsya-pochemu-provalilas-podryvnaya-deyatelnost-v-ukraine-novosti-donbassa-11733466.html

Чудо божье: анонимное голосование "Сквер или храм?" в Омске

Омскую епархию уличили в накрутке голосов за строительство храма в сквере Молодоженов

На следующем скриншоте, сделанном в 17.20 того же дня, картина уже кардинально иная: 53% высказались за сквер, 45% — за храм. На третьем — только 37% голосов отдано за сквер, тогда как число поддержавших строительство храма выросло до 61.4%. Проголосовавших уже 3 452 человека. То есть больше половины всех участников опроса, запущенного 5 дней назад, пришли в него в течение пары часов.

Пик голосования за храм прекрасно иллюстрирует график опроса: резкий наплыв пользователей, поддерживающих храм, случился в интервале между 14.00 и 18.00 часами, а затем быстро сошел на нет. 

При этом опрос так же внезапно стал интернациональным. 163 голоса за храм неожиданно отдали пользователи из Украины, 42 — из Казахстана, 35 — из Беларуси. Также отметились участники из Москвы (212 голосов) и Санкт-Петербурга (74 голоса). Кроме того, пост собрал более 500 комментариев, авторы которых в последние дни гораздо чаще, чем раньше, стали высказываться в поддержку церкви. График также демонстрирует аномальную активность в голосовании. Множество однотипных комментариев «Храм нужен» поступает с явно «левых» страниц. Пользователи «профессионально» занимаются репостами, городами указаны Одесса, Джалал-Абад и др.

Это не первая попытка «православных накруток» в Омске. В марте 2019 года такая же ситуация произошла с опросом ВООПИК о целесообразности строительства Ильинского храма, идею которого лоббирует экс-губернатор Леонид Полежаев: голосование пережило наплыв ботов, после чего его результаты отменили.

https://gorod55.ru/news/society/24-02-2021/s-botiey-pomoschyu-v-oprosah-omskih-pablikov-nakrutili-golosa-za-hram

https://vk.com/wall-28815494_294436

Начальника поезда сняли с должности, после того, как он попросил военного оплатить багаж.

В конце октября в поезде Петербург-Белгород произошел конфликт между начальником состава и военным, не ставшим оплачивать дополнительный багаж — с «подарками» для участников «СВО». Обычный, казалось бы, спор закончился тем, что о «неуважении» к военному гневно написал один из Z-каналов, после чего руководство РЖД извинилось перед «высокопоставленным офицером», а начальника поезда понизили до проводника.

Спор между начальником поезда и военным сняла на видео соседка офицера — Z-канал «Лаврентий Павлович» прикрепил его к посту. На нем видно только начальника поезда Матвея Шумейко, стоящего в дверях темного купе, — голоса самого военного и заступившейся за него попутчицы слышны за кадром.

Стенограмма:

«Вот коробка — я везу подарки для военнослужащих на "специальную военную операцию", — говорит мужчина. — В чем проблема, что эта коробка доедет дотуда?».

Шумейко в ответ объясняет, что, по правилам, пассажир без дополнительной оплаты может провозить багаж, размер которого по сумме трех измерений не превышает 180 сантиметров. Самой коробки в видео не показали, но она очевидно не только большая, но и очень тяжелая — в какой-то момент соседка военного по купе говорит, что в вагон ее заносили три человека.

— Эта коробка от Александра Дмитриевича Беглова, — подчеркивает пассажир важность груза.

— Ну вы понимаете, что у нас нет никаких привилегий для посылок Беглову, военнослужащим? — отвечает Шумейко.

— Для «специальной военной операции» никаких нет у вас привилегий? — уточняет военный.

— Нет. К сожалению, нет, — говорит начальник поезда.

Шумейко объясняет пассажиру, что он не может пойти на нарушение должностных обязанностей и «допустить, чтобы эта коробка под камерами стояла возле туалета».

«Хорошо, предложите мне, я поставлю в другое место», — вроде соглашается «высокопоставленный офицер». Но когда сотрудник РЖД говорит, что тот может оплатить место в багажном купе и перенести груз туда, военный сначала просит записать данные Шумейко, а потом добавляет, что раньше у него «никогда не было проблем с начальниками поездов», которые относились «абсолютно с пониманием» к подаркам для воюющих в Украине солдат.

— Я повторюсь: вы сейчас следуете пассажиром, без оплаты багажа. Вы везете сверх нормы багаж, — спокойно объясняет сотрудник РЖД.

— Он особый пассажир, молодой человек! — встревает попутчица военного, очевидно она и ведет съемку.

— У нас нет, к сожалению, особой категории [пассажиров], — отвечает Шумейко.

— А у нас есть. В стране у нас есть особые пассажиры, и вы это знаете. Вы должны идти навстречу, — не сдается женщина.

— Может быть, если бы я не был на работе, я бы пошел навстречу. Но, к сожалению, я на работе.

— Значит, есть исключения.

— Нет, к сожалению. Сейчас исключений нет, — повторяет Шумейко.

— У нас в стране есть. Я не знаю, где вы живете… — настаивает пассажирка.

В итоге начальник поезда, все так же не повышая голоса и извиняясь, говорит, что ему придется вызвать наряд полиции, если военный не уберет коробку. «Без оплаты допускается провозить только детские и инвалидные коляски», — добавляет он.

— Ну, считайте, что там инвалидная коляска, — ухватывается пассажирка за возможность добиться поблажки для военного — сам он в спор уже почти не вступает.

— Там не инвалидная коляска.

— А откуда вы знаете?

— Мне только что сказал об этом пассажир, — по-прежнему спокойно отвечает Шумейко.

— Хорошо, он сейчас вам скажет, что там инвалидная коляска — вы можете вот в этом случае ночь дать постоять этой коробке?

Начальник поезда отказывает и объясняет, что его могут уволить за нарушение инструкций. Тогда военный просит сотрудника РЖД помочь ему перенести коробку, но Шумейко отвечает, что не имеет права прикасаться к багажу пассажиров.

Попутчица же решает свалить вину на проводницу, которая изначально запустила в вагон военных с таким грузом: «Она допустила эту коробку в вагон! Значит, пусть она и тащит теперь! Или вы своими силами несите! Это ваша ошибка! Ваше упущение!».

— Вот вы сейчас уже переобулись и говорите по-другому, — начинает терять дружелюбный тон начальник поезда.

— Почему я переобулась?

— Что за такие слова: переобулась? — встревает военный.

Несмотря на то, что Шумейко несколько раз сказал, что правила запрещают ему прикасаться к коробке, мужчина повторяет, что перенесет ее, только если ему помогут. «Вы вообще в этом государстве живете? Или вы…я не могу понять?», — недоумевает военный.

— Ваши предложения! — снова спрашивает попутчица офицера.

— Мои предложения — чтобы силами пассажира эта коробка убралась оттуда, — отрезает начальник поезда.

— Я не подниму! — говорит военный.

— Он один! — возмущается пассажирка.

— Молодой человек, я повторюсь: мы не можем к вашему багажу прикасаться!

— Бля, тупик! — восклицает хозяин коробки.

Соседка «высокопоставленного офицера» начинает смеяться: «Не, это надо выложить! Это точно надо выложить».

Источник