Я запустил парсер для сбора сообщений и комментариев в социальной сети Parler в течение нескольких месяцев, прежде чем Amazon закрыл их. Parler был платформой, на которой происходило широкое обсуждение, включая ненависть, теории заговора, угрозы насилия и дезинформацию.

Пользователи могли искать сообщения на Parler (называемые "Parleys") только по хэштегам, а не по содержанию текста в самом сообщении. Это приводило к тому, что пользователи широко использовали хэштеги в любом Parley, который они хотели широко распространить, предоставляя ценные метаданные исследователям, таким как я.

Например, вот случайный Parley от 6 января в Вашингтоне:

#trump должен был позволить #mikepence подписать свой собственный приговор к смерти.....#TraitorPence #GITMO #firingsquad #ALLorNOTHING #2theEND #wildDC #magarally #wildprotest#saveamericarally #trumprally #dc #ArrestPence #traitorVP #JAN6 новый #911..... #makethempay #retribution

Это первая часть многотомной серии, в которой я анализирую данные, собранные с Parler. В следующей части я использую эти данные вместе с отчетами Федеральной избирательной комиссии, чтобы представить аргументы в пользу того, что представитель из Джорджии Марджори Тейлор Грин могла совершить нарушения в финансировании кампании.

20/01/2021 - Теперь, когда у меня есть больший и более представительный набор данных на моем компьютере, благодаря archiveteam, я собираюсь обновить все визуализации и ответственно раскрыть весь использованный код перед тем, как писать дальше. Спасибо бесчисленным добрым людям за вашу поддержку и советы.

Висение политиков становится вирусным на Parler

Относительная частота хэштегов, призывающих к казни путем повешения - например, "pelosi4gallows", "hangtraitors", "bringbackpublicexecutions" и т. д. Да, это реальные хэштеги, которые широко использовались.

Идея убийства политиков обсуждалась на Parler в течение нескольких месяцев до выборов в США 2020 года, часто в ответ на воспринимаемые несправедливости, совершаемые этими политиками. Частота хэштегов, связанных с повешением/казнью, более чем удваивается после выборов в США 2020 года (синяя вертикальная линия выше), более чем утраивается в день голосования в коллегии выборщиков (зеленая линия) и в десять раз выше в день штурма Капитолия (красная линия).

Вероятно, Parler позволил идее нападения и повешения политиков распространяться вирусно на платформе, скорее всего, из-за небрежности. Я считаю, что идея повешения, которая получала поддержку в онлайн-дискуссиях, проявилась в возведенных за пределами Капитолия США виселицах 6 января. Я считаю, что виселицы являются отсылкой к литературе белых супрематистов "Дневники Тернера", в которой описывается "День Виселицы", когда политиков повешали массово. Мне указали хорошо осведомленным читателем, что виселицы могут иметь и другие возможные значения, поэтому я внес уточнение, что это лишь мнение.

Отсылка к "Дню Виселицы", когда недовольные белым супрематистским мышлением люди систематически убиваются, а затем в истории следуют насильственные меры против непринадлежащих к белой расе и ядерная армагеддон.

Ниже приведен облако тегов хэштегов, связанных с сообщениями, в которых явно упоминается убийство конкретных политиков (Нэнси Пелоси, Джо Байден, AOC и даже малоизвестных демократов, таких как Эрик Суолуэлл).

Чем чаще появляется хэштег, тем больше его шрифт, и неудивительно, что многие из них тесно связаны с предвыборными лозунгами 45-го президента.

На графике ниже хэштеги соединены и размещены ближе друг к другу, когда они часто упоминаются вместе. Теги группируются в сообщества, которые часто упоминаются вместе, а ребра пересекают сообщества, чтобы указать на связь между различными темами обсуждения.

Визуализация тем обсуждения на Parler и связи между различными обсуждениями путем анализа корреляции хэштегов.

Исследование набора данных

Я использую Wolfram Language для анализа, что позволяет мне выбирать и искать данные в наборе данных по конкретным темам обсуждения. Пока я случайно просматривал данные на основе хэштегов в графе обсуждения выше, я осознал, насколько сложно было бы модерировать такой разговор. Например, рассмотрим следующий пост:

Автор поста делится книгой о партизанской войне, которая доступна на Amazon. Я могу найти информацию об авторе по его идентификатору пользователя, и из его других постов и комментариев ясно, что он пытается подстрекать партизан к нападению на "глубинное государство". Amazon разумно не предоставляет платформу для распространения такой информации в цифровом виде, но неужели это просто заставляет людей возвращаться к печатному прессе?

Подождите здесь. Я собираюсь сделать важное предположение в следующем разделе, и мне нужно использовать наиболее полный доступный мне набор данных (спасибо archiveteam!). Я довольно уверен, что мой вывод не изменится, но это вполне возможно. Поэтому, пожалуйста, отнеситесь к этой части с некоторой осторожностью, пока я не обновлю эти результаты с полным скрапом Parler.

Следующий вирусный хэштег

В результате инцидента 6 января, появилась одна особая категория хэштегов, которая упоминалась чаще всего.

Использование хэштегов, призывающих к гражданской войне, увеличилось примерно на 30% после неудачной попытки восстания в Капитолии.

Хэштеги, связанные с гражданской войной, часто ассоциируются с движением "Бугалу" и кампанией Дональда Трампа. Возможно, мы увидим реальные последствия этой радикализации в ближайшие месяцы.

Используя язык Вольфрама для визуализации относительной частоты хэштегов с заданными ключевыми словами. Вы можете видеть, что в конце посты о повешении политиков заменяются постами, призывающими к гражданской войне.

Сообщества хэштегов - это группы тегов, которые часто упоминаются вместе. Желтые и зеленые относятся к движению "Бугалу", фиолетовые хэштеги обычно связаны с насилием и антиустановочными темами, а красные теги обычно ассоциируются с Дональдом Трампом.

В мире 24-часовых новостных циклов и распространения онлайн-дезинформации хэштеги, по-видимому, коррелируют с тем, что популярно в Интернете в определенный момент времени. На Parler большинство пользователей просто "эхо" посты других - это эквивалент ретвита на Parler.

Хэштеги и идентификаторы постов позволяют "отслеживать контакты" дезинформации по сети. В будущем посте я поделюсь своими идеями о способах измерения заразительности идеи и количественном определении уровня радикализации пользователя.

Облако слов для хэштегов на постах, явно призывающих к гражданской войне в Америке.

Заговор QAnon

Существует значительное количество американцев (включая двух находящихся в должности членов Конгресса США), которые верят в огромный глобальный заговор кабала поклонников Сатаны-педофилов с целью консолидации власти, и в то, что Дональд Трамп тайно пытается их свергнуть. Одной из отличительных особенностей заговора QAnon является то, что новые слои рационализации непрерывно добавляются через широко распространенные видео. В отличие от теорий заговора о посадке на Луну, предполагаемый заговор QAnon продолжается и непрерывно адаптируется к текущим событиям. По мере развития теории, это предоставляет возможности для любого пользователя Интернета вставить в нее более опасные идеи.

Посты QAnon на Parler часто связаны с отрицанием COVID и верой в то, что Билл Гейтс/Джордж Сорос организовали пандемию, причем "доказательства" часто представлены в плохо отредактированных видео.

Это популярный пост QAnon, взятый из случайной выборки набора данных. Он был просмотрен более 181 000 раз, перепостован более тысячи раз, получил более тысячи голосов "вверх" и имеет 319 комментариев.

Джордж Сорос - миллиардер-инвестор, выживший в Холокосте, и известный финансист либеральных инициатив.

Что дальше

Теперь вы можете прочитать часть 2, в которой данные указывают на то, что политическая кампания и супер PAC перевели более четверти миллиона долларов в Parler в течение одного месяца после выборов.

Internet Archive собирает более полный набор данных о сообщениях, изображениях, комментариях, пользователях и медиа из Parler, что я рекомендую ученым в области обработки данных, которые хотят приступить к этому проекту. Мои планы на будущее для этого проекта включают:

Проведение анализа естественного языка (NLP) и анализа тональности комментариев, которые пользователи оставляют под постами, и определение, какие хэштеги связаны с какими настроениями
Анализ дезинформационных сайтов, скорости их распространения по социальной сети Parler и наиболее часто используемых хэштегов для каждого из них
Количественная оценка радикализации пользователя путем показа статистически значимой тенденции к более насильственным идеям и хэштегам
Очистка данных и их общедоступность для исследователей

Вы можете связаться со мной относительно этой публикации и запросить доступ к набору данных, написав мне в Twitter или отправив письмо на parlerdatascientist@gmail.com. Я пытаюсь сохранить анонимность, чтобы эти истории не были обо мне - они должны быть о данных. Если вы прочитаете что-то еще, что я напишу и обнаружите в нем партийную предвзятость, пожалуйста, указывайте на это, так как это противоречит всему смыслу написания этих материалов, если я просто говорю в своем эхо-камере.

Пожалуйста, не ухудшайте проблему

Я не считаю, что средний пользователь Parler заслуживает быть жертвой, называться фашистом или лишаться своей конфиденциальности. Я не буду участвовать в чем-либо подобном.

Людей, совершивших преступления, следует рассматривать как преступников. Однако на Parler было немало социопатических людей, которым нужно сочувствие и, возможно, психологическая помощь, а не дальнейшее провокационное воздействие. Я считаю, что нам нужно изучить, как технология позволила группе людей радикализоваться друг другом и укрепить эхо-камеру, где могли процветать заговоры и расизм.

Отказ от ответственности: поскольку Parler никогда не применял свои условия обслуживания в отношении насилия в речи, я спокойно спал ночью, игнорируя их условия об автоматическом парсинге сайта.

Какая плохая привычка в повседневном онлайн-бизнесе вы делаете