🌐Как проходила главная датавиз конференция года

С 12 по 14 июня в Чикаго проходила конференция Outlier 2024, это ежегодная конвенция Data Visualization Society - нашего всемирного "профсоюза".

Главной темой были Disruptive innovations (да, звучит интересно, и непонятно). Мой типичный доклад про дашборды, конечно же, не взяли, но я все равно поехал, чтобы живьем окунуться в эту атмосферу.

А в рубрике мир тесен оказался Никита Рокотян, победитель Information Is Beautiful 2023 и World Visualization Prize 2019, автор канала Виз Ньюз. Мы с ним земляки, но в Екатеринбурге ни разу не пересекались, зато на другом конце планеты удалось встретиться.

И мы решили завтра устроить подкаст, поделиться с вами инсайтами и трендами, которые вынесли с этой конференции.

🔹Начнем на Ютубе 21 июня в 18 мск (у Никиты это будет 8 утра, у меня 11)

🔹 Трансляция состоится тут

Кринжую от видео Алексея, на и ладно! Приходите в субботу послушать про то, как прошел Outlier 🦻

Меньше чем через час обсуждаем Outlier с @analyst_club, приходите

https://youtube.com/live/-mUWP2qRSYo?feature=share

Коллеги ищут волонтеров для работы над интересным исследовательским проектом. Звучит, как отличная возможность прокачать свои навыки в машинном обучении, если вы начинающий специалист. Ниже привожу информацию и контакты.

---
Идея проекта — применить машинное обучение к теории групп, и в результате написать совместную статью в хорошем рецензируемом журнале.

Минимальное требование — вы знакомы с питоном, и у вас есть несколько часов свободного времени в неделю (альтернативно — можно не знать питон, но хорошо знать теорию групп). Будете работать под руководством опытных специалистов в области машинного обучения и приобрете навыки по современным методам нейронных сетей, reinforcement learning и т.д.

Если Вам интересно участие - напишите @alexander_v_c (Александр Червов), чат для обсуждений тут .

Проект осуществляется при участии опытных специалистов (и многие ведут телеграм каналы):
Александр Червов (к.ф.-м.н. 25 лет math&DS )
Кирилл Хоружий (ex-Физтех, Max Planck Institute of Quantum Optics)
Андрей Лукьяненко (Kaggle Grandmaster, 11 лет в IT &DS)
Александр Абрамов (Kaggle Master, SberDevices, 10 лет в DS)
Павел Снопов (ИППИ РАН)
Владимир Шитов (Helmholtz Munich)
Сергей Нечаев (д.ф.-м.н., directeur de recherche au CNRS-Universite Paris-Saclay)

Заметил, что много обсуждений вызвал факт, что Всемирный банк включил Россию в список стран с высоким уровнем дохода.

В связи с этим хочу поделиться визуализацией Income Mountains от Gampinder. По сути, это график распределения уровня доходов в мире.

Возможно, вы удивитесь, узнав, что половина людей в мире живут на сумму менее 8 долларов в день (700-800 рублей, включая все их траты).

Если вы получаете среднюю Московскую зарплату (данные разнятся, но давайте возьмем 100 тыс. рублей в месяц), то вы зарабатываете больше чем 85-90% людей на планете.

А если вы живете, например, в Калифорнии, получаете среднюю зарплату и вынуждены сводить концы с концами, то вы все равно входите в 0.5% самых богатых людей.

Выводы делайте сами, можем обсудить в комментариях.

@dataviznews

И вот другой классный проект от них же — Dollar Street.

Фотографии людей и их быта с указанием уровня дохода. Данные немного устаревные, но сути это не меняет.

@dataviznews

Горячо любимая мной Амелия Ваттенбергер (Amelia Wattenberger) поделилась своим экспериментальным проектом для изучения синтаксиса SVG, на котором строится львиная доля всех онлайн визуализаций.

Можно через интерфейс добавлять визуальные элементы (SVG-примитивы, такие как прямоугольник, круг, и так далее), и тут же видеть, как меняется код, даже разобрать векторную кривую на части. А еще можно делать наоборот — менять код, и смотреть, как меняется картинка. Все по заветам Виктора Брета!

@dataviznews

По традиции забыл поделиться ссылкой. Держите — http://svg.wtf

Fathom — компания Бена Фрая (Ben Fry), одного из авторов Processing — выкатили супер быстрый инструмент для анализа CSV файлов Excel-таблиц прямо в браузере под названием Rowboat.

Попробовал открыть файл на 500 мегабайт, и это заняло всего несколько секунд! Интерфейс тоже супер быстрый, за что отдельный респект.

Интересно, что под капотом. У меня есть догадки, но до конца докопаться не смог.

https://rowboat.xyz (бесплатно, но нужно зарегаться даже что бы пример посмотреть)

@dataviznews

Мой прекрасный коллега Ярослав сделал залипательную визуализацию нашей болтовни наших дискуссий в дорогом-любимом датавиз-чатике. Радует, что чатик живёт и движуха не затухает 🤓

На этой неделе проходит крупнейшая в мире конференция по визуализации данных — IEEE Vis.

Я ее очень ждал и собирался ехать на нее лично, что бы провести демо новой версии Космографа, над которой мы сейчас активно работаем. Но судьба распорядилась иначе, и два мощных урагана во Флориде заставили организаторов перевести конференцию в онлайн формат, а демо-сессю вообще отменить 😭

Конференция эта с академическим уклоном, в этом году я с большим любопытством слежу за работами, связанными с LLM.

Если вам тоже интересно, то статьи оттуда можно найти на сайте https://vispubs.com, где собрано несколько тысяч академических публикаций по визуализации данных, начиная аж с 1986 года 🙀

@dataviznews

Делюсь с вами большущей доской, на которой собраны различные инструменты для OSINT — разведки по открытым данным. А вот тут еще можно посмотреть вебинар с обзором этих инструментов.

Автор — Клаудия Титце (Claudia Titze), известный в узких кругах OSINT специалист. Еще на ее сайте можно найти интересные видео, в которых она рассказывает про некоторые свои расследования.

@dataviznews

Прикольный студенческий проект о генерации пространственных планировок (квартирных, например) с использованием диаграмм Вороного.

«В работе представлена методика создания планировок с использованием диаграмм Вороного, где формы комнат определяются расстоянием от точек Вороного. Такой подход позволяет гибко изменять планировку стен, перемещая эти точки, что помогает удовлетворять различные ограничения, такие как размеры и соединение комнат.

Алгоритм итеративно перемещает центроиды Вороного до тех пор, пока не будет достигнута оптимальная планировка. В итоге, эта методика предлагает интерактивный способ создания разнообразных и функциональных планов с минимальным участием пользователя."

https://github.com/nobuyuki83/floor_plan

@dataviznews

Недавно писал о ресурсе, на котором собраны тысячи исследовательских публикаций по визуализации данных.

И вот наткнулся на работу профессора Северо-Восточного университета (Northeastern University), в которой визуально собраны все публикации с еще идущей конференции IEEE VIS 2024. Мой любимый UMAP с навигацией и вспомогательными блоками.

История закольцовывается тем, что на конференции представлен его доклад о создании этого самого инструмента 🙂

Ссылка на интерактивную карту

@dataviznews

Настенька пишет, что аналогичная карта есть еще и для публикаций c конференции CHI 2024 (посвященной взаимодействию людей и компьютеров, human-computer interaction).

1763 работы, и с каждым годом их все больше. Удачи, если хотите за всем этим следить 🙃 Хотя вот такие вот карты делают эту задачу немного проще.

У меня есть похожая карта для всех статей с https://vispubs.com, поделюсь на как-нибудь ей тоже.

@dataviznews

Акула датавиза Моритц Стефанер (Moritz Stefaner) поделился новым проектом, над которым работал в последнее вермя — визуализация Индекса климатической уязвимости и конфликтов (CCVI, Climate—Conflict—Vulnerability Index).

«Проект впервые предоставляет целостный взгляд на глобальные риски, связанные с климатом и конфликтами, с высокой временной и пространственной детализацией.

На основе множества общедоступных источников данных, информация охватывает не только климатические опасности, но и уровень подверженности и уязвимости населения»

Кажется, у Моритца уже есть свой узнаваемый стиль в дата-дизайне. Его работы я начинаю узнавать просто глядя на них.

https://climate-conflict.org (данные тоже дают скачать, если хотите поиграться)

@dataviznews

Nomic анонсировали функцию скроллителинга, которую можно будет добавлять к своим картам.

Она показалась мне немного скучной, но, возможно, это из-за того, что у меня пока нет задачи, где эта функция была бы полезна.

Если бы вы таким пользовались, напишите в комментариях, пожалуйста, для чего именно.

https://www.nomic.ai/blog/posts/atlas-story-congressional-tweets

@dataviznews

Давно не публиковал проекты, к которым имею непосредственное отношение. Наконец-то, появился повод — запускаю в бета-тестирование микросервис Tilemapper по созданию плиточних карт России на основе данных пользователей:

https://mizinov.pro/tilemapper

Принцип работы простой:
1. Загружаете данные:
— в виде CSV файла (код региона | значение параметра) или
— в виде ссылки на Google-таблицу (должна быть доступна на чтение по ссылке)
2. Настраиваете цветовую легенду и другие параметры плиток
3. Скачиваете результат в формате PNG или SVG

Плиточную раскладку взял свою, которую использует ТАСС (можно скачать с github). Tilemapper ориентирован на задачи срочной визуализации, без необходимости программирования или регистрации в платных онлайн-сервисах. 😎

Дальше планирую добавить пресеты цветовых раскладок и сохранение пользовательских настроек в локальный кэш браузера.

Велкам, пишите баг-репорты и отзывы или просто пользуйтесь по необходимости. Если возникнут вопросы по использованию — задавайте. 😊

#сделалпроект