39 заметок с тегом

вопрос-ответ

Позднее Ctrl + ↑

Вопрос-ответ: о визуализации аномалий

Спрашивают сотрудники Института проблем безопасности и анализа информации:

Мы анализируем финансовые потоки на территории РФ, в основном нас интересует отображение аномалий. Ключевые параметры операции: тип, получатель, место (регион) и время.

Как наглядно представить такую информацию, чтобы видеть общую картину и с лёгкостью уточнять детали?

Таблица затягивает в водоворт количественной информации. Но как заметил автор вопроса, самое интересное в данных — это не конкретные значения, а аномалии. Попробуем для начала дать определение аномалии для прозвольного среза.

В Тюменской области и Ненецком автономном округе суммарный оборот наличных колеблется в разумных рамках от среднего, в Челябинской и Костромской областях наблюдаются заметные скачки — аномалии. Возьмём за меру «аномальности» относительное отклонение значения из определённого среза от среднегодового по данному срезу, при этом аномалией будем считать только превышение среднего. В реальном анализе могут использоваться более сложные подходы и формулы, но для демонстрации нам достаточно и этой примитивной метрики.

Закодируем каждое значение цветом по шкале аномальности:

Усреднив аномальные отклонения в регионе за год, создадим карту аномалий:

Яркое пятно Челябинской области и относительно бледные Тюменская область и Ненецкий АО

Таким образом, мы получили статичную картину, которая даёт представление о ситуации в целом. Чтобы превратить её в гибкий и удобный инструмент аналитика, объединим график и карту, добавив интерактивность:

Живой прототип: https://cashflow.datalaboratory.ru/

При наведении курсора на столбцы диаграммы, общая карта аномалий меняется на карту месяца. Переключая фильтры, можно сравнивать ситуации по внесению (!) и выдаче, юридическим и физическим (!) лицам, резидентам и нерезидентам (!!!). Управляя фильтрами, мы можем выяснить, что летние пики в Челябинской области обусловленны выдачей наличных физическим лицам, резидентам РФ.

Первый шаг на пути решения сложной задачи — отбросить лишнее и показать самое важное, в нашем случае, аномалии. Лаконичная идея и грамотное использование интерактивности превращает привычные форматы в мощный аналитический инструмент.

Спасибо Серёже Долинину и Диме Бибикову за помощь в работе над визуализацией.

Присылайте вопросы о визуализации данных, организации времени, рабочем процессе, спорте и путешествиях на почту: mail@infotanka.ru. Ответы публикуются по понедельникам.

Вопрос-ответ: о метаморфозах формата

Спрашивает Энжи Сказка:

Есть проблема: методы визуализации подходят для одного количества данных и не подходят, когда данных делается сильно больше или, наоборот, вдруг всего одно измерение. Идея состоит в том, чтобы плавно превращать одни методы визуализации в другие, в зависимости от объёма данных.

Мне не удалось найти похожие решения. Кто-то так уже делал?

Способ визуализации решает конкретную задачу, которая скорее всего не зависит от количества данных. Поэтому я бы скорее говорила о гибкой подстройке формата под исходный массив, чем о резкой замене одного метода отображения другим.

В данном случае визуализация демонстрирует взаимосвязь между параметрами — эту задачу идеально решают параллельные координаты. Для одного экземляра данных построим шкалу с учётом известных минмимумов и максимумов, чтобы подчеркнуть отклонение параметров от нормы:

С увеличением количества точек, цифрам становится тесно — заменим их на точки и приглушим соединительные линии:

Когда точки начинают накладываться друг на друга, добавим прозрачность, приглушим линии ещё сильнее. Заранее расставленные минимумы и максимумы можно заменить реальными значениями из выборки:

В твоём прототипе непонятно, почему переход от одного формата к другому происходит на 6 объектах, а не на 10. У меня метаморфозы оправданы, их легко формализовать (если точки накладываются, то добавляем прозрачность).

Идея о кардинальной смене формата интересная, но я советую найти более красноречивый пример её применения. На мой взгляд, здесь она притянута за уши.

Присылайте вопросы о визуализации данных, организации времени, рабочем процессе, спорте и путешествиях на почту: mail@infotanka.ru. Ответы публикуются по понедельникам.

2014   визуализация данных   вопрос-ответ

Вопрос-ответ: о путешествиях по России

Спрашивает Владислав Коробов:

Путешествию по России быть?

В поездках по Европе, Азии, Африке и Америке я всё чаще задумываюсь о прекрасных и неизведанных уголках России. Глупо гоняться за достопримечательностями по всему миру, не увидев и не узнав толком родные просторы.

Везде, где я была, мне понравилось. Я люблю морскую романтику Петербурга и северную природу его окрестностей, Самару в золотом осеннем наряде, древнерусские мотивы Рязани, Костромы и Нижнего, санаторно-курортную атмосферу студенческого лагеря «Буревестник». Я с удовольствием собирала лисички и белые в лесах Валаама и окуналась в обжигающе-холодную, волшебную на ощупь воду Ладожского озера.

Закат на Валааме

Но по России я путешествую мало. Как бы удивительно это не прозвучало, здесь я чувствую себя не так свободно и безопасно, как в Черногории или, скажем, Таиланде. Огромные расстояния, дорогие перелёты, плохие дороги — преодолимые препятствия. Но чтобы их преодолевать нужна мотивация: истории о красоте, доброте и гостеприимстве; сайты, фильмы, путеводители. Пару месяцев назад я случайно попала на фотовыставку и узнала, что на моей малой родине есть необыкновенно красивый, открытый для посещения заповедник «Брянский лес». Многие брянчане, которые живут в 3 часах езды от него, не знают и никогда не узнают об этом.

Своим знакомством с Самарой я обязана «Фестивалю 404», в Рязань и Кострому я ездила с университетскими друзьями, а красоту Валаама открыла мне Лена Хохлова, которая выросла в этом чудесном месте. Рассказывайте о своих любимых городах, весях и затерянных уголках природы, организуйте совместные поездки, зовите друзей в гости и принимайте приглашения. Что может быть приятнее, чем делиться красотой?

Присылайте вопросы о визуализации данных, организации времени, рабочем процессе, спорте и путешествиях на почту: mail@infotanka.ru. Ответы публикуются по понедельникам.

2014   вопрос-ответ   жизнь   путешествия   родные просторы

Вопрос-ответ: Как визуализировать изменение веса?

Спрашивает Александр Омельницкий:

Делаю приложение для себя по контролю веса. Как будет лучше визуализировать изменение веса, при условии, что от записи к записи он может изменяться незначительно и как лучше показать норму?

Честно признаюсь, что не вижу смысла в приложениях по контролю весу, которые демонстрируют вес. Похудел-поправился, ну и что?

Гораздо круче собрать в одном месте параметры, которые потенциально влияют на вес и помогут объяснить негативные и позитивные изменения. Моя мечта — приложение, которое проанализирует качество питания в Eatery, активность в Moves, отдых в слип-трекере; в котором можно наблюдать, как спорт влияет на диету, вечерние передания ухудшают качество сна, недосып «отзывается» поеданием сладостей, и как всё это в конечном итоге сказывается на массе тела.

В идеале хочется добавлять произвольные параметры и наблюдать за зависимостями времени пробуждения и настроения, потребляемой жидкости и спортивных успехов, питания и медитации, и прочее, и прочее.

Наглядная закономерность будет лучшим аргументом для отказа от вредных привычек и развития полезных.

Присылайте вопросы о визуализации данных, организации времени, рабочем процессе, спорте и путешествиях на почту: mail@infotanka.ru. Ответы публикуются по понедельникам.

2014   визуализация данных   вопрос-ответ   еда   зож

Вопрос-ответ: об энтузиазме

Спрашивает Анна Ладошкина:

Таня, вопрос про мотивацию себя и других. Ведь энтузиазм рано или поздно затухает. Как поддерживаете его неугасимость?

Единственная известная мне причина угасания энтузиазма — это усталось. Чтобы вдохновляться и вдохновлять необходимо чистое сознание, не засорённое стрессом, страхами и неуверенностью в себе. Одно и то же событие, видеоролик, разговор принесут разные плоды открытому ищущему уму и замучанному, усталому, сомневающемуся в своих силах. Чужие успехи вызовут искреннее восхищение или зависть. Критика раззадорит или раздавит. Мелкие неудачи останутся незамеченными или высосут последние соки. Будущие проекты принесут радостное волнение или чувство тупой покорности.

Прошедший апрель был для меня самым напряжённым месяцем за последние несколько лет, все перечисленные выше негативные эффекты я испытала на себе. И какими бы заманчивыми не казались альтернативы, майские каникулы я провела в Москве: гуляла в парке, готовила завтраки, обеды и ужины, читала, когда было настроение, почти не прикасалась к ноутбуку. Этого оказалось достаточно, чтобы восстановить силы, вновь поверить в себя и взлянуть в будущее с привычным оптимизмом.

Регулярно отдыхать также важно, как чистить зубы и заниматься спортом. Нужно учиться распознавать усталость и бороться с ней: останавливать входящий поток информации, отказываться от лишнего, делать «ничего». Нужно заботиться о собственном душевном равновесии — это совсем не сложно и приносит чудесные плоды. Но никто, кроме вас, этого не сделает.

Присылайте вопросы о визуализации данных, организации времени, рабочем процессе, спорте и путешествиях на почту: mail@infotanka.ru. Ответы публикуются по понедельникам.

2014   вдохновение   вопрос-ответ   жизнь   отдых
Ранее Ctrl + ↓