26182
Канал Ромы Бунина про визуализацию данных, дашборды и развитие BI-систем. Подробнее про канал, рубрики, правила и контакты — https://t.me/revealthedata/386 Сайт и блог — https://revealthedata.com/
Нерегулярная подборка ссылок
📈 Left Join выпустили результаты исследования про онлайн курсы, много интересного. А ещё мы сделали короткое текстовое интервью про карьеру в их карьерном каналею
🗒 NewHR снова запускают опрос про зарплаты и навыки аналитиков. У них новый опрос, а я уже полгода не успеваю сделать прожарку дизайна их прошлых результатов. 🙈
🗒 Ещё Максим Любавин проводит похожий опрос, но уже про дизайнеров.
🎉 В Табло появился бесплатной аддон с довольно гибкой таблицей. Пока не идеал, но уже неплохо. Попробовал в проде, полёт нормальный.
🎙Сходил на свой первый международный подкаст, было очень интересно пообщаться с ребятами. Обсуждали изменения в управлении дата-командами в современном мире.
♻️Наташа Киселёва сделала базовую переверстку для графиков в Excel. Классно виден результат до/после.
📺 Российская ETL платформа Логином 24 октября проводит конференцию про свою плафторму и кейсы её применения.
🛠 Игорь Яновский собрал небольшой виз про то, какие инструменты используют профессионалы в датавиз сообществе. А ещё просто посмотрите какие крутые работы у Игоря есть на сайте.
Вакансии
🤘Компания Muse ищет продуктового аналитика. Всегда мечтал поработать с этой командой, у них крутые продукты для музыкантов.
📈 Вакансии BI-аналитиков к команды к моим теплым друзьям в Маркет и Еду
#дайджест
Спасибо всем участникам мема-конкурса! Было очень сложно выбрать, часть мемов была золотой классикой, часть мемов была не совсем про аналитику. Но мы справились! И даже перевыполнили план, поэтому билеты получает 10, а не 5 победителей! Мемы расположены в случайно порядке. Сергей сегодня придёт ко всем, перечислю всех в комментариях.
А те, кто не прошёл в финалисты могут обратиться к Сергею напрямую и получить скидку на билет, если всё ещё хотят сходить на форум.
Всем хороших выходных!
P.S. Я вообще дурачок и перепутал дни, думал, что суббота только сегодня.
🙈🤦🙈 Простите!
#юмор
🤖 Tableau + AI
Небольшое живое включение с конференции. Табло показали как AI встроено в их платформу, пока получается два основных направления:
– Tableau Pulse с рассылками по основными отклонениям метрик и автогенирируемыми подсказками по возможным причинам этих отклонений.
— Tableau Agent, копайлот для аналитика во всех продуктах Табло от Десктопа до Препа.
Это не те изменения которые полностью задизраптят дашборды и BI, но они выглядят все более применимымы в реальной жизни. Захотелось попробовать Tableau Pulse в проде. Расскажу после тестирования.
Ниже есть видео с демо этих фич, а в комменты кину хайрезы фотографий.
#конференция
📈 Залетай в BI: Выбор инструмента для Ingestion S3E3
Я точно решил, что не хочу писать скрипты для загрузки данных, поэтому я делал выбор среди нескольких SaaS решений: Netsuite Analytics Warehouse, Airbyte, Fivetran, 5X. Пройдемся по каждому и покажу что выбрал.
Netsuite Analytics Warehouse 🔗
Наш основной источник данных — это орокловая ERP, поэтому казалось логичным использовать их аналитическое хранилище и их систему поставки данных. Настройку пайплайна мне помогли сделать консультанты, а дальше я игрался с самой системой. Сам ingestion — это только небольшая часть софта, также там есть свой BI инструмент и хранилище данных.
Какие же сложные и непонятные интерфейсы у Оракла 😱, разбирался кучу времени. В итоге оказалось, что эта тулза НЕ складывает загружаемые данные в хранилище, а хранит их в каком-то промежуточном слое и даёт подключиться к нему только из их облачной BI. Поэтому в итоге это получилось абсолютно бесполезной историей.
Итого: 🤬 Очень мало коннекторов к разным источникам из коробки, мало гибкости и сложные интерфейсы, не отдают данные в сыром виде в свое же хранилище.
Airbyte 🔗
Опенсорсный инструмент у которого есть платная облачная версия. Приятный и понятный интерфейс, очень скромный ценник, довольно большое количество возможных источников. Для меня блокером стало, что не получилось быстро настроить трансфер данных для нашей ERP. Это можно было докрутить, но нужны были доработки коннектора, что сразу хоронит идею SaaS, где всю поддержку на себя забирает инструмент, так как пришлось бы поддерживать коннектор. Из крутого, есть визуальной редактор коннекторов, который позволяет быстро собрать поставку данных, правда раскладывать json всё равно потом самому.
Итого: 🙂 В целом очень неплохое решение, но проблемы с коннектором и отзывы коллег по работе с этим тулом поставили его под сомнение. Если бы для моего проекта важным был ценник или избегание vendor lock, то рассматривал бы его более подробно.
Fivetran 🔗
Самый дорогой из всех инструментов, но при этом самый удобный и гибкий. Огромное количество коннекторов, классный интерфейс, всё заработало сразу из коробки. Даже был персональный менеджер, который помогал с процессом и шёл на встречу. Классно построена ценовая политика — чем больше данных перемещаешь, тем дешевле стоит строчка данных. Это конечно даёт некую уверенность, что vendor lock страшен чуть меньше, но он тут конечно же есть.
Итого: 🖤 На этом решении я и остановился, так как у нас небольшие объёмы данных, то стоимость порядка 300€-400€ звучит как отличное соотношение цена-качество. Нашлись коннекторы почти ко всем системам, что мы используем и есть интеграция с dbt и dbt cloud, что тоже важно для будущих серий сериала. Работает уже месяц и пока никаких проблем.
Ещё смотрел отдельно решение от 5X, это такой databricks на минималках. Кажется, что такого тула не хватает на рынке, но у ребят пока всё довольно сыро и используют они под капотом Fivetran, Snowflake и SuperSet, что было не очень интересно. Но зато всё «в одном окне».
В следующей серии расскажу что успел сделать работая над проектом три месяца и поделюсь планами.
P.S. От Оракла у меня было прям постоянное подгорание пятой точки: интерфейс из начала 2000-х, не дают прямой доступ к модели данных, продают только сразу на 3 года (3 года Карл!), для того, чтобы достать сырые данные через ODBC драйвер (например, используя Fivetran) тоже надо платить, облачная BI ещё туда-сюда, но примеры дашбордов и скорость загрузки, просто хочется плакать. В общем вах.
#залетайвbi
☠️ Жизненный цикл дашборда и MM24
Вышла третья серия моего сериала про приключения Дэша Сатриани в мире систем отчетности. В этот раз он путешествовал по мирам сериала Клиники и разбирался как продлить среднюю продолжительность жизни дашборда и можно ли это автоматизировать с помощью LLM и AI.
В этом году я буду выступать на Матемаркетинге вживую, чему я очень рад. И в этот раз я решил сделать рассказ совсем другим — это будет размышление на тему того, что должен знать и уметь аналитик и почему этого остро не хватает в индустрии. Жду вас всех на выступлении, обещаю интересные сюрпризы.
Весь мини-сериал про Дэша:
— Мафия и дашборды
— Путь шефа в Тоскане
— Клинические показатели в корпорации
Если ютуб тупит, то ещё записи есть у ребят на платформе.
ММ24 и промик
Ещё важное — я дошёл лично до Лёши Никушина и уговорил его сделать большую скидку, а не обычную «5% только для моих подписчиков». Лёша разошёлся и сделал классный жест — поэтому, если хотели купить билеты, то только для вас скидка на 25% по промику: rtd25
#выступление
🎞 Запись стрима и фичи DataLens
А вот и запись стрима про дашборд для маркетплейса. Мы конечно наговорили с Лешей на два часа, но это было прям хорошо, а в конце получился классный живой результат в виде небольшого операционного дашборда.
Я не пользовался активно DataLens уже где-то полгода. И хотя слежу за новостями ребят, некоторые фичи попробовал только на стриме — и какие же это крутые фичи! Очень рад, что продукт идёт в эту сторону. Есть и мелкие улучшения качества жизни разработчиков и пользователей (аля драг’н’дроп и закрепление для виджетов) и системные вещи (статистика использования и группы для RLS).
Вот некоторые из новых фичей:
📌 Закрепление виджетов на дашборде
🔑 Поддержка групп в RLS
🌐 Контроль публикации в веб
🔎 Поиск по описанию полей
⚡️ Групповые селекторы
⏪ Undo/Redo в Визарде
📌 Закрепление столбцов в таблицах
🔗 Cписок связанных объектов
🖐 Drag-n-Drop при добавлении виджетов
⚡ Подсказка (?) для фильтров и таблиц
🖼 Картинки в таблицах и индикаторах
📊 Статистика использования
🎉 Чарт-чарт фильтрация!
Для меня было большим опытом поучаствовать в разработке этого продукта. Верю, что смог привнести в него взгляд реального BI-разработчика и важность дизайна. Горжусь фичами, которые детально прорабатывал и влиял на их реализацию — мне очень нравиться как у нас получились фильтрация чарт-чарт и групповые фильтры. А ещё очень круто, что появляются фичи, которых нет нигде. Например, залипающая шапка для фильтров или виджетов на дашборде — офигенная фича (там же ещё можно и ссылки собрать на оглавление и получиться автоскролл к нужному этажу лонгирда).
Конечно же и улучшать ещё есть много чего, но такой небольшой командой развивать такой продукт — это очень круто! Ребята, вы огонь, удачи вам! 💙
P.S. Паша, Гаджи, хочу падиинги и настройку фона для виджетов! Пазязяся!
🥺 👉👈 =))
🔥 Бесплатный курс «Визуализация данных и продвинутое Tableau»
У меня огненное объявление, мы выпустили большой бесплатный курс. Изначально курс был платным, мы проводили его трижды, и каждый раз слушатели были очень довольны. Но курс стартовал в сложное время, а после ухода Tableau стал менее актуален. Ну а еще мы немного перегнули со сложностью практической части и многим было тяжело дойти до конца 😈
Я верю, что эти уроки могут помочь аналитикам, и поэтому договорился с основателями школы, что мы сделаем их бесплатными и таким образом поможем нашему комьюнити. Мы пересобрали курс для самостоятельного прохождения, подрезали практику и часть лекций и теперь он доступен вам. Спасибо команде karpov.courses за поддержку в этой идеи!
Курс построен на Табло, но при этом рассказывает про все самые важные аспекты визуализации данных и основ дизайна. Поэтому будет полезен, даже если вы не используете этот инструмент, такие знания не зависят от BI-системы.
Если вы захотите отблагодарить авторов курса и сделать нам подарок, то всегда можете перевести любую сумму нам напрямую по ссылке. Впервые пробуем такой формат, интересно что из этого получится.
А если захотите провести данный курс в корпоративном формате с практикой и выполнением проекта, то всегда можете написать мне в личку или на почту roman@revealthedata.com
Любите датвиз и удачного вам курса! ❤️
P.S. А на фоточке все три автора: Я, Виталий Ковалёв и Настя Кузнецова. Ребята, обожаю вас!
#избранное
Нерегулярная подборка ссылок
🍿 Лёша Куличевский пригласил посидеть и вместе решить реальную задачу для аналитики маркетплейса. Приходите в эту среду, в 18 по МСК посмотреть как мы будем мучаться с DataLens и спорить =)
❓Left Join снова проводят независимый опрос о состоянии онлайн образования. Принимайте участие, очень интересно посмотреть результаты, опрос открыт до 18-ого числа. А ещё недавно у ребят был классный пример из бизнеса про перевёрстку дашборда.
📄 Нашёл документацию как в GitLab устроена работа с Табло и BI. А Настя нашла классную статью про то как BI устроен в Spotify.
㊙️ У GlowByte и Data Yoga сегодня стартует ретрит по FineBI. Если планируете поработать с этой системой, то рекомендую приглянуться. Иероглиф Японский, а не китайский и значит «секерт», но как есть =)
😈 Нашёл в одной «классической» BI-системе экраны загрузки в стиле Sims 😂
🧐 Наташа Степанова нашла полезную вводную статью по основам дизайна таблиц.
#дайджест
В школе Бюро Горбунова обновились лекции, в том числе и по нашему с Таней предмету «Визуализация данных».
А завтра мы с Таней проведем вебинар, где расскажем как можно применить такую теорию на практике и пошагово создадим аналитический инструмент по личным финансам: от идеи до реализации дашборда. Приходите, будет интересно!
#выступление
В этот четверг буду выступать на Tableau User Group Serbia. Если вы в Белграде то приходите, ребята пишут, что еще осталось несколько мест.
Я буду рассказывать классический рассказ про лайфхаки в Табло, где за 20 минут покажу 20 своих самых любимых приемов. Точнее надеюсь, что успею показать 🙈 Ребята обещают запись.
P.S. Было забавно, когда стали писать знакомые из Сербии увидев о событии в местном новостном канале. Организаторы 🤘
#выступление
Друзья!
Мы с Ромой @revealthedata приглашаем вас на четырёхдневный курс «Дашборды и аналитические инструменты», который пройдёт 26, 27, 28 и 29 октября в Москве. На курсе 24 места: 12 для очного и 12 для удалённого участия. Мы проводим очные курсы раз в год, и это классная возможность погрузиться в мир дашбордов и визуализации данных в нашей тёплой компании. В прошлом году Рома участвовал на курсе удалённо, а в этот раз обещает приехать в Москву. Ловите момент!
Курс развивает два важных для любого аналитика навыка. Мы учим проектировать операционные системы дашбордов, покрывающих все основные бизнес-процессы в компании (Ромина методология Dashboard Map). И разбираем пошаговый рецепт создания мощных аналитических инструментов для исследования данных, поиска закономерностей и аномалий (мой алгоритм Δλ). Важная часть курса — практика, которая проходит на сквозных кейсах и помогает увязать обе методологии в единую картину.
В рамках курса мы демонстрируем разные платформы, включая Табло и DataLens, а также пробуем писать код на d3.js cилами ИИ-помощника.
Специально для подписчиков канала весь август действует скидка 5%. Чтобы получить скидку, при записи оставьте комментарий «из телеграма @datalaboratory» 💛
Программа, отзывы и запись на курс:
https://datalaboratory.ru/new-course/
Всех ждём!
🔴 DOOM BI
В самолете играл в классику, теперь понятно откуда у меня любовь к дашбордам — с детства на подкорку записалось просто! 🤣
Я играл на мобилке, а вот настоящие аналитики играют на Grafan'е или Excel 🤣
#наблюдение #юмор
Рекомендации для интервью на BI-аналитика
500 реакций набралось — пишу рекомендации + разбираю, что из этого использовал Дима.
Tableau/SQL часть
— Кратко проговаривайте как вы поняли задачу и что вы делаете. Интервьюер не умеет читать мысли, лучше если он будет понимать, что происходит на экране.
— Сводите задачу к логическим проблемам, и только потом к техническим. Например, в интервью, Дима не стал что-то сразу делать в Табло, а начал рассуждать про грануляцию данных.
— За вами смотрят во всем. Я обращаю внимание на то, пользуется ли человек шорткатами, знает ли быстрые способы сделать что-то в программе, как он называет метрики и листы, как у него организованно рабочее пространство, как быстро он печатает. Дима классно называл метрики и листы.
— Если вы застряли или не знаете как что-то сделать, честно скажите про это. Расскажите как вы чисто логически бы стали решать такую задачу или как вы бы сделали это в другом инструменте, Дима как раз сказал, что мог бы решить в SQL. После этого попросите что-то из этого: подсказку, погуглить или сделать в другом инструменте.
— Проверяйте ваши расчеты. Когда закончите какую-то задачу, сами начните проверку — лучше всего сделать её на базе детальных данных или какого-то примера «представим, что…». Дима как раз так и делал, кайф.
Дизайн
— В задании, которое я даю, точно стоит взять паузу и подумать. Большинство кандидатов сразу же начинает перечислять ошибки. И хотя сами ошибки могут быть верны — из это не получается связанного рассказа. Самый лучший вариант — задать фреймфорк «Давайте оценим этот дашборд с точки зрения расположения элементов, выбора типов графика, цветов…» и дальше идти по каждому из пунктов.
— Не говорите «по опыту» или «мне так нравиться». Под ваши суждениями должны быть какие-то доказательства: теория, статистика, примеры. Дизайн — инженерная наука.
— Используйте, пожалуйста, портфолио! BI-аналитика, чуть ли не единственное направление аналитики, где можно быстро и наглядно показать свой уровень. За всю историю собеседований я видел только 5-10 портфолио. При этом даже среднее портфолио уже огромный плюс и лучше его отсутствия.
Бизнес-кейс
— Кратко повторите кейс, когда вам его рассказали.
— Опишите фреймворк в котором вы бы решали этот кейс в реальной жизни — шаги и их последовательность.
— Задавайте вопросы! Часто сразу начинают решать кейс и упускают кучу деталей. Эту ошибку сделал и Дима на интервью.
— Чаще всего в кейсе будет какая особенность или подводный камень, который нужно будет заметить. Слушайте задание внимательно. Я, например, часто говорю — представьте к вам пришёл ваш босс и попросил сделать дашборд для другой команды. Первое, что надо сделать в этом случае — проверить с представителем этой команды не наврал не перепутал ли чего-то босс, когда передавал вам информацию.
Общее
— Попросите обратную связь прямо после интервью. Интервьюер в 99% уже всё решил и знает пройдете вы дальше или нет. Это можно будет понять из его ответа.
— Не бойтесь показаться «глупым» или «не таким». Да, бывают обидные ошибки и просчеты, но в целом вы вряд ли сможете скрыть от опытного интервьюера свой реальный уровень.
— Обращайте внимание на формулировки задач. Я каждый раз говорю — перечислите типы графиков, которые вы будете использовать и скажите какую задачу будет решать каждый график. За 100+ собеседований ни один человек не ответил мне в такой формулировке, все говорят только про типы графиков.
— Старайтесь не давать «общих» ответов, решения задач должно быть детальным. Тут Дима тоже ушел в эту степь на бизне-кейсе.
— Поблагодарите интервьюера, если вам понравились вопросы и стиль. Дима это тоже сделал.
Пишите ваши лучшие лайфхаки и ставьте реакции, если нравиться и стоит продолжать разбирать вопрос трудоустройства.
@revealthedata
Вопросы → Dashboard Canvas
Как же я обожаю свою работу и блогерство, можно «бац» и с утра получить много эндорфина. Совсем не дешёвого правда, а прям сложного по затратам времени и сил 🙈, но зато четко показывающий пользу от «надо делиться знаниями».
Саша Ороновская сделала отличную схемку, где показала, как вопросы из интервью с закаказчиком перекладываются в блоки Dashboard Canvas. Мы её быстренько докрутили и вот: делюсь ей с вами и добавил её в миро.
Для тех, кто незнаком с методологией (🤨?!?):
— Miro Board c Dashboard Canvas
— Видео с рассказом про методологию и её эволюцию
Саша, спасибо! ❤️
P.S. Тут Егор Ларин душнит приносит конструктивную критику в личку, что многие вопросы влияют сразу на разные блоки. И это правда: цель сложно отделить от бизнес-решений и т.п. Поэтому и есть отдельно вопросы и интервью, и отдельно канвас — иначе можно было бы ограничиться только вопросами. Заполнение канваса — это не просто перенос текста из интервью места в другое, а осмысление и переработка информации в процессе заполнения. Но как базовая подсказка и для понимания, зачем нужны эти вопросы, эта диаграмма отличная подсказка. А если смотреть дальше, то даже сами формулировки вопросов не так уж важны — это просто шпаргалка какие области вам нужно понять, чтобы создать хороший дашборд.
#отзывы
📈 Залетай в BI: Архитектура аналитического решения S3E1
В команде, куда я перешёл, нет DWH и BI, всё делается через ERP и выгрузки в Excel. Поэтому первой задачей стоит разработка архитектуры аналитического решения и выбор технологий.
Начнём с того, что разберемся в том, что входит в тот самый «modern data stack». В интернете можно найти кусу схем с дата-лейками, стримингом, reverse ETL и другими сложными терминами. Для своей задачи я выберу упрощённую схему из 6 основных компонентов:
Data sources
Источники данных из нашего «бек-энда». Это логи и события из приложений или данные из SaaS-сервисов. В моём случае основными источниками будут ERP и различные SaaS-инструменты для HR-менеджмента, управления закупками и т.п.
Data Ingestion
Этап сбора данных из всех источников в одну базу данных или озеро. Это может быть стриминговое пополнение данных (реалтайм логи из приложений) или батчевая загрузка по расписанию. В моём случае будет только батчевая загрузка. Реализовать её можно вручную с помощью скриптов, опрашивающих API приложений и раскладывающих JSON в таблицы, или с помощью инструментов, имеющих готовые коннекторы к источникам данных.
Raw Data Storage
Место для хранения всех сырых данных, полученных из источников. Тут всё просто, должно быть дешёвое и работать без перебоев.
Transforamtoin and Semantic Layer
Сырые данные нужно преобразовать в витрины данных, которые аналитики и бизнес смогут удобно использовать в работе. Исходные данные будут агрегированы, очищены и проверены на качество. Здесь же хранится логика и правила преобразования данных – семантический слой. Скрипты для преобразования нужно регулярно запускать по правилам и событиям — это называется оркестрацией.
Data Marts Storage
Преобразованные данные нужно сложить в хранилище. Это может быть отдельная база данных или таблицы в том же месте, где хранятся сырые данные (тогда это будет «data lake», так как исходные данные и конечные витрины храним в одном месте).
Presenting Layer
Интерфейсы или инстурменты, где конечные пользователи могут использовать данные: Jupiter Notebook для аналитиков или BI-системы для бизнес-пользователей.
Вух, пока писал, казалось, что пишу банльшину, а с другой стороны столько всего получилось в чем нужно разбираться аналитику, что кажется, что такое будет полезно. И это мы ещё не затронули Data Governanve, Quality, Security и техническую инфрастуктуру и Observability .
Дальше мы разберём каждый шаг подробнее, а в следующей серии расскажу, как составить список источников и выбрать инструменты для сбора данных.
Как вам такие вводные теоретические посты?
#залетайвbi
🛞 Kolesa Conf'24
Сегодня выступаю на одной из самых крупных IT-конференций в Казахстане. Расскажу как строить систему аналитику и покажу примеры на базе аналитики продаж в Karpov.Courses (на скринах) и «дашбордов про дашборды» для BI-команды.
Если вы тут — приходите пообщаться.
#выступление
Δλ Курс про визуализацию и дашборды
Ровно через две недели стартует наш курс в Лаборатории данных.
Мы подготовили классные материалы (которые нам помогала делать ❤️ настенька и графики), нашли отличное помещение и ждём всех желающих.
Осталось 4 места офлайн и несколько мест онлайн. Если увидели поздно, но хотите пойти от компании, а процесс согласования долгий, то пишите нам на почту и мы возможно что-нибудь придумаем.
Еще хочу ответить на частый вопрос: почему так дорого?
Сейчас мы проводим курс раз в году и набираем на него ограниченное количество людей, чтобы курс был максимально ламповый и мы могли подробно пообщаться с каждым. При этом спрос на курс (спасибо вам!) большой, что позволяет нам делать его дороже.
Еще курс рассчитан на специалистов, кто точно понимает зачем он туда идет: за практикой и структурой именно в формате интенсива, а не долгого онлайн обучения. Такой формат подходит не всем. Почти всю теорию в курсе можно найти в наших открытых материалах, а ценность курса именно в большом количестве примеров, практики и финальном проекте.
Ждем вас! ❤️ 📈
🙂 Мемы и билеты
14 октября в Москве пройдет форум Russian BI, на форуме будут как представители вендоров, так и мастер-классы и выступления интересных спикеров. А один доклад про вредные советы будет даже в стихах! Очень рекомендую его посетить, слышал черновую версию — просто огонь.
Один из организаторов мой знакомый — Сергей Кравченко. По совместительству он ещё и автор канала с мемами про аналитику BI-done (ака бидон) и поэтому мы решили устроить небольшой конкурс. Мы разыграем в моем канале 5 стандартных билетов за лучший мем про аналитику или около неё.
Правила конкурса — до 23:59 пятницы присылайте свои любимые мемы про аналитику в комментариях к этому посту. Один мем на одного участника, поэтому выбирайте с умом. Повторяться с предыдущими мемами нет смысла, мы будем считать «автором» того, кто прислал его первым по времени. Затем мы с Сергеем выберем 5 победителей и свяжемся с ними в телеграмме, чтобы передать билеты. Победителей объявим в субботу в 12:00. Выбирать мы будем на свой вкус, объективного жюри на мемы не ждите )))
Выше мой собственноручный самоироничный мем, а ваши ждём в комментариях!
#юмор #конкурс
🕊 Make Сharts not War
14-ого февраля 2022 года я писал и надеялся, что все угрозы — это просто блеф и недоразумение. 23-ого февраля постил выпуск «переверстки», которую делал для украинской команды отличных аналитиков. 24-ого всё представление о мире сломалось и стало приобретать оттенки антиутопии и бреда, которое сейчас расползается по всему миру.
Самым сложным моментом для меня была работа с моим психологом, она жила в Киеве и на мои вопрос «Как дела?» смотрела в окно и отвечала «Вроде ок». Потом её мужа забрали в армию и мы прекратили работу с ней. В этот момент война забрала важную часть моего круга общения, но не бесповоротно, как у некоторых.
Прошло два с половиной года и мы привыкли: не обращаем внимание на новости о гибели людей, взрывы и бред пропоганды. Это супер нормально — психика подстраивается под безумную ситуацию и пытается облегчить травму, которую мы все получили.
Надеюсь, что у вас получается находить баланс между тем, чтобы продолжать жить, получать удовольствие и радость, но и не забывать нести свет, сопротивляться темноте и помнить о важном.
В голове крутиться новая песня Нойза — светлая полоса. В душе смешанные чувства грусти и надежды, сочувствия всем кого война затрагивает в реальности, а не только в мыслях.
У меня мало способов влиять на ситуацию. Мой маленький протест появился у меня на руке специально до поездки в РФ – так мне будет спокойнее, проще и правильнее. Надеюсь, что такое сообщение поможет вам помнить, что вы не одни, а вокруг много адекватных людей со схожими вам взглядами.
Make Charts not War
Ледники растают...
Паша только что пообещал, что сделает паддинги! 🥰 — https://scale.yandex.cloud/?videoTab=2
А ещё ребята выкатили pixel-perfect презы в DataLens, а-а-а-а-а, Таблошные story напряглись. И это же потом можно будет рассылать. Ну и главное — скоро будет on-prem! 😱
Огонь! Очень забавно, что получился такой незапланированный коллаб. Вы можете мне не верить, но я вообще забыл про Scale сегодня и не знал про новые фичи.
P.S. Паша, Лиля — с вас потом какие-нибудь вкусняшки! 🤣
В этот четверг буду выступать на Tableau User Group Cyprus, расскажу о самых главных правилах дизайна для дашбордов и сделаю перевертску небольшого дешика в лайф-режиме. Если вы вдруг на Кипре, приходите, регистрация ещё открыта.
#выступление
Мы начинаем через 5 минут, залетайте на наш стрим!
Читать полностью…
Друзья, приглашаю вас на бесплатный мастер-класс «Анализ личных финансов», который пройдёт в ближайшую среду, в 18.00 по Москве.
На вебинаре будет теория визуализации и практика на данных, которые никого не оставляют равнодущными — на денежных тратах. Мы соберём в Табло дашборд, который ответит на важные вопросы о тратах на тестовом датасете, и подскажем участникам, как повторить это для собственных данных и с учётом личных запросов.
Запись на мастер-класс: https://bureau.ru/news/2024/september-masterclass-misyutina-bunin/
До встречи!
📊 Приглашаем на бесплатный оффлайн митап по Tableau и визуализации данных в Белграде
🕐 Когда: 5 сентября, 18:00 (четверг)
📍 Где: CDT HUB, Kneza Miloša 12, Belgrade
🗣️ Язык: Английский
➡️ Ссылка на регистрацию: Зарегистрироваться
Обещаем множество интересных тем про визуализацию данных, построение дэшбордов, мониторинг и менеджмент данных в Tableau и многие другое.
Вас ждут интересные темы и спикеры:
Roman Bunin (Nebius Group, Head of Data) - 20/20 – the best of Tableau lifehacks
Alena Kotovich (Semrush, BI Engineer) - Funnel Your Way: How to Visualize Funnels with Tableau
Vladimir Kravtsov (Customertimes, Senior Tableau Consultant) - Improving Report Update Processes in Tableau with ETL Integration
👋🏻 Успейте зарегестрироваться и занять место!
🤖 AI в BI 🤖
Загрузил тестовые HR данные на Табло сервер, спросил почему в одном из офисов сотрудников больше, чем в других. Он не моргая глазом говорит — в этом офисе больше менеджеров с некоторыми именами, есть корреляция между количеством сотрудников и именами менеджеров. Синее — выбранный офис, серое — среднее по остальным офисам.
В общем если верить AI, то менеджеры с именами Андрей и Александр приводят за собой больше людей! Такой AI нам пока кажется, что не страшен 😂
#юмор
Приходите к нам с Таней на курс в октябре! Курс подойдет для тех, кто хочет понять, как проектировать системы отчетности и аналитические инструменты, а также изучить основы дизайна. Мы обучаем этому без привязки к какому-то конкретному инструменту, но зато рассматриваем различные инструменты и пробуем работать с LLM для создания графиков. Можно участвовать как от себя, так и от компании, так что делитесь информацией с коллегами =)
Читать полностью…
☀️ BI, жара, Кипр 🌴
Последние три дня был в гостях у команды Volka Games – провёл небольшое обучение, переверстал дашборд, провели брейншторм сессию, разработали Dashboard Map и составили план идей и улучшений на будущее. Получилось очень круто — три дня плотной живой работы, обсуждение бизнес процессов с бизнес-заказчиками, детальный разбор дашбордов и сразу же правки и изменения в них. Посто кайф! Алексей, спасибо, что пригласил, а команде спасибо за теплый прием. Получил большое удовольствие от работы.
Очень понравилась команда — по-хорошему домашняя, увлеченная и старается делать все по высоким стандартам. Еще у компании очень приятный офис почти на берегу моря. Кстати, ребята ищут старшего BI-аналитика и старшего маркетингового аналитика с релокацией. Рекомендую присмотреться к вакансиям, если не боитесь жары конечно 😎
А еще приглашайте меня к себе тоже =))
#вакансия
😎 Мокап: Инжиниринг Данных edition
В комментариях к предыдущему видео с интервью Дима Аношин предложил провести такое же с ним. Встречайте!
Получилось очень интересно и полезно. Специализация Димы — дата-инженер, но он справился с интервью лучше, чем многие BI-аналитики. Потому что опыт не пропьешь — Дима когда-то работал BI-аналитиком, да и инженеры данных работают рядом с BI. А ещё он спец как ввести себя на интервью и использовал много классных приёмов (их разберу в посте завтра).
🍿Запасайтесь поп-корном или кофе и поехали!
👉 Видео на Ютубе 👈
0:00 — План и small talk
2:00 — BI-инструмент и SQL
38:52 — Основы дизайна
54:50 — Бизнес-кейс
1:17:55— Обратная связь, обсуждение работы за рубежом
По просьбам залил ещё на дзен.
@revealthedata @rockyourdata
📈 Залетай в BI: Data Ingestion S3E2
Продолжим, первый шаг работы с данными — получить эти самые данные в сыром ввиде. Этот этап называют Ingestion’ом, поставкой данных или Extract’ом (E из ETL, не путать с Таблошным экстрактом). Но как не называй этот шаг, основная его задача поставить данные из источников (бекэнд приложений, CRM или ERP системы, другие SaaS тулзы или просто базы данных) в конечную базу данных или Data Lake.
Это можно делать по разному:
— Написать код и запускать регулярно эти скрипты. Это как раз то, над чем часто подщучивают, когда говорят про инженеров данных — «джейсоны перекладывают». Обычно скрипт обращается к API какого-то сервиса, забирает ответ в виде JSON или чего-то подобного, а потом расскладывает данные в плоскую таблицу по каким-то правилам.
— Использовать сервисы в которых уже есть «коннекторы», заранее написанные скрипты, которые работают из коробки. По-сути это SaaS для поставки данных. К таким инстурментам относят Airbyte, Fivetran и Apache NiFi.
— Делать поставку через сервим? который умеет обращаться к REST API, но настройка всего процесса происходит через интерфейс. По-факту это могут быть даже целые ETL-тулы, такие как Matilion, Talend, Alteryx и т.п.
— Использовать стриминг данных, если данных много или нужен real-time. Для этого используется Apache Kafka, Amazon Kinesis, Apache Flink и т.п.
Для своей задачи я остановился на втором варианте. В нём не нужно будет писать и поддерживать код, заниматься дедуппликацией, отслеживанием изменений в источнике, проверять правильность записи и т.п. А так как объёмы данных в системе будут небольшими (максимум сотни тысяч строк), то такой вариант будет ещё и дешевым. Я выбрал два самых известных инструмента (Airbyte, Fivetran) и сейчас тестирую их. В следующий раз расскажу, что думаю про каждый из них и на чем остановился.
#залетайвbi
BI-онбординг от Романа Бунина
Датавиз находится на стыке сфер, которые редко соприкасаются: аналитики и дизайна. Из-за этого с ним бывают сложности — дизайнеры не понимают, как работать с данными, а аналитики не разбираются в дизайне.
Найти крутых спецов по датавизу непросто, поэтому мы в Valiotti Analytics решили сами ковать для себя ценные кадры и запустили BI-онбординг. Его разработал специально для VA Рома Бунин @revealthedata.
🔜 Получилось круто — 10+ часов погружения в Tableau, дизайн и работу с заказчиками. Да, это тоже очень важная часть процесса — умение провести интервью и понять запрос.
Что есть в онбординге?
🔵Основы дизайна, как сделать дашборд понятным и удобным для восприятия.
🔵Разные виды графиков и зачем они нужны.
🔵Структурный подход к созданию системы дашбордов.
🔵Огромное количество полезных материалов, книг и видео.
🔵Практические задания — например, проект по переверстке уже существующего дашборда.
🔥 А еще мы сделали отдельный чат в Slack, где Рома будет давать ребятам фидбек.
Онбординг получился объемный, и большая часть команды пока что в процессе прохождения. Но один отзыв мы вам принесли:
Отличный курс, по большей части освежила свои знания и сохранила лайфхаки на будущее. Буду применять на практике. Насчет сложности: он дает и базу, и более сложные вещи.
Для прохождения курса будет достаточно иметь какие-то общие знания в Tableau — как открыть дашборд и как называются элементы интерфейса.
Регина, Analytics Team Lead