😎Никита Михайлов (Яндекс) – разработчик СУБД ClickHouse и спикер нашей конференции HighLoad++ Весна 2021.
В своём докладе Никита расскажет о малоизвестной утилите под названием cluster-copier, которая включена в стандартную поставку ClickHouse. Обсудим внутреннее устройство и как его улучшить. Также в докладе будут затронуты темы репликации и шардирования 👉 bit.ly/32vW2pG
✅Вся программа и билеты на HighLoad++Весна 2021 👉highload.ru/spring/2021
💥Сердцем любой информационной системы является СУБД. Повышение требований безопасности почти всегда негативно отражается на её производительности.
На HighLoad++Весна 2021 Георгий Тарасов и Денис Рожков (Газинформсервис) в своём докладе на основе форка одной из самых популярных и открытых СУБД в мире посмотрят, на сколько происходит деградация производительности и сколько теряет заказчик, вынужденный удовлетворять требованиям государственных и промышленных стандартов безопасности 👉 bit.ly/32uwj0F
✅Купить билет на HighLoad++Весна 2021 и посмотреть всю программу 👉 highload.ru/spring/2021
Хотите сэкономить на билетах?
Покупая бандл билетов «HighLoad++ Весна и DevOpsConf 2021», вы получаете скидку 20% на обе конференции.
HighLoad++ Весна 2021 пройдёт 17-18 мая в Крокус Экспо, DevOpsConf 2021 — 31 мая – 1 июня в Radisson Slavyanskaya.
Подробности о программе конференций, спикерах и точной стоимости билетов — по ссылке.
💥Большинство современных СУБД изначально не задумывались для использования в Облаках, и требуются значительные усилия для их использования в облачном окружении. Облака всем обещают масштабируемость, надежность, доступность и прочее, но сдержать эти обещания для приложений, интенсивно работающих с данными, очень нетривиально.
На HighLoad++ Весна 2021 Александр Зайцев (Altinity) расскажет об опыте Altinity в этой области на примере ClickHouse, но опыт и выводы в целом применимы для любых СУБД 👉 bit.ly/3ef5aUV
✅Вся программа, расписание и билеты на HighLoad++ Весна 2021 👉 highload.ru/spring/2021
🔥РТ Лабс делают платформу для работы с биометрическими данными в масштабах страны: система рассчитана на 150 миллионов человек, на высокие нагрузки в сотни транзакций в секунду, включая юридически значимую верификацию и проверку “liveness”.
На HighLoad++ Весна 2021 Сергей Браун и Артур Душелюбов расскажут, как на уровне архитектуры системы реализовали независимость от вендоров биометрических решений, как реализована возможность работы с любыми модальностями биометрии (лицо, голос и другие) 👉 bit.ly/3n3e8IP
✅Познакомиться со всей программой и купить билеты на HighLoad++ Весна 2021 👉 highload.ru/spring/2021
Артём Гавриченков в Программном комитете HighLoad++ Весна 2021 курирует секцию безопасности. Сегодня он расскажет, чем наша долгожданная офлайн-встреча Highload++ Весна 2021 будет интересна и полезна любому разработчику. Доклады на конференции будут и о безопасности, и о шифровании, и о биометрии, и, конечно, о многих других смежных с безопасностью темах.
Читайте в нашем блоге на Хабре, задавайте вопросы в комментариях.
✅HighLoad++ Весна 2021 состоится 17-18 мая в Крокус Экспо (Москва). Билеты и расписание на сайте 👉 https://www.highload.ru/spring/2021
💥Jose Cores Finotto (GitLab) и Николай Самохвалов (Postgres.ai) выступят на HighLoad++ Весна 2021 с докладом Database Performance at Gitlab.com.
Из доклада вы подробнее узнаете о том, как улучшают производительность основной реляционной базы данных PostgreSQL на GitLab.com в условиях высокой нагрузки, которая составляет от 40 до 60 тыс. транзакций в секунду. Коллеги поделятся своими проектами, процессами и инструментами, а также всеми компонентами, которые разработали Postgres.ai 👉 bit.ly/3dcM5Uf
✅Программа, билеты на нашем сайте 👉 highload.ru/spring/2021
Алексей Миловидов рассказал о неочевидных способах использования ClickHouse. Тесты железа, работа в serverless-окружении. Что ещё? Читайте в нашей новой статье на Хабре!
✅HighLoad++ 2021 всё ближе! Встречаемся 17-18 мая в Крокус Экспо (Москва). Расписание уже на сайте. Билеты — здесь.
🔥Олег Бартунов (Postgres Professional) – известный российский ведущий разработчик PostgreSQL. Им разработана поддержка русского и других языков, полнотекстовый поиск (при участии Ф. Сигаева и др.), поддержка слабоструктурированных данных (совместно с Ф. Сигаевым и А. Коротковым), новые типы индексов и многое другое.
Олег выступит на HighLoad++ Весна 2021 и расскажет про то, что уже реализовано в постгресе, что ожидается в ближайшем релизе и будущее JSON 👉 bit.ly/39PLdT8
✅Вся программа и билеты 👉 highload.ru/spring/2021
😎Фрол Крючков, Engineering Team Lead at AVITO.ru, в докладе на HighLoad++ Весна 2021 расскажет, как в Авито перешли от программирования формочек до полноценной Metadata Management System или, как её называют, — Infomodel.
Система уже введена в эксплуатацию, и Фрол расскажет о ее плюсах и минусах. Доклад будет интересен разработчикам и архитекторам схожих проектов для перенятия нашего опыта в построении подобных систем 👉 bit.ly/3rKR4iJ
✅Посмотреть всю программу конференции и купить билеты 👉 highload.ru/spring/2021
😎Владислав Шпилевой работает в Tarantool над разработкой сервера и в Ubisoft — над сетевым взаимодействием.
Доклад Владислава на HighLoad++ Весна 2021 прольет свет на удивительную историю синхронной репликации в Тарантуле, закончившуюся изобретением нового алгоритма, и на схему его работы в части репликации 👉 bit.ly/31EVux4
✅Посмотреть всю программу и купить билеты на конфу 👉 highload.ru/spring/2021
💥На HighLoad++ Весна 2021 c докладом выступит Юрий Мусский из Big Data Technologies.
Поговорим про то, из чего состоит latency между юзерами и сервером и пройдемся по каждому пункту (DNS, TCP, TLS, HTTP) в поисках современных протоколов, позволяющих ускорить Time to first byte (TTFB). Обсудим статус HTTP3 (QUIC) в текущих реалиях 👉 bit.ly/3r6SAM4
✅Программа и билеты на конфу 👉 highload.ru/spring/2021 Повышение цен уже завтра.
🔥Breaking news!
Мы расширяем программу HighLoad++ Весна 2021. До 15 апреля открыт дополнительный Call for Papers.
На весенней конференции появятся доклады из 4 новых областей применения. Это темы, которые пока ещё мало затрагивались на HighLoad++:
Финтех. Использование IT в финансовой сфере.
Агротех. Использование IT в агропромышленности.
Геймдев. Разработка серверной составляющей многопользовательских игр.
E-commerce. IT в электронной коммерции, включая логистические системы и другой бекофис.
Кроме того, дополнительный набор открывается в секциях: С++ (разработка сложных и высоконагруженных IT-систем на языке C++), Кибербезопасность (всё о вопросах промышленной кибербезопасности).
⚠️Набор докладов проводится до 15 апреля 2021 года включительно. Подробности о том, как мы работаем со спикерами и форма подачи доклада — по ссылке.
💥В OZON разработали и успешно внедрили инструмент DMP (Data Management Platform), который автоматизирует процесс создания сегментов через фильтрацию пользовательских событий. DMP — программная платформа для сбора, хранения, систематизации и анализа данных о взаимодействии пользователей с OZON. Ежедневно в OZON обрабатывают более 1,5 млрд. событий от миллионов пользователей.
😎На HighLoad++ Весна 2021 Евгений Чмель, ведущий разработчик в команде "Рекомендации и сегментация пользователей" OZON, выступит с докладом “Как мы создавали Data Management Platform в OZON” 👉 bit.ly/3cQol6S
✅Программа и билеты на конфу 👉 highload.ru/spring/2021
☠️Иногда серверы “умирают”.
Если человеку дать больше работы, чем он может выполнить, то может случиться так, что будет выполнена только часть работы, но мы обычно не ожидаем смертельных случаев. Должны ли наши серверы отличаться в этом отношении?
💥Вопрос на миллион долларов — должен ли сервер умирать из-за нагрузки?
😎К сожалению, ситуация аварийного цикла (crash loop) знакома многим инженерам. Цель доклада Георгия Полевого (Dodo Pizza) — вооружить инженеров всем необходимым для защиты от нее 👉 https://www.highload.ru/spring/2021/abstracts/6578
✅Вся программа и билеты на конфу 👉 highload.ru/spring/2021
💥Задачи Natural Language Processing в последнее время становятся локомотивом исследований всего глубокого обучения в целом. Это неизбежно порождает внимание ML-сообщества и разумную долю хайпа вокруг новых моделей. И мы в антиспаме Почты Mail.ru тоже не остаемся в стороне и радостно предвкушаем адаптацию SOTA-достижений.
😎Приходите на доклад Дмитрия Меркушова, тимлида в команде машинного обучения антиспама Почты Mail.ru, на HighLoad++ Весна 2021 👉 bit.ly/3dAosoS В докладе Дмитрий расскажет, как собирать репрезентативные текстовые выборки, почему выбор между supervised и unsupervised не всегда очевиден, ну и главное, как все это завести онлайн с максимальной эффективностью для пользователей сервиса.
✅Программа, билеты на нашем сайте 👉 highload.ru/spring/2021
💥Apache Spark – популярный фреймворк для обработки данных. В него из коробки встроена интеграция с HDFS и разными форматами хранения, и, кроме этого, есть опенсорсные коннекторы почти к чему угодно. Но иногда эти коннекторы работают недостаточно оптимально, а для проприетарного хранилища просто не существует готовых решений. Тогда нужно разобраться в деталях API и написать коннектор самому.
Александра Белоусова (Яндекс.Go) на HighLoad++Весна 2021 расскажет о своём опыте прикручивания Spark к проприетарному хранилищу Яндекса YT. На примерах покажет, с какими трудностями пришлось столкнуться, какие есть тонкости и подводные камни 👉 bit.ly/3ssLX7m
✅Программа, билеты на нашем сайте 👉 highload.ru/spring/2021
✅В Delivery Club есть много задач, которые успешно решаются при помощи алгоритмов машинного обучения, эти алгоритмы используются в offline-режиме. Однако, есть целый класс задач, для которых требуется наличие в production-инфраструктуре сервисов, способных отдавать предсказания ML-моделей в режиме online.
Андрей Завгородний, руководитель группы MLOPS в направлении RnD, на HighLoad++ Весна 2021 расскажет, как создавали в Delivery Club первые сервисы, использующие под капотом ML-модели. Как обеспечивают безопасность деплоя таких сервисов и как оценивают качество их работы 👉 bit.ly/3apl0eI
📍Посмотреть расписание и купить билеты на HighLoad++ Весна 2021 👉 highload.ru/spring/2021
Какие тренды последних лет усиливаются в PostgreSQL прямо сейчас? Как не устроить highload на ровном месте? Где почитать про мифы и реальность СУБД в облаках? Об этом и многом другом мы поговорили с Николаем Самохваловым.
Николай — член программного комитета конференции HighLoad++, куратор секции Базы данных, а также основатель Postgres.ai и #RuPostgres.
✅Конференция HighLoad++ Весна 2021 пройдет уже 17 и 18 мая в Москве, в Крокус-экспо. У нас готово расписание, и вы уже сегодня можете запланировать активности!
⚠️Билеты можно купить здесь. До 30 апреля стоимость очного участия — 47000 рублей, с 1 мая — дороже.
😎Нарек Татевосян, архитектор в компании Яндекс, помогает клиентам Yandex.Cloud в построении масштабируемых и отказоустойчивых архитектур. Также занимается развитием сервиса Managed Service for Kubernetes.
На HighLoad++ Весна 2021 доклад Нарека будет посвящён вопросам, которые у вас возникнут при внедрении или эксплуатации публичных облаков от компаний AWS, Google, Azure, Yandex. Доклад строго практический: рассмотрим конкретные рекомендации для обеспечения масштабирования, высокой доступности и мультитенантности сервиса, развернутого в публичном облаке. Все рекомендации можно использовать как чек-лист в своей практике 👉 bit.ly/2Q8DVUf
✅HighLoad++ Весна 2021 уже через месяц. Программа, билеты на нашем сайте 👉 highload.ru/spring/2021
🔥Рассмотрим одну из базовых задач, которую решает любая мировая биржа — быструю доставку данных о заявках до клиентов. На первый взгляд, задача не выглядит сложной, но есть отягчающие обстоятельства:
- поток данных может достигать нескольких сотен тысяч запросов в секунду;
- потребителей может быть сотни, а то и тысячи;
- время между генерацией ордера и попаданием его конечному потребителю должно быть не более 5 мс в 99% случаев.
✅Как решить эту задачу расскажут на HighLoad++ Весна 2021 руководитель отдела архитектуры / системы хранения данных в Mail.Ru Николай Карлов и разработчик высоконагруженных систем хранения данных Олег Уткин (также Mail.Ru) 👉 bit.ly/3wTQh35
📍Вся программа конференции и билеты 👉 highload.ru/spring/2021
Друзья!
Напоминаем, что 15 апреля уже послезавтра. А это значит, что у вас есть всего два дня, чтобы собраться с мыслями и попытаться стать спикером HighLoad++ Весна 2021.
Программный комитет принимает заявки на доклады по 4 областям:
Финтех. Использование IT в финансовой сфере.
Агротех. Использование IT в агропромышленности.
Геймдев. Разработка серверной составляющей многопользовательских игр.
E-commerce. IT в электронной коммерции, включая логистические системы и другой бекофис.
Дополнительный набор также открыт в секциях: С++ (разработка сложных и высоконагруженных IT-систем на языке C++), Кибербезопасность (всё о вопросах промышленной кибербезопасности).
⚠️Набор докладов проводится до 15 апреля 2021 года включительно. Подробности о том, как мы работаем со спикерами и форма подачи доклада 👉 http://cfp.highload.ru/
Напоминаем, что до 15 апреля Программный комитет HighLoad++ 2021 принимает заявки на доклады по 4 новым областям применения:
Финтех. Использование IT в финансовой сфере.
Агротех. Использование IT в агропромышленности.
Геймдев. Разработка серверной составляющей многопользовательских игр.
E-commerce. IT в электронной коммерции, включая логистические системы и другой бекофис.
Дополнительный набор также открыт в секциях: С++ (разработка сложных и высоконагруженных IT-систем на языке C++), Кибербезопасность (всё о вопросах промышленной кибербезопасности).
⚠️Набор докладов проводится до 15 апреля 2021 года включительно. Подробности о том, как мы работаем со спикерами и форма подачи доклада 👉 http://cfp.highload.ru/
💥Lua — простой язык. Базовые вещи можно выучить минут за 20 без преувеличения. Но несмотря на всю свою простоту, Lua всё-таки может преподнести сюрприз неопытному разработчику. А чтобы писать хороший код, хорошо бы понимать, что происходит за кулисами.
😎Ярослав Дынников (Tarantool) расскажет на HighLoad++ Весна 2021, как (не) выстрелить себе в ногу на Lua. Ярослав раньше разрабатывал бэкенд видеонаблюдения за ЕГЭ и выборами, а сейчас развивает Tarantool Enterprise. Познакомиться с тезисами доклада Ярослава 👉 bit.ly/3whPQPG
✅Посмотреть всю программу конференции и купить билеты 👉 highload.ru/spring/2021
Вас достала реклама, с предложением поднять свой уровень до сеньора и переквалифицировать в айтишника кого угодно: от жестянщика до бобра?
Предлагаем прочитать в нашем блоге на Хабре интервью с куратором секции DevOps конференции HighLoad++ Весна 2021 Артемом Каличкиным. Он рассказал о том, получить максимум пользы от мероприятия, на котором собираются настоящие профессионалы.
✅Билеты на HighLoad++ Весна 2021 по-прежнему продаются на нашем сайте 👉 highload.ru/spring/2021. Встречаемся 17-18 мая в Крокус Экспо (Москва)!
😎Владимир Протасов двигает инфраструктурные проекты в Яндекс.Облаке. Писал в продакшн на 20+ языках, любит Haskell, Rust и Erlang, но в последнее время пишет по ночам и на Python. Выступит с докладом на HighLoad++ Весна 2021.
📍С людьми договариваться сложно. Но машинам не легче: в распределенной системе всё может пойти не так, а отсутствие договоренности может стоить потери данных и как следствие денег и доверия пользователей. Некоторые знают такие страшные слова как Paxos, Raft и Bitcoin-консенсус. Но понимаете ли вы, как они работают и зачем нужны? Владимир постарается объяснить, как эти алгоритмы устроены и зачем нам, рядовым разработчикам, это знать 👉 bit.ly/3m8mfU6
✅Программа и билеты на конфу 👉 highload.ru/spring/2021
⚠️Осталось 2 дня, чтобы купить билет на HighLoad++ Весна 2021 по выгодной цене.
1 апреля цены вырастут. Сейчас на нашем сайте вы можете познакомиться с программой, спикерами, принять решение и купить билеты по выгодной цене 👉https://www.highload.ru/spring/2021
– Как программировать сетевой консенсус для сотен серверов, не допуская ошибок в оценках производительности сети?
– Как не спутать ограничения, накладываемые железом серверов с ограничениями сети?
– Как получить воспроизводимые результаты измерений, имея возможность повторить их в любом облаке за разумные деньги?
– Есть ли универсальные решения для решения подобных задач и какова их архитектура?
💥На все эти вопросы ответит своим докладом Сергей Прилуцкий из MixBytes на HighLoad++ Весна 2021 👉 bit.ly/3tHO9J5
✅Вся программа и билеты на конференцию 👉 highload.ru/spring/2021
😎Федор Васильев трудится на должности заместителя директора департамента эксплуатации и разработки сервисных систем в ECOMMPAY IT.
💥На HighLoad++ Весна 2021 расскажет о доставке в продакшн на примерах русской классической живописи. Тезисы доклада Фёдора 👉 https://www.highload.ru/spring/2021/abstracts/7193
✅Посмотреть всю программу и купить билеты на конфу 👉 highload.ru/spring/2021
😎Артем Просветов в CleverDATA / ЛАНИТ реализует продукт, который позволяет преобразовать пользовательскую историю web-браузера в n-значный числовой вектор (embedding). Для преобразования неструктурированной информации о пользователе в векторный вид используется совокупность методов и моделей машинного обучения.
Использование полученного векторного описания человека целесообразно в различных рекомендательных моделях, адаптации сайтов, решение проблемы холодного старта и т.п. и представляет собой удобный материал для быстрого и безболезненного использования в моделях машинного обучения. Про эксперименты и полученные результаты Артём и расскажет в своём докладе на HighLoad++ Весна 2021 👉 https://www.highload.ru/spring/2021/abstracts/7160
✅Посмотреть всю программу конференции и купить билеты 👉 highload.ru/spring/2021