5485
Новостной канал Devops Deflope от инженеров Экспресс 42 и Флант Для связи @dvpsdflpfdbkbot. Коммерческую рекламу не размещаем.
Facebook зарелизил проект Prophet — инструмент для предсказания временных рядов (имеющих достаточно большую историю).
На самом деле это чертовски сложная задача, и поэтому безумно приятно видеть такие инструменты в open source.
http://amp.gs/Y9Ro
Без правильных людей понимающих что DevOps это не тайтл, а изменение в культуре которые должны помагать как руководителям так и девелоперам, очень просто сделать что-то не так.
Чтобы понять, подходит ли вам кандидат вот вам 10 вопросов, на которые должен ответить любой сотрудник который претендует на место в компании с развитой devops культурой.
http://amp.gs/YVe2
Интересное решение!
Ребята рассказывают о решении, в котором используется Kafka в качестве транспорта реплики MySQL
http://amp.gs/YVBJ
Daniil Baturin написал прекрасный cheatsheet по iproute2. Рекомендуем для беглого просмотра всем, кто хочет обозреть возможности iproute2.
http://amp.gs/YEGh
Доклад от Josh Evans (Director of Operations Engineering at Netflix) с Qcon в котором он рассказывает о «живом» и «хаотичном» мире микросервисов который существует в Netflix.
Он начинает с базового описания анатомии микросверисов, вызовы которые приходится принимать при разработке распределенных архитектур, и преимущества которые они дают.
А затем, он повествует о том что фундаментом для овладения совершенным мастерством в разработке микросервисов является применение определенных и специфичных культурных, архитектурных и эксплуатационных подходов.
https://www.youtube.com/watch?v=CZ3wIuvmHeM
До главной DevOps коммьюнити-конференции этого года в России осталось чуть больше недели, напоминаем, что состоится она 11 марта. Самое время определяться тем, кто еще не определился, а тем, кто уже купил билет, самое время изучить программу.
Мы запустили локальный сайт конференции и там теперь можно купить билет и посмотреть доклады и докладчиков в более удобном виде — http://amp.gs/YPPF
А в программе есть много важного и полезного.
Николай Кныш и Роман Мурашкин из Райффайзенбанка расскажут про DevOps-трансформацию у себя в IT-департаменте. Это не будет рассказ про эффективные процессы и эффективных менеджеров, ребята из Райфа действительно круто подошли к вопросу и решили создать среду, где DevOps возможен, тезисы доклада тут — http://amp.gs/YPP2.
В Альфа-Лаборатории уже давно экспериментируют с Docker и Mesosphere, но считают, что культура и здравый смысл важнее всего, о здравом смысле в DevOps будет доклад Александра Тарасова и Юлии Викторовой http://amp.gs/YPP3
Костя Назаров из Tarantool расскажет, как он сделал свое собственное облако http://amp.gs/YPPH Думаю, это будет феерично, он обещал для своего доклада рисовать от руки!
Антон Иванов из HeadHunter поделиться своим опытом управления SRE-отделом http://amp.gs/YPPw.
Друзья ждем вас, билеты можно купить здесь — http://amp.gs/YPP0
Docker сменил нумерацию версий. После 1.13 в марте выйдет 17.03.0. Release Candidat, кстати, уже доступен.
http://amp.gs/Yt76
Вышел Go 1.8. Основные новшества:
* Бэкенд компилятора SSA (Static Single Assignment) включен для всех архитектур, а не только для x86_64. Прирост производительности генерируемого кода при его использовании составляет 5-35%
* Сборщик мусора теперь работает более короткими циклами, которые не превышают 100 мкс и обычно длятся около 10 мкс
* В модуль с реализацией HTTP-сервера добавлена поддержка операций Push для HTTP/2
* В модуль sort добавлена новая функция Slice, упрощающая сортировку данных с типом slice
* Проведена оптимизация значительного числа модулей
http://amp.gs/YYYA
Ребята из Hashicorp, а в частности те что разрабатывают Nomad, подгоняют нам очередную флеймообразующую тему.
Вместо стандартного подхода с использованием воркеров для разбирания очередей заданий, они предлагают запускать задачи по запросу при помощи их механизма Nomad Dispatch.
Это решение на их взгляд даёт ряд преимуществ связанных с более оптимальной утилизацией ресурсов.
http://amp.gs/16we
За 8 летнюю историю проекта mongodb, вокруг него было множество споров и драм на различные темы связанные с надёжностью хранения данных.
И вот, судя по всему одна из важнейших проблем (по мнению ненавистников) решена.
http://amp.gs/16Nj
31 января один из системных администраторов Gitlab ошибся при настройке репликации на продакшене и удалил боевую базу данных, содержащую issues, merge requests и некоторые другие важные данные. Сами репозитории при этом не пострадали. Сервис ушел в оффлайн и при попытке восстановления выяснилось, что ни один из методов бэкапов не работал, были потеряны данные за последние 6 часов. По ссылке приведен перевод внутреннего документа с процессом решения проблемы, а также рекомендации по недопущению подобных аварий.
http://amp.gs/12fu
DevOpsDays Moscow уже почти готов, у нас ничего не остается, как его провести. Дата проведения перенесена на 11 марта, чтобы мы успели сделать документы для иностранных докладчиков.
На конференции будут интересные доклады от множества докладчиков из разных стран, с вами в этот день будут думать о DevOps Leon Fayer из OmniTI, Jan de Vries, Антон Вайс, Michael Hitterman и многие другие. Незаконченную версию программы вы можете найти здесь http://amp.gs/1DaK
Итак, самое важное, регистрация на DevOpsDays открыта и вы можете купить билет прямо сейчас по ссылке http://amp.gs/1Dao
Для вас мы приготовили скидки, они будут действовать в течение недели:
Скидка на базовый билет HpQxmN21
Скидка на VIP-билет JuYter87N1
Express 42 объявляет второй набор на оплачиваемую стажировку для молодых специалистов. Стажировка в Express 42 — это возможность поработать в сильнейшей российской DevOps-команде и познакомиться с современными технологиями. Во время работы вы познакомитесь с DevOps культурой, будете использовать Ansible, Chef, Docker, Mesos, AWS стек.
http://amp.gs/1vYR
Юбилейный, 32-й выпуск Devops Deflope. У нас в гостях зачинщик Devops движения в России, один из основателей компании Express 42, Александр Титов.
http://amp.gs/1jRY
Pēteris Ņikiforovs собрал в своем блоге подборку экзотичных HTTP-хедэров, служащих, в основном, для усиления безопасности сайтов.
http://amp.gs/zKxc
Интересный анализ методик devops при помощи теории ограничений и попытка ответа на 4 вопроса Голдратта.
http://amp.gs/Y9vh
Первая статья из серии о написании concurrent приложений.
В данной статье ребята рассматривают как операционная система управляет планированием IO операций наших приложений.
http://amp.gs/YVx6
Все мы помним про старинные рекомендации по установке размера swap в linux системах равной 2х кратному размеру RAM.
Но ведь ядро, фс, шедулеры сильно изменились за последнее десятилетие. Актуальны ли рекомендации на данный момент ?
Прекрасная (и короткая) статья от инженера из RH рассказывает о том, как используется swap в современных системах и какие есть рекомендации по его тюнингу для повышения производительности на данный момент.
http://amp.gs/YE7h
Отличное 5 минутное видео о происхождении термина 'human error' и его различных нотациях.
https://www.youtube.com/watch?v=rHeukoWWtQ8
Интересная статья от Adrian Cockcroft (VP Cloud Architecture Strategy at AWS), в которой он размышляет о том, как архитектуры современных приложений смещаются в сторону концепции function as a service и как это соотносится с уже популярными событийными моделями.
Также он рассмматривает как совмещение этих двух подходов радикально сокращает time to value.
http://amp.gs/Ygbj
Спецы из команды безопасности Google нашли серьезную уязвимость у провайдера CloudFlare, уязвимость похожа на Heartbleed, в определенной ситуации клиентам отдается часть содержимого оперативной памяти серверов CloudFlare. Проблема возникла из-за ошибки в коде сервера и была оперативно закрыта сотрудниками CloudFlare. Также появился отчет от CloudFlare, где они заверяют, что приватные ssl ключи не могли утечь, поскольку терминация ssl происходит на других машинах.
Отчет Google Project Zero http://amp.gs/YBSk
Отчет CloudFlare: http://amp.gs/YBSC
Пост-мортем аварии Instapaper. Ребята упали 9 февраля и окончательно смогли восстановиться только к 14 февраля. Причина — уперлись в лимит размера файла (2TB) на RDS-инстансе. Починить все получилось только полным дампом и восстановлением 2.5-терабайтной базы данных.
Вишенка на торте: по словам инженеров Instapaper, RDS не имеет никаких средств мониторинга/алертинга таких проблем.
http://amp.gs/YYlv
Всеволод 'ctrlok' Поляков начал цикл статей о современных орекстраторах. Первый небольшой материал — обзорный, в нем рассказывается о том, зачем вообще придумали оркестраторы контейнеров, и всегда ли они нужны.
http://amp.gs/YTjD
Короткая и интересная статья о том, как по разному можно интерпретировать и визуализировать изменения в time series данных. И о том, как же важно понимать чего вы хотите данных, и что означают изменения в них.
http://amp.gs/16u5
Когда ваших данных становится очень много, изменение их структуры становится вызовом для вас и вашего проекта. Stripe рассказал почему миграция данных это сложно, а также повествует о способах решения ряда проблем.
http://amp.gs/164X
Алексей Прокопенко, бывший руководитель проектов СберТеха, рассказал VC о трудностях внедрения agile-методологий в крупных государственных и частных компаниях на примере Сбербанка и Альфа-Банка.
http://amp.gs/12Gn
Интересный взгляд на то, какой должна быть техподдержка в крупной организации, применяющей DevOps:
http://amp.gs/1vnv
(Английский оригинал статьи: http://amp.gs/1vnh)
Puppet начали проведение DevOps survey 2017. Опрос продлится до 10 февраля, так что спешите отметиться!
http://amp.gs/1yUe
Друзья, как вы могли заметить, новости ушли на новогодние каникулы. Мы вернемся в январе 2017-го! Но в этом году осталось последнее событие от нас!
Читать полностью…
Igor Šarčević из SemaphoreCI опубликовал список советов по созданию легких Docker-контейнеров. Советы довольно банальные (не плоди кучу лишних слоев, используй легкий base image и т.д.), но напоминание о best practices никогда не бывает лишним.
http://amp.gs/zKnn