5485
Новостной канал Devops Deflope от инженеров Экспресс 42 и Флант Для связи @dvpsdflpfdbkbot. Коммерческую рекламу не размещаем.
Spotify рассказали как они управляются со своими машинами (физическими и виртуальными).
http://amp.gs/jxgR
DigitalOcean выпустили doctl – консольную утилиту для управления их облаком. Утилита работает через API v2 и поддерживает относительно новую функцию Floating IP.
http://amp.gs/jxzk
Microsoft портируют bash шелл и ubuntu окружение на Windows 10, чтобы стать ближе к разработчикам, которые пишут софт не для Windows. Проверили дату, 30 марта, все верно.
http://amp.gs/jGbN
Uber рассказали как они кладут в hadoop данные из разных источников – через свой in-house сервис Streamific
http://amp.gs/jGHv
Интересная книга linux-insides, описаны хардкорные темы работы ядра изнутри: первичная загрузка, работа с прерываниями, системные вызовы, таймеры, управление памятью, итд.
http://amp.gs/jGGg
Исходники http://amp.gs/jGGE
Из вчерашней новости про Docker Beta мы узнали, что для запуска Docker на OS X больше необязательно использовать VirtualBox или Parallels Desktop, теперь можно использовать xhyve – нативный гипервизор под OS X(>= 10.10). Если вам уже хочется попробовать, то это можно сделать прямо сейчас, поставив сам xhyve и драйвер для docker-machine.
http://amp.gs/jnuS
На GCP NEXT 2016 Google поделился лучшими практиками построения своих датацентров.
https://cloudplatform.googleblog.com/2016/03/Google-shares-data-center-security-and-design-best-practices.html
Облачные войны 2016. AWS лидер облачных решений на данный момент, Microsoft пушит Azure enterprise заказчикам, Google набирает обороты сегменте публичных облаков.
https://medium.com/simone-brunozzi/the-cloud-wars-of-2016-3f87e0a03d18#.o6uysbp2a
Hashicorp анонсировали поддержку Azure Resource Manager (ARM) для packer и terraform. Заявляется поддержка такого же workflow как с AWS.
https://www.hashicorp.com/blog/azure-packer-terraform.html
Habitus – утилита от cloud66, реализует свой flow для docker build. В концепции Habitus процесс build представляет собой несколько build step с использованием разных Dockerfile. Утилита не расширяет синтаксис Dockerfile(В отличии от Rocker), а включает в себя Dockerfile как элемент build step, описание buildflow производится через yml файл. В описании build step можно указывать артефакты, которые будут скопированы в контейнер, прокидывать в build секреты(например, private ключи), выполнять cleanup команды в конце билда, итп.
https://github.com/cloud66/habitus
Вышел релиз Kubernetes 1.2. Ряд улучшений для больших инсталляций: увеличили максимальное количество Pod до 30000, появилось ConfigMap API для динамической конфигурации приложений, появилось Beta Deployment API для деплоя приложений через декларативное описание(вау!), добавили функцию вывода нод из кластера для проведения работ(Node Drain). Напомню, Kubernetes – система деплоя и управления приложениями в контейнерерах.
http://blog.kubernetes.io/2016/03/Kubernetes-1.2-even-more-performance-upgrades-plus-easier-application-deployment-and-management-.html
Знакомство с Docker Cloud (ex Tutum). Запускают 'hello world' web приложение в облаке Digital Ocean.
http://blog.codeship.com/tutum-aka-docker-cloud/
Результаты февральского опроса Container Usage Survey: Больше всего контейнеры использутся в разработке(88% опрошенных), средний размер кластера с контейнерами 5-10 машин. Больше данных по ссылке.
http://blog.kubernetes.io/2016/03/state-of-container-world-february-2016.html
Influxdata рассказывают про монетизацию. Уже сейчас они предлагают hosted InfluxDB + Grafana. Очень хотят держать все opensource, но нет, предстоящий релиз 0.11 будет последним релизом с поддержкой кластеризации в текущем виде. Начиная с 0.12 opensource версии будет другой механизм кластеризации(InfluxDB Relay). В статье есть ссылки на InfluxDB Relay, там рассказывается как это будет работать. Параллельно будет версия Enterprise с "highest degree of fault-tolerance, automation and scalability". После изложения фактов ребята пишут, что в целом не стоит расстраиваться так сильно, в текущем виде кластеризация использовалась лишь в 0.5% инсталляций и тысячи организаций по всему миру прекрасно работают без нее.
https://influxdata.com/blog/update-on-influxdb-clustering-high-availability-and-monetization/
Обзор стратегий тестрования Docker контейнеров. Начинаем с самой простой стратегии – положили app в docker контейнер и запустили тесты на CI, а в конце самое интересное, как тестировать микросервисную архитектуру http://blog.terranillius.com/post/docker_testing/
Читать полностью…
Netdata – real-time мониторинг производительности linux хоста. По задумке автора предназначен для того, чтобы понимать, что происходит на linux хосте сейчас и в недалеком прошлом. Посмотрите demo, оно того стоит.
http://amp.gs/jx1J
Некоторые технические детали об Ubuntu окружении в Windows 10.
http://amp.gs/jGbA
В блоге Kubernetes, в рамках обзора фич релиза 1.2, вышла статья‑пример как запустить приложение в нескольких зонах доступности (Kubernetes называет их failure zones).
http://amp.gs/jG2T
Rancher(мы о нем недавно писали) вышел из состояния beta и объявил о релизе Rancher 1.0.
http://amp.gs/jGiK
Большие новости от Mesosphere. Ребята подняли $73.5 миллиона(инвесторы Hewlett Packard Enterprise и Microsoft), выпустили Marathon 1.0 и запускают новый continuous delivery продукт – Velocity.
http://amp.gs/jnuK
Rancher научился(еще неделю назад) разворачивать Kubernetes кластер и заимел глубокую интеграцию с ним. До этого момента Rancher поддерживал только docker swarm и собственный сервис cattle. Rancher это opensource софт для построения приватной контейнерной платформы.
http://amp.gs/jnsN
Docker на Mac и Windows: https://blog.docker.com/2016/03/docker-for-mac-windows-beta/
Читать полностью…
Как сделать Blue-Green Deployment с помощью утилиты Docker Flow.
http://technologyconversations.com/2016/03/07/docker-flow-blue-green-deployment-and-relative-scaling/
Вышел etcd 2.3.0. Уменьшили задержки реакции кластера в два раза(за счет оптимизации работы с диском), представили новое эксперементальное API v3 и эксперементальный сторадж к нему.
https://coreos.com/blog/etcd-v230.html
Вышел релиз 1.0 Clair, утилиты от CoreOS, которая занимается проверкой безопасности контейнеров. Проверка заключается в сканировании слоев контейнера с использованием базы CVE.
https://coreos.com/blog/clair-v1.html
Сервис runnable вышел в стадию invite only beta. Runnable – сервис для разработчиков, который призван упростить создание stage площадок для приложений. Работает так: на каждый фича-бранч на github создается площадка(docker в AWS) и при обновлении бранча код автоматически выкатывается эту площадку. Напоминает Otto по концепции, но вы не платите за инфраструктуру. А за что платите ребята еще не определились, но говорят будет стоить от 30$ до 55$ на разработчика. Инвайт можно попросить на сайте.
https://runnable.io
Статья для тех, кто боится браться за tcpdump/wireshark при отладке проблем. Автор наглядно показывает что это просто и никаких специальных знаний не требуется. http://jvns.ca/blog/2016/03/16/tcpdump-is-amazing/
Читать полностью…
Недавно стало известно, что Spotify переводит инфраструктуру в Google Cloud Platform. И вот еще одна победа Google! Apple переносит часть iCloud в GCP. По слухам сейчас Apple уже пользуется облаками AWS и Azure.
http://www.engadget.com/2016/03/17/apple-icloud-google-cloud-platform/
Amazon запустил анонсированный ранее AWS Database Migration Service (DMS). Сервис позволяет перенести базу данных в облако Amazon. Да, они сделали AWS Schema Conversion Tool, эта утилита позволяет конвертировать схему Oracle или Microsoft SQL Server в Amazon RDS.
https://aws.amazon.com/blogs/aws/aws-database-migration-service/
10 уроков за 10 лет существования Amazon Web Services, статья от Werner Vogels(CTO и VP по внедрению технологических инноваций в Amazon). Первый сервис Amazon S3 был запущен 14 марта 2006 года. http://www.allthingsdistributed.com/2016/03/10-lessons-from-10-years-of-aws.html
Читать полностью…