Yevhen Lebid's website

Healthcheck для Apache Airflow в Kubernetes кластере

Thu, 26 Aug 2021 11:07:20 +0300

В одной из предыдущих статей мы довольно подробно рассматривали процесс развертывания Apache Airflow в Kubernetes кластере, особенностью которого был запуск веб-сервера и планировщика в одном docker-контейнере. В такой реализации довольно скоро я столкнулся с необходимостью использования кастомного хелсчека для проверки работоспособности сервиса - давайте разберемся!

Интеграция Apache Airflow и Slack для отправки уведомлений

Mon, 12 Jul 2021 10:26:22 +0300

Ранее мы уже рассматривали процесс развертывания Apache Airflow (далее Airflow) в кластере Kubernetes и запуск задач с помощью API. Как и обещал, в данной статье на конкретном примере я покажу как настроить отправку уведомлений о статусе задач Airflow в Slack. Давайте разберемся!

Apache Airflow: запуск Kubernetes Pod Operator через API

Sat, 22 May 2021 06:33:56 +0300

Ранее мы уже упоминали об Apache Airflow - инструменте для разработки, планирования и мониторинга batch-процессов обработки данных. В данной статье рассмотрим запуск Airflow-задач (Directed Acyclic Graph, далее DAG) и передачу параметров с помощью Airflow REST API - давайте разберемся!

Безопасная работа с секретами при сборке docker-образов

Fri, 30 Apr 2021 07:14:15 +0300

При сборке Docker-образов иногда необходимо использовать секреты (например, пароль к приватному репозиторию пакетов), которые не должны в конечном итоге оставаться в образе. В последних версиях Docker этого можно добиться благодаря BuildKit - давайте разберемся!

Валидация миграций flyway c помощью testcontainers

Fri, 05 Feb 2021 10:51:00 +0200

Ранее мы уже упоминали о необходимости контроля версий БД и применения миграций с помощью инструмента Flyway и даже реализовали функционал валидации миграций в бесплатной (community edition) версии. Но мир не стоит на месте и с каждым днем появляются новые варианты решения проблем - в данной статье рассмотрим валидацию миграций flyway с помощью testcontainers. Давайте разберемся!

Использование PostStart хука при запуске пода в Kubernetes-кластере

Tue, 08 Dec 2020 08:37:14 +0200

После написания статьи о вставке данных в redis при запуске контейнера в кластере Kubernetes Александр Косенко вполне резонно заметил, что для решения такой задачи можно использовать PostStart хук, который предоставляется “из коробки” для управления жизненным циклом контейнера. Давайте разберемся!

Вставка данных в Redis при запуске контейнера в Kubernetes кластере

Tue, 01 Dec 2020 16:22:56 +0200

Довольно часто встречаются варианты конфигурирования и запуска Redis сервиса в кластере Kubernetes классифицируемые как stateless (т.е. без сохранения данных). В данной статье рассмотрим вариант вставки данных в Redis на старте пода в кластере - давайте разберемся!

Отправка логов Apache Airflow в Elasticsearch

Thu, 09 Apr 2020 07:49:37 +0300

В одной из предыдущих статей мы рассматривали особенности развертывания Apache Airflow в кластере Kubernetes, а в данном материале поговорим об отправке логов из Airflow в Elasticsearch. Давайте разберемся!

Валидация flyway-миграций без СМС и регистрации

Fri, 27 Mar 2020 09:28:09 +0200

В одной из предыдущих статей мы уже рассматривали контроль версий БД и миграции с помощью инструмента Flyway, причем довольно подробно и с конкретным примером, а в конце статьи я обещал показать, как можно организовать валидацию миграций до их применения к БД (фича, доступная только в платной подписке) своими силами и совершенно бесплатно. Давайте разберемся!

Сбор и анализ логов Kubernetes кластера с помощью EFK-стека

Sun, 15 Mar 2020 10:18:43 +0200

На дворе уже 2020 год, а стандартного решения для агрегации логов в Kubernetes до сих пор нет. В данной статье рассмотрим особенности сбора и анализа логов в кластере Kubernetes с помощью EFK-стека. Давайте разберемся!

Миграции и контроль версий БД с помощью Flyway

Fri, 21 Feb 2020 07:57:33 +0200

Процесс преобразования одной структуры базы данных в другой без потери косистентности, при котором меняется схема (таблицы и их колонки, индексы и пр.) называется миграцией. В данной статье рассмотрим использование инструмента flyway для работы с миграциями в БД postgres - давайте разберемся!

Gradle запуск checkstyle только на измененных файлах

Sun, 09 Feb 2020 10:34:59 +0200

В одной из предыдущих статей мы уже рассматривали настройку плагина checkstyle для статического анализа кода на языке Java, однако теперь требования усложнились - необходимо проводить анализ только действительно измененных файлов, а не всего содержимого проекта. Давайте разберемся!

Развертывание Apache Airflow в Kubernetes кластере

Tue, 28 Jan 2020 07:41:43 +0200

В данной статье разберемся с особенностями установки, настройки и эксплуатации Apache Airflow (далее Airflow) в кластере Kubernetes. Давайте разберемся!

Приоритетность подов в Kubernetes

Thu, 19 Sep 2019 10:53:04 +0300

Поды (Pods) могут иметь приоритет. Приоритет отображает важность пода относительно других подов в кластере. Если под не может быть запущен на подходящем узле из-за нехватки ресурсов, то планировщик (scheduler) пытается “вытеснить” поды с более низким приоритетом и переместить их на другие узлы кластера, чтобы освободить ресурсы и запустить ожидающий под. Давайте разберемся!

Ресурсы в Kubernetes. Часть 2: Процессор (CPU)

Thu, 25 Jul 2019 10:06:18 +0300

В первой части мы рассмотрели два типа требований (requests и limits) к ресурсам с точки зрения Kubernetes и разобрались с указанием этих параметров применительно к памяти. В данной статье рассмотрим нюансы настройки параметров requests и limits в контексте работы процессора (CPU). Давайте разберемся!

Ресурсы в Kubernetes. Часть 1: Память (Memory)

Mon, 15 Jul 2019 10:23:16 +0300

Чтобы Kubernetes смог максимально эффективно использовать доступную инфраструктуру и корректно выделить ресурсы, необходимые для работы вашего приложения, вам следует указать требования в ресурсам каждого контейнера. В данный момент есть возможность задавать два типа требований (requests и limits) для двух типов ресурсов - памяти (memory) и процессора (CPU). В данной статье рассмотрим requests и limits применительно к памяти - давайте разберемся!

Знакомство с Kubernetes. Часть 19: HorizontalPodAutoscaler

Wed, 12 Jun 2019 08:08:15 +0200

В этой статье рассмотрим использование HorizontalPodAutoscaler - объектов, предназначенных для автоматического масштабирования количества подов (Pods) в Replication Controller, Replica Set или Deployment, основываясь на использовании CPU (или, при поддержке custom metrics, на других метриках приложения). Давайте разберемся!

Deploy to k8s with Spinnaker. Часть 1: Установка

Thu, 24 Jan 2019 11:59:25 +0300

Spinnaker - мультиоблачная платформа для непрерывной доставки (continuous delivery) с открытым исходным кодом (open-source) от разработчиков Netflix. Платформа предназначена для управления и деплоя приложений в AWS EC2, Kubernetes, GCE, GKE, GAE, Microsoft Azure и Openstack. Давайте разберемся!

Gradle Checkstyle plugin

Tue, 08 Jan 2019 06:50:42 +0200

Возникла необходимость настроить статический анализ кода (checkstyle) для проекта на языке Java. Давайте разберемся!

Сборка проектов с помощью Gradle

Thu, 03 Jan 2019 06:19:13 +0200

На просторах Интернета существует множество статей и видеоуроков (как платных, так и бесплатных) о том, как установить Gradle, написать собственную конфигурацию сборки (файл build.gradle) и, наконец, собрать Java-приложение с помощью Gradle. В данной статье мы не будем рассматривать эти простейшие вещи, а разберемся как следовать принципу DRY (Don’t Repeat Yourself) при работе с большим количеством схожих проектов!

GRPC REST Gateway

Sat, 29 Dec 2018 11:10:09 +0200

Наверняка многие слышали о gRPC — открытом RPC-фреймворком от Google, который активно используется Netflix, Kubernetes, Docker и многими другими. Давайте разберемся как можно начать использовать gRPC не отказываясь от уже существующего REST-варианта!

Практические примеры использования tcpdump

Thu, 18 Oct 2018 06:02:45 +0200

Tcpdump - пакетный сниффер и главный инструмент сетевого анализа для специалистов по информационной безопасности. Рассмотрим несколько практических примеров “подслушивания” сетевого траффика.

Практические примеры использования tar

Thu, 11 Oct 2018 07:03:20 +0200

Для создания и манипуляций с архивами в Linux-дистрибутивах используется утилита командной строки tar. C помощью этой утилиты можно как извлечь данные из файлов tar, pax, cpio, zip, jar, ar и даже ISO (образы cdrom), так и создать соотвествующие архивы.

Практические примеры использования netstat

Mon, 08 Oct 2018 06:00:53 +0200

Netstat - утилита командной строки для мониторинга сетевой статистики - входящих и исходящих сетевых подключений, просмотра таблиц маршрутизации, статистики интерфейсов и т.д. Netstat доступен не только во всех Unix-подобных операционных системах, но и в ОС Windows.

Проверка занятости порта сервисом в Linux

Thu, 04 Oct 2018 06:09:25 +0200

Однажды вам обязательно понадобится проверить используемый порт определенного сервиса (или наоборот, найти сервисы, слушающие конкретный порт) - в Linux существует несколько утилит командной строки, которые могут с этим помочь. Давайте разберемся!

Знакомство с Kubernetes. Часть 18: PodPresets

Mon, 01 Oct 2018 06:01:02 +0200

В этой статье рассмотрим использование PodPresets - объектов, с помощью которых можно добавлять определенную информацию в поды во время их создания. Информация может включать в себя секреты, тома и переменные окружения. Давайте разберемся!

6 способов очистки терминала в Linux

Thu, 27 Sep 2018 07:01:43 +0200

Иногда при работе в терминале вызываемые команды и результаты их выполнения полностью “засоряют” экран и делают работу в консоли некомфортной. Давайте разберемся с несколькими способами быстрой очистки терминала в Linux!

Знакомство с Kubernetes. Часть 17: Введение в YAML

Mon, 24 Sep 2018 07:03:44 +0200

В предыдущих статьях цикла мы создавали объекты в кластере Kubernetes несколькими способами - исключительно с помощью командной строки или с использованием манифестов в формате JSON или YAML. В этой статье подробнее остановимся на описании манифестов с помощью YAML-синтаксиса - как наиболее удобного (на мой взгляд).

Выводим список установленных пакетов в Linux по дате

Thu, 20 Sep 2018 07:02:13 +0200

Порой необходимо узнать когда тот или иной пакет был установлен в операционной системе (например, в целях аудита). В данной статье рассмотрим как вывести список установленных пакетов в Linux, отсортированный по дате установки - давайте разберемся!

Знакомство с Kubernetes. Часть 16: Различия в Replication Controller, Replica Set и Deployments

Fri, 14 Sep 2018 07:04:29 +0200

Как инструмент оркестрации контейнеров, Kubernetes предусматривает управление несколькими экземплярами (репликами) контейнеров. На сегодняшний день существует несколько способов организации репликации - в данной статье мы рассмотрим три варианта: Replication Controllers, Replica Sets и Deployments. Давайте разберемся!

Docker совет №38: Топ-10 опций команды docker run

Thu, 13 Sep 2018 07:02:14 +0200

Консольная команда docker run имеет около сотни опций, в том числе -d, -i, -t, -v и -w. В данной статье рассмотрим десять наиболее популярных опций, с которыми наверняка придется работать. Давайте разберемся!

Jenkins as a code. Часть 4

Mon, 10 Sep 2018 07:08:19 +0200

Возникла необходимость разграничения прав доступа пользователей на Jenkins-сервере - давайте разберемся, как можно это сделать без использования webUI!

Знакомство с Kubernetes. Часть 15: Установка и настройка kubectl

Thu, 06 Sep 2018 07:04:48 +0200

Kubectl - консольная утилита, без которой даже нельзя представить работу с кластером Kubernetes. В предыдущих статьях цикла мы неоднократно использовали данную утилиту для создания и управления объектами в кластере, получения информации и обновления интересующих нас ресурсов. Давайте разберемся с установкой и настройкой kubectl!

Jenkins as a code. Часть 3

Mon, 03 Sep 2018 07:02:21 +0200

В данной статье цикла “Jenkins as a code” рассмотрим самый интересный (и полезный) пример - автоматическое создание задач (job) при запуске сервиса. Давайте разберемся!

Docker совет №37: Incorrect Username or Password при скачивании образов

Thu, 30 Aug 2018 07:07:15 +0200

Использование команды docker pull для скачивания общедоступных (публичных) docker-образов не требует аутентификации, однако, если ваши учетные данные от Docker Hub некорректны - скачивание завершится ошибкой. Давайте разберемся!

Знакомство с Kubernetes. Часть 14: Секреты (Secrets)

Mon, 27 Aug 2018 06:06:07 +0200

В кластере Kubernetes объекты типа секрет (secret) предназначены для хранения конфиденциальной информации, такой как пароли, OAuth-токены или ssh-ключи. Давайте разберемся!

Docker совет №36: Что происходит при запуске docker-compose up?

Thu, 23 Aug 2018 07:01:43 +0200

В этой статье попробуем разобраться, что же на самом деле происходит “под капотом” при запуске команды docker-compose up. Давайте разберемся!

Jenkins as a code. Часть 2

Mon, 20 Aug 2018 07:04:45 +0200

В первой статье цикла “Jenkins as a code” мы разобрали несколько примеров настройки экземпляра Jenkins под собственные нужды, в данной статье рассмотрим автоматическую настройку общих библиотек (Shared Libraries) - давайте разберемся!

Docker совет №35: Проверка кода завершения работы контейнера

Thu, 16 Aug 2018 07:03:58 +0200

Возможно, однажды вам потребуется узнать код завершения работы doсker-контейнера. Давайте разберемся, как можно это сделать!

Знакомство с Kubernetes. Часть 13: Конфигмапы (ConfigMap)

Mon, 13 Aug 2018 07:03:49 +0200

Использование конфигмапов (ConfigMaps) позволяет разделять конфигурационные файлы и контейнеры с приложениями, избавляя от необходимости упаковывать конфиги в docker-образ. В данной статье рассмотрим несколько примеров использования конфигмапов - давайте разберемся!

Docker совет №33: Разница между форматами CMD

Thu, 09 Aug 2018 07:09:16 +0200

Инструкция CMD может быть определена в двух форматах, которые называются exec и shell. Оба выполняют практически идентичные вещи, но все же между ними есть существенно различие. Давайте разберемся!

Jenkins as a code. Часть 1

Mon, 06 Aug 2018 07:08:20 +0200

Идея “инфраструктура как код” далеко не нова и широко используется в повседневной жизни большинством компаний. В серии статей “Jenkins as a code” предлагаю разобраться с автоматическим развертыванием и настройкой сервера Jenkins!

Docker совет №33: Использование двух Dockerfile в одном compose-проекте

Thu, 02 Aug 2018 07:08:18 +0200

Зачастую использование двух Dockerfile требуется когда вы работаете над проектом, в котором можно (и нужно) четко разграничить составляющие - например, на frontend и backend. Давайте разберемся!

Jenkins: использование shared libraries

Mon, 30 Jul 2018 07:04:56 +0200

При использовании Jenkins в компании с большим количеством проектов, рано или поздно вы заметите, что ваши описания пайплайнов (Pipeline) имеют много общего. И, возможно, вам захочется избавиться от избыточности и следовать принципу DRY (Don’t Repeat Yourself) - давайте разберемся!

Docker совет №32: Разница между create, start и run

Thu, 26 Jul 2018 07:02:48 +0200

Команды docker create, docker start и docker run выглядят одинаковыми по смыслу, но на самом деле они выполняют совершенно различные роли. Давайте разберемся, чем же отличаются данные команды!

Запуск docker-compose с помощью systemd unit

Mon, 23 Jul 2018 07:02:12 +0200

Возникла необходимость запускать сервисы, описанные в файле docker-compose.yml, при загрузке сервера. Давайте разберемся!

Docker совет №31: Использование build и image в одном сервисе в docker-compose

Thu, 19 Jul 2018 07:06:51 +0200

Всем известно, что при запуске сервиса, описанного в docker-compose.yaml, можно скачать готовый образ из docker-registry (указав image:) или собрать образ из существующего Dockerfile (указав build:). Но что случится, если указать обе инструкции?

Знакомство с Kubernetes. Часть 12: Аннотации

Mon, 16 Jul 2018 07:02:34 +0200

Для добавления произвольных, неидентифицирующиих метаданных к создаваемым в кластере Kubernetes объектам можно использовать аннотации. Клиенты (в том числе инструменты и библиотеки) могут получать и использовать эти данные. Давайте разберемся!

Как исправить ошибку getpwnam(nginx) failed

Thu, 12 Jul 2018 07:08:36 +0200

Скорее всего, вы столкнетесь с данной ошибкой если вы собираете из исходников популярный web-сервер Nginx. Давайте разберемся!

Знакомство с Kubernetes. Часть 11: Сервисы (services)

Mon, 09 Jul 2018 07:06:58 +0200

Поды в кластере Kubernetes смертны - они создаются (рождаются), но когда под по какой-либо причине умирает, то он не воскресает. И хотя каждый под при создании получает свой собственный IP-адрес, этот адрес нельзя назвать постоянным и стабильным вследствие “смертности” подов. Давайте разберемся!

Docker совет №30: Монтирование ssh-ключей в docker-контейнер

Thu, 05 Jul 2018 07:09:29 +0200

Казалось бы, все очень просто - монтируете нужный каталог с ssh-ключами в соответствующее место внутри docker-контейнера. Но все становится куда интереснее, если вы используете Docker for Windows - давайте разберемся!

Знакомство с Kubernetes. Часть 10: Неймспейсы (namespaces)

Mon, 02 Jul 2018 07:02:27 +0200

Kubernetes поддерживает несколько виртуальных кластеров, работающих в одном и том же физическом кластере. Эти виртуальные кластеры называются пространствами имен или неймспейсами (namespaces). Давайте разберемся!

Знакомство с Kubernetes. Часть 9: Метки и селекторы

Mon, 25 Jun 2018 07:07:18 +0200

Метки (labels) представляют собой пары ключ/значение, которые назначаются объектам (например, подам) в кластере Kubernetes. Эти метки предназначены для указания идентифицирующих атрибутов объектов, осмысленных и имеющих отношение к пользователям.

Docker совет №29: Создание read-only контейнеров

Thu, 21 Jun 2018 07:00:59 +0200

Возможно, вам захочется запускать docker-контейнеры в режиме только для чтения (read-only) - например, для повышения безопасности или из-за специфических требований вашего приложения. Давайте разберемся!

Знакомство с Kubernetes. Часть 8: Переменные окружения

Mon, 18 Jun 2018 07:02:29 +0200

В данной статье рассмотрим какие ресурсы и переменные окружения доступны контейнерам и как переопределять переменные окружения для контейнера при запуске пода (Pod) в кластере Kubernetes. Давайте разберемся!

Docker совет №28: Как исправить ошибку 'Connection Reset by Peer'

Thu, 14 Jun 2018 07:04:41 +0200

Вы наверняка видели эту ошибку, когда пытались подключиться к web-серверу, запущенному в docker-контейнере. К слову, отсутствие ответа от web-сервера - тоже довольно распространенная ошибка. Давайте разберемся!

Знакомство с Kubernetes. Часть 7: Образы (Images)

Mon, 11 Jun 2018 07:05:55 +0200

Перед тем, как описывать в манифесте какого-либо объекта Kubernetes образ контейнера, его необходимо создать и разместить в реестре образов. Давайте разберемся!

Docker совет №27: Разница между реестром, репозиторием и образом

Thu, 07 Jun 2018 07:06:31 +0200

Docker-репозиторий позволяет хранить одну или несколько версий определенного docker-образа. Образ может иметь одну или более версий (в терминологии docker версия называется “тэг”).

Знакомство с Kubernetes. Часть 6: Сборщик мусора (Garbage Collector)

Mon, 04 Jun 2018 07:16:52 +0200

Задача сборщика мусора (Garbage Collector) в Kubernetes заключается в удалении определенных объектов, которые больше не имеют владельца. Давайте разберемся, что это значит!

Docker совет №26: Использование коротких ID

Thu, 31 May 2018 07:25:24 +0200

Для идентификации docker-контейнеров и docker-образов используются уникальные ID, состоящие из 64 символов. Давайте разберемся с использованием более коротких идентификаторов при работе с docker!

Знакомство с Kubernetes. Часть 5: Развертывания (Deployments)

Mon, 28 May 2018 07:33:21 +0200

Контроллер развертывания (Deployment controller) предоставляет возможность декларативного обновления для объектов типа поды (Pods) и наборы реплик (ReplicaSets). Давайте разберемся!

Docker совет №25: Какую API версию docker compose использовать?

Thu, 24 May 2018 07:08:48 +0200

На сегодняшний день Docker Compose имеет 3 основные версии API (v1, v2 и v3). В зависимости от используемой версии вам могут быть доступны (или недоступны) некоторые полезные функции и возможности.

Знакомство с Kubernetes. Часть 4: Реплики (ReplicaSet)

Mon, 21 May 2018 07:02:15 +0300

ReplicaSet гарантирует, что определенное количество экземпляров подов (Pods) будет запущено в кластере Kubernetes в любой момент времени. Давайте разберемся!

Docker совет №24: Запуск Insecure Docker Registry

Thu, 17 May 2018 07:56:35 +0300

Запуск Insecure Docker Registry для хранения своих docker-образов не самый лучший вариант с точки зрения безопасности, но порой это самое простое и разумное решение. Давайте разберемся!

Знакомство с Kubernetes. Часть 3: Поды (Pods)

Mon, 14 May 2018 06:17:12 +0200

В данной статье цикла о знакомстве с оркестратором Kubernetes детальнее разберемся с подами (Pods) - наименьшей функциональной единицей для развертывания в объектной модели Kubernetes.

Docker совет №23: Импорт SQL-файла с docker-compose

Thu, 10 May 2018 06:30:16 +0200

При работе с базами данных (например, PostgreSQL, MariaDB или MySQL) в docker-контейнере, вам наверняка понадобится импортировать данные из SQL-файла. Давайте разберемся!

Знакомство с Kubernetes. Часть 2: Терминология

Mon, 30 Apr 2018 07:32:11 +0200

В данной статье предлагаю перечислить и кратко рассмотреть базовые понятия Kubernetes - это будет основой для понимания работы оркестратора и пригодится перед ознакомлением с остальными статьями цикла.

Docker совет №22: Получаем список изменений в контейнере

Thu, 26 Apr 2018 07:59:48 +0200

Бывают случаи, когда вносятся изменения внутри уже запущенного docker-контейнера, после чего нужно увидеть, насколько измененный контейнер отличается от оригинального образа. Давайте разберемся!

Знакомство с Kubernetes. Часть 1: Установка

Mon, 23 Apr 2018 07:35:44 +0200

Только ленивый еще не писал об установке, настройке и использовании Kubernetes - будь-то в облаке (AWS, GCE, Azure) или на bare-metal серверах.

Как восстановить пользователя root в mysql?

Thu, 19 Apr 2018 06:25:05 +0200

В интернете есть множество примеров (в том числе и в официальной документации) сброса пароля суперпользователя в базе данных MySQL. Но что делать, если случайно удалил пользователя root@localhost в БД MySQL - давайте разберемся!

Знакомство с Kubernetes. Часть 0: Что это?

Sun, 15 Apr 2018 14:17:50 +0200

Kubernetes - это проект с открытым исходным кодом для управления “флотом” контейнеров на нескольких хостах, объединенных в кластер. Данный инструмент призван обеспечить основные механизмы развертывания, обслуживания и масштабирования приложений, упакованных в контейнеры.

Docker совет №21: Использование переменных окружения

Thu, 12 Apr 2018 08:07:05 +0200

Docker позволяет нам устанавливать переменные окружения как во время сборки docker-образов, так и во время запуска docker-контейнеров (к слову, при запуске также можно переопределять переменные указанные во время сборки). Давайте разберемся!

Docker совет №20: Используйте WORKDIR

Thu, 05 Apr 2018 08:02:05 +0200

Если вы заметили, что часто меняете каталоги своем Dockerfile (инструкции по сборке docker-образа), то самое время познакомиться с использованием инструкции WORKDIR. Давайте разберемся!

Применение DRY к docker-compose.yml

Mon, 02 Apr 2018 07:50:38 +0200

Мы уже знаем, что файлы docker-compose.yml - отличный способ определения нескольких сервисов (контейнеров), которые должны работать как единый стек. Но при большом количестве сервисов в файле неизменно появляются одинаковые, повторяющиеся для каждого контейнера блоки кода (описания) - давайте разберемся с ними!

Docker совет №19: docker-compose stop или down?

Thu, 29 Mar 2018 07:28:35 +0200

Связку контейнеров, описанных в конфигурационном файле docker-compose.yml можно остановить с помощью команд stop или down, однако вторая команда делает гораздо больше, чем просто остановка контейнеров. Давайте разберемся!

Установка Minikube

Mon, 26 Mar 2018 08:15:43 +0200

Minikube - утилита командной строки для настройки и запуска однонодового кластера Kubernetes в виртуальной машине на локальном компьютере.

Docker совет №18: Использование диска

Thu, 22 Mar 2018 08:15:03 +0200

Сегодня мы познакомимся с одной довольно простой но полезной командой, которая предоставит информацию о том, как много места на вашем диске занимают docker образы, контейнеры, тома и кеш сборки - давайте разберемся!

Let's Encrypt: Wildcard-сертификаты теперь доступны!

Mon, 19 Mar 2018 08:13:41 +0200

Еще в прошлом году разработчики Let’s Encrypt обещали внедрить в январе 2018 года поддержку возможности генерации wildcard-сертификатов для доменов и вот, наконец, этот день настал. Давайте разберемся, как сгенерировать wildcard-сертификат Let’s Encrypt для всех поддоменов!

Docker совет №17: Команда docker-compose config

Thu, 15 Mar 2018 08:26:57 +0200

Docker Compose поддерживает переопределение yaml-файлов и подстановку переменных из env-файла (variable substitution). Команда config позволяет проверить какие значения переменных будут установлены при старте контейнеров, описанных в файле docker-compose.yml.

Sphinxsearch в docker-контейнере

Mon, 12 Mar 2018 08:50:13 +0200

В данной статье рассмотрим процесс сборки docker-образа включающего в себя систему полнотекстового поиска Sphinxsearch с возможностью переиндексации - давайте разберемся!

Docker совет №16: Использование флага --add-host

Thu, 08 Mar 2018 09:05:04 +0200

В данной статье рассмотрим один из весьма полезных флагов, - --add-host, который можно использовать при запуске docker-контейнеров с помощью команды docker run.

Docker совет №15: Использование контейнеров для длительных и разовых задач

Mon, 05 Mar 2018 07:35:57 +0200

Как всем хорошо известно, docker идеально подходит для изоляции процессов, которые могут быть как длительными по времени выполнения (например, запущенный web-сервер), так и непродолжительными, разовыми задачами. Давайте разберемся!

Docker: перенаправление логов в Graylog2

Thu, 01 Mar 2018 08:53:38 +0200

Мы уже упоминали о Graylog2 - централизованном хранилище логов и рассматривали вариант сбора и анализа логов от популярного веб-сервера Nginx. В данной статье настроим отправку логов в Graylog2 от docker-контейнеров - давайте разберемся!

Cron в docker контейнере

Mon, 26 Feb 2018 08:57:38 +0200

Как мы уже упоминали ранее, иногда есть смысл собрать отдельный docker-контейнер для запуска периодических задач. Давайте разберемся!

Docker cовет №14: Как запускать задачи по крону - в контейнере или на хост-машине?

Thu, 22 Feb 2018 08:56:32 +0200

Docker предоставляет прекрасный функционал для изоляции отдельных процессов в контейнерах, но когда дело доходит до запуска периодических задач, неизменно возникают вопросы. Давайте разберемся!

Пересборка Nginx с поддержкой TLS v1.3

Mon, 19 Feb 2018 08:58:04 +0200

В рамках этой статьи исключительно из “спортивного интереса” рассмотрим процесс пересборки Nginx с поддержкой TLS v1.3 - данная возможность уже существует, хотя сам стандарт TLSv1.3 пока находится в драфте. Давайте разберемся!

Использование MozJPEG в docker-контейнере

Thu, 15 Feb 2018 08:55:32 +0200

Ранее мы уже упоминали о важности оптимизации и сжатия изображений перед размещением на сайте и рассматривали несколько утилит для работы с картинками.

Практические примеры использования sysdig

Mon, 12 Feb 2018 08:55:05 +0200

В Linux используется целый набор утилит для сбора и анализа информации о состоянии системы. Примеры работы со многими из этих диагностических инструментов мы уже рассматривали — раз, два, три.

Практические примеры использования wget

Thu, 08 Feb 2018 08:27:59 +0200

Всем нам не единожды приходилось скачивать файлы из интернета. Когда такая необходимость возникает при работе в командной строке Linux, просто не обойтись без подходящих инструментов.

Redis в docker-контейнере не сохраняет данные

Mon, 05 Feb 2018 08:57:22 +0200

Случайно заметил, что при остановке docker-контейнера redis не сохраняет данные из памяти в файл dump.rdb, и, следовательно, при следующем запуске данных в redis’е не окажется.

Как изменить значение Open File Limit — 3 варианта

Thu, 01 Feb 2018 08:56:10 +0200

Операционная система при открытии файла создает временный номер (неотрицательное целое число), называемый файловым дескриптором. Данный дескриптор (handle) можно использовать для работы с файлом.

JetBrains Products License Server in docker

Mon, 29 Jan 2018 09:22:32 +0200

В последнее время после обновления PhpStorm (особенно до версии 2017.3.3) все чаще “слетает” активация продукта по методу “License server” - за последние пару дней приходилось раз 5 менять адрес сервера лицензий.

Docker совет №13: Какой флаг лучше использовать Volume или Mount?

Thu, 25 Jan 2018 09:36:51 +0200

Для проброса данных из каталога на хост-машине в docker-контейнер можно успешно использовать оба параметра.

Мониторинг Redis с помощью Nixstats

Mon, 22 Jan 2018 08:54:37 +0200

Ранее мы уже рассматривали сервис мониторинга Nixstats и настраивали сбор метрик от Nginx и php-fpm с помощью данной системы мониторинга.

Оптимизация и сжатие изображений из консоли

Thu, 18 Jan 2018 10:00:06 +0200

Скорость загрузки практически любого сайта так или иначе зависит от количества и качества используемых изображений.

Redis Inside или что хранится в редисе?

Mon, 15 Jan 2018 08:48:18 +0200

На дашбордах в Grafana увидел заметный рост использования памяти Redis’ом (Total memory usage), и мне стало интересно узнать, что же хранится в БД.

Nginx: ошибка (24: Too many open files) и ее решение

Thu, 11 Jan 2018 11:43:39 +0200

На одном из серверов в логе ошибок веб-сервера Nginx появились сообщения вида

2017/11/22 08:21:02 [crit] 29098#29098: *174583882 open() "/var/www/public/blackfriday/img/tabs/img4.png" failed (24: Too many open files), client: 176.113.144.142, server: example.com, request: "GET /blackfriday/img/tabs/img4.png HTTP/2.0", host: "example.com"

Prometheus 2.0: Новый формат Alert rules

Mon, 08 Jan 2018 11:43:07 +0200

Как уже упоминал ранее, обновление на новую версию (2.0) системы мониторинга и сбора метрик Prometheus в моем случае не прошло гладко. Отдельно стоит рассказать о новом формате rules-файлов — давайте разберемся!

Docker совет №12: Установка пароля redis без правки конфига

Thu, 04 Jan 2018 11:42:40 +0200

Почти каждое веб-приложение использует Redis, поэтому крайне важна возможность легко установить/изменить на нем пароль. Давайте разберемся, как это можно сделать!

Docker совет №11: Автоматическое удаление ненужных данных docker

Mon, 01 Jan 2018 11:42:13 +0200

Ранее мы уже упоминали о проблеме быстрого «засорения» локального хранилища при работе с docker-контейнерами и рассматривали варианты очистки места на диске после docker вручную.

Docker совет №10: Алиасы для часто используемых команд

Thu, 28 Dec 2017 11:41:44 +0200

Алиасы и функции, связанные с docker, позволяют сэкономить довольно много времени на вводе команд. Давайте разберемся на нескольких практических примерах!

Prometheus: Миграция на версию 2.0

Mon, 25 Dec 2017 11:41:18 +0200

После прочтения статьи с анонсом второй версии Prometheus сразу решил: надо брать! Думал, достаточно будет обновить версию docker-контейнера и все заработает, но нет… Давайте разберемся!

Установка Redis Desktop Manager в Ubuntu 16.04

Thu, 21 Dec 2017 11:40:59 +0200

Redis Desktop Manager (RDM) — приложение для управления базами данных Redis с открытым исходным кодом для Windows, Linux и MacOS. RDM поддерживает шифрование SSL/TLS, SSH-туннели и облачные экземпляры Redis, такие как Amazon ElastiCache, Microsoft Azure Redis Cache и Redis Labs.

MySQL: Логирование запросов от определенных пользователей

Mon, 18 Dec 2017 11:40:33 +0200

Появилась необходимость логировать запросы к БД MySQL от определенных пользователей. Давайте разберемся как быстро реализовать данный функционал!

Docker совет №9: Добавляйте метаданные в ваши docker-образы

Thu, 14 Dec 2017 11:40:06 +0200

Метки (labels) позволяют творить довольно интересные вещи с docker-образами. В статье приведено несколько основных вариантов использования — давайте разберемся!

Expo: Packager останавливается через несколько секунд после старта

Mon, 11 Dec 2017 11:39:35 +0200

При запуске проекта при помощи команды exp через несколько секунд после старта React Native packager отваливается без каких-либо сообщений в логах. Давайте разберемся!

Редиректы на Nginx: Rewrite vs Return

Thu, 07 Dec 2017 10:39:44 +0200

Довольно часто при обращении к сайту используются редиректы на уровне вебсервера Nginx. Чаще всего редиректы применяют для изменения имени домена (без www на домен с www) или протокола (с HTTP на HTTPS).

GitLab CI: deploy на docker swarm

Mon, 04 Dec 2017 10:39:24 +0200

В цикле о настройке GitLab continuous integration мы подробно рассматривали этап деплоя docker-образов на ревью окружение; чуть позже скрипт деплоя был изменен для достижения zero downtime (избавления от простоя).

Включение виртуальной машины на гипервизоре ESXi из консоли

Thu, 30 Nov 2017 10:39:03 +0200

В данной статье представлена пошаговая инструкция для включения виртуальных машин из командной строки (из ESX консоли или RCLI/vSphere CLI) на гипервизорах под управлением ESXi — давайте разберемся!

GitLab CI: Чем проще .gitlab-ci.yml, тем лучше

Mon, 27 Nov 2017 10:38:37 +0200

В статье, завершающей цикл о настройке Gitlab CI (continuous integration) была приведена в качестве примера финальная, полностью рабочая версия конфигурационного файла .gitlab-ci.yml.

Docker совет №8: Разница между docker ps и docker container ls

Thu, 23 Nov 2017 10:38:02 +0200

В docker версии 1.13+ была добавлена группировка команд (grouped commands) для удобства и наведения порядка в куче неструктурированных docker команд. Если коротко — обе команды выполняют одно и тоже. Давайте разберемся!

Шифрование файлов в git-репозитории с помощью git-crypt

Mon, 20 Nov 2017 10:37:28 +0200

Иногда возникает необходимость в шифровании определенных файлов в репозитории (например, ключи или пароли), особенно если нет возможности/желания хранить эти файлы отдельно.

Docker совет №7: Измеряйте ресурсы, используемые контейнерами

Thu, 16 Nov 2017 10:37:03 +0200

В docker’е существует встроенная команда, позволяющая увидеть сколько CPU, памяти, сетевых операций ввода-вывода (network I/O) и блочных операций ввода-вывода (block I/O) используют запущенные контейнеры. Давайте разберемся!

Очистка кэша FastCGI: еще один вариант

Mon, 13 Nov 2017 10:36:36 +0200

Ранее мы уже рассматривали настройку кэширования на Nginx, упоминали об очистке кэша FastCGI в бесплатной версии веб-сервера Nginx с помощью модуля ngx_cache_purge.

Docker совет №6: Объединяйте RUN в Dockerfile

Thu, 09 Nov 2017 10:36:09 +0200

Все выполняющиеся инструкции при сборке docker-образа влекут за собой увеличение его размера. Как можно оптимизировать размер docker-образов еще на этапе сборки? Давайте разберемся!

Добавление кастомных заголовков для исходящих писем в exim

Mon, 06 Nov 2017 10:35:38 +0200

Иногда в целях отладки или облегчения поиска в логах почтового сервера exim требуется добавить кастомный заголовок (custom header). Давайте разберемся, как это сделать для всех почтовых сообщений, отправляемых с сервера!

Docker совет №5: Разница между инструкциями RUN и CMD

Thu, 02 Nov 2017 08:38:26 +0200

Инструкции RUN и CMD являются очень важными частями Dockerfile, и они выполняют разные задачи. Давайте разберемся, что они делают!

Проблемы с удалением docker-контейнеров: device or resource busy

Mon, 30 Oct 2017 08:37:57 +0200

Столкнулся с проблемой на одном из серверов с установленной ОС Centos 7 — при обновлении docker-контейнеров запускается новый экземпляр контейнера, но старый при этом не удаляется. Давайте разберемся!

Использование модуля nginx_module_vts для сбора расширенной статистики Nginx

Thu, 26 Oct 2017 08:37:32 +0200

Была поставлена задача замерять количество входящего/исходящего траффика для определенного сайта. Сделать это можно с помощью Nginx virtual host traffic status module (nginx-module-vts) — давайте разберемся!

Верификация коммитов в GitLab 9.5.x

Mon, 23 Oct 2017 08:37:03 +0200

В GitLab последней версии (на момент написания статьи 9.5) появилось важное нововведение — верификация подписанных коммитов. Теперь у всех коммитов с подписью GPG будет отображаться статус их верификации рядом с автором коммита.

Docker совет №4: Структура проекта с несколькими Dockerfile и docker-compose

Thu, 19 Oct 2017 08:36:40 +0200

Когда дело доходит до организации крупных проектов с несколькими Dockerfile и их взаимодействием через docker-compose, делать это можно по-разному. В данной статье предлагаю рассмотреть, как это делаю я — давайте разберемся!

Установка и активация Atlassian Confluence 6.3.4

Mon, 16 Oct 2017 08:36:08 +0200

Ранее мы уже рассматривали как устроен механизм защиты в JIRA Software, сегодня немного покопаемся еще в одном полезном инструменте — Atlassian Confluence 6.3.4.

3 причины использовать Alpine в качестве базовых docker-образов

Thu, 12 Oct 2017 17:30:45 +0200

Если хотите уменьшить размер ваших docker-образов, быстро и безопасно развертывать приложения то вам просто необходимо обратить внимание на Alpine. Ни для кого не секрет, что сам Docker использует Alpine в качестве базового образа для своих официальных docker-образов (с начала 2016 года).

Установка и активация JIRA Software Server 7.5.0

Mon, 09 Oct 2017 17:30:12 +0200

Однажды мне стало интересно посмотреть, как устроена защита в одном из самых известных и популярных инструментов для разработчиков — JIRA Software.

Docker совет №3: Установка самых популярных пакетов в Alpine

Thu, 05 Oct 2017 17:29:46 +0200

Мы уже знаем, что самый оптимальный выбор для базового docker-образа это Alpine — легковесный дистрибутив Linux.

Скрипт для бекапа таблиц в БД + шифрования

Mon, 02 Oct 2017 17:29:16 +0200

Мы уже рассматривали примеры создания резервных копий баз данных и восстановления из них, были даже полностью готовые к употреблению скрипты.

Docker: не игногируйте .dockerignore!

Thu, 28 Sep 2017 17:28:42 +0200

Мы уже знаем, как самостоятельно собирать docker-образы из Dockerfil’ов и даже использовали некоторые советы по оптимизации сборки и сжатию образов для уменьшения из размера.

Кэш пакетов для Composer

Mon, 25 Sep 2017 14:54:35 +0200

При современном подходе к разработке проектов не обойтись без менеджера пакетов — в случаe с разработкой на PHP это Composer. В данной статье пойдёт речь о настройке локального кэша пакетов для Composer.

Docker совет №2: Оптимизация разработки с использованием томов

Thu, 21 Sep 2017 14:54:14 +0200

Если вы создаете приложения, написанные на динамических языках, таких как PHP, Ruby, Python или Node, вы просто обязаны использовать тома (volumes) в разработке. Давайте разберемся!

Docker Swarm: stack deploy и именованные тома (named volumes)

Mon, 18 Sep 2017 14:53:43 +0200

При переходе на 3.х версию файла docker-compose.yml (необходимое требование для работы Docker Swarm) пропадает возможность использовать Data-only контейнеры — специальные контейнеры-спутники, файловая система которых служит для хранения данных и подключается к остальным сервисам с помощью параметра volumes-from.

Docker совет №1: Вывод содержимого файла из контейнера

Thu, 14 Sep 2017 14:53:15 +0200

Время от времени появляется необходимость сбрасывать файл из docker-контейнера на хост-систему. Вот один из способов сделать это — давайте разберемся!

Мониторинг Nginx с помощью Nixstats

Mon, 11 Sep 2017 14:52:44 +0200

В одной из предыдущих статей мы рассматривали Nixstats — [пока] бесплатный сервис для мониторинга, отображения статистики сервера и оповещения о проблемах.

Docker Swarm: stack deploy и env-переменные

Thu, 07 Sep 2017 14:52:20 +0200

Познакомившись с docker, рано или поздно вы начнете использовать оркестраторы Fleet/Nomad/Kubernetes/Aurora/Docker Swarm и т.д. На мой взгляд, самый простой из них — Docker Swarm, который «из коробки» дает возможность развернуть отдельный сервис или целый стек.

GitLab CI: Анализ кода

Thu, 24 Aug 2017 14:52:00 +0200

Ранее в цикле статей о настройке процесса continuous integration в GitLab мы рассматривали этап тестирования на примере phpmetrics — инструмента для визуализации качества кода.

Сбор и анализ логов Nginx с помощью Graylog2

Mon, 21 Aug 2017 14:51:39 +0200

Graylog2 — бесплатная open source система для централизованного сбора, хранения и анализа логов. Для работы ему нужна Java, конфигурацию он хранит в MongoDB, для поиска и хранения логов — ElasticSearch.

Как убедить владельца бизнеса или своего руководителя использовать Docker

Thu, 17 Aug 2017 14:51:09 +0200

Разработчики (как и системные администраторы или DevOps-инженеры) прекрасно осведомлены о плюсах в использовании Docker, но как изложить преимущества данной технологии в контексте бизнеса?

Резервное копирование MySQL 5.7 с помощью Percona Xtrabackup

Mon, 14 Aug 2017 14:50:28 +0200

Утилита для создания резервных копий баз данных Percona Xtrabackup всем хорошо известна, я сам давно использую ее на многих проектах.

Мониторинг PHP-FPM с помощью Nixstats

Thu, 10 Aug 2017 10:02:10 +0200

Ранее мы уже рассматривали Nixstats — бесплатный сервис для мониторинга, отображения статистики сервера и оповещения о проблемах и даже научились собирать метрики от web-сервера Nginx.

Portainer: WebUI для управления docker-контейнерами

Mon, 07 Aug 2017 10:01:45 +0200

Благодаря инструменту Portainer можно легко управлять контейнерами (образами, сетями, сервисами и пр.) на локальном или удаленном docker-хосте (в том числе Swarm-кластере).

Бесплатный мониторинг сервера с оповещением в Telegram/sms

Thu, 03 Aug 2017 10:01:19 +0200

Nixstats — бесплатный сервис для мониторинга, отображения статистики сервера и оповещения о проблемах. По заверениям автора сервис находится в процессе разработки, поэтому он пока бесплатен.

Percona Server и Percona XtraBackup в docker-контейнере

Mon, 31 Jul 2017 10:00:28 +0200

Со стремительным ростом популярности docker-контейнеров уже никого не удивить, например, запуском Percona Server в docker’е. Однако на просторах Интернета не так уж много подробных инструкций о том, как делать резервные копии (и восстанавливаться из них), если ваш MySQL-сервер запущен в docker-контейнере.

Nginx + GeoIP: блокировка пользователей из определенных стран

Thu, 27 Jul 2017 10:00:03 +0200

Ранее мы уже рассматривали варианты ограничения доступа к сайту с помощью web-сервера Nginx, но порой возникает необходимость блокировки доступа пользователям из определенных стран (чаще всего дальневосточных). Конечно, пользователи всегда смогут воспользоваться прокси и обойти запрет, но в большинстве случаев предлагаемого функционала будет вполне достаточно.

Использование модуля ngx_cache_purge для очистки кэша FastCGI

Mon, 24 Jul 2017 09:59:31 +0200

Мы уже упоминали о настройке кэширования на Nginx, рассматривали преимущества и примеры настроек кеширования (в том числе FastCGI), но не затронули такой важный вопрос, как очистка данных из кеша.

Очистка места в private docker-registry

Thu, 20 Jul 2017 09:59:03 +0200

Ранее мы рассматривали вариант docker-установки Gitlab-сервера с расширенной функциональностью (в том числе с использованием приватного docker-registry), которая стала фундаментом для организации процесса CI (continuous integration).

Мониторинг docker c помощью Prometheus

Mon, 17 Jul 2017 09:58:43 +0200

Мониторинг docker-контейнеров не менее важен, чем мониторинг физических серверов, виртуальных машин или отдельных сервисов и устройств. Но помимо настройки самого мониторинга, необходимо правильно выбрать систему, с помощью которой вы будете хранить данные, визуализировать метрики и отправлять оповещения.

GitLab CI: zero downtime docker deployment

Thu, 13 Jul 2017 09:58:22 +0200

Не так много времени прошло с момента завершения цикла статей о настройке процесса CI (continuous integration) с помощью Gitlab в реальном проекте, как мы вновь возвращаемся к данной теме.

GitLab: Custom hooks

Mon, 10 Jul 2017 09:58:02 +0200

В GitLab Enterprise Edition существует довольно удобная, а порой и просто необходимая возможность дополнительной настройки правил обновления кода в репозитории под названием Push Rules.

Простое и дешевое резервное копирование на Google Cloud Storage

Thu, 06 Jul 2017 08:34:13 +0200

Все знают, что хранить важные данные (резервные копии) для надежности лучше в нескольких географически распределенных местах — для этой цели хорошо подходят облачные хранилища (GCS, S3, Dropbox, Яндекс.Диск и пр.).

Dockerfile: ADD или COPY?

Mon, 03 Jul 2017 08:33:44 +0200

В данной статье рассмотрим разницу между двумя очень похожими инструкциями, которые используются при сборке docker-образов из Dockerfile — ADD и COPY, а также определимся, какую из них лучше использовать.

Пересборка Nginx с поддержкой PageSpeed

Thu, 29 Jun 2017 08:33:22 +0200

Собирать Nginx из исходников под свои нужды нам уже не впервой — ранее мы уже собирали Nginx с определенной версией OpenSSL для корректной работы ALPN (Application-Layer Protocol Negotiation) и включали поддержку Brotli — нового алгоритма сжатия.

GitLab CI: Часть 10 (финал), этап cleanup в .gitlab-ci.yml

Mon, 26 Jun 2017 08:32:57 +0200

В завершении цикла статей о настройке continuous integration в GitLab мы рассмотрим еще один несложный, но важный этап, который позволит поддерживать в чистоте и порядке все наши сборочные контейнеры, а также увидим финальную версию конфигурационного файла .gitlab-ci.yml.

OpenSSL: простое шифрование файлов с использованием пароля

Thu, 22 Jun 2017 08:32:23 +0200

Полным-полно ситуаций, когда просто необходимо зашифровать некие файлы или каталоги, особенно если данные передаются по открытым каналам либо храняются на внешнем хранилище (в том числе на облачных). Для решения этой задачи может быть использован OpenSSL — мощный набор инструментов для шифрования файлов и сообщений.

GitLab CI: Часть 9, этап deploy в .gitlab-ci.yml (продолжение)

Mon, 19 Jun 2017 08:31:53 +0200

В данной статье цикла о continuous integration и особенностях ее реализации в GitLab продолжаем максимально подробно разбирать этап деплоя изменений на ревью с помощью docker-образов.

GitLab CI: Часть 9, этап deploy в .gitlab-ci.yml

Thu, 15 Jun 2017 08:31:19 +0200

В предыдущей статье цикла о настройке GitLab continuous integration мы занимались сборкой docker-образа с исходниками проекта. После сборки и загрузки docker-образа в локальный docker-registry, мы можем использовать его для деплоя на ревью (review), продакшн (production) и т. д.

GitLab CI: Часть 8, этап release в .gitlab-ci.yml

Mon, 12 Jun 2017 08:30:43 +0200

В продолжении цикла о настройке GitLab CI после этапов сборки и тестирования проекта мы рассмотрим этап подготовки docker-образа с исходниками и его загрузку в локальный docker-registry.

GitLab CI: Часть 7, этап test в .gitlab-ci.yml

Thu, 08 Jun 2017 08:30:13 +0200

Продолжаем цикл статей о настройке процесса continuous integration в GitLab — теперь, благодаря использованию артефактов, мы можем передать на этап тестирования все файлы, созданные на этапе сборки проекта.

GitLab CI: Часть 6, этап build в .gitlab-ci.yml (второй подход)

Thu, 01 Jun 2017 08:29:35 +0200

В предыдущей статье из цикла о настройке continuous integration в GitLab мы настроили первую работоспособную версию этапа сборки (build) проекта, однако в ней было два проблемных момента, которые мы подробоно разберем и устраним в данной статье.

GitLab CI: Часть 5, этап build в .gitlab-ci.yml (первый подход)

Mon, 29 May 2017 16:25:44 +0200

В предыдущей статье цикла о настройке continuous integration в GitLab мы подробно рассмотрели первый этап (stage) описанный в файле .gitlab-ci.yml, который должен создавать и запускать docker-контейнеры, необходимые для сборки проекта.

GitLab CI: Часть 4, этап spawn в .gitlab-ci.yml

Thu, 25 May 2017 16:25:07 +0200

В предыдущей статье цикла о настройке GitLab CI мы познакомились со специальным файлом .gitlab-ci.yml, в котором описываются инструкции для раннеров, рассмотрели несколько примеров и подготовили «скелет» для внедрения continuous integration в проекте.

Установка DNS-сервера в docker-контейнере

Thu, 18 May 2017 16:24:35 +0200

Ранее мы уже рассматривали процесс настройки DNS-сервера с динамическим обновлением зон в операционной системе Ubuntu 16.04, однако этот вариант не самый оптимальный с точки зрения использования времени.

GitLab CI: Часть 3, введение в .gitlab-ci.yml

Mon, 15 May 2017 16:24:13 +0200

В одной из предыдущих статей мы полностью подготовили фундамент для использования GitLab CI, во второй успешно зарегистрировали раннер (runner), который будет заниматься выполнением инструкций из специального файла .gitlab-ci.yml.

GitLab CI: Часть 2, специальные образы

Thu, 11 May 2017 16:23:46 +0200

В первой статье цикла о настройке GitLab Continuous Integration (GitLab CI) мы упоминали о неких специфических docker-образах, которые будут использоваться в нашем конкретном примере при сборке проекта.

GitLab CI: Часть 1, запуск раннеров (runners)

Mon, 08 May 2017 16:23:21 +0200

В одной из предыдущих статей, посвященных GitLab — одной из самых популярных систем контроля версий и управления Git-репозиториями, — мы подготовили необходимый фундамент для настройки GitLab Continuous Integration (GitLab CI).

Gitlab в docker-контейнерах: резервное копирование

Thu, 04 May 2017 16:22:52 +0200

Мы уже умеем запускать Gitlab со всеми необходимыми компонентами в docker-контейнерах с помощью docker-compose и в полной мере оценили всю гибкость использования для этой цели контейнеров от sameersbn.

Поднимаем Gitlab в docker-контейнерах за Nginx

Mon, 01 May 2017 16:22:28 +0200

Мы уже упоминали о GitLab — одной из самых популярных систем контроля версий и управления Git-репозиториями с открытым исходным кодом и очень широкой функциональностью. Рассматривались варианты переноса GitLab в docker-установку и организация процесса CI с помощью docker-compose.

Ищем и убиваем zombie процессы

Thu, 27 Apr 2017 16:22:01 +0200

Дочерний процесс в Unix-системе, завершивший своё выполнение, но ещё присутствующий в списке процессов операционной системы, чтобы дать родительскому процессу считать код завершения называют зомби (англ. zombie process, defunct process) — говорит нам Википедия.

Очистка места на диске после docker

Mon, 24 Apr 2017 16:21:39 +0200

Технология Docker позволяет упаковать приложение или сервис в контейнер, который легко может быть запущен в любом окружении. Однако при активной работе с Docker жесткий диск быстро засоряется неиспользуемыми образами, контейнерами и томами данных.

Установка Prometheus Node Exporter в CentOS 7

Thu, 20 Apr 2017 13:58:20 +0200

Ранее мы уже рассматривали процесс установки и настройки инструмента для мониторинга и сбора метрик под названием Prometheus и его дополнительного компонента — node_exporter в операционной системе Debian Jessie.

Gitlab + Gitlab CI + Docker registry с помощью docker-compose

Mon, 17 Apr 2017 13:57:54 +0200

В одной из предыдущих статей мы подробно рассматривали процесс переноса данных omnibus-установки в docker-установку, целью которого было избавление от головной боли при обновлениях Gitlab.

Оптимизация docker-образов

Thu, 13 Apr 2017 13:57:27 +0200

Как известно, docker-контейнеры создаются и запускаются из образов, которые можно загрузить из общедоступных репозиториев (например, Docker Hub) или собрать самостоятельно с помощью инструкций в Dockerfile.

GitLab: перенос данных с omnibus-установки в docker-установку

Mon, 10 Apr 2017 13:57:12 +0200

GitLab — одна из самых популярных систем контроля версий и управления Git-репозиториями с открытым исходным кодом и очень широкой функциональностью. Процесс установки GitLab (будь-то omnibus, docker или готовая виртуальная машина) хорошо задокументирован, поэтому рассматривать мы его не будем.

Установка и настройка DNS + DHCP с динамическим обновлением зон в Ubuntu 16.04

Thu, 06 Apr 2017 13:56:45 +0200

Даже в небольших организациях для упрощения администрирования локальной сети необходимы один или несколько DNS (Domain Name System — система доменных имён) и DHCP (Dynamic Host Configuration Protocol — протокол динамической настройки узла) серверов.

Резервное копирование виртуальных машин ESXI с помощью Xsibackup

Mon, 03 Apr 2017 13:56:09 +0200

Возможности резервного копирования виртуальных машин на гипервизоре под управлением ESXI с бесплатной лицензией существенно ограничены — например, тут не получится использовать vCenter, а функциональность бесплатных версий Veeam Backup или VM Explorer значительно урезана.

Настройка кэширования на Nginx

Thu, 30 Mar 2017 13:55:39 +0200

Суть кеширования на стороне сервера заключается в том, чтобы избавиться от постоянного запуска одних и те же скриптов (как пример, генерации ленты постов WordPress), выполнение которых может иногда занимать целые секунды.

Использование make для управления docker-контейнерами

Mon, 27 Mar 2017 13:55:12 +0200

Make — утилита предназначенная для автоматизации преобразования файлов из одной формы в другую, говорит нам Википедия. Ключевое слово здесь — автоматизация.

Установка и настройка сервера очередей Beanstalkd в CentOS 7

Thu, 23 Mar 2017 13:54:51 +0200

Ранее мы уже рассматривали процесс установки сервера очередей beanstalkd в операционной системе Debian Jessie. Как показала практика, в rpm-based операционных системах установка и настройка beanstalkd несколько отличается и не всегда выполняется одной командой.

Docker: работа с контейнерами

Mon, 20 Mar 2017 13:54:25 +0200

Ранее мы рассматривали процесс установки Docker в операционной системе Ubuntu 16.04 и для проверки работоспособности запускали тестовый контейнер hello-world — это был очень простой пример контейнера, который запускался, выводил сообщение на экран и завершал работу.

Установка Docker в Ubuntu 16.04

Thu, 16 Mar 2017 11:18:52 +0200

Docker — это программное обеспечение, которое широко используется для автоматизации развертывания и управления приложениями в контейнерах (виртуализация уровня операционой системы). Контейнеры во многом похожи на виртуальные машины, но при этом потребляют гораздо меньше ресурсов, меньше зависят от операционной системы машины-хоста и могут быть легко перенесены на другой хост или облако.

Мониторинг SMART атрибутов SSD Intel DC S3500/S3700 Series

Mon, 13 Mar 2017 11:18:29 +0200

Не стоит лишний раз упоминать о важности постоянного наблюдения за состоянием накопителей на серверах, будь то привычные все жесткие диски (HDD) или современные твердотельные накопители (SSD).

Установка и настройка сервера очередей Beanstalkd в Debian Jessie

Thu, 09 Mar 2017 11:17:57 +0200

Beanstalkd это упрощенный сервер очередей, который изначально разрабатывался под нужны Causes на Facebook. Он предназначен для управления потоками задач различных компонентов стека развертывания приложения при помощи очередей рабочих процессов и сообщений, но серьезно отличается от RabbitMQ или Gearman.

Что такое SPF (Sender Policy Framework)?

Mon, 06 Mar 2017 11:17:28 +0200

Если вы пользуетесь услугами популярных почтовых провайдеров, таких как Gmail или Mail.ru, которые поддерживают требования безопасности на высоком уровне, то вам совершенно не о чем беспокоиться.

Горячие клавиши в bash

Thu, 02 Mar 2017 11:17:07 +0200

Давайте разберемся с комбинациями клавиш, которые могут существенно упростить жизнь администраторам, работающим в консоли!

Использование Percona XtraBackup при большом количестве таблиц в БД

Mon, 27 Feb 2017 11:16:04 +0200

При наличии очень большого количества таблиц в базе данных MySQL и включенной опции innodb_file_per_table (подробнее) могут возникнуть проблемы с созданием резервных копий. Давайте разберемся!

Настройка статических ip-адресов для LXC-контейнеров в CentOS 7

Thu, 23 Feb 2017 11:15:33 +0200

Работа с Linux Containers и установленным внутри них софтом значительно упрощается, если использовать статику в настройках сети.

Let’s Encrypt и Nginx: получаем максимум от ssllabs.com и securityheaders.io

Mon, 20 Feb 2017 11:14:56 +0200

Когда-то поддержка SSL-шифрования сервисами позиционировалась как «желательная» (nice-to-have feature), но не так давно она перешла в разряд «обязательных» (must-have). Пожалуй, переломный момент наступил когда Google начал использовать HTTPS в качестве фактора ранжирования в своей поисковой выдаче.

Установка и настройка LXC в CentOS 7

Thu, 16 Feb 2017 11:14:23 +0200

LXC (Linux Containers) — система виртуализации уровня ОС, позволяющая внутри основной операционной системы запускать изолированные дочерние ОС (с отдельными файловыми системами, сетевым стеком и памятью, но общим ядром).

Гибкий деплой приложений с Deployer

Mon, 13 Feb 2017 11:14:00 +0200

Несомненно, тема уже хорошо известна, ведь многие стараются автоматизировать процессы развертывания приложений, тестирования, настройки серверов и обновления программного кода.

Настройка Nginx + SSL от Let’s Encrypt (вариант 2, элегантный)

Thu, 09 Feb 2017 21:08:17 +0200

Ранее мы уже рассматривали процесс настройки Nginx c SSL-сертификатами от Let’s Encrypt в ОС Debian 8, однако стоит признать, что есть более элегантный и простой способ настройки и использования бесплатных сертификатов. Давайте разберемся!

Пересборка Nginx с поддержкой Brotli

Mon, 06 Feb 2017 21:07:37 +0200

Мы уже знаем, как включить HTTP2.0 в Nginx и умеем собирать Nginx с поддержкой ALPN (Application-Layer Protocol Negotiation) для браузера Chrome.

Шпаргалка по работе в командной строке

Thu, 02 Feb 2017 21:07:12 +0200

Командная строка дает продвинутым пользователям гораздо больше возможностей в любом дистрибутиве с GUI, позволяя быстрее и эффективнее выполнять необходимые действия.

Настройка сети для LXC-контейнеров в Debian 8, Centos 7 и Fedora 21

Mon, 30 Jan 2017 21:06:43 +0200

В Ubuntu сеть для LXC-контейнеров работает «из коробки» благодаря инит-скрипту lxc-net и набору необходимых правил для iptables, но в Debian Jessie, CentOS 7 и Fedora 21 по умолчанию сеть не настроена. Давайте разберемся!

Мониторинг php-fpm с помощью New Relic Plugin Agent

Thu, 26 Jan 2017 21:05:37 +0200

Ранее мы уже упоминали о системе мониторинга New Relic, однако рассматривали пример лишь с мониторингом базовых сервисов. Давайте разберемся, как собирать и выводить метрики от php-fpm!

Ansible: ввод sudo-пароля при выполнении playbook

Mon, 23 Jan 2017 21:04:33 +0200

Большинство действий в наборах инструкций системы управления конфигурациями Ansible следует выполнять с привилегиями суперпользователя. Давайте разберемся с вариантами ввода sudo-пароля при выполнении playbook’ов!

Munin: Мониторинг php-fpm

Thu, 19 Jan 2017 21:04:05 +0200

Давайте разберемся, как отслеживать нагрузку на web-сервер с несколькими сайтами, работающими на php-fpm и отображать собранные метрики на графиках в системе мониторинга Munin!

AbuseBSI: Offene NetBIOS-Namensdienste in AS24940

Mon, 16 Jan 2017 21:03:41 +0200

На днях получил письмо из Федерального управления по информационной безопасности (BSI) о уязвимости на ряде серверов. Речь шла о NetBIOS, который потенциально мог использоваться при DDoS-атаках на сторонние сервисы — давайте разберемся!

Failed to restart nginx.service: Unit nginx.service is masked

Thu, 12 Jan 2017 21:03:09 +0200

После установки web-сервера Nginx версии 1.11.5 в ОС Debian Jessie возникла проблема с работой init-скрипта. Давайте разберемся!

Provisioning [Linksys|Cisco] VoIP devices

Mon, 09 Jan 2017 21:02:28 +0200

Ручная настройка ip-телефонов Linksys (Cisco) несложная, но занимает очень много времени, особенно если таких телефонов в компании более сотни. Давайте разберемся с [Linksys|Cisco] Provisioning и облегчим себе жизнь!

Топ ваших Linux команд + полезности

Thu, 05 Jan 2017 18:08:09 +0200

Здесь собрано несколько непростых для запоминания «терминальных» команд, которые мне приходилось использовать более одного раза — просто чтобы не потерять. Давайте разберемся!

Подсветка синтаксиса в mcedit и bash

Mon, 02 Jan 2017 18:07:43 +0200

«Как включить подсветку синтаксиса в mcedit и bash?» — ответ на этот несложный вопрос настолько прост, что я сам постоянно забываю как это делается… Давайте разберемся!

Генерация надежных паролей в Linux: 4 простых способа

Thu, 29 Dec 2016 18:07:16 +0200

Для генерации надежных паролей существует множество различных утилит и сервисов, но как создать такой пароль прямо в консоли Linux? Давайте разберемся!

Обновление ядра в Ubuntu 16.04

Mon, 26 Dec 2016 18:06:47 +0200

Давайте разберемся, как обновить ядро в операционной системе Ubuntu 16.04 (x64) сразу на всех компьютерах в сети с использованием ansible!

AttributeError: 'module' object has no attribute 'PROTOCOL_SSLv3'

Thu, 22 Dec 2016 18:06:20 +0200

После обновления операционной системы с Debian Wheezy до Debian Jessie на серверах не запускается newrelic_plugin_agent. Давайте разберемся!

Добавление и удаление 'кирпичей' в GlusterFS

Mon, 19 Dec 2016 18:05:44 +0200

Ранее мы уже рассматривали процесс установки и настройки GlusterFS-server в ОС Debian, теперь возникла необходимость добавить новый ‘кирпич’ (brick) в существующее хранилище. Давайте разберемся!

cp: cannot stat 'ltmain.sh': No such file or directory

Thu, 15 Dec 2016 18:05:16 +0200

После обновления дистрибутива с Debian Wheezy до Debian Jessie при установке php-расширения twig столкнулся с проблемой cp: cannot stat 'ltmain.sh': No such file or directory. Давайте разберемся!

Защита Asterisk с помощью Fail2Ban, продолжение

Mon, 12 Dec 2016 18:04:41 +0200

Ранее мы уже рассматривали вопрос защиты Asterisk от подбора паролей средствами Fail2Ban, но при плановом просмотре лога /var/log/asterisk/messages была обнаружена новая угроза. Давайте разберемся!

Настройка связки Nginx + Fail2ban в Debian

Thu, 08 Dec 2016 18:04:13 +0200

Fail2ban — сервис, отслеживающий log–файлы запущенных программ, и на основании указанных условий блокирующий нарушителей по IP-адресу.

Munin: мониторинг PHP OPcache

Mon, 05 Dec 2016 18:03:36 +0200

Давайте разберемся, как отслеживать метрики php-расширения OPCache и отображать их на графиках в системе мониторинга Munin!

Как перезагрузиться при «Input / Output Error»

Thu, 01 Dec 2016 17:31:09 +0200

Что делать, если при попытке запустить команду в консоли Linux выводится Input/Output Error? Давайте разберемся!

Переименование виртуальных машин в VMware ESXi

Mon, 28 Nov 2016 17:30:34 +0200

Переименование виртуальной машины через vSphere Client изменяет только отображаемое имя, но никак не затрагивает файлы виртуальной машины в хранилище (datastore). Давайте разберемся, как переименовать виртуальную машину включительно с файлами!

Встречайте — New Relic Infrastructure

Thu, 24 Nov 2016 17:30:09 +0200

С помощью нового инструмента New Relic Infrastructure можно оперативно отслеживать изменения в данных и настройках серверов, будь-то физический сервер или сотни инстансов на Amazon EC2. Давайте разберемся!

Пересборка Nginx с OpenSSL 1.0.2+ для HTTP2.0

Mon, 21 Nov 2016 10:36:33 +0200

Мы уже рассматривали как включить HTTP2.0 в Nginx, но с определенного момента браузер Chrome перестал поддерживать NPN (Next Protocol Negotiation), и потребовал ALPN (Application-Layer Protocol Negotiation), который есть в более свежем OpenSSL. Давайте разберемся!

Обновление ключа подписи для Percona в Debian

Thu, 17 Nov 2016 10:35:59 +0200

Ранее мы рассматривали процесс установки Percona Server из официального репозитория в ОС Debian Wheezy через .deb-пакет, подписанный с использованием алгоритма SHA1.

Практические примеры использования cp

Mon, 14 Nov 2016 10:00:29 +0200

Команда cp — одна из базовых для Unix, и вы наверняка знаете как скопировать файл (или несколько файлов, или даже каталог) из одного места в другое.

Настройка связки Apache + Fail2ban в Debian

Thu, 10 Nov 2016 09:59:58 +0200

Fail2ban — сервис, отслеживающий log–файлы запущенных программ, и на основании указанных условий блокирующий нарушителей по IP-адресу. Давайте разберемся с защитой от атак на популярный web-сервер Apache!

Практические примеры использования nmap

Mon, 07 Nov 2016 09:59:25 +0200

Nmap (сокращение от «Network Mapper») — это набор инструментов для сканирования сети. Зачастую используется для проверки безопасности, определения сервисов запущенных на узле, для идентификации ОС и приложений, определения типа фаерволла и т. д. Давайте разберемся с несколькими практическими примерами использования nmap!

Как пофиксить уязвимость Dirty COW (CVE-2016-5195)

Thu, 03 Nov 2016 09:59:03 +0200

В ядре Linux 19-го октября была обнаружена опасная 0-day уязвимость, связанная с обработкой подсистемой памяти ядра механизма copy-on-write (COW). Давайте разберемся как пофиксить данную уязвимость, уже получившую имя Dirty COW!

После обновления не запускается Prometheus

Mon, 31 Oct 2016 09:58:35 +0200

Ранее мы уже рассматривали процесс установки принципиально нового инструмента для мониторинга и сбора метрик Prometheus, а сейчас, после обновления, возникла проблема с его запуском. Давайте разберемся!

Практические примеры использования uname

Thu, 27 Oct 2016 09:58:07 +0200

Порой необходимо быстро узнать подробности (версию или имя ядра, разрядность, имя хоста) используемого дистрибутива Linux. Давайте разберемся с практическим применением утилиты uname!

Установка и настройка GlusterFS-server 3.5.2 в ОС Debian

Mon, 24 Oct 2016 22:41:39 +0200

GlusterFS — простая в настройке и использовании распределенная файловая система, работающая поверх основной файловой системы. Давайте разберемся с установкой и GlusterFS-server в ОС Debian Wheezy!

Как убрать WARNING: REMOTE HOST IDENTIFICATION HAS CHANGED

Thu, 20 Oct 2016 22:40:42 +0200

Давайте разберемся с известнейшей проблемой, часто возникающей при подключении по протоколу ssh!

Включение swap-файла в Linux

Mon, 17 Oct 2016 22:40:06 +0200

Ни для кого не секрет, что создать и включить swap-файл в Debian-based дистрибутивах очень легко, настолько легко, что порой просто забываешь, как это делается. Давайте разберемся со swap-ингом в Linux!

Практические примеры использования date

Thu, 13 Oct 2016 22:39:35 +0200

С помощью команды date можно выводить текущее время в нескольких форматах, а также устанавливать время и дату в системе из консоли. Давайте разберемся!

Установка trac + git + nginx в ОС Debian Jessie

Mon, 10 Oct 2016 22:38:48 +0200

Ранее мы уже рассматривали процесс установки Trac в ОС Debian Jessie, тогда мы использовали связку с subversion и web-сервер Apache. Давайте разберемся с настройкой багтрекера Trac для git-репозитория!

Добавление учетных записей с помощью Ansible

Thu, 06 Oct 2016 22:38:08 +0200

Ранее мы уже рассматривали несколько вариантов использования системы управления конфигурациями Ansible, теперь давайте разберемся как добавить пользователя на удаленный хост!

Выводим время отклика сайта с помощью Prometheus и Grafana

Mon, 03 Oct 2016 22:37:35 +0200

Мы уже рассматривали как узнать время отклика сайта из командной строки Linux и с помощью написанного плагина для munin визуализировали полученные данные.

Как обновить просроченные ключи (KEYEXPIRED) в Debian/Ubuntu с помощью apt

Thu, 29 Sep 2016 22:36:45 +0200

Обновление программного обеспечения и управление пакетами в Debian-based операционных системах обычно не вызывает вопросов, однако вы можете столкнуться с сообщением KEYEXPIRED. Давайте разберемся, как обновить просроченные ключи!

Reboot in Ansible 2.1.1.0

Mon, 26 Sep 2016 22:35:57 +0200

После обновления Ansible до версии 2.1.1.0 перестал работать довольно простой набор инструкций для удаленной перезагрузки хостов, который успешно работал в Ansible версии 1.9. Давайте разберемся!

Практические примеры использования lsof

Thu, 22 Sep 2016 22:35:23 +0200

Утилита командной строки lsof (List Open Files) используется для получения информации об открытых различными процессами файлах (а с точки зрения unix все является файлами — каталоги, устройства, сокеты и т. д.). Давайте разберемся с практическим применением lsof!

Запуск x11vnc в Kubuntu 16.04

Thu, 15 Sep 2016 20:55:03 +0200

Появилась необходимость запуска x11vnc в ОС Kubuntu 16.04 еще до момента логина пользователя. Давайте разберемся!

Практические примеры использования history

Mon, 12 Sep 2016 20:54:37 +0200

Использование истории введенных команд существенно может ускорить вашу работу в консоли Linux. Давайте разберемся с использованием history на конкретных примерах!

Практические примеры использования find

Thu, 08 Sep 2016 20:54:11 +0200

Утилита find — мощный инструмент для поиска файлов в UNIX-подобных ОС. Давайте рассмотрим конкретные примеры использования find, которые будут полезны админам с любым опытом!

Получаем информацию о железе с помощью dmidecode

Mon, 05 Sep 2016 20:53:43 +0200

Как получить информацию о текущем серверном железе используя спецификации DMI (Desktop Management Interface)? Давайте разберемся с практическими примерами использования команды dmidecode!

Украшаем консоль в Linux

Thu, 01 Sep 2016 20:53:13 +0200

На просторах интернета можно найти множество статей о настройке и «раскраске» консоли в Linux. Предлагаю измененный вариант ssh-приветствия и настройки .bashrc и .profile для комфортной работы в консоли!

Получаем информацию о железе с помощью lshw

Mon, 29 Aug 2016 20:52:40 +0200

Как получить исчерпывающую информацию о серверном железе не имея физического доступа к серверу? Давайте разберемся с использованием утилиты lshw!

Munin: мониторинг Percona Server

Thu, 25 Aug 2016 20:52:07 +0200

Давайте разберемся, как отслеживать важные параметры Percona Server и отображать их на графиках в системе мониторинга Munin!

Тестирование кластера на базе Corosync и Pacemaker

Mon, 22 Aug 2016 20:51:35 +0200

Теперь, когда мы успешно установили и настроили Active/Passive Cluster на базе Corosync и Pacemaker давайте протестируем его работоспособность!

Nginx — ограничение доступа

Thu, 18 Aug 2016 20:50:52 +0200

Ни в коем случае не стоит пренебрегать дополнительной настройкой web-сервера, направленной на защиту от злоумышленников. Давайте разберемся с директивами, призванными обеспечить безопасность проекта!

Call «HostStorageSystem.ComputeDiskPartitionInfo» for object «storageSystem» on ESXi failed (2088707)

Mon, 15 Aug 2016 20:50:22 +0200

При попытке добавления еще одного диска к хосту под управлением ESXi получаем ошибку Call "HostStorageSystem.ComputeDiskPartitionInfo" for object "storageSystem" on ESXi failed (2088707). Давайте разберемся!

Конфигурация Nginx для чайников

Thu, 11 Aug 2016 15:09:52 +0200

Основная причина некорректной работы web-сервера Nginx (и любых других систем) — бездумный копипаст конфигурационных файлов. Тем более, что подводных камней в настройке Nginx довольно много. Давайте разберемся с некоторыми из них!

Monit — получаем список запущенных процессов

Mon, 08 Aug 2016 15:09:16 +0200

Давайте разберемся как использовать Monit для получения списка запущенных процессов в системе при аномальном росте нагрузки сервера!

Как изменить innodb_log_file_size?

Thu, 04 Aug 2016 15:08:43 +0200

Если остановить MySQL-сервер, изменить значение параметра innodb_log_file_size в конфигурациионном файле /etc/mysql/my.cnf и запустить сервер, то увидим ошибку InnoDB: Error: log file ./ib_logfile0 is of different size. Давайте разберемся!

Установка и настройка Pacemaker & Corosync в Debian Jessie

Mon, 01 Aug 2016 15:08:13 +0200

Ранее мы подробно рассматривали процесс установки и настройки Active/Passive Cluster, в примерах использовалась операционная система Debian Wheezy.

Утилиты для анализа серверной нагрузки

Thu, 28 Jul 2016 15:07:15 +0200

Своевременный анализ нагрузки на сервер позволяет выявить и устранить причины медленной работоспособности, а также спланировать покупку и ввод в эксплуатацию дополнительных серверных мощностей.

Что делать, когда результат выполнения df и du отличается?

Mon, 25 Jul 2016 15:05:15 +0200

Известны случаи, когда вывод команды df значительно отличается от вывода команды du. Чаще всего такое случается с файлами логов — давайте разберемся с этим вопросом на конкретном примере!

Создание индекса в таблице MySQL без блокировки

Thu, 21 Jul 2016 15:04:34 +0200

Порой возникает необходимость добавить индексы в таблицу MySQL в процессе ее эксплуатации. Добавление индексов с помощью ALTER TABLE будет блокировать таблицу, и при серьезных объемах данных время блокировки может оказаться довольно большим. Давайте разберемся, как создать индекс в таблице MySQL без блокировки!

DDoS-атаки с использованием Portmapper вашего сервера: что делать?

Mon, 18 Jul 2016 15:03:59 +0200

Получил письмо с темой Exploitable portmapper service used for an attack: <IP-address моего сервера>. Есстественно, хостер недоволен таким положением вещей и требует устранить проблему. Давайте разберемся!

Missing dependency Cache::Cache at /etc/munin/plugins/mysql_

Thu, 14 Jul 2016 15:03:23 +0200

В свежеустановленной ОС Debian Jessie не работают плагины системы мониторинга Munin, отображающие метрики MySQL-сервера по умолчанию. Давайте разберемся!

Поиск по части слова в Sphinxsearch

Mon, 11 Jul 2016 15:02:11 +0200

Поисковый движок Sphinxsearch поддерживает так называемый wildcard-поиск — поиск по части слова, который практически незаменим в каталогах и интернет-магазинах.

Включаем плагин nginx status в munin

Thu, 07 Jul 2016 12:44:52 +0200

В данной статье рассмотрим включение и настройку плагина для мониторинга веб-сервера Nginx, доступного «из коробки» в Munin. Давайте разберемся!

Real Time индексы в Sphinxsearch

Mon, 04 Jul 2016 12:44:26 +0200

Sphinxsearch — система полнотекстового поиска с множеством отличительных особенностей. Одна из таких особенностей — возможность обновлять поисковые индексы в режиме Real Time.

Настройка IPMI на гипервизоре под управлением ESXi

Thu, 30 Jun 2016 12:44:02 +0200

Ранее я уже писал о настройке IPMI из командной строки сервера под управлением Debian Wheezy, но как быть с ОС ESXi, в которой отсутствует даже менеджер пакетов? Давайте разберемся!

Настройка IPMI на сервере

Thu, 23 Jun 2016 12:43:34 +0200

IPMI — интеллектуальный интерфейс управления платформой, используется для мониторинга и управления функциями аппаратного и микропрограммного обеспечения на серверных платформах.

4 команды для диагностики серверных проблем

Thu, 16 Jun 2016 12:43:08 +0200

Для быстрого анализа производительности сервера и диагностики возникающих проблем можно использовать всего несколько удобных команд. Давайте разберемся!

Failover заданий в Gearman

Mon, 13 Jun 2016 12:42:42 +0200

Менеджер очередей Gearman по умолчанию хранит список заданий в оперативной памяти — при перезагрузке или сбое питания сервера они будут утеряны. Давайте разберемся как избежать этого!

Шпаргалка по использованию команды mail в Linux

Thu, 09 Jun 2016 12:42:17 +0200

Возможность отправлять сообщения электронной почты из командной строки сервера часто используется для тестирования, отправки писем скриптами (например, мониторинга) или при недоступности графической оболочки. Давайте разберемся с использованием и параметрами команды mail!

Аудит системных событий в Linux

Mon, 06 Jun 2016 12:41:44 +0200

Чтобы ОС отвечала требованиям безопасности и стабильности нужно неотрывно следить за ее состоянием — этого можно достичь с помощью систем мониторинга и анализа логов.

Автоматическая установка newrelic-sysmond

Thu, 26 May 2016 12:41:22 +0200

Ранее мы рассматривали процесс настройки базового мониторинга серверов с помощью New Relic, давайте разберемся как можно автоматизировать этот процесс с помощью системы управления конфигурациями Ansible!

Мониторинг серверов с помощью New Relic

Mon, 23 May 2016 12:40:59 +0200

New Relic — пример еще одной отличной системы мониторинга, с которой обязательно стоит познакомиться. Давайте разберемся как настроить базовый мониторинг серверов с помощью New Relic!

Asterisk: пишем CDR в базу данных MySQL

Thu, 19 May 2016 23:19:22 +0200

Детализированная информация о всех телефонных вызовах содержится в CDR (Call Detail Records). В Asterisk есть возможность сохранять CDR-записи в базе данных MySQL, вместо текстовых CSV файлов, использующихся по умолчанию. Давайте разберемся, как писать CDR в базу MySQL!

Warning: purging the environment. Suggested action: use keep_environment

Mon, 16 May 2016 23:18:50 +0200

После обновления Exim до версии 4.84.2-1 в логах почтового сервера появились следующие сообщения: Warning: purging the environment. Suggested action: use keep_environment. Давайте разберемся!

Установка Trac в Debian Jessie

Thu, 12 May 2016 23:18:09 +0200

Trac — это свободная система управления проектами в разработке ПО, позволяющая отслеживать ошибки и просматривать репозитории систем контроля версий (например subversion, git, mercurial). Давайте разберемся, как установить trac в ОС Debian Jessie!

Ubuntu: удаление неиспользуемых ядер

Mon, 09 May 2016 23:17:42 +0200

Вместе с обновлениями в Ubuntu устанавливаются новые версии ядра, при этом старые не удаляются и занимают место на жестком диске. Давайте разберемся как быстро и без вреда системе удалить старые ядра!

Перенос svn-репозитория на другой сервер

Thu, 05 May 2016 23:17:13 +0200

Ранее мы уже рассматривали процесс переноса git-репозитория на другой сервер, но как быть с svn-репозиторием? Давайте разберемся!

Как включить HTTP2.0 в Nginx?

Thu, 28 Apr 2016 21:51:50 +0200

Протокол HTTP2.0 обладает массой преимуществ по сравнению с HTTP1.1 и даже SPDY, главное из которых — скорость. Давайте разберемся как включить HTTP2.0 в Nginx!

Настройка Nginx + SSL от Let’s Encrypt на Debian 8

Mon, 25 Apr 2016 21:51:16 +0200

Let’s Encrypt – это Certificate Authority (CA) провайдер, который раздает TLS/SSL сертификаты бесплатно. Давайте разберемся, как настроить Nginx на использование ssl-сертификата от Let’s Encrypt!

Postfixadmin — пересылка писем с существующего ящика

Thu, 21 Apr 2016 21:50:21 +0200

Для управления почтовыми ящиками часто используется postfixadmin — вещь однозначно удобная, но не без недостатков: например, нельзя настроить пересылку писем с существующего почтового ящика на другой. Давайте разберемся с этим досадным ограничением!

Перенос git-репозитория на другой сервер

Mon, 18 Apr 2016 21:49:52 +0200

Порой возникает необходимость переноса git-репозитория на другой сервер, например, в случае замены/апгрейда серверов. Давайте разберемся как это сделать!

Как удалить записи из таблицы mysql.slow_log?

Thu, 14 Apr 2016 21:49:25 +0200

В нашем примере используется операционная система Debian Wheezy, версия MySQL-сервера 5.5. Давайте разберемся, как удалить записи из таблицы mysql.slow_log!

Установка nginx и php7.0-php в Debian Jessie

Mon, 11 Apr 2016 21:48:52 +0200

Благодаря значительной скорости PHP 7 (вдвое быстрее предыдущих версий) и меньшему потреблению памяти рано или поздно необходимо будет переходить на новую версию.

Балансировка нагрузки Nginx

Thu, 07 Apr 2016 21:48:08 +0200

Механизм распределения входящего трафика на несколько серверов называется балансировкой нагрузки. Давайте разберемся, как с помощью Nginx в роли фронтенда настроить балансировку нагрузки между несколькими web-серверами Apache, выполняющих функции бекендов!

Prometheus: еще больше метрик от MySQL-сервера

Mon, 04 Apr 2016 21:47:44 +0200

В данной статье узнаем, как максимально быстро начать следить за производительностью MySQL-серверов с помощью системы мониторинга Prometheus и дашбордов Grafana. Давайте разберемся!

Nginx как фронтенд для Apache

Thu, 31 Mar 2016 21:47:13 +0200

Apache и Nginx — наиболее распространенные web-серверы с открытым исходным кодом. Они могут прекрасно справляться с различными рабочими нагрузками, но также имеют и свои недостатки (например, Apache требует много памяти сервера, а Nginx зависит от модулей для динамического контента). Давайте разберемся, как взять лучшее от каждого из этих web-серверов!

kipmi0: что за зверь?

Mon, 28 Mar 2016 21:46:39 +0200

С недавних пор на сервере с ОС Debian Wheezy процесс kipmi0 загружает на 100% одно ядро процессора. Давайте разберемся!

Анализ медленных запросов с помощью pt-query-digest

Thu, 24 Mar 2016 09:52:33 +0200

Найти и исправить медленные запросы к MySQL-серверу можно с помощью pt-query-digest — утилиты из пакета Percona-toolkit. Давайте разберемся как это сделать на примере ОС Debian Wheezy и Percona Server 5.5!

Мониторинг Nginx в реальном времени

Mon, 21 Mar 2016 09:52:04 +0200

Для сбора и отображения метрик веб-сервера Nginx часто используются Munin, Zabbix, Nagios и другие системы мониторинга.

Prometheus: мониторинг IOPS и Disk Latency

Thu, 17 Mar 2016 09:51:32 +0200

Наиболее важные параметры производительности дисков — IOPS (Input/Output operations Per Second, операций ввода-вывода за секунду) и Latency (время выполнения операции, задержка перед ответом). Давайте разберемся с мониторингом этих параметров на конкретном примере!

Удобный скрипт для создания резервных копий

Mon, 14 Mar 2016 09:50:59 +0200

Скрипт взят у Alex Efros и несколько видоизменен под свои нужды. Ознакомиться с документацией можно здесь.

Prometheus: пример использования Alertmanager

Thu, 10 Mar 2016 09:50:20 +0200

Наиболее простой пример использования alertmanager в системе мониторинга Prometheus — получение предупреждений о доступном свободном месте на жестких дисках.

Prometheus: базовая авторизация

Mon, 07 Mar 2016 21:44:24 +0200

По заверениям разработчиков системы мониторинга Prometheus, они специально не уделяли внимания поддержке авторизации, сконцентрировавшись на более важных и «революционных» вещах.

Prometheus: разбираемся с CPU Usage

Thu, 03 Mar 2016 21:43:48 +0200

Высокая нагрузка на процессор часто является причиной проблем в работе сервера и, как следствие, всей системы в целом.

Grafana - действительно удобный дашборд

Mon, 29 Feb 2016 21:43:12 +0200

В системе мониторинга Prometheus для отображения метрик ранее мы настраивали дашборды с помощью инструмента PromDash.

Знакомство с Prometheus. Часть 3: установка и настройка PromDash

Thu, 25 Feb 2016 21:42:33 +0200

В первой части нашего знакомства с Prometheus мы успешно установили и настроили систему мониторинга.

Знакомство с Prometheus. Часть 2: сбор метрик от MySQL-сервера

Mon, 22 Feb 2016 21:36:05 +0200

В предыдущей части цикла знакомства с Prometheus мы успешно установили и выполнили базовую настройку системы мониторинга, теперь давайте разберемся со сбором и экспортом метрик от MySQL-сервера с помощью компонента MySQL Server Exporter.

Оптимизация Munin в Debian

Thu, 18 Feb 2016 21:30:45 +0200

Чем больше хостов мониторится с помощью Munin, тем медленнее он работает и требует все больше и больше ресурсов.

Знакомство с Prometheus. Часть 1: установка и настройка

Mon, 15 Feb 2016 21:30:21 +0200

Принципиально новый инструмент для мониторинга и сбора метрик Prometheus от разработчиков SoundCloud порой называют системой мониторинга нового поколения. Давайте разберемся с его особенностями и компонентами!

Systemd и journalctl: читаем логи

Thu, 11 Feb 2016 21:29:49 +0200

Менеджер системы и служб systemd имеет свою систему логирования, которая называется журнал (journal).

Как заставить Munin собирать данные каждую минуту

Mon, 08 Feb 2016 21:28:32 +0200

По умолчанию Munin собирает данные (и строит по ним графики) каждые 5 минут. Такие графики получаются мягко говоря неточными.

nf_conntrack: table full, dropping packet

Thu, 04 Feb 2016 21:27:32 +0200

В профилактических целях проверяем loganalyzer и видим там массу сообщений вида nf_conntrack: table full, dropping packet. Давайте разберемся!

Использование утилиты pt-online-schema-change для OPTIMIZE TABLE

Mon, 01 Feb 2016 17:28:12 +0200

Ранее я уже писал о дефрагментации таблиц InnoDB и упоминал, что при выполнении запрос OPTIMIZE TABLE tbl_name будет блокировать таблицу. Как избежать блокирования таблицы и выполнить запрос — давайте разберемся!

Аудит systemd: почему не запускаются юниты?

Thu, 28 Jan 2016 17:27:39 +0200

Systemd — альтернативный менеджер служб для Linux, совместимый со скриптами инициализации LSB и SysV.

Увеличение размера DRBD ресурса

Mon, 25 Jan 2016 17:27:09 +0200

Мы уже знаем, как расширить логический том в ОС Linux, но в случае с drbd-ресурсом потребуются дополнительные действия.

Улучшаем производительность PhpMyAdmin

Thu, 21 Jan 2016 17:26:42 +0200

Залогиниться и увидеть список баз данных в phpMyAdmin можно довольно быстро, однако возникает дискомфорт при просмотре списка таблиц в выбранной базе данных — страница может загружаться до 30 секунд. Давайте разберемся!

Обслуживание серверов в кластере на базе Pacemaker

Mon, 18 Jan 2016 17:26:17 +0200

Порой возникает необходимость внести изменения в конфигурационные файлы или обновить пакеты на отдельных серверах-нодах, входящих в состав кластера на базе Pacemaker и Corosync.

Установка Percona Toolkit в Debian Wheezy

Thu, 14 Jan 2016 17:25:50 +0200

Percona-toolkit — это набор специальных утилит для командной строки, разработанных сотрудниками Percona и использующихся для оптимизации производительности баз данных MySQL. Давайте разберемся с установкой percona-toolkit в ОС Debian Wheezy!

Шпаргалка по работе с MTA Exim

Mon, 11 Jan 2016 17:25:22 +0200

MTA (Mail Transfer Agent) Exim — довольно распространенный агент передачи сообщений (почтовый сервер), который используется в Unix-подобных операционных системах.

Установка Percona Server 5.6 в Debian Wheezy

Thu, 07 Jan 2016 17:24:38 +0200

Скачать исходники, tar-архив, .rpm или .deb-пакеты Percona Server можно с официального сайта, но для тех, кто любит устанавливать ПО через менеджер пакетов, рассмотрим вариант установки Percona Server версии 5.6 из официального репозитория в ОС Debian Wheezy. Давайте разберемся!

Active/Passive Cluster в Linux. Часть 3: настройка ресурсов кластера

Mon, 04 Jan 2016 17:24:06 +0200

В первой статье нашего цикла мы подготовили DRBD-ресурсы на нодах кластера к дальнейшему использованию, во второй — установили и настроили менеджер кластерных ресурсов pacemaker и corosync.

Установка Nginx версии 1.6 в Debian Wheezy

Thu, 31 Dec 2015 17:23:23 +0200

В репозитории Debian Wheezy по умолчанию веб-сервер Nginx представлен версией 1.2, которая является устаревшей. Давайте разберемся как установить Nginx версии 1.6!

Active/Passive Cluster в Linux. Часть 2: установка и настройка Pacemaker и Corosync

Mon, 28 Dec 2015 15:58:17 +0200

В предыдущей части мы успешно настроили DRBD-ресурсы на двух нодах будущего кластера, теперь давайте разберемся с установкой и настройкой Pacemaker и Corosync.

Установка и настройка Monit в Debian Jessie

Thu, 24 Dec 2015 15:57:24 +0200

Установка и настройка Monit в ОС Debian Jessie мало отличается от установки Monit в седьмой версии Debian (Wheezy), однако есть пару моментов, на которые стоит обратить внимание. Давайте разберемся!

Active/Passive Cluster в Linux. Часть 1: установка и настройка DRBD

Mon, 21 Dec 2015 15:56:49 +0200

Начинаем цикл статей о пошаговой настройке отказоустойчивого кластера в ОС Debian Wheezy с использованием Pacemaker и Corosync.

Утилита tune2fs в Linux

Thu, 17 Dec 2015 15:55:58 +0200

В файловой системе Linux присутствует зарезервированное пространство для суперпользователя (root). По умолчанию, это 5% от общего объема файловой системы. Изменить этот параметр поможет утилита tune2fs — давайте разберемся как это сделать!

Увеличение размера логических томов в Linux

Mon, 14 Dec 2015 15:55:28 +0200

Возникла необходимость в увеличении размера логического тома, на котором находятся индексы полнотекстового поискового движка sphinxsearch.

Отказоустойчивый IP-адрес с использованием ucarp

Thu, 10 Dec 2015 15:54:17 +0200

Одно из самых простых решений для обеспечения отказоустойчивости ip-адреса в debian — утилита ucarp (user-space реализация протокола отказоустойчивой маршрутизации CARP). Давайте разберемся с настройкой отказоустойчивого ip-адреса в ОС Debian Wheezy!

Debian Jessie и gearman-job-server: баг или фича?

Mon, 07 Dec 2015 15:53:43 +0200

После обновления дистрибутива на одном из серверов с Debian Wheezy до Debian Jessie была обнаружена проблема с работоспособностью gearman-job-server — он игнорировал параметры, указанные в конфигурационном файле /etc/default/gearman-job-server. Давайте разберемся!

SSH авторизация по ключу

Thu, 03 Dec 2015 15:53:03 +0200

Протокол SSH позволяет авторизоваться на удаленном сервере без необходимости ввода пароля, используя криптосистему с открытым ключом (асимметричное шифрование) и аутентификации вызов-ответ. Давайте разберемся с авторизацией по SSH-ключу!

Объединение сетевых карт в Linux

Mon, 30 Nov 2015 15:52:03 +0200

Объединение сетевых карт в Linux (bonding) используется для агрегирования нескольких физических сетевых интерфейсов в один логический.

Запуск rsync в режиме демона

Thu, 26 Nov 2015 15:51:30 +0200

Утилита rsync используется для синхронизации файлов и позволяет значительно сократить использование траффика за счет инкрементального копирования изменений.

Сбор и просмотр логов с помощью LogAnalyzer

Mon, 23 Nov 2015 20:37:15 +0200

Порой возникает необходимость создать сервер для централизованного сбора, анализа и просмотра логов.

Алиасы в SSH

Thu, 19 Nov 2015 20:36:46 +0200

Использование алиасов в SSH позволяет значительно ускорить процесс подключения к серверу — рано или поздно с этим сталкивается каждый системный администратор.

Знакомство с Ansible. Часть 5: роли, условия и циклы

Mon, 16 Nov 2015 20:36:22 +0200

В первой части знакомства с Ansible мы разобрались с установкой и базовой настройкой системы управления конфигурациями и написали наш первый playbook, а во второй части разобрали результат его выполнения. Третью часть цикла посвятили использованию переменных в Ansible, а в четвертой разбирались с наиболее популярными модулями и их параметрами.

Настройка логов DNS-сервера bind9

Thu, 12 Nov 2015 20:35:41 +0200

По умолчанию, демон named пишет свои логи в файл /var/log/syslog. Таких записей может быть очень много, из-за чего отыскать что-нибудь важное в системном логе просто нереально. Давайте разберемся, как заставить named писать свои логи отдельно!

Знакомство с Ansible. Часть 4: модули

Mon, 09 Nov 2015 20:35:14 +0200

Мы уже справились установкой системы управления конфигурациями Ansible, написали первый набор инструкций (playbook) и разобрали результат его выполнения, а также ознакомились с использованием переменных в Ansible.

Как переименовать пользователя в Ubuntu

Thu, 05 Nov 2015 18:55:38 +0200

Переименование пользователя в ОС Ubuntu довольно простая задача — особенно, если для этого использовать стандартные системные утилиты usermod и groupmod. Давайте разберемся как это делается!

Знакомство с Ansible. Часть 3: переменные

Mon, 02 Nov 2015 18:55:14 +0200

В первой части знакомства с Ansible мы успешно установили систему управления конфигурациями и написали первый playbook, во второй части разобрали результат выполнения нашего набора инструкций и научились повторно использовать playbook’и.

Восстановление DRBD после split brain

Thu, 29 Oct 2015 18:54:45 +0200

DRBD — распределённое реплицируемое блочное устройство, которое используется для построения отказоустойчивых кластеров под управлением ОС Linux. DRBD отражает все операции с блочным устройством по сети, поэтому принято считать что это сетевой RAID-1.

Знакомство с Ansible. Часть 2: разбор вывода playbook

Mon, 26 Oct 2015 18:53:39 +0200

В предыдущей статье мы успешно установили и проверили работоспособность системы управления конфигурациями Ansible, а так же написали и выполнили первый набор инструкций (playbook). Давайте разберемся с результатами его выполнения!

Восстановление программных RAID-массивов

Thu, 22 Oct 2015 18:53:06 +0200

Работа с программными RAID-массивами в GNU/Linux осуществляется с помощью утилиты mdadm (ранее mdctl). Весьма подробно работа с RAID-массивами описана здесь, ну а мы давайте разберемся с восстановлением работоспособности программных рейдов.

Знакомство с Ansible. Часть 1: Введение

Mon, 19 Oct 2015 17:32:19 +0200

Ansible – одна из систем управления конфигурациями (автоматизации настройки и развертывания серверов).

Решение проблем после обновления SVN до 1.8.14

Thu, 15 Oct 2015 17:31:45 +0200

В одной из предыдущих статей рассматривалась установка SVN (subversion) 1.8 в Debian Wheezy. И если с установкой вопросов не возникло, то при обновлении на более свежую версию SVN (пакет от WANdisco) я столкнулся со следующей ошибкой:

Установка subversion 1.8 в Debian Wheezy

Mon, 12 Oct 2015 17:31:08 +0200

В репозитории Debian Wheezy доступен пакет subversion версии 1.6 (просмотреть детали). В этой статье давайте разберемся с установкой subversion более свежей версии — 1.8 от WANdisco.

Автоматическое обновление установленных пакетов в Ubuntu

Thu, 08 Oct 2015 17:30:29 +0200

Для автоматического обновления установленных пакетов в Ubuntu проще всего использовать пакет unattended-upgrades, который можно настроить на установку только обновлений безопасности или всех пакетов в системе. Давайте разберемся как это сделать!

3ware 9650SE-4LPML — пересборка RAID-массива

Mon, 05 Oct 2015 17:29:56 +0200

На днях с одного из серверов пришло оповещение о развалившемся RAID-массиве. Давайте разберемся как исправить данную проблему и пересобрать RAID-массив на конкретном примере контроллера 3ware 9650SE-4LPML.

Error line 5 too long in state file /var/lib/logrotate/status

Thu, 01 Oct 2015 16:30:22 +0200

Осенним утром с одного из серверов начали приходить письма следующего содержания:

error: line 5 too long in state file /var/lib/logrotate/status
error: could not read state file, will not attempt to write into it

Защита Asterisk 11 от подбора паролей с помощью Fail2Ban

Mon, 28 Sep 2015 16:27:46 +0200

Еще в 10-й версии Asterisk разработчики внедрили лог security и сделали возможной реализацию защиты Asterisk от подбора паролей с помощью Fail2Ban. Давайте разберемся, что необходимо для реализации такой защиты!

Получение состояния устройства в Asterisk 11 с помощью DEVICE_STATE

Thu, 24 Sep 2015 16:26:55 +0200

Если используется Call Waiting (режим ожидания для второго входящего звонка при занятой линии) в Asterisk, то при звонке уже разговаривающему абоненту мы услышим в трубке обычные гудки дозвона.

Динамические очереди вызовов в Asterisk 11

Mon, 21 Sep 2015 16:26:09 +0200

Очереди вызовов в Asterisk определяются в конфигурационном файле queues.conf или с помощью механизма RealTime Queue (динамические очереди).

Установка и настройка jail окружения в Debian Wheezy

Thu, 17 Sep 2015 16:25:26 +0200

В целях безопасности иногда требуется запускать приложения в отдельном окружении либо ограничивать доступ пользователям.

Пишем свой плагин для Munin: http response median

Mon, 14 Sep 2015 14:55:03 +0200

Мы уже знаем как узнать время отклика сайта из командной строки Linux, но для наглядности нужно эти данные визуализировать.

Как узнать время отклика сайта из командной строки Linux

Thu, 10 Sep 2015 14:54:22 +0200

Узнать время отклика сайта из командной строки Linux проще всего с помощью curl — утилиты с открытым исходным кодом, которая позволяет взаимодействовать с серверами по множеству протоколов.

Утилита s4cmd для работы с Amazon Simple Storage Service

Mon, 07 Sep 2015 14:53:34 +0200

Ранее я уже писал об утилите s3cmd, позволяющей удобно работать с Amazon Simple Storage Service (S3). В данной статье давайте разберемся с более быстрым аналогом — утилитой s4cmd.

Redis Cluster в Debian Wheezy: миграция и решардинг

Thu, 03 Sep 2015 14:52:46 +0200

В предыдущей статье мы успешно создали Redis Cluster из 3-х мастеров и 3-х слейвов, теперь давайте разберемся с миграцией и решардингом в кластере.

Установка и настройка Redis Cluster в Debian Wheezy

Mon, 31 Aug 2015 14:51:55 +0200

Redis (REmote DIctionary Server) — сетевое журналируемое хранилище данных типа «ключ — значение» с открытым исходным кодом. Начиная с версии 3.0 реализована поддержка Redis Cluster и, согласно заверениям разработчиков, значительно увеличено быстродействие.

Базовая настройка Asterisk 11 в Debian Wheezy: очереди звонков

Thu, 27 Aug 2015 11:36:06 +0200

Цикл статей о базовой настройке Asterisk 11 в Debian Wheezy завершает статья об очередях звонков. Создание очередей звонков целесообразно, например, при наличии нескольких менеджеров по продажам — входящие звонки можно распределять по отделу продаж используя разные алгоритмы.

Утилита s3cmd Для Amazon Simple Storage Service

Mon, 24 Aug 2015 11:35:25 +0200

s3cmd — бесплатный инструмент командной строки для работы с данными, расположенными в хранилище Amazon S3. Утилита написана на языке программирования python, и благодаря этому может использоваться в операционных системах и Windows, и Linux.

Базовая настройка Asterisk 11 в Debian Wheezy: входящие и исходящие звонки

Thu, 20 Aug 2015 11:34:48 +0200

Продолжаем настраивать сервер телефонии на базе Asterisk 11 в Debian Wheezy — у нас уже работают звонки внутри офиса и голосовая почта, пора заняться настройкой входящих и исходящих звонков.

Дефрагментация таблиц InnoDB

Mon, 17 Aug 2015 11:33:54 +0200

Как я уже упоминал в данной статье, при использовании движка базы данных InnoDB для освобождения места на жестком диске недостаточно просто удалить записи из таблиц — нужно обязательно выполнить дефрагментацию таблиц InnoDB.

Базовая настройка Asterisk 11 в Debian Wheezy: голосовая почта

Thu, 13 Aug 2015 11:32:18 +0200

В предыдущей статье мы успешно настроили Asterisk для обслуживания внутренних звонков, теперь давайте разберемся с настройкой голосовой почты в Asterisk 11.

Пишем свой плагин для Munin: nginx request time

Mon, 10 Aug 2015 10:05:18 +0200

Давайте разберемся с созданием плагина для munin, который в красивой и понятной форме даст нам представление о времени обработки запросов nginx’ом.

Базовая настройка Asterisk 11 в Debian Wheezy: обслуживание внутренних звонков

Thu, 06 Aug 2015 10:04:39 +0200

Мы успешно установили Asterisk PBX в операционной системе Debian Wheezy и теперь приступаем к его настройке. Первое, что мы сделаем — настроим Asterisk на обслуживание внутренних звонков — давайте разберемся!

Установка Asterisk 11 в Debian Wheezy, часть 2

Mon, 03 Aug 2015 10:03:50 +0200

Необходимые подготовительные работы выполнены, самое время скомпилировать и установить Asterisk 11. Давайте разберемся с этим!

Установка Asterisk 11 в Debian Wheezy, часть 1

Fri, 31 Jul 2015 10:03:40 +0200

Пожалуй, самый популярный (и, на мой взгляд, самый правильный) вариант установки Asterisk — это загрузка исходников и их самостоятельная сборка. Вариант самостоятельной компиляции Asterisk’а позволяет выбрать, какие модули включить в сборку, а какие нет — нужно понимать, что должно получиться в результате. Также советую устанавливать LTS-релиз (Long Term Support) — как раз таким является Asterisk 11.

Шпаргалка по утилите mysqldump

Mon, 27 Jul 2015 10:03:02 +0200

С помощью утилиты mysqldump можно получать дамп содержимого одной или нескольких баз данных — по сути делать резервную копию (бекап) баз данных. Развернуть базу данных из полученного дампа (sql-файла) можно также с помощью данной утилиты.

Тюнинг MySQL-сервера: формат файлов Barracuda

Mon, 27 Jul 2015 09:59:56 +0200

Ранее я уже писал о сжатии таблиц InnoDB, и одним из необходимых условий для сжатия таблиц было наличие формата файлов Barracuda (innodb_file_format=Barracuda).

Развертывание бекапов БД созданных с помощью Percona XtraBackup

Fri, 24 Jul 2015 22:25:26 +0200

При резервном копировании важно не только уметь создавать резервные копии (об этом я писал ранее, и даже выложил готовый скрипт для создания резервных копий), но и знать как быстро восстанавливаться из бекапов.

Скрипт для создания бекапов БД с помощью Percona XtraBackup

Wed, 15 Jul 2015 22:24:31 +0200

О создании резервных копий баз данных (бекапов) с помощью утилиты Percona XtraBackup я уже писал ранее, теперь выкладываю пример готового скрипта, которым пользуюсь и в настоящее время.

Резервное копирование баз данных с помощью Percona XtraBackup

Tue, 14 Jul 2015 22:23:15 +0200

С помощью утилиты Percona XtraBackup можно делать резервные копии баз данных в Highload-проектах, которые требуют минимального времени восстановления и безостановочной работы приложения.

Тюнинг MySQL-сервера: включение опции innodb_file_per_table

Mon, 13 Jul 2015 22:22:30 +0200

По умолчанию, при использовании движка базы данных InnoDB, все таблицы и индексы хранятся в системном табличном пространстве (по сути в одном файле /var/lib/mysql/ibdata). Когда данных накапливается много, файл значительно разрастается, и с этим могут возникать различные проблемы и неудобства.

Тюнинг MySQL-сервера: сжатие таблиц InnoDB

Wed, 08 Jul 2015 22:21:41 +0200

В больших проектах со временем размер баз данных разрастается до множества гигабайт (терабайт), поэтому всегда остается открытым вопрос как с этим бороться.

Тюнинг Munin: выводим только нужную информацию

Tue, 07 Jul 2015 21:49:50 +0200

Мониторинг — важнейшее звено стабильной функциональности системы любой сложности и предназначения. Очень важно наблюдать за ключевыми процессами организации, вникать в их суть, вести учет данных, следить за важными цифрами, строить тренды и графики.