Логирование в Docker и Sentry

Комментарии (14)

Arunas

2020-03-15 17:13

спасибо.

fedot

2020-03-16 07:30

Спасибо, конечно наличие докера ведет к усложнению проекта в разы и требует очень высокой квалификации, Дмитрий, насколько часто в проде мелкие и средние компании используют такой подход? Есть подозрения, что это по карману только крупняку или если проект собственный и есть время на его отладку.

Дмитрий Елисеев

2020-03-16 10:20

Многим кажется, что с Docker нужно больше работы. Но если подумать, то и без него тоже приходится писать те же конфигурационные файлы nginx.conf для хостов и переопределения для php.ini. И также на продакшене запускать composer install и npm run build вручную или деплоить через Deployer или Capistrano. Также подключать Lets Encrypt, устанавливать софт, настраивать репликации, хранить пароли. То есть всё равно приходится делать то же самое, что делалось вручную или готовыми и самописными скриптами.

В итоге с внедрением Docker число конфигурационных файлов и скриптов не поменялось. Просто сейчас эти же горы скриптов и конфигураций положили в Git-репозиторий рядом с кодом.

Это сейчас требует больше квалификации от разработчика просто потому, что раньше этим всем незаметно занимались отдельные сисадмины, а теперь всё собрано вместе.

Дмитрий Елисеев

2020-03-16 10:46

Мелким вебстудиям, которые делают одноразовые сайты-визитки на Wordpress, это всё обычно не нужно. Они могут хоть заливать по FTP и даже не пользоваться Git-ом. Сделал, сдал и забыл. Или если один делаешь свой проект по несколько пушей в день, то можешь всё проверить и задеплоить вручную.

Автоматизация сильно интересна именно компаниям, активно разрабатывающим большие и долгосрочные сервисы для себя. Если 5 программистов пишут проект полгода по ~100 коммитов в день, то автоматизация тестирования и деплоя экономит кучу времени и усилий.

Docker интересен здесь именно тем, что с ним проще поднимать сервисы и с ним не захламляются серверы. Чтобы обновить версию PHP достаточно поменять Dockerfile и заменить старый контейнер новым. Не приходится каждый раз вычищать систему от мусора, оставшегося от старого софта.

Роман

2020-05-01 17:35

заменить старый контейнер новым

Дмитрий, я правильно понимаю что сервер практически не захламляется, по той причине (возможно основной, - поправьте, если ошибаюсь), что выполняется команда поднятия/рестарта контейнеров с флагом очистки служебной инфы --rm, которую хранил докер в прошлых контейнерах, например: docker-compose run --rm {service_name}? Если так, то в этом эпизоде мы намеренно отключаем в Makefile данный флаг, чтобы не удалять старые директории в целях логирования. В данном случае при загрузке новых версии образов и поднятия контейнеров на проде, некая захламленность будет присутствовать или нет?

И ещё вопрос про загрузку новых версии приложения. На прод сервер постоянно пушатся, а там формируются новые образы в registry (с новым числом - версией). Там в реестре хранятся не только новые версии, но и возможное множество старых тегов, которые, скорее всего, тоже захламляют сейчас прод сервер, верно? Или может быть сейчас пушить только одну версию образов и она там будет постоянно перезаписываться и, как следствие, контейнеры на продакшене будут постоянно подниматься с обновлениями и реестр будет содержать один тег? Или может быть старые версии можно как-то подчищать с помощью консольной команды?

Дмитрий Елисеев

2020-05-13 08:54

Некая захламленность будет присутствовать или нет?

Будут оставаться папки с логами в /var/lib/docker/containers. Чтобы их время от времени чистить мы через Ansible добавили cron-команду с docker system prune ... для удаления элементов месячной давности.

Дмитрий Елисеев

2020-05-13 08:57

Или может быть старые версии можно как-то подчищать с помощью консольной команды?

Да, в реестре всё накапливается и нужно либо чистить вручную через API или в консоли и потом запускать garbage collector, либо подключить к реестру стороннее безлимитное хранилище.

fedot

2020-03-16 19:01

Спасибо, за развернутый ответ, кроме конфигурационных файлов, которые конечно нужны в любом случае, еще добавляется администрирование контейнеров, нужно следить что бы они запускались и удалялись в правильном порядке и прочее, то есть, дополнительно надо следить за их взаимодействием, при этом конечно некоторые вещи однозначно лучше делать через докер, практикуется ли частичное использование докера? например критично важные сервисы настраиваются напрямую, а некоторые вспомогательные сервисы работают через докер?

В нашем то курсе однозначно все через докер нужно делать, потом хоть пример останется, когда понадобится что то подобное, за это еще раз спасибо.

Степанов алексей

2020-03-21 19:44

Спасибо за уроки, немного не по теме, дальше будет еще и JS, и было бы здорово показать как сделать чат на сокетах и при этом сохраняя его (как на ютубе на стримах, что после стрима чат можно прочитать уже в видео), через наше приложение в бд, спасибо!

Роман

2020-05-02 14:04

У меня возникала ошибка Fatal error: Type of App\ErrorHandler\LogErrorHandler::$logger must not be defined (as in class Slim\Handlers\ErrorHandler) in /app/src/ErrorHandler/LogErrorHandler.php on line при попытке стукнуться к бэкенду localhost:8081, после коммита Added logged error handler ElisDN 11.03.2020, 14:58. Решением для меня было удалить приватное свойство в классе LogErrorHandler::$logger, так как оно есть в родительском ErrorHandler. Странно почему не работало, наверное slim поднял версию и там что-то изменилось немного.

Дмитрий Елисеев

2020-05-13 10:45

Да, они теперь сами добавили $logger в ErrorMiddleware как сделано у нас. Теперь наш LogErrorHandler можно упростить.

Arunas

2020-05-25 10:57

в Dev режиме не создает logg файл в случае ошибки адреса.
в тестовом режиме все нормально.
(на Linux-овом компьютере логи все нормально)
ошибка:

Fatal error: Uncaught UnexpectedValueException: There is no existing directory at "/app/config/dev/../../var/log/fpm-fcgi" and its not buildable: Permission denied in /app/vendor/monolog/monolog/src/Monolog/Handler/StreamHandler.php on line 171
( ! ) UnexpectedValueException: There is no existing directory at "/app/config/dev/../../var/log/fpm-fcgi" and its not buildable: Permission denied in /app/vendor/monolog/monolog/src/Monolog/Handler/StreamHandler.php on

как решить?

Дмитрий Елисеев

2020-06-07 05:17

Permission denied. Не может записать в папку var/log. Решить исправлением прав через chmod.

Arunas

2020-06-07 19:06

Спасибо.

Зарегистрируйтесь или войдите чтобы оставить комментарий