Тест авто: Тест-драйвы автомобилей — За рулем www.zr.ru — читайте про новые тест-драйвы

Автоматическая сборка с использованием Herokuish

заменен на Cloud Native Buildpacks в GitLab 14.0.

До GitLab 14.0 Herokuish был метод сборки по умолчанию для проектов без Dockerfile . Herokuish может все еще можно использовать, установив переменную CI / CD AUTO_DEVOPS_BUILD_IMAGE_CNB_ENABLED к ложно .

note Если автоматическая сборка завершается неудачно, несмотря на то, что проект соответствует требованиям пакета сборки, установите переменная CI / CD проекта TRACE = true , чтобы включить подробное ведение журнала, что может вам помочь устранение неполадок.

Переход с Herokuish на Cloud Native Buildpacks

с использованием Cloud Native Buildpacks поддерживают те же параметры, что и сборки, использующие Herokuish со следующими оговорками:

• Пакет сборки должен быть Cloud Native Buildpack.Пакет сборки Heroku может быть преобразован в Cloud Native Buildpack с использованием Heroku’s регулировочная шайба cnb .
• BUILDPACK_URL должен быть в формате поддерживается пакетом .
• Команда / bin / herokuish отсутствует в созданном образе, и префикс команды с / bin / herokuish procfile exec больше не требуются (и это невозможно). Вместо этого пользовательские команды должны иметь префикс / cnb / lifecycle / launcher . чтобы получить правильную среду исполнения.

Автотест

Auto Test запускает соответствующие тесты для вашего приложения, используя Herokuish и Сборочные пакеты Heroku, анализируя ваш проект для определения языка и фреймворка. Несколько языков и фреймворки обнаруживаются автоматически, но если ваш язык не определяется, вы можете создать собственный пакет сборки. Проверьте поддерживаемые в настоящее время языки.

Auto Test использует тесты, которые у вас уже есть в вашем приложении. Если нет тесты, вы можете добавить их.

Поддерживаемые в настоящее время языки

Обратите внимание, что не все сборки пока поддерживают Auto Test, так как это относительно новый улучшение. Все Heroku официально поддерживаемые языки Поддержка автоматического тестирования. Языки, поддерживаемые сборочными пакетами Heroku's Herokuish, включают в себя все поддерживает Auto Test, но, в частности, multi-buildpack - нет.

Поддерживаемые пакеты сборки:

  - heroku-buildpack-multi
- heroku-buildpack-ruby
- heroku-buildpack-nodejs
- heroku-buildpack-clojure
- heroku-buildpack-python
- heroku-buildpack-java
- heroku-buildpack-gradle
- heroku-buildpack-scala
- heroku-buildpack-play
- heroku-buildpack-php
- heroku-buildpack-go
- buildpack-nginx
  

Если вашему приложению нужен сборочный пакет, которого нет в приведенном выше списке, вы может захотеть использовать собственный пакет сборки.

Качество автокода

• Переехал на GitLab Free в версии 13.2.

Auto Code Quality использует Изображение качества кода для запуска статический анализ и другие проверки кода текущего кода. После создания отчет, он загружен как артефакт, который вы можете позже загрузить и проверить вне. Виджет мерж-реквеста также отображает любые различия между исходной и целевой ветвями.

Авто SAST

• Введено в GitLab Ultimate 10.3.
• Выберите функциональность, доступную на всех уровнях, начиная с 13.1

Static Application Security Testing (SAST) работает в статическом режиме. анализ текущего кода и проверка потенциальных проблем безопасности. В Для этапа Auto SAST требуется GitLab Runner 11.5 или выше.

После создания отчета он загружается как артефакт, который вы можете позже скачать и проверить. Виджет мерж-реквеста также отображает любую безопасность предупреждения о лицензиях Ultimate.

Чтобы узнать больше о том, как работает SAST, см. документацию.

Автоматическое обнаружение секрета

Secret Detection использует Образ Docker для обнаружения секретов для запуска функции обнаружения секретов в текущем коде и проверки утечки секретов.Для автоматического определения секретов требуется GitLab Runner 11.5 или выше.

После создания отчета он загружается как артефакт, который вы можете позже скачать и оценить. Виджет мерж-реквеста также отображает любую безопасность предупреждения о лицензиях Ultimate.

Дополнительные сведения см. В разделе «Обнаружение секретов».

Автоматическое сканирование зависимостей

Сканирование зависимостей выполняет анализ зависимостей проекта и проверяет возможные проблемы с безопасностью. Этап автоматического сканирования зависимостей пропускается для лицензий, отличных от Ultimate и требует GitLab Runner 11.5 или выше.

После создания отчета он загружается как артефакт, который позже можно загрузить и проверить. Виджет мерж-реквеста отображает все обнаруженные предупреждения системы безопасности,

Чтобы узнать больше о Сканирование зависимостей, см. документацию.

Соответствие автоматической лицензии

Введено в GitLab Ultimate 11.0.

License Compliance использует Образ Docker для соответствия лицензии для поиска зависимостей проекта для их лицензии. Этап соответствия автоматической лицензии пропускается в лицензиях, отличных от Ultimate.

После создания отчета он загружается как артефакт, который позже можно загрузить и проверить. В запросе на слияние отображаются все обнаруженные лицензии.

Чтобы узнать больше о Соответствие лицензии, см. документация.

Автоматическое сканирование контейнеров

В статическом анализе уязвимостей контейнеров используется Trivy чтобы проверить возможные проблемы с безопасностью в образах Docker. Этап автоматического сканирования контейнера пропускается на лицензиях, отличных от Ultimate.

После создания отчета он загружается как артефакт, который позже можно загрузить и проверить.В запросе на слияние отображаются все обнаруженные проблемы безопасности.

Чтобы узнать больше о Сканирование контейнеров, см. документацию.

Приложения с автоматическим обзором

Это необязательный шаг, поскольку во многих проектах нет кластера Kubernetes. имеется в наличии. Если требования не соблюдены, работа считается молча пропустил.

Review Apps - это временные среды приложений, основанные на код ветки, поэтому разработчики, дизайнеры, QA, менеджеры по продукту и другие рецензенты могут видеть и взаимодействовать с изменениями кода в рамках проверки. процесс.Приложения автоматического обзора создают приложение обзора для каждого филиала.

Auto Review Apps развертывает ваше приложение только в кластере Kubernetes. Если нет кластера доступен, развертывание не происходит.

Приложение Review имеет уникальный URL-адрес, основанный на комбинации идентификатора проекта, ветви или имя тега, уникальный номер и базовый домен Auto DevOps, например 13083-review-project-branch-123456.example.com . Отображается виджет мерж-реквеста ссылка на приложение Review для быстрого поиска.Когда ветка или тег удаляются, например, после слияния мерж-реквеста приложение Review также удаляется.

Приложения обзора развертываются с помощью диаграмма автоматического развертывания приложения с Шлем, который можно настроить. Приложение разворачивается в пространство имен Kubernetes для окружающей среды.

В GitLab 11.4 и новее локальный Tiller использовал. В предыдущих версиях GitLab в проекте был установлен Tiller. пространство имен.

Осторожно! Ваши приложения должны работать с , а не с вне Helm (напрямую с помощью Kubernetes).Это может вызвать путаницу с Helm, не обнаруживающим изменения, и последующим развертывание с помощью Auto DevOps может отменить ваши изменения. Кроме того, если вы что-то измените и хотите отменить его, развернув снова, Helm может не обнаружить, что что-то изменилось в первую очередь, и поэтому не понимаете, что необходимо повторно применить старую конфигурацию.

Авто DAST

Dynamic Application Security Testing (DAST) использует популярный инструмент с открытым исходным кодом. OWASP ZAProxy для анализа текущего кода и проверьте наличие потенциальных проблем с безопасностью.Этап Auto DAST пропускается на лицензии, отличные от Ultimate.

• В вашей ветке по умолчанию DAST сканирует приложение, развернутое специально для этой цели. если вы не переопределите целевую ветвь. Приложение удаляется после запуска DAST.
• В ветвях функций DAST сканирует приложение для просмотра.

После завершения сканирования DAST отображаются все предупреждения системы безопасности. на панели управления безопасностью и виджет мерж-реквеста.

Чтобы узнать больше о Динамическое тестирование безопасности приложений, см. документацию.

Отмена цели DAST

Чтобы использовать настраиваемую цель вместо автоматически развернутых приложений для проверки, установите для переменной DAST_WEBSITE CI / CD URL-адрес, который будет сканировать DAST.

Отключение Auto DAST

Вы можете отключить DAST:

• Во всех ветвях, установив для переменной DAST_DISABLED CI / CD значение «true» .
• Только в ветви по умолчанию, установив DAST_DISABLED_FOR_DEFAULT_BRANCH переменная "истина" .
• Только в ветвях функций, задав для переменной REVIEW_DISABLED значение "правда" . Это также отключает приложение Review.

Автоматическое тестирование производительности браузера

Автоматическое тестирование производительности браузера измеряет производительность браузера на веб-странице с помощью Контейнер Sitespeed.io, создает отчет JSON, включающий общую оценку производительности для каждой страницы, и выгружает отчет как артефакт.По умолчанию он проверяет корневую страницу вашего обзора и Производственные среды. Если вы хотите протестировать дополнительные URL-адреса, добавьте пути к файл с именем .gitlab-urls.txt в корневом каталоге, по одному файлу в строке. Например:

Любые различия в производительности браузера между исходной и целевой ветвями также показано в виджете мерж-реквеста.

Тестирование производительности при автоматической нагрузке

Тестирование производительности при автоматической нагрузке измеряет производительность сервера приложения с контейнер k6, создает отчет JSON, включающий несколько ключевых показателей результатов, и выгружает отчет как артефакт.

Требуется некоторая начальная настройка. Тест k6 должен быть написано специально для вашего конкретного приложения. Тест также должен быть настроен таким образом, чтобы он мог получать динамический URL-адрес среды через переменную CI / CD.

Любые различия результатов теста производительности нагрузки между исходной и целевой ветвями также показано в виджете мерж-реквеста.

Автоматическое развертывание

Представленный в GitLab 13.6, у вас есть выбор для развертывания в Amazon Elastic Compute Cloud (Amazon EC2) в дополнение к кластеру Kubernetes.

Автоматическое развертывание - необязательный шаг для Auto DevOps. Если требования не выполняются, задание пропускается.

После того, как ответвление или запрос на слияние объединены в ветвь проекта по умолчанию, автоматическое развертывание развертывает приложение в производственной среде в кластер Kubernetes с пространством имен, основанным на имени проекта и уникальным Идентификатор проекта, например project-4321 .

Auto Deploy не включает развертывание в промежуточных или канареечных средах с помощью по умолчанию, но Шаблон Auto DevOps содержит определения заданий для этих задач, если вы хотите их включить.

Вы можете использовать переменные CI / CD для автоматического масштабировать реплики подов и применять настраиваемые аргументы к обновлению руля Auto DevOps команды. Это простой способ настроить диаграмму Auto Deploy Helm.

Helm использует приложение для автоматического развертывания диаграмму для развертывания приложения в Пространство имен Kubernetes для окружающей среды.

В GitLab 11.4 и новее местный Тиллер использовал. В предыдущих версиях GitLab в проекте был установлен Tiller. пространство имен.

Осторожно! Ваши приложения должны работать с , а не с вне Helm (напрямую с помощью Kubernetes).Это может вызвать путаницу с Helm, не обнаруживающим изменения, и последующим развертывание с помощью Auto DevOps может отменить ваши изменения. Кроме того, если вы что-то измените и хотите отменить его, развернув снова, Helm может не обнаружить, что что-то изменилось в первую очередь, и поэтому не понимаете, что необходимо повторно применить старую конфигурацию.

токенов развертывания GitLab

токенов развертывания GitLab создаются для внутренних и частных проектов, когда включен Auto DevOps, а Настройки Auto DevOps сохраняются. Вы можете использовать токен развертывания для постоянного доступа к реестр. После того, как вы вручную отозвали токен развертывания GitLab, он не создается автоматически.

Если токен развертывания GitLab не может быть найден, CI_REGISTRY_PASSWORD использовал.

note CI_REGISTRY_PASSWORD действителен только во время развертывания. Kubernetes может успешно вытащить образ контейнера во время развертывания, но если образ должен быть извлеченным снова, например, после выселения пода, Kubernetes не может этого сделать поскольку он пытается получить изображение, используя CI_REGISTRY_PASSWORD .

Kubernetes 1.16+

• Представлено в GitLab 12.8.
• Поддержка развертывания версии PostgreSQL, поддерживающей Kubernetes 1.16+ был представлен в GitLab 12.9.
• Поддерживается из коробки для новых развертываний, начиная с GitLab 13.0.

В Kubernetes 1.16 и новее ряд API были удалены, включая поддержку Deployment в версии extensions / v1beta1 .

Чтобы использовать автоматическое развертывание в Kubernetes 1.16+ кластер:

1. Если вы впервые развертываете свое приложение в GitLab 13.0 или новее, настройка не требуется.

2. В GitLab 12.10 или более ранней версии установите следующее в файле .gitlab / auto-deploy-values.yaml :

     развертываниеApiVersion: apps / v1
     

3. Если у вас установлена ​​база данных PostgreSQL в кластере с AUTO_DEVOPS_POSTGRES_CHANNEL установлено на 1 , следуйте инструкциям по обновлению PostgreSQL.

4. Если вы развертываете свое приложение впервые и используете GitLab 12.9 или 12.10 установите AUTO_DEVOPS_POSTGRES_CHANNEL на 2 .

Миграции

Вы можете настроить инициализацию базы данных и миграции для запуска PostgreSQL. внутри модуля приложения, задав переменные CI / CD проекта DB_INITIALIZE и DB_MIGRATE соответственно.

Если присутствует, DB_INITIALIZE запускается как команда оболочки в модуле приложения как хук после установки Helm. Поскольку некоторые приложения не могут работать без успешного шаг инициализации базы данных, GitLab развертывает первый выпуск без развертывание приложения и только этап инициализации базы данных.После базы данных инициализация завершена, GitLab развертывает второй выпуск с приложением развертывание как обычно.

Обратите внимание, что перехватчик после установки означает, что в случае успешного развертывания DB_INITIALIZE после этого не обрабатывается.

Если присутствует, DB_MIGRATE запускается как команда оболочки внутри модуля приложения как крючок перед улучшением Helm.

Например, в приложении Rails в образе, созданном с помощью Собственные пакеты сборки Cloud:

• DB_INITIALIZE можно установить на RAILS_ENV = production / cnb / lifecycle / launcher bin / rails db: setup
• DB_MIGRATE можно установить на RAILS_ENV = production / cnb / lifecycle / launcher bin / rails db: migrate

Если ваш репозиторий не содержит Dockerfile , ваш образ построен с Cloud Native Buildpacks, и вы должны префикс команд, запускаемых в этих образах, с помощью / cnb / lifecycle / launcher , (или / bin / herokuish procfile exec , когда используя Herokuish) воспроизвести среду, в которой вы приложение запускается.

Диаграмма обновления приложения для автоматического развертывания

Вы можете обновить диаграмму автоматического развертывания приложений, следуя руководству по обновлению.

Рабочие

Некоторые веб-приложения должны запускать дополнительные развертывания для «рабочих процессов». Для Например, приложения Rails обычно используют отдельные рабочие процессы для выполнения фоновых задач, таких как отправка электронных писем.

Диаграмма Helm по умолчанию используется в автоматическом развертывании поддерживает запуск рабочих процессов.

Чтобы запустить воркер, вы должны убедиться, что он может отвечать на стандартные проверки работоспособности, ожидающие успешного ответа HTTP на порт 5000 .Для Sidekiq вы можете использовать драгоценный камень sidekiq_alive .

Для работы с Sidekiq вы также должны убедиться, что в ваших развертываниях есть доступ к экземпляру Redis. Auto DevOps не развертывает этот экземпляр за вас, поэтому ты должен:

• Поддерживайте собственный экземпляр Redis.
• Установить переменную CI / CD K8S_SECRET_REDIS_URL , которая является URL-адресом этого экземпляра, чтобы убедиться, что он передан в ваши развертывания.

После настройки рабочего для ответа на проверки работоспособности запустите Sidekiq worker для вашего приложения Rails.Вы можете включить воркеров, установив следующее в файле .gitlab / auto-deploy-values.yaml :

  рабочих:
  sidekiq:
    ReplicaCount: 1
    команда:
      - / cnb / жизненный цикл / пусковая установка
      - sidekiq
    preStopCommand:
      - / cnb / жизненный цикл / пусковая установка
      - sidekiqctl
      - тихий
    terminationGracePeriodSeconds: 60
  

Сетевая политика

По умолчанию все поды Kubernetes неизолированный, и принимать трафик из любого источника. Вы можете использовать NetworkPolicy для ограничения подключений к выбранным модулям, пространствам имен и Интернету и от них.

Вы можете включить развертывание сетевой политики, установив следующие в файле .gitlab / auto-deploy-values.yaml :

  сеть
  включен: правда
  

Политика по умолчанию, развернутая конвейером автоматического развертывания, позволяет трафик в локальном пространстве имен и из gitlab-managed-apps пространство имен.Все остальные входящие подключения заблокированы. Исходящий на трафик (например, в Интернет) политика по умолчанию не влияет.

Вы также можете указать индивидуальную спецификацию политики в файле .gitlab / auto-deploy-values.yaml , например:

  сеть
  включен: правда
  спецификация:
    podSelector:
      matchLabels:
        app.gitlab.com/env: постановка
    вход:
      - из:
        - podSelector:
            matchLabels: {}
        - namespaceSelector:
            matchLabels:
              приложение.gitlab.com/managed_by: gitlab
  

Для получения дополнительной информации об установке сетевых политик см. Используйте шаблон управления кластером для установки Cilium.

Сетевая политика Cilium

По умолчанию все поды Kubernetes неизолированный, и принимать трафик из любого источника. Вы можете использовать Ресничка для ограничения подключений к выбранным модулям, пространствам имен и Интернету и из них.

Требования

В качестве сетевого плагина по умолчанию для Kubernetes ( kubenet ) не реализует для его поддержки у вас должен быть Cilium в качестве сетевого плагина Kubernetes.

Сетевой плагин Cilium может быть установлен с шаблоном проекта управления кластером для включения поддержки сетевых политик.

Конфигурация

Вы можете включить развертывание сетевой политики, установив следующие в файле .gitlab / auto-deploy-values.yaml :

  ресничка Сеть Политика:
  включен: правда
  

Политика по умолчанию, развернутая конвейером автоматического развертывания, позволяет трафик в локальном пространстве имен и из gitlab-managed-apps пространство имен.Все остальные входящие подключения заблокированы. Исходящий на трафик (например, в Интернет) политика по умолчанию не влияет.

Вы также можете указать индивидуальную спецификацию политики в файле .gitlab / auto-deploy-values.yaml , например:

  ресничка Сеть Политика:
  включен: правда
  спецификация:
    endpointSelector:
      matchLabels:
        app.gitlab.com/env: постановка
    вход:
      - fromEndpoints:
        - matchLabels:
            app.gitlab.com/managed_by: gitlab
  

Включение предупреждений

Вы также можете включить предупреждения.Сетевые политики с предупреждениями рассматриваются только в том случае, если Агент GitLab Kubernetes был интегрирован.

Вы можете включить оповещения следующим образом:

  ресничка Сеть Политика:
  включен: правда
  предупреждения:
    включен: правда
  

Для получения дополнительной информации об установке сетевых политик см. Используйте шаблон управления кластером для установки Cilium.

Запуск команд в контейнере

Приложения, созданные с помощью Auto Build с использованием Herokuish, по умолчанию если ваш репозиторий не содержит настраиваемый файл Dockerfile, может потребовать, чтобы команды были обернуты следующим образом:

  / bin / herokuish procfile exec $ КОМАНДА
  

Некоторые из причин, по которым вам может потребоваться перенос команд:

• Присоединение с использованием kubectl exec .
• Использование веб-терминала GitLab.

Например, чтобы запустить консоль Rails из корневого каталога приложения, выполните:

  / bin / herokuish procfile exec bin / rails c
  

При использовании Cloud Native Buildpacks вместо / bin / herokuish procfile exec используйте

  / cnb / жизненный цикл / пусковая установка $ КОМАНДА
  

Автоматический мониторинг

После развертывания приложения Auto Monitoring поможет вам контролировать показатели сервера и ответа вашего приложения прямо из коробки.Авто Мониторинг использует Прометей для получать системные метрики, такие как использование ЦП и памяти, непосредственно из Kubernetes, и метрики ответа, такие как частота ошибок HTTP, задержка и пропускная способность, от Сервер NGINX.

Метрики включают:

• Показатели отклика : задержка , пропускная способность, частота ошибок
• Системные метрики: Использование ЦП, использование памяти

Чтобы использовать автоматический мониторинг:

1. Установите и настройте требования Auto DevOps.
2. Включите Auto DevOps, если вы еще этого не сделали.
3. Перейдите к вашему проекту CI / CD> Pipelines и щелкните Run pipeline .
4. После успешного завершения конвейера откройте панель мониторинга для развернутой среды для просмотра показателей развернутого приложения. Чтобы просмотреть показатели Для всего кластера Kubernetes перейдите к Операции> Метрики .