Есть ли возможность создавать список jobs динамически?

Добрый день!

Да, создание динамического списка задач (jobs) на основе изменений в информации, хранящейся в репозитории, вполне возможно. Для этого можно использовать различные инструменты и подходы в зависимости от вашего рабочего окружения и технологий. Вот несколько общих шагов, которые могут помочь организовать этот процесс:

1. **Мониторинг изменений в репозитории**: 
   - Если вы используете систему контроля версий, такую как Git, вы можете настроить Webhook, который будет срабатывать при каждом коммите или изменении в репозитории. Это позволит вашему скрипту реагировать на изменения в реальном времени.

2. **Скрипт для проверки файлов**:
   - Напишите скрипт (например, на Python, Bash или другом языке), который будет проверять содержимое репозитория и составлять список файлов нужного типа. Скрипт может быть запущен при каждом срабатывании Webhook или по расписанию.

3. **Динамическое создание jobs**:
   - В зависимости от того, какую систему управления задачами вы используете (например, Jenkins, Airflow, Celery и т.д.), вы можете создать функциональность для динамического создания задач. Например, в Jenkins можно использовать Groovy скрипты для создания и настройки новых задач программно.

4. **Хранилище состояния**:
   - Возможно, вам потребуется хранить состояние задействованных jobs, чтобы избежать дублирования или неактуальных задач. Это можно реализовать в простой базе данных или файле.

5. **Обработка ошибок**:
   - Не забудьте реализовать обработку ошибок и логирование процессов, чтобы отслеживать статус выполнения задач и возможные проблемы.

Пример использования на Python:

Если у вас есть файлы, например, в директории `my_repo`, вы можете использовать следующий скрипт:

```python
import os

def get_files_of_type(directory, file_extension):
    return [f for f in os.listdir(directory) if f.endswith(file_extension)]

# Пример использования
repo_directory = 'my_repo'
file_extension = '.txt'  # замените на нужный тип
files = get_files_of_type(repo_directory, file_extension)

for file in files:
    # Здесь добавляем логику для запуска jobs
    print(f"Создаем задачу для файла: {file}")
```

Таким образом, вы можете настроить автоматизацию так, чтобы при каждом изменении в репозитории добавлялись новые задачи для новых файлов.

Да, можно настроить триггер запуска задачи при изменении определенного файла или каталога: 
 https://docs.gitlab.com/ee/ci/yaml/#ruleschanges 
 
docker build:
  script: docker build -t my-image:$CI_COMMIT_REF_SLUG .
  rules:
    - if: $CI_PIPELINE_SOURCE == "merge_request_event"
      changes:
        - Dockerfile
      when: manual
      allow_failure: true

docker build alternative:
  variables:
    DOCKERFILES_DIR: 'path/to/dockerfiles'
  script: docker build -t my-image:$CI_COMMIT_REF_SLUG .
  rules:
    - if: $CI_PIPELINE_SOURCE == "merge_request_event"
      changes:
        - $DOCKERFILES_DIR/**/*
 
 Если такой вариант не устраивает и надо выполнить какой-то скрипт и по его результатам запускать задачи, то у гитлаба есть API и через него можно запустить любую задачу: https://docs.gitlab.com/ee/ci/triggers/#trigger-a-...