Экземпляр Airflow на веб-сервере/планировщике GCP Composer отключен
У нас установлен Airflow с использованием GCP Composer, и у всех нас внезапно отключился веб-сервер/планировщик.
Мы только что попытались перезапустить, обновив некоторые фиктивные переменные или рабочие узлы, и всегда получали ошибку ниже.
Error: UPDATE operation on this environment failed 1 hour ago with the following error message:
Operation failed. Couldn't start composer-agent, a GKE job that updates kubernetes resources. Please check if your GKE cluster exists, is healthy and contains non-empty 'default-pool' node pool.
Любое предложение, поскольку наша среда полностью застряла.
Создание приборной панели для анализа данных на GCP - часть I
Недавно я столкнулся с интересной бизнес-задачей - визуализацией сбоев в цепочке поставок лекарств, которую могут просматривать врачи и...
0
1
92
1
Перейти к ответу
Данный вопрос помечен как решенный
Ответы 1
Ответ принят как подходящий
Насколько я понимаю, модуль агента композитора не может получить образы контейнеров из-за неправильных записей DNS для частного доступа Google к *.pkg.dev. Я думаю, у вас будут только записи для *.gcr.io, так как именно здесь раньше размещались изображения. Дополнительная информация здесь
Другие вопросы по теме
Работающая модель Cosmos DbtDag не может найти переменные среды, используемые в макросах
Как передать xcom традиционному оператору из задачи, созданной с помощью декоратора @task?
Упредить даг-бег
Не удалось передать параметры через переопределения в CloudRunExecuteJobOperator
Динамическое триггерное правило?
Группировка задач в Airflow
Добавить поддержку ротации журналов в папку журналов воздушного потока
Airlfow DAG DataflowTemplateJobStartOperator с предоставленным Google шаблоном GCS_Text_to_Cloud_PubSub
Как остановить DAG Airflow и пропустить будущую обработку, если файл пуст?
Соединение Apache Airflow и Oracle
Похожие вопросы
Разрешить IAP отправлять трафик в Cloud Run
Как развернуть сервер MediaSoup в Google Cloud?
Проверка загруженного файла в корзину Google Cloud Storage при использовании сканера вредоносных программ (ClamAV)
Мое правило брандмауэра оценивается до моей политики брандмауэра в gcp
Группе экземпляров отказано в разрешении прикреплять теги к своим экземплярам
Подключение к CloudSQL через прокси-сервер Cloud-SQL, работающий на виртуальной машине-бастионе
Console.info по запросу в Google Cloud Logging
Google Cloud REST API для реестра артефактов – URL-адрес 404
Развертывание исполняемого файла C# в облачных функциях GCP
Динамическая маршрутизация на GCP с помощью WireGuard
Делали ли вы какие-либо конфронтационные изменения перед выпуском?