Публикации по теме 'airflow'
Воздушный поток в машинном обучении
Airflow — это платформа с открытым исходным кодом для создания, планирования и мониторинга рабочих процессов. Первоначально он был разработан Airbnb, а затем передан в дар Apache Software Foundation. Airflow позволяет вам определять сложные рабочие процессы как ряд взаимосвязанных задач, которые могут выполняться в определенном порядке и с зависимостями друг от друга.
Airflow использует направленные ациклические графы (DAG) для определения рабочих процессов, которые написаны на Python..
Вопросы по теме 'airflow'
Как установить переменную среды для использования воздушного потока?
Airflow возвращает ошибку при попытке запустить DAG, сообщая, что не может найти переменную среды, что странно, потому что он может найти 3 другие переменные среды, которые я сохраняю как переменную Python. Никаких проблем с этими переменными вообще...
10650 просмотров
schedule
21.11.2023
Сломанный DAG: [/airflow/dags/a.py] Не удается расшифровать «дополнительные» параметры для входа в систему = нет, отсутствует конфигурация FERNET_KEY
Я запустил Airflow без FERNET_KEY. Как только я это понял, я сделал следующее: https://airflow.apache.org/configuration.html#connections
pip install apache-airflow[crypto]
from cryptography.fernet import Fernet
fernet_key=...
10505 просмотров
schedule
02.11.2023
Программное чтение активных подключений Apache Airflow
Я настроил ниже в Apache Airflow Admin --› Connections.
Как мне программно прочитать эти значения в моей DAG?
def check_email_requests():
conn = Connection(conn_id="artnpics_api_calls")
print(conn)
hostname =...
55 просмотров
schedule
29.11.2023
