Padrões de DAGs do Apache Airflow

Padrões prontos para produção para o Apache Airflow, incluindo design de DAGs, operadores, sensores, testes e estratégias de implantação.

Use esta habilidade quando

• Criar orquestração de pipelines de dados com Airflow
• Projetar estruturas e dependências de DAGs
• Implementar operadores e sensores personalizados
• Testar DAGs do Airflow localmente
• Configurar o Airflow em produção
• Depurar execuções de DAGs com falha

Não use esta habilidade quando

• Você só precisa de um cron job simples ou script shell
• O Airflow não faz parte do seu conjunto de ferramentas
• A tarefa não está relacionada à orquestração de fluxos de trabalho

Instruções

1. Identifique fontes de dados, agendamentos e dependências.
2. Projete tarefas idempotentes com propriedade clara e retentativas.
3. Implemente DAGs com ganchos de observabilidade e alertas.
4. Valide em staging e documente runbooks operacionais.

Consulte resources/implementation-playbook.md para padrões detalhados, checklists e modelos.

Segurança

• Evite alterar agendamentos de DAGs de produção sem aprovação.
• Teste backfills e retentativas cuidadosamente para evitar duplicação de dados.

Recursos

• resources/implementation-playbook.md para padrões detalhados, checklists e modelos.

Limitações

• Use esta habilidade apenas quando a tarefa corresponder claramente ao escopo descrito acima.
• Não trate a saída como substituta para validação específica do ambiente, testes ou revisão de especialistas.
• Pare e peça esclarecimentos se faltarem entradas necessárias, permissões, limites de segurança ou critérios de sucesso.