Løse autorisasjonsproblemer i Airflow med Azure Entra ID-integrasjon

Løse OAuth-autorisasjonsfeil i luftstrøm med flere skriptmetoder

Første løsning - Python Backend Script for OAuth-autorisasjon

# Import required modules and configure OAuth settings
import os
from flask import Flask, redirect, url_for, session
from flask_oauthlib.client import OAuth
# Define environment variables
tenant_id = os.getenv("AAD_TENANT_ID")
client_id = os.getenv("AAD_CLIENT_ID")
client_secret = os.getenv("AAD_CLIENT_SECRET")
app = Flask(__name__)
app.secret_key = 'supersecretkey'
oauth = OAuth(app)
# Define OAuth configuration with Flask-OAuthlib
azure = oauth.remote_app('azure',
    consumer_key=client_id,
    consumer_secret=client_secret,
    request_token_params={'scope': 'openid email profile'},
    base_url=f"https://login.microsoftonline.com/{tenant_id}",
    access_token_url=f"https://login.microsoftonline.com/{tenant_id}/oauth2/v2.0/token",
    authorize_url=f"https://login.microsoftonline.com/{tenant_id}/oauth2/v2.0/authorize"
)
@app.route('/login')
def login():
    return azure.authorize(callback=url_for('authorized', _external=True))
# OAuth authorization callback route
@app.route('/oauth-authorized/azure')
def authorized():
    response = azure.authorized_response()
    if response is None or response.get('access_token') is None:
        return 'Access Denied'
    # Handle successful authorization response
    session['azure_token'] = (response['access_token'], '')
    return redirect(url_for('home'))
@azure.tokengetter
def get_azure_oauth_token():
    return session.get('azure_token')
# Run the Flask app
if __name__ == '__main__':
    app.run()

Alternativ backend-tilnærming – luftstrømkonfigurasjon ved bruk av JWKS og OpenID for sikker token-validering

En annen backend-løsning med fokus på OpenID Connect og JSON Web Key Set-konfigurasjon i Airflow

import os
from airflow.www.fab_security.manager import AUTH_OAUTH
# Required Airflow and custom modules for handling Azure OAuth
from airflow.auth.managers.fab.security_manager.override import FabAirflowSecurityManagerOverride
from airflow.utils.log.logging_mixin import LoggingMixin
class AzureAuthConfig:
    AAD_TENANT_ID = os.getenv('AAD_TENANT_ID')
    AAD_CLIENT_ID = os.getenv('AAD_CLIENT_ID')
    AAD_CLIENT_SECRET = os.getenv('AAD_CLIENT_SECRET')
AUTH_TYPE = AUTH_OAUTH
OAUTH_PROVIDERS = [{
    'name': 'azure',
    'remote_app': {
        'client_id': AzureAuthConfig.AAD_CLIENT_ID,
        'client_secret': AzureAuthConfig.AAD_CLIENT_SECRET,
        'authorize_url': f"https://login.microsoftonline.com/{AzureAuthConfig.AAD_TENANT_ID}/oauth2/v2.0/authorize",
        'access_token_url': f"https://login.microsoftonline.com/{AzureAuthConfig.AAD_TENANT_ID}/oauth2/v2.0/token",
        'jwks_uri': 'https://login.microsoftonline.com/common/discovery/v2.0/keys',
        'redirect_uri': 'https://airflow.xyz.com/oauth-authorized/azure'
    }},
# Ensure authentication maps to the correct role group in Azure
AUTH_ROLES_MAPPING = {
    "airflow_nonprod_admin": ["Admin"],
    "airflow_nonprod_op": ["Op"],
    "airflow_nonprod_viewer": ["Viewer"],
}

Frontend-skript - JavaScript for OAuth-autorisasjonshåndtering

En JavaScript-tilnærming for håndtering av OAuth-omdirigeringer og feil på grensesnittet

// JavaScript function to handle authorization redirect
const authorizeUser = () => {
  const oauthUrl = 'https://login.microsoftonline.com/your-tenant-id/oauth2/v2.0/authorize';
  const params = {
    client_id: 'your-client-id',
    redirect_uri: 'https://airflow.xyz.com/oauth-authorized/azure',
    response_type: 'token',
    scope: 'openid email profile'
  };
  const queryString = new URLSearchParams(params).toString();
  window.location.href = \`\${oauthUrl}?\${queryString}\`;
};
// Handle OAuth errors in the frontend
const handleOAuthError = (error) => {
  if (error === 'access_denied') {
    alert('Access Denied. Please contact your admin.');
  } else {
    alert('An unexpected error occurred.');
  }
};
// Bind function to login button
document.getElementById('login-btn').addEventListener('click', authorizeUser);

Viktige spørsmål om integrering av Azure Entra ID med Airflow

1. Hva er hensikten med AUTH_ROLES_MAPPING parameter i luftmengde?
2. De AUTH_ROLES_MAPPING parameter kobler Azure-roller til Airflow-roller, og aktiverer automatiserte rolletilordninger basert på gruppemedlemskap i Azure. Dette forenkler tilgangskontrollen ved å tildele passende tillatelser til brukere som logger på via Azure Entra ID.
3. Hvordan fungerer jwks_uri fungerer i OAuth-oppsettet?
4. De jwks_uri definerer URIen der Azures offentlige nøkler kan hentes for JWT-tokenverifisering. Dette trinnet er avgjørende for å validere tokens autentisitet, og forhindre uautorisert tilgang.
5. Hvorfor settes redirect_uri i OAuth-leverandører viktig?
6. De redirect_uri forteller Azure hvor brukerne skal sendes etter vellykket autentisering. Dette er ofte satt til Airflow-endepunktet som håndterer OAuth-svar, noe som tillater jevn integrasjon mellom Azure og Airflow.
7. Kan flere roller tildeles en enkelt Azure Entra ID-gruppe?
8. Ja, flere roller kan tilordnes til en enkelt Azure-gruppe, noe som gir fleksibilitet ved tildeling av tillatelser. For eksempel kan både "Administrator" og "Seer"-roller knyttes til en gruppe for overlappende tillatelser.
9. Hva er den beste måten å feilsøke "Ugyldig JSON Web Key Set"-feil?
10. Sørg for at jwks_uri er riktig konfigurert og tilgjengelig. Feil oppstår ofte hvis endepunktet ikke er tilgjengelig eller hvis Azure Entra ID-nøkler er feil bufret i Airflow.
11. Hvordan fungerer client_kwargs omfang øke sikkerheten?
12. De client_kwargs omfanget begrenser dataene Airflow kan få tilgang til fra en brukerprofil, og håndhever begrenset tilgang til sensitiv informasjon, som er nøkkelen for samsvar i bedriftsinnstillinger.
13. Aktiverer WTF_CSRF_ENABLED forbedre sikkerheten?
14. Ja, WTF_CSRF_ENABLED gir Cross-Site Request Forgery-beskyttelse for Airflow, og forhindrer uautoriserte forespørsler. Dette flagget anbefales sterkt i produksjonsmiljøer for ekstra sikkerhet.
15. Hvordan kan jeg håndtere en avvist påloggingsforespørsel?
16. Gjennomgå brukerroller i Azure for å bekrefte at de er riktig tildelt. Bekreft i tillegg authorize_url og gruppetilordning er korrekte, da disse innstillingene påvirker autentiseringssuksessen.
17. Kan jeg bruke en annen OAuth-leverandør enn Azure?
18. Ja, Airflow støtter andre OAuth-leverandører som Google eller Okta ved å justere de leverandørspesifikke parameterne i OAUTH_PROVIDERS. Hver leverandør kan ha unike URL-er og konfigurasjonskrav.

Siste tanker om å sikre luftstrøm med Azure Entra ID

Å integrere Azure Entra ID med Airflow kan strømlinjeforme autentisering på tvers av organisasjoner. Ved å nøye konfigurere OAuth-parametere som jwks_uri og tilgang til token-URLer, etablerer du sikre tilkoblinger som minimerer risikoen for uautorisert tilgang. Dette sikkerhetsnivået er avgjørende for enhver datadrevet organisasjon.

Rolletilordninger i Azure gir mulighet for en skalerbar, rollebasert tilgangsstrategi i Airflow. Med disse tilordningene blir det mer effektivt å administrere brukere og tildele tillatelser, spesielt i større team. En klar forståelse av disse konfigurasjonene kan gjøre autorisasjonsoppsettet ditt mer motstandsdyktig mot fremtidige sikkerhetsbehov. 🔒