Mise en œuvre du traçage X-Ray

Supervision et dépannage sur AWS

John Q. Martin

Principal Consultant

Aperçu du SDK X-Ray

 

À retenir :

  • Langages pris en charge : Python, Node.js, Java, .NET, Go, Ruby
  • Deux approches : instrumentation automatique ou manuelle
  • Le SDK communique avec le démon sur le port UDP 2000
  • Ne parle jamais directement à l'API X-Ray

 

Automatique vs manuel :

Comparaison des approches d'instrumentation automatique et manuelle du SDK X-Ray

Supervision et dépannage sur AWS

SDK Python : configuration Flask

 

from flask import Flask
from aws_xray_sdk.core import xray_recorder
from aws_xray_sdk.ext.flask.middleware import XRayMiddleware

app = Flask(__name__)

xray_recorder.configure(
    service='MyFlaskApp',
    sampling=True,
    context_missing='LOG_ERROR',
    daemon_address='127.0.0.1:2000'
)

XRayMiddleware(app, xray_recorder)

 

Quatre paramètres du recorder :

  • service : nom affiché sur la carte des services
  • sampling : activer/désactiver l'échantillonnage
  • context_missing : LOG_ERROR évite les crashs
  • daemon_address : destination des segments

Une fois le middleware ajouté, toutes les requêtes entrantes sont tracées automatiquement.

Supervision et dépannage sur AWS

Instrumentation automatique : Python

 

# Instrumenter toutes les bibliothèques prises en charge
from aws_xray_sdk.core import patch_all
patch_all()
# Ou sélectionner
from aws_xray_sdk.core import patch
patch(['boto3', 'requests', 'psycopg2'])

 

Bibliothèques prises en charge :

Bibliothèques prises en charge par l'instrumentation automatique X-Ray comme boto3 requests et des clients de base de données

Supervision et dépannage sur AWS

Instrumentation manuelle : Python

 

Avec décorateur :

@xray_recorder.capture('process_order')
def process_order(order_id):
    order = get_order(order_id)
    return process_payment(order)

 

Avec gestionnaire de contexte :

def process_order(order_id):
    with xray_recorder.capture('fetch_order'):
        order = db.query(Order).filter_by(
            id=order_id).first()
    with xray_recorder.capture('process_payment'):
        return payment_service.charge(order.total)
Supervision et dépannage sur AWS

Annotations et métadonnées dans le code

 

Ajouter des annotations :

xray_recorder.put_annotation(
    'order_id', order_id)
xray_recorder.put_annotation(
    'user_id', user_id)

 

Ajouter des métadonnées (contexte détaillé) :

xray_recorder.put_metadata(
    'order_details',
    {'items': order.items,
     'total': order.total})
  • Les annotations sont indexées, les métadonnées ne le sont pas
  • Les annotations sont typées, les métadonnées peuvent être tout JSON
  • Utilisez les index pour filtrer, les métadonnées pour le debug
Supervision et dépannage sur AWS

Gestion des erreurs dans les traces

 

def process_order(order_id):
    try:
        order = get_order(order_id)
        payment = process_payment(order)
        return payment
    except PaymentError as e:
        xray_recorder.put_annotation(
            'error_type', 'payment_failed')
        xray_recorder.put_metadata(
            'error_details',
            {'message': str(e), 'order_id': order_id})
        raise

 

  • Les exceptions dans les fonctions tracées sont capturées automatiquement
  • Ajoutez une annotation pour le type d'erreur afin de filtrer dans la console
  • Ajoutez des métadonnées pour tous les détails de l'erreur
  • Toujours relancer l'exception : la gestion d'erreurs de votre application doit s'exécuter
Supervision et dépannage sur AWS

SDK Node.js : configuration Express

 

const AWSXRay = require('aws-xray-sdk-core');
const xrayExpress = require('aws-xray-sdk-express');
const app = require('express')();

AWSXRay.config([AWSXRay.plugins.EC2Plugin]);

// Ouvrir un segment pour toutes les requêtes entrantes
app.use(xrayExpress.openSegment('MyExpressApp'));

app.get('/api/orders/:id', async (req, res) => {
    const order = await fetchOrder(req.params.id);
    res.json({ order });
});

// Fermer le segment après la réponse
app.use(xrayExpress.closeSegment());

// Instrumentation automatique
const AWS = AWSXRay.captureAWS(require('aws-sdk'));
const https = AWSXRay.captureHTTPs(require('https'));
Supervision et dépannage sur AWS

Implémentation Lambda

 

from aws_xray_sdk.core import xray_recorder
from aws_xray_sdk.core import patch_all

patch_all()  # instrumenter les appels AWS SDK

def lambda_handler(event, context):
    xray_recorder.put_annotation(
        'user_id', event['user_id'])

    result = process_user(event['user_id'])

    return {
        'statusCode': 200,
        'body': json.dumps(result)
    }

 

À retenir :

  • Lambda envoie des traces de base automatiquement quand Active Tracing est activé, pas besoin de SDK pour cela
  • Installez le SDK X-Ray pour ajouter des sous-segments, des annotations et instrumenter les appels en aval
  • À activer dans la console : Configuration → Outils de suivi
  • Ou dans le template : Tracing: Active
Supervision et dépannage sur AWS

ECS et Fargate : modèle sidecar

 

Structure de tâche :

Tâche ECS
|_ Conteneur de l'application
|   envoie vers xray-daemon:2000
|_ Conteneur du démon X-Ray
    transfère vers le service X-Ray

Config du conteneur app :

xray_recorder.configure(
    service='MyECSApp',
    daemon_address='xray-daemon:2000'
)

 

La définition de tâche inclut :

  • Conteneur démon : image amazon/aws-xray-daemon, port UDP 2000
  • Conteneur app : var d'env. AWS_XRAY_DAEMON_ADDRESS=xray-daemon:2000

Pourquoi un sidecar ?

  • Le démon scale avec vos tâches
  • Les pannes sont isolées par tâche
Supervision et dépannage sur AWS

Installer le démon X-Ray

Installation par plateforme :

  • Amazon Linux 2
    • sudo yum install -y aws-xray-daemon-3.x.rpm
  • Ubuntu
    • sudo dpkg -i aws-xray-daemon-3.x.deb
  • Windows
    • xray.exe -f cfg.yaml install
  • Docker
    • docker run -p 2000:2000/udp amazon/aws-xray-daemon

Après installation :

sudo systemctl start xray
sudo systemctl enable xray

Rôle du démon :

  • Écoute sur le port UDP 2000
  • Met en tampon et regroupe les segments
  • Transmet à l'API X-Ray via HTTPS
  • Gère les réessais ; votre app n'a pas à le faire
Supervision et dépannage sur AWS

Configuration du démon

 

TotalBufferSizeMB: 24
Concurrency: 8
Region: "us-east-1"
Socket:
  UDPAddress: "127.0.0.1:2000"
  TCPAddress: "127.0.0.1:2000"
Logging:
  LogLevel: "info"
  LogPath: "/var/log/xray/xray-daemon.log"
LocalMode: false

 

  • Taille du tampon ; augmentez-la en cas de fort trafic
  • Concurrency définit les connexions parallèles vers X-Ray
  • En conteneur, définissez l'adresse UDP sur 0.0.0.0
  • Mode local : true pour le dev local sans identifiants
Supervision et dépannage sur AWS

Autorisations IAM

 

{
  "Effect": "Allow",
  "Action": [
    "xray:PutTraceSegments",
    "xray:PutTelemetryRecords",
    "xray:GetSamplingRules",
    "xray:GetSamplingTargets",
    "xray:GetSamplingStatisticSummaries"
  ],
  "Resource": "*"
}

 

La méthode la plus simple

Utilisez la stratégie gérée AWSXRayDaemonWriteAccess

À attacher à :

  • Rôle d'instance EC2
  • Rôle de tâche ECS
  • Rôle d'exécution Lambda

Sans les autorisations adéquates, le démon tourne mais échoue silencieusement à livrer les segments.

Supervision et dépannage sur AWS

Modèles de déploiement du démon

 

Trois modèles de déploiement du démon X-Ray par instance sidecar et service partagé

Supervision et dépannage sur AWS

Résumé de la leçon

 

  • SDK : instrumentation automatique avec patch_all(), manuelle avec décorateurs et gestionnaires de contexte
  • Annotations (indexées, recherchables) vs métadonnées (détaillées, non indexées)
  • Lambda : envoie des traces de base automatiquement ; installez le SDK pour les sous-segments et les appels en aval
  • ECS/Fargate : modèle de conteneur démon sidecar
  • Démon : configuré via cfg.yaml, nécessite la stratégie IAM AWSXRayDaemonWriteAccess
  • Déploiement : par instance pour EC2, sidecar pour les conteneurs
Supervision et dépannage sur AWS

Mise en œuvre du traçage X-Ray

Supervision et dépannage sur AWS

Preparing Video For Download...