Listes de contrôle de sécurité IA

• Autorisation signée
• Règles de traitement des données établies
• Portée définie

• Respect des limites de taux
• Enregistrer des preuves sécurisées
• Éviter les données de production

• Documenter clairement les résultats
• Fournir les étapes de correction
• Inclure les évaluations des risques

• Test direct injection with common patterns (ignore, forget, DAN)
• Testez l'injection indirecte via le téléchargement de documents
• Testez le pipeline RAG pour les documents empoisonnés
• Verify encoding bypass attempts (Base64, Unicode, ROT13)
• Test de la manipulation de conversations à plusieurs tours
• Vérifier les fuites d'invite du système
• Test tool/function calling with malicious parameters
• Vérifier que le filtrage de sortie fonctionne
• Limitation du taux de test et prévention des abus
• Examinez les journaux pour les tentatives d'injection

• Verify MCP server authentication is enabled
• Test for path traversal in filesystem tools
• Check for SSRF vulnerabilities in HTTP tools
• Verify tool parameter validation
• Test authentication bypass scenarios
• Check for command injection in shell tools
• Verify SQL injection protection in database tools
• Review API key handling and storage
• Test cross-tenant isolation (if multi-tenant)
• Check for supply chain vulnerabilities in MCP packages

• Map the LLM attack surface: endpoints, tools, plugins, and data sources
• Test direct prompt injection with role-play and jailbreak patterns (DAN, ignore)
• Test indirect prompt injection via uploaded documents, web content, and tool outputs
• Attempt system prompt extraction and instruction leakage
• Verify output sanitization (HTML/markdown injection, tool-call payload tampering)
• Test for excessive agency: confirm tool permissions match the task
• Probe for training data extraction (memorized PII, secrets, verbatim text)
• Test model denial of service (token flooding, recursive loops, resource exhaustion)
• Validate authentication, authorization, and rate limiting on LLM APIs
• Check logging for sensitive data leakage (prompts, credentials, internal context)

• Test goal hijacking via indirect prompt injection
• Verify tool use authorization and audit logging
• Check identity and privilege management
• Test for supply chain vulnerabilities in tools
• Verify sandboxing for code execution
• Test memory/context poisoning attacks
• Check inter-agent communication security
• Verify cascading failure handling
• Test human-agent trust boundaries
• Check for rogue agent persistence

Créateur de liste de contrôle personnalisée

Conseils de liste de contrôle

• Compléter les éléments dans l'ordre où les dépendances existent
• Documenter les exceptions avec justification
• Réviser périodiquement avec les parties prenantes
• Mettre à jour les listes de contrôle à mesure que les normes évoluent