Une règle non testée est une supposition
Tester une détection, c’est la lancer sur des données dont on connaît déjà la réponse : un trafic sûrement malveillant, et un trafic sûrement normal. Une bonne règle se déclenche sur tout le premier et sur rien du second.
Les équipes gardent ces données de test à côté de leurs règles et les relancent à chaque changement, comme des tests unitaires. Vous testez des règles sur des captures inventées, dans votre propre copie du labo uniquement.
À la fin de cette leçon
Remarque
Je peux tester une détection sur des données connues comme malveillantes et comme saines.
Mots-clés
| Mot | Ce que ça veut dire |
|---|---|
| Known-bad | des données de test qui ne contiennent que des attaques |
| Known-good | des données de test qui ne contiennent qu’une activité normale |
| Oubli | une attaque sur laquelle la règle n’a pas alerté |
| Banc de test | un programme qui lance chaque règle sur chaque cas de test |
| Balise | un programme qui appelle son serveur à un rythme régulier |
| Écart | le temps entre une connexion et la suivante |
Les cellules que les étudiants remplissent restent vides dans cet aperçu.
La seule règle
Important
Les données de test d’ici sont inventées. Ne remplissez jamais un jeu de test en attaquant une vraie machine, et n’y copiez jamais le trafic de vraies personnes sans autorisation. C’est dans votre propre copie du labo qu’on fabrique du trafic malveillant.
Deux jeux de test, deux sortes d’erreurs
Les données known-bad trouvent les oublis : une attaque que la règle aurait dû prendre. Les données known-good trouvent les faux positifs : une activité normale qu’elle aurait dû laisser passer.
det test, dans le labo, est un petit banc de test. Il lance chaque règle d’un fichier sur les deux captures et compte les alertes. known-bad.pcap contient cinq événements malveillants : deux recherches d’updater et trois appels.
Entrer dans le dossier du labo
cd ~/detectAffichée ici, non exécutée. Appuyez sur Démarrer le labo pour la saisir dans le terminal de votre propre labo.
Tester les règles d’exemple
det test rules/examples.rulesAffichée ici, non exécutée. Appuyez sur Démarrer le labo pour la saisir dans le terminal de votre propre labo.
Exemple travaillé : ce que dit le banc
| Règle | Alertes known-bad | Alertes known-good | Verdict |
|---|---|---|---|
| 1000001 premier essai | 2 recherches sur 2 | 3 | Prend tout, trop bruyante |
| 1000002 recherche réglée | 2 recherches sur 2 | 0 | Réussit |
| 1000003 appel | 3 appels sur 3 | 0 | Réussit, une alerte chacun |
| 1000004 avec une limite | 1 pour une machine | 0 | Réussit, une alerte par machine |
Les cellules que les étudiants remplissent restent vides dans cet aperçu.
À vous : un banc en huit lignes
def detecter(nom):
return nom.endswith("cdn-update.example")
cas = [("a1.cdn-update.example", True), ("cdn-updates.example", False),
("mycdn-update.example", False), ("cdn-update.example", True)]
for nom, malveillant in cas:
obtenu = detecter(nom)
print("ok " if obtenu == malveillant else "ÉCHEC", nom)
# Mettez un point devant le nom et devant la fin. Quelle ligne change ?
Une erreur fréquente
Attention
Beaucoup testent une règle seulement sur l’attaque pour laquelle elle a été écrite. Elle la prend, alors ils la mettent en service. Une règle qui alerte sur tout la prend aussi. Seules les données known-good montrent le bruit, donc chaque règle a besoin des deux jeux.
Certaines attaques se voient à leur rythme
Toutes les détections ne cherchent pas un nom. Updater appelle son serveur environ toutes les 60 secondes : c’est une balise. Les personnes et les navigateurs ne sont pas aussi réguliers.
Le premier Run refait les journaux, et le deuxième montre les trois premières connexions d’updater avec leurs heures. Le troisième liste les écarts entre elles, arrondis, et compte chacun.
Refaire les journaux depuis la capture
zeek-lite -r pcaps/office.pcapAffichée ici, non exécutée. Appuyez sur Démarrer le labo pour la saisir dans le terminal de votre propre labo.
Les trois premières connexions d’updater
zeek-cut ts id.orig_h id.resp_h < conn.log | grep 198.51.100.23 | head -n 3Affichée ici, non exécutée. Appuyez sur Démarrer le labo pour la saisir dans le terminal de votre propre labo.
Les écarts entre elles, comptés
zeek-cut ts id.resp_h < conn.log | awk '$2 == "198.51.100.23" { if (p) print int($1 - p + 0.5); p = $1 }' | sort -n | uniq -cAffichée ici, non exécutée. Appuyez sur Démarrer le labo pour la saisir dans le terminal de votre propre labo.