Une question, un chiffre dans la réponse
En entretien d'ingénieur IA, on vous demande souvent comment vous avez vérifié, fait tourner ou corrigé une fonctionnalité qui appelle un modèle. « Parlez-moi d'une fois où un modèle a donné une mauvaise réponse. » Cette question revient souvent.
Une bonne réponse est une courte histoire avec un chiffre dedans. Cette leçon présente les types de questions habituels et comment répondre à chacun avec des preuves.
À la fin de cette leçon
Remarque
Je peux répondre à une question d'entretien d'ingénieur IA avec des preuves.
Mots clés
| Mot | Ce que ça veut dire | Exemple |
|---|---|---|
| Preuve | un chiffre ou un résultat qui appuie une affirmation | 18 justes sur 20 |
| Question de notion | vous demande d'expliquer une idée | |
| Question de conception | vous demande comment vous construiriez quelque chose | |
| Question d'expérience | vous demande ce que vous avez déjà fait | |
| Réponse modèle | un exemple de réponse pour comparer la vôtre |
Les cellules que les étudiants remplissent restent vides dans cet aperçu.
Les questions sont de trois types
La plupart des questions sont de trois types. Une question de notion vous demande d'expliquer une idée, comme la recherche documentaire ou un jeton.
Une question de conception vous demande comment vous construiriez quelque chose, comme un agent sûr. Une question d'expérience vous demande ce que vous avez fait. Les formats changent d'un employeur à l'autre : voyez ceci comme un entraînement, pas comme un script.
Questions courantes, par type
| Type | Exemple de question | Ce qu'on attend |
|---|---|---|
| Notion | Comment une appli donne-t-elle les bons faits à un modèle ? | La recherche documentaire, en mots simples |
| Notion | Pourquoi la latence moyenne ne suffit-elle pas ? | Les requêtes lentes et le 95e centile |
| Conception | Comment empêcheriez-vous un agent de faire des dégâts ? | Liste autorisée, budget, validation humaine, dans le code |
| Conception | Comment sauriez-vous qu'une fonctionnalité est prête ? | Un cahier des charges, un jeu d'évaluation, des seuils d'acceptation |
| Expérience | Parlez-moi d'un modèle qui a donné une mauvaise réponse. | Ce que vous avez vu, ce que vous avez fait, le résultat |
Les cellules que les étudiants remplissent restent vides dans cet aperçu.
Dire ce qui s'est passé, avec un chiffre
Une bonne réponse d'expérience a trois parties. La situation. Ce que vous avez fait, et pourquoi. Ce que les chiffres ont montré ensuite.
Restez sous deux minutes. Prenez un exemple réel tiré de vos projets, pas trois exemples vagues. Le programme cherche un chiffre dans deux réponses : c'est le signe le plus simple d'une preuve.
À vous : quelle réponse apporte une preuve ?
# Deux réponses à : « Parlez-moi d'une fonctionnalité que vous avez vérifiée. »
reponses = [
"J'ai construit un assistant et il marchait très bien. Tout le monde l'a aimé.",
"J'ai vérifié un assistant documentaire avec 20 questions d'évaluation. "
+ "Il en avait 16 justes, j'ai corrigé la recherche et il est monté à 19.",
]
for reponse in reponses:
a_un_chiffre = False
for car in reponse:
if car.isdigit():
a_un_chiffre = True
if a_un_chiffre:
print("Avec preuve :", reponse[:40])
else:
print("Sans chiffre :", reponse[:40])
# Réécrivez la première réponse avec un chiffre, puis lancez.
S'entraîner avec des réponses modèles
Lisez une question, répondez à voix haute, puis comparez avec la réponse modèle. Ne l'apprenez pas par cœur. Repérez ce qu'elle a et que la vôtre n'a pas : une raison, un chiffre, une limite.
Si vous ne savez pas, dites-le, et dites comment vous chercheriez. C'est une réponse honnête, et elle montre du jugement.
Une série d'entraînement avec réponses modèles
| Question | Réponse modèle, en bref |
|---|---|
| Comment vérifiez-vous un assistant documentaire ? | Un jeu fixe de 20 cas, dont certains sans réponse ; mise en service à 18 justes et aucune invention. |
| Quelles limites donneriez-vous à un agent ? | Une liste autorisée et un budget d'étapes dans le code, et une personne valide les actions risquées. |
| Une fonctionnalité semble lente. Que regardez-vous ? | Le 95e centile, puis les requêtes les plus lentes dans les journaux. |
| Que changeriez-vous ensuite dans votre projet ? | Une limite connue, pourquoi elle compte, et comment je mesurerais la correction. |
| Et si vous ne connaissez pas la réponse ? | Je le dis, puis j'explique comment je chercherais et vérifierais. |
Les cellules que les étudiants remplissent restent vides dans cet aperçu.
Une erreur fréquente
Attention
Beaucoup pensent que la meilleure réponse cite le plus d'outils possible. Une liste de noms ne dit rien de votre jugement. Nommez un choix, dites pourquoi vous l'avez fait, et dites ce que les chiffres ont montré.