IA : modèles
Modèle multimodal
Un modèle multimodal traite ou produit plusieurs types de données, comme du texte, des images ou de l’audio.
Comprendre la notion
Les modalités réellement acceptées dépendent du modèle et de son interface. Recevoir une image ne signifie pas savoir restituer chaque détail avec une précision suffisante. Pour un usage documentaire, il faut tester les tableaux, petits caractères, pages dégradées et relations entre éléments visuels.
Exemple d’utilisation
Un assistant reçoit une photo d’équipement et une question écrite pour aider à identifier les informations à vérifier.
Point de vigilance
La reconnaissance visuelle peut être erronée. Une tâche de contrôle sensible exige des critères de validation explicites.