IA dans les lunettes thermiques : ce que le traitement NPU peut améliorer — et ce qu’il ne peut pas

Découvrez comment le traitement accéléré par NPU peut améliorer l'amélioration de l'image thermique, la super-résolution et le débruitage, et pourquoi la résolution du capteur, l'optique et les conditions de terrain fixent encore les limites physiques.

Yubeen thermal imaging scope illustrating thermal image processing technology

L'IA dans les lunettes de visée thermiques peut améliorer la façon dont les données thermiques sont traitées et affichées, mais elle ne peut pas remplacer le détecteur, l'optique ou les informations physiques capturées par le système. La résolution du détecteur, la sensibilité thermique, le pas des pixels, la conception de l'objectif et le champ de vision définissent toujours le système d'imagerie physique, mais les appareils modernes peuvent également appliquer un traitement de plus en plus sophistiqué avant que l'image n'atteigne l'écran.

L’intelligence artificielle fait désormais partie de ce pipeline de traitement. Dans certains systèmes, les charges de travail du réseau neuronal peuvent être accélérées par une unité de traitement neuronal dédiée, ou NPU. La distinction importante est qu'un NPU ne remplace pas le détecteur thermique et ne crée pas d'informations physiques supplémentaires. Il fournit des ressources informatiques qui peuvent rendre certains modèles de traitement d'image pratiques sur un appareil embarqué.

Comprendre cette distinction est essentiel lors de la comparaison de l’optique thermique compatible avec l’IA. L'amélioration de l'image peut améliorer ce que voit l'utilisateur, mais elle doit être évaluée en parallèle du matériel sous-jacent plutôt que traitée comme un substitut à celui-ci. Pour une introduction plus large aux facteurs qui définissent la qualité de l'image thermique, consultez notre guide de l’imagerie thermique pour débutants guide.

Qu'est-ce qu'une NPU dans un appareil d'imagerie thermique ?

Une unité de traitement neuronal est un matériel spécialisé conçu pour accélérer l'inférence de réseau neuronal et les opérations matricielles ou tensorielles associées. Par rapport à l’attribution de chaque tâche à un processeur à usage général, l’accélération dédiée de l’IA peut rendre les charges de travail d’apprentissage automatique adaptées plus efficaces et plus pratiques à la périphérie.

Dans un dispositif d'imagerie thermique, ce traitement peut potentiellement être appliqué après que le détecteur a collecté le signal infrarouge et avant que l'image finale ne soit présentée à l'utilisateur.

Cela ne signifie pas que chaque fonctionnalité décrite comme « IA » nécessite un NPU. Les algorithmes de traitement d'image peuvent fonctionner sur un CPU, un GPU, un DSP, un processeur d'imagerie dédié ou un autre accélérateur en fonction de l'architecture matérielle. La présence d’une fonctionnalité IA et la présence d’un NPU dédié sont donc deux questions techniques différentes.

NPU, détecteur et affichage sont des parties différentes du système

Un moyen utile de comprendre la chaîne d’imagerie consiste à séparer l’acquisition physique du traitement numérique.

Couche systèmeFonction principaleLe traitement de l’IA peut-il le remplacer ?
Détecteur thermiqueCapture les informations infrarouges et détermine la résolution native du détecteurNon
Système de lentillesFocalise l'énergie infrarouge sur le détecteurNon
Caractéristiques du capteurInfluencer la sensibilité, l'échantillonnage spatial et les informations brutes de l'imageNon
Pipeline de traitement d'imagesDébruitage, réglage du contraste, netteté, reconstruction et autres traitementsL'IA peut contribuer ici
ÉcranPrésente l'image traitée à l'utilisateurLe traitement peut changer la présentation, pas les données natives du détecteur

Cette distinction évite une erreur de spécification courante : la résolution d'affichage ou la sortie améliorée par l'IA ne doit pas être confondue avec la résolution native du détecteur thermique.

Où le traitement de l'IA peut améliorer les images thermiques

Le cas d’utilisation le plus important de l’IA en imagerie thermique est de ne pas créer d’informations à partir de rien. Il extrait, organise et présente les informations d’image disponibles plus efficacement.

Réduction du bruit et détails locaux

Les images thermiques peuvent contenir du bruit et des zones à faible contraste qui rendent les limites difficiles à interpréter. Les pipelines de traitement d'image conventionnels utilisent déjà des techniques telles que le contrôle du gain, le filtrage, la netteté et l'amélioration du contraste.

Les modèles d’apprentissage automatique peuvent étendre cette approche en apprenant des relations plus complexes entre les structures locales, les contours et les modèles de bruit. Lorsqu’il est bien mis en œuvre, le résultat peut paraître plus propre ou plus stable tout en préservant les limites utiles.

Le mot important est peut. Les performances dépendent du modèle, de ses données d'entraînement, du signal d'entrée et de la manière dont les paramètres de traitement sont réglés. L’« IA » en elle-même ne constitue pas une spécification mesurable de qualité d’image.

Super-résolution et zoom numérique

La super-résolution tente de reconstruire une sortie à plus haute résolution à partir de données d'entrée à plus faible résolution. La recherche en imagerie thermique montre que les approches de réseaux neuronaux peuvent améliorer les bords reconstruits et les détails structurels par rapport à une simple interpolation, ce qui est l'une des raisons pour lesquelles cette technique fait l'objet d'une attention particulière dans l'imagerie infrarouge.

Cela peut être particulièrement utile lorsqu’un grossissement numérique est appliqué. Le zoom numérique standard agrandit l'image du détecteur existant ; cela n'augmente pas le nombre de pixels du détecteur physique. À mesure que le grossissement augmente, la pixellisation et la perte des détails visibles deviennent donc plus perceptibles.

Un pipeline de super-résolution bien conçu peut rendre l’image agrandie plus facile à interpréter qu’une simple interpolation de base. Cependant, l’image améliorée reste une reconstruction basée sur l’entrée originale. Cela ne doit pas être décrit comme équivalent à une augmentation de la résolution native du détecteur.

Pour plus de détails sur la relation entre le grossissement de base, le zoom numérique, la résolution du détecteur et le champ de vision, consultez notre guide pour le grossissement des lunettes thermiques.

Traitement temporel sur plusieurs images

Un appareil thermique ne doit pas nécessairement traiter chaque image de manière complètement isolée. Certains systèmes de traitement d'images peuvent utiliser les informations des images successives pour améliorer la stabilité, réduire le bruit ou préserver la structure dans le temps.

Cela introduit un autre compromis technique. Un traitement temporel plus fort peut améliorer la stabilité apparente de l'image, mais un mauvais réglage peut également introduire un décalage, des images fantômes ou des traînées lorsque la scène ou l'appareil bouge.

Pour cette raison, l’évaluation du traitement de l’IA nécessite plus que l’examen d’une seule image fixe.

Ce que l'IA ne peut pas changer dans le système d'imagerie thermique

Les améliorations logicielles sont importantes, mais la chaîne d’imagerie physique reste fondamentale.

La résolution du détecteur détermine le nombre d’éléments d’échantillonnage natifs qui capturent la scène infrarouge. Le pas des pixels, la sensibilité thermique, les caractéristiques de l'objectif, la distance focale, la mise au point et le champ de vision affectent tous les informations disponibles avant que le modèle d'IA ne commence à les traiter.

Un algorithme peut reconstruire, filtrer ou souligner les modèles de ces informations. Il ne peut pas transformer rétroactivement un détecteur à faible résolution en un détecteur physiquement à plus haute résolution.

Le même principe s'applique aux conditions environnementales. L'imagerie thermique peut fonctionner sans éclairage visible, mais la transmission atmosphérique, le contraste thermique, la distance, la taille de la cible et l'obstruction physique affectent toujours le signal atteignant le détecteur.

Le traitement de l’IA peut faciliter l’interprétation d’une image difficile. Il ne peut garantir la récupération des informations qui n'ont jamais atteint le capteur.

C'est pourquoi les spécifications telles que la résolution du détecteur, le NETD, la conception de l'objectif et le champ de vision doivent toujours être évaluées indépendamment lors de l'examen. ce qui définit une lunette thermique haut de gamme.

La super-résolution est une amélioration, pas une nouvelle mesure de capteur

L’une des distinctions les plus importantes en matière d’imagerie IA est la différence entre mesure native et sortie reconstruite.

Un détecteur enregistre la scène thermique à sa résolution spatiale native. Un modèle super-résolution estime ensuite une représentation à plus haute résolution à partir de cette entrée en utilisant les modèles appris lors du développement du modèle.

Cette reconstruction peut produire une image visuellement plus utile, mais elle peut également introduire des artefacts ou mettre trop l’accent sur les structures lorsque les données d’entrée sont faibles ou ambiguës. La recherche sur la super-résolution infrarouge se poursuit en partie parce que préserver les structures réelles tout en évitant les détails reconstruits non naturels reste un défi technique.

Pour les utilisateurs pratiques, la règle est simple : les images améliorées doivent être jugées en fonction de ce qu'elles vous aident à interpréter de manière cohérente, et non en supposant que chaque bord accentué représente des informations supplémentaires au niveau du détecteur.

Pourquoi l'accélération dédiée de l'IA peut être importante

L’exécution continue d’inférence de réseau neuronal sur un appareil intégré crée des contraintes en termes de puissance de calcul, de latence, de bande passante mémoire et de consommation d’énergie.

Les accélérateurs dédiés tels que les NPU sont conçus spécifiquement pour ce type de charge de travail. Leur avantage est donc avant tout architectural : ils peuvent exécuter des opérations d’IA adaptées plus efficacement que de s’appuyer entièrement sur un processeur polyvalent.

Pour un appareil d'imagerie thermique, cela peut rendre le traitement en temps réel plus pratique tout en laissant d'autres processeurs disponibles pour le contrôle du système, les fonctions d'interface, l'enregistrement et d'autres tâches.

C'est le cas pas signifie que l’ajout d’un NPU augmente automatiquement la durée de vie de la batterie. La durée de fonctionnement totale dépend toujours de l'appareil dans son ensemble, y compris le détecteur, l'affichage, la charge du processeur, l'enregistrement, les fonctions sans fil, le matériel de télémétrie et la capacité de la batterie.

L'efficacité du NPU et l'autonomie de la batterie du produit doivent donc être traitées comme des spécifications distinctes.

Comment évaluer les allégations d'IA dans une lunette thermique

Plutôt que de demander uniquement si un appareil « possède une IA », comparez ce que fait réellement le traitement.

  1. Vérifiez d'abord le détecteur natif.
    Enregistrez la résolution du détecteur, le pas de pixel, le NETD, la fréquence d'images et les spécifications de l'objectif pertinentes avant d'examiner les allégations de sortie améliorée.
  2. Séparez la résolution native de la résolution améliorée.
    Si une spécification fait référence à la super-résolution, à l’interpolation ou à un mode de sortie amélioré, elle ne doit pas être présentée comme la résolution native du détecteur.
  3. Comparez la même scène avec le traitement activé et désactivé.
    La comparaison la plus utile permet de conserver la distance, la cible, la météo, la mise au point, la palette et le grossissement aussi cohérents que possible.
  4. Regardez le mouvement ainsi que les images fixes.
    Vérifiez si l'amélioration préserve les bords pendant le panoramique et le mouvement de la cible sans décalage excessif, maculage ou image fantôme.
  5. Inspectez les niveaux de zoom numérique plus élevés.
    C’est souvent là que les différences entre l’interpolation de base et la reconstruction plus avancée deviennent les plus faciles à voir.
  6. Évaluez le temps d’exécution séparément.
    Ne présumez pas qu’un algorithme NPU ou AI améliore ou réduit automatiquement la durée de vie de la batterie. Utilisez la durée d'exécution mesurée du produit pour l'ensemble de l'appareil.

L’objectif n’est pas de rejeter le traitement de l’IA. Il s’agit de le mesurer dans le cadre du système d’imagerie complet.

Le traitement de l'IA devrait compléter un bon matériel thermique

La direction la plus utile pour l’IA en optique thermique n’est pas de remplacer les spécifications des détecteurs, des lentilles ou de la sensibilité thermique. Cela améliore l’efficacité avec laquelle les informations thermiques disponibles sont traitées et présentées.

Une plate-forme d'imagerie thermique solide combine donc plusieurs couches : un matériel de détection approprié, des optiques appropriées, une électronique stable, un pipeline de traitement d'image efficace et un écran capable de présenter clairement ce résultat.

L’accélération de l’IA peut devenir un élément important de ce pipeline, en particulier pour les techniques exigeantes en termes de calcul, telles que le débruitage appris ou la super-résolution. Mais le terme « IA » ne devrait jamais faire disparaître les spécifications matérielles sous-jacentes de la comparaison.

Lors de l'examen du gamme de produits Yubeen actuelle, comparez les fonctions liées à l'IA avec le détecteur, l'optique, le champ de vision, la sensibilité thermique, le système d'alimentation et les exigences de l'application prévue.

FAQ

La super-résolution IA augmente-t-elle la résolution native d'un détecteur thermique ?

Non. Le détecteur conserve sa résolution physique d’origine. La super-résolution produit une sortie améliorée ou reconstruite à partir des données du détecteur. Il peut améliorer la perception des détails, la définition des contours ou l'apparence des images agrandies numériquement, mais il n'ajoute pas de pixels au détecteur physique.

La super-résolution de l’IA peut-elle introduire des détails incorrects ?

Oui, cela peut introduire des artefacts de reconstruction sous certaines conditions. Le traitement neuronal estime une représentation à plus haute résolution à partir d’informations d’entrée limitées, de sorte que la sortie améliorée ne doit pas automatiquement être traitée comme une mesure supplémentaire du capteur.

Chaque lunette thermique dotée d’IA utilise-t-elle une NPU ?

Non. L’IA ou les fonctions avancées de traitement d’images peuvent fonctionner sur différents types de processeurs. Un NPU dédié est une implémentation possible conçue spécifiquement pour les charges de travail des réseaux neuronaux, mais le nom de la fonctionnalité à lui seul ne prouve pas qu'un NPU est présent.

Un NPU améliore-t-il automatiquement la durée de vie de la batterie ?

Non. Le matériel d’IA dédié peut exécuter efficacement des charges de travail appropriées, mais la durée de fonctionnement complète de l’appareil dépend de l’ensemble du système électrique et de la manière dont le produit est utilisé. L'autonomie de la batterie doit donc être évaluée à partir de données de test spécifiques au produit plutôt que déduite de la présence d'un NPU.