Multi-Modality Mobile Image Recognition Based on Thermal and Visual Cameras
An effective approach to align image pairs for event detection on mobile through image recognition
Abstract
The advances of mobile computing and sensor technology have turned the mobile devices into powerful instruments. The integration of thermal and visual cameras extends the capability of computer vision, due to the fact that both images reveal different characteristics in images; however, image alignment is a challenge. This paper proposes an effective approach to align image pairs for event detection on mobile through image recognition. We leverage thermal and visual cameras as multi-modality sources for image recognition. By analyzing the heat pattern, the proposed APP can identify the heating sources and help users inspect their house heating system; on the other hand, with applying image recognition, the proposed APP furthermore can help field workers identify the asset condition and provide the guidance to solve their issues.
Paper Download
Jui-Hsin(Larry) Lai , Chung-Ching Lin, Chun-Fu(Richard) Chen, and Ching-Yung Lin, “ Multi-Modality Mobile Image Recognition Based on Thermal and Visual Cameras ”, in Proceedings of IEEE International Symposium on Multimedia, 2015
Patents
Abstract
用于活动监测的热标签。热标签包括：基层，具有多条金属线以提供导电路径；以及图案层，具有位于导电路径的部分上方的一个或多个红外发射特征，其中至少一个红外发射特征耦合到导电路径以根据附近的活动发射预定的红外图案。
Thermal tags for real-time activity monitoring and methods for fabricating the same
Abstract
A method, a device, and a non-transitory computer readable medium for item recommendation based on visual elements. The method includes: determining, by one or more processors, visual elements from an item image of an item; generating, by the one or more processors, an element descriptor for the item based on at least a part of the visual elements; and calculating, by the one or more processors, a compatibility value between the element descriptor and one or more other element descriptors for one or more other items.
Abstract
本発明は、一般に、活動監視に関し、詳細には、プライバシー上の懸念が微小である活動を追跡するサーマル・タグ、およびそのようなサーマル・タグを検出するための方法に関する。
Abstract
本発明は、一般に、活動監視に関し、詳細には、プライバシー上の懸念が微小である活動を追跡するサーマル・タグ、およびそのようなサーマル・タグを製造するための方法に関する。
Thermal tags for real-time activity monitoring and methods for fabricating the same
Abstract
A thermal tag for activity monitoring. The thermal tag includes a base layer having a plurality of metal lines to provide a conductive path, and a pattern layer having one or more infrared emitting features positioned over portions of the conductive path, wherein at least one infrared emitting feature couples to the conductive path to emit a predetermined infrared pattern in accordance with nearby activity.
Infrared detectors and thermal tags for real-time activity monitoring
Abstract
Methods and systems for activity monitoring include capturing an infrared image of an environment that comprises at least one patient being monitored and at least one infrared-emitting tag. A relationship between the patient being monitored and the at least one infrared-emitting tag is determined. An activity conducted by the patient being monitored is determined based on the relationship between the patient being monitored and the at least one infrared-emitting tag. A course of treatment for the patient being monitored is adjusted based on the determined activity.
Thermal tags for real-time activity monitoring and methods for detecting the same
Abstract
A thermal tag includes a power source to generate current along a resistive path and a plurality of infrared-emitting features positioned along the resistive path to emit infrared light along an infrared-emitting pattern, wherein the plurality of infrared-emitting features include one or more infrared-emitting stripes on a first surface of the thermal tag defining a pattern region and a plurality of infrared-emitting dots within a portion of the pattern region to provide a thermal-diffusion resistant pattern for activity monitoring.
Abstract
A thermal tag includes a power source to generate current along a resistive path and a plurality of infrared-emitting features positioned along the resistive path to emit infrared light along an infrared-emitting pattern, wherein the plurality of infrared-emitting features include one or more infrared-emitting stripes on a first surface of the thermal tag defining a pattern region and a plurality of infrared-emitting dots within a portion of the pattern region to provide a thermal-diffusion resistant pattern for activity monitoring.
Étiquettes thermiques pour surveillance d'activité en temps réel et procédés de fabrication associés
Abstract
L'invention concerne une étiquette thermique conçue pour la surveillance d'une activité. L'étiquette thermique comprend une couche de base comportant une pluralité de lignes métalliques pour fournir un chemin conducteur, ainsi qu'une couche de motif comportant un ou plusieurs éléments d'émission infrarouge positionnés sur des parties du chemin conducteur, au moins un élément d'émission infrarouge étant couplé au chemin conducteur pour émettre un motif infrarouge prédéterminé en fonction de l'activité de proximité.
Surveillance d'activité en temps réel à l'aide d'étiquettes thermiques
Abstract
La présente invention concerne une étiquette thermique qui comprend une source d'alimentation pour générer un courant le long d'un trajet résistif et une pluralité d'éléments émettant des infrarouges positionnés le long du trajet résistif pour émettre une lumière infrarouge le long d'un motif émettant des infrarouges, la pluralité d'éléments émettant des infrarouges comprenant une ou plusieurs bandes émettant des infrarouges sur une première surface de l'étiquette thermique définissant une région de motif et une pluralité de points émettant des infrarouges à l'intérieur d'une partie de la région de motif pour fournir un motif résistant à la diffusion thermique destiné à la surveillance d'activité.
Thermo-Tags für die Echtzeit-Aktivitätsüberwachung und Verfahren zu ihrer Herstellung
Abstract
Ein Thermo-Tag für die Aktivitätsüberwachung. Das Thermo-Tag beinhaltet eine Basisschicht mit einer Mehrzahl von Metallleitungen, um eine Leiterbahn bereitzustellen, und eine Musterschicht mit einem oder mehreren infrarotemittierenden Merkmalen, die über Teilen der Leiterbahn angeordnet sind, wobei mindestens ein infrarotemittierendes Merkmal mit der Leiterbahn gekoppelt ist, um gemäß einer in der Nähe stattfindenden Aktivität ein vorbestimmtes Infrarotmuster zu emittieren.
Abstract
热标签包括沿电阻路径产生电流的电源，以及沿电阻路径设置的以沿红外发射图案发射红外光的多个红外发射特征，其中多个红外发射特征包括限定图案区域的热标签的第一表面上的一个或多个红外发射条纹和图案区域的一部分内的多个红外发射点，以提供用于活动监测的抗热扩散图案。
Echtzeit-aktivitätsüberwachung unter verwendung von thermo-tags
Abstract
Ein Thermo-Tag enthält eine Stromquelle zum Erzeugen von Strom entlang eines Widerstandswegs und eine Mehrzahl von infrarotemittierenden Elementen, die entlang des Widerstandswegs positioniert sind, um infrarotes Licht entlang eines infrarotemittierenden Musters auszustrahlen, wobei die Mehrzahl von infrarotemittierenden Elementen einen oder mehrere infrarotemittierende Streifen auf einer ersten Oberfläche des Thermo-Tags enthält, die einen Musterbereich definieren, und eine Mehrzahl von infrarotemittierenden Punkten in einem Abschnitt des Musterbereichs, um ein thermodiffusionsbeständiges Muster zur Aktivitätsüberwachung bereitzustellen.
Demo Videos
Technique introduction
If you cannot see the video below, click the link https://www.youtube.com/embed/uScey5OFrzQ
Automatic alignment for thermal and visible videos
If you cannot see the video below, click the link https://www.youtube.com/embed/niptrfSTBkY
Presentation Slide