Cet objet connecté prend des photos de vos repas et identifie ses éléments

Si vous avez déjà utilisé une application de nutrition ou tenu un journal alimentaire pour suivre des éléments tels que votre apport en protéines ou en calories, vous saurez à quel point le processus peut être fastidieux. C’est là qu’intervient The Drop, le premier objet connecté automatisé d’enregistrement des aliments, rassemblant toutes les données nutritionnelles sans aucun effort de votre part.

Fonctionnement de The Drop

The Drop ressemble peut-être à un étrange nez en métal, mais il ressemble en réalité davantage à une paire d’yeux. Des yeux qui suivent chacun de vos mouvements lorsqu’il s’agit de nourriture. Cela promet de simplifier le travail laborieux de suivi nutritionnel. Problème qui est l’une des principales raisons pour lesquelles les gens abandonnent cette tâche.

La principale caractéristique de The Drop est sa caméra. Elle utilise la vision par ordinateur avancée et l’IA pour détecter automatiquement la prise de nourriture. Il prend des photos par intermittence et traite les images via l’IA ; les images étant supprimées peu de temps après, pour garantir la confidentialité de l’utilisateur. Lorsqu’elle détecte de la nourriture ou des boissons dans son champ de vision, la caméra intelligente 4K AI prend plus de photos et évalue l’interaction de l’utilisateur avec les objets.

Ces images sont ensuite soumises au smartphone de l’utilisateur, pour une analyse plus approfondie dans le cloud.

« En introduisant The Drop, nous visons à créer une nouvelle catégorie d’appareils wearables – les trackers de nutrition – similaires aux trackers de fitness et aux montres intelligentes. Notre vision est de permettre aux utilisateurs de prendre facilement le contrôle de leur alimentation et de leur santé. », explique le co-fondateur Rangel Milushev.

Lorsqu’il est activé, l’appareil de 27,6 g – qui peut être attaché aux vêtements avec un fermoir magnétique ou porté autour du cou – analyse les images recueillies pour déterminer ce qui a été mangé par son porteur et en quelle quantité.

Une fois que les ingrédients ont été sélectionnés dans une base de données, ils sont croisés avec les données existantes pour fournir une répartition précise des calories, des protéines, des glucides et des graisses. Bien entendu, étant basé sur l’apprentissage automatique, le « cerveau » de The Drop continuera à se développer en fonction des données qu’il alimente ; le rendant ainsi plus précis et personnalisé au fil du temps.

Application Rex Premium de The Drop

Bien que je n’ai pas mis la main sur l’un d’entre eux, The Drop est la progression automatisée de leur précédente version historique de Nutribot par Rex.fit. Ce dernier analyserait les valeurs nutritionnelles des repas via une photo ou des détails de recette/aliment soumis à l’application. L’équipe affirme que ce nouvel appareil est précis à 92 % et dispose d’une charge de batterie de 16 heures.

Mais je suis curieux de savoir sa capacité à évaluer les repas qui ne sont pas des « hamburgers et frites » ou ceux qui contiennent de nombreux composants cachés. Par exemple, détectera-t-il les alternatives à la viande qui sont désormais très convaincantes et ressemblent au véritable produit animal ?

L’équipe souligne qu’il ne s’agit pas seulement d’un compteur de calories, mais peut essentiellement être un coach de santé pour quels que soient vos objectifs ; qu’il s’agisse de perdre du poids, d’optimiser votre alimentation pour l’entraînement ou simplement d’équilibrer votre alimentation. L’application qui l’accompagne, qui ne nécessite aucun abonnement contrairement à la plupart des technologies de nutrition sur smartphone, proposera ensuite des recettes personnalisées, des plans de repas et des suggestions d’entraînement, et fournira des commentaires importants pour vous aider – sans avoir à vous soucier de consigner vous-même les informations.

« Nous travaillons activement sur l’application Rex Premium, la phase de conception étant désormais terminée et le composant IA entièrement développé. L’assistant IA va au-delà du suivi de base des calories et de la gestion macro en proposant des plans de repas personnalisés et des suggestions d’amélioration diététique. », note l’équipe sur sa page de campagne Kickstarter.

L’application sera déployée pour Android et iOS et sa version finale est prévue pour juillet 2025, et les tests bêta débuteront bientôt.

Voici un bref aperçu des spécifications techniques :

• Processeur : Processeur double cœur 32 bits fonctionnant jusqu’à 240 MHz.
• Sans fil : sous-système Wi-Fi complet 2,4 GHz, BLE : Bluetooth 5.0, Bluetooth mesh.
• Capteurs : caméra 4K, microphone.
• Mémoire : PSRAM 8 M sur puce et Flash 8 Mo, emplacement pour carte SD intégré, prenant en charge 32 Go de FAT.
• Frameworks pris en charge : Compatible avec le runtime ONNX et tflite.
• Langages de développement : Prise en charge de langages tels que Python et C++.
• API et bibliothèques : fournit des API pour l’accès aux données des capteurs, les interfaces de communication et le contrôle du matériel.

Il faudra encore un peu de temps avant que les participants à la campagne de crowdfunding puissent abandonner leurs journaux alimentaires ou leurs applications de journalisation. La livraison est prévue pour le quatrième trimestre 2025. Mais, l’équipe a de grands projets pour The Drop, souhaitant également intégrer d’autres marqueurs de santé tels que l’exercice, pour devenir un guichet unique de suivi du style de vie.

La campagne vient d’être lancée sur Kickstarter, où trois couleurs sont disponibles : noir carbone, bleu métallisé et or. Le pack comprendra également un bracelet en cuir, un câble de chargement USB-C vers USB-A, une broche magnétique et un abonnement à vie à l’application Rex. Une unité vous coûtera 199 $, et un pack double à partir de 349 $.