Découvrez cet appareil photo Raspberry Pi qui prend des photos avec l'IA au lieu de l'objectif

Qu'est-ce qui vous vient à l'esprit lorsque vous pensez à une caméra Raspberry Pi ? Un Pi connecté à la caméra Global Shutter, à la caméra HQ ou au module de caméra 3, n'est-ce pas ? Vous pourriez même penser à la caméra de création Otto a GIF, qui remonte à 2015. Eh bien, le dernier projet est très différent de ce que vous auriez pu voir dans le passé.

Créé par Bjørn Karmann, le projet de caméra Raspberry Pi n'est livré avec aucun objectif. En fait, le créateur ne l'appelle même pas un appareil photo. Au lieu de cela, il passe par Paragraphica. Pourquoi porte-t-il un nom non conventionnel? Il utilise l'IA pour générer une image !

Vous ne savez peut-être pas ce que sont les caméras Raspberry Pi traditionnelles et comment elles fonctionnent. Eh bien, à la base, ces configurations consistent en un module Pi avec un capteur de caméra. Vous pouvez trouver un kit barebone et en construire un pour vous-même, qui vous offrira la possibilité de capturer des photos et des vidéos.

En ce qui concerne les fonctionnalités, une caméra Raspberry Pi traditionnelle peut généralement prendre des vidéos VGA, 720p et 1080p. Et les capteurs haute résolution pour Pi peuvent également prendre des photos de haute qualité.

Cependant, les fonctionnalités seront différentes d'un module à l'autre. Et au cas où vous vous poseriez la question, il existe plusieurs modèles de caméras Pi disponibles officiellement chez Raspberry. Cela inclut le module 5MP d'origine, le module de caméra 8MP 2 et le dernier module de caméra 3. Chacun de ces modules a apporté des mises à niveau par rapport au prédécesseur et a rendu les caméras DIY Raspberry Pi plus pertinentes pour les applications actuelles.

Cela dit, ces configurations traditionnelles utilisent l'interface série de la caméra du Raspberry Pi pour la connexion. Ce connecteur de bus s'intègre à un câble plat flexible. Et pour que l'ensemble de la configuration fonctionne, vous devrez utiliser le terminal intégré ou Python (un langage de codage).

En bref, ces configurations traditionnelles sont essentiellement des caméras de bricolage. Vous pouvez les utiliser pour une variété de projets. Cela inclut le streaming de caméras en direct, la photographie accélérée et les modules de sécurité à domicile. Et la grande partie est qu'il existe des tonnes de guides détaillés disponibles, ce qui permet aux débutants de se lancer plus facilement dans de tels projets.

À première vue, le projet de Bjørn Karmann ne semblera rien de plus qu'un appareil photo classique. Mais au lieu d'un objectif, la caméra Raspberry Pi a un énorme couvercle, qui ressemble au nez d'une taupe à nez étoilé. Pour le viseur, Bjørn Karmann a utilisé un écran sur lequel vous pouvez ajuster les paramètres pour obtenir l'image générée par l'IA.

L'appareil photo est également livré avec une série de cadrans, que vous pouvez régler les paramètres traditionnels de l'appareil photo. Par exemple, avec les cadrans de cette caméra Raspberry Pi, vous pouvez régler le grain du film de l'image. Ils vous permettent également de régler la netteté de l'image générée par l'IA.

Mais la magie ne se produit que lorsque vous appuyez sur le bouton de capture. Ce bouton déclenche le programme AI et lui fait générer une photographie en fonction des paramètres que vous avez sélectionnés.

Les données utilisées par cette caméra Raspberry Pi proviennent de diverses API ouvertes. Cela inclut des informations telles que l'emplacement, l'heure, la date et les points de repère à proximité. La Paragraphica utilise toutes ces informations pour traiter la photo finale. Et comme vous l'avez peut-être deviné, il s'appuie sur une IA texte-image pour l'image.

Maintenant, l'image finalisée que cet appareil photo Raspberry Pi offre diffère de ce que vous obtiendriez d'un appareil photo ordinaire. La Paragraphica n'inclura aucun sujet qui pourrait être juste devant vous. Au lieu de cela, l'image finale contiendra les informations spécifiquement fournies dans l'invite.

En d'autres termes, cette caméra Raspberry Pi n'est pas une alternative à une caméra traditionnelle. Après tout, il n'a pas d'objectif pour capturer la scène en temps réel. Au lieu de cela, il s'agit plutôt d'obtenir des images générées par l'IA de la zone dans laquelle vous vous trouvez. perception seule. »

Pour alimenter le projet, Bjørn Karmann a utilisé un Raspberry Pi 4. Il a créé une coque personnalisée imprimée en 3D pour loger les composants à l'intérieur. Paragraphica utilise un écran tactile pour le viseur qui permet à l'utilisateur de personnaliser la saisie. Et pour obtenir des données de localisation, ce projet contient un module GPS.

En ce qui concerne le logiciel, cette caméra Raspberry Pi fonctionne sur un code écrit par Karmann. Selon lui, le logiciel utilise l'API Stable Diffusion et Python pour créer l'image finale. Tout fonctionne ensemble via Noodl, qui est un outil visuel que les développeurs utilisent pour créer des applications Web.

Présentation - Paragraphica! 📡📷Un appareil photo qui prend des photos en utilisant les données de localisation. Il décrit l'endroit où vous vous trouvez, puis le convertit en une "photo" générée par l'IA.

Voir plus ici : https://t.co/Oh2BZuhRcpour essayer de prendre votre propre photo ici : https://t.co/w9UFjckiF2 pic.twitter.com/23kR2QGzpa

– Bjørn Karmann (@BjoernKarmann) 30 mai 2023

Vous trouverez le schéma détaillé du projet et une ventilation du processus sur le site officiel de Karmann. Et si vous souhaitez créer quelque chose de similaire avec un Raspberry Pi, Karmann a un article de blog dédié que vous pouvez consulter. Alternativement, vous pouvez tester le logiciel par vous-même dans un navigateur via son site Web. Oui, vous n'avez besoin d'aucun matériel pour goûter à cette toute nouvelle expérience.