Ouvrir le menu principal

MacGeneration

Recherche

ScreenSnapAI fait appel à ChatGPT pour décrire les captures d'écran

Nicolas Furno

Wednesday 10 April 2024 à 11:21 • 13

Logiciels

ScreenSnapAI est un nouvel utilitaire chargé de collecter des captures d’écran réalisées sur le Mac et surtout de leur apporter du sens avec l’aide de ChatGPT. L’app est capable de réaliser de nouvelles captures d’écran ou d’importer des images existantes. Elle extrait systématiquement le texte identifié sur l’image et peut en option la transmettre à OpenAI pour une analyse avancée du contenu avec GPT-4. De quoi améliorer l’identification des éléments importants sur la capture, au-delà du texte, puisque les photos peuvent elles aussi être étudiées par l’intelligence artificielle.

Une capture d’écran réalisée avec ScreenSnapAI avant le passage de ChatGPT… Image MacGeneration.
La même, après son passage : notez l’ajout des mots-clés et d’une description. Image MacGeneration.

Si l’idée est intéressante, la réalisation n’est pas encore à la hauteur. ScreenSnapAI se télécharge gratuitement, dans une version toutefois très limitée : impossible d’importer des images sans payer, il faut obligatoirement utiliser l’outil intégré et ce dernier est bien plus médiocre que celui de macOS. Vous ne pourrez pas sélectionner une fenêtre, ni déplacer la sélection après l’avoir commencé comme avec les captures d’écran du système. Une fois la capture stockée, l’app offre trois analyses gratuites avec un gros défaut : si vous ne cliquez pas sur un bouton pour conserver son travail, il sera perdu et vous devrez utiliser un crédit IA de plus.

Une partie de ces défauts devrait sauter en payant pour la version pro, une opération facturée 9,99 € une fois. Ce faisant, vous pourrez importer des images et les organiser dans des dossiers intelligents. Vous aurez aussi droit à 50 analyses avec GPT-4, puis il faudra payer, à raison de 100 traitements pour 5,99 €. Le développeur précise toutefois sur son site qu’il sera possible à terme d’utiliser sa propre clé OpenAI, un bon point. Reste à savoir si l’analyse proposée par ChatGPT est utile et je suis loin d’être convaincu sur la base de mes trois essais gratuits.

L’analyse en quelques mots tout comme les mots-clés proposés par l’assistant d’OpenAI sont surtout basés sur le texte identifié dans la capture d’écran, pas tellement sur le reste. L’extraction de texte proposée gratuitement par macOS est ainsi aussi bonne, même si ChatGPT garde l’avantage de pouvoir synthétiser le contenu. Cela dit, cette synthèse n’est proposée qu’en anglais à ce stade, alors même que mes captures ont été réalisées sur du texte en français.

Si vous voulez tester, ScreenSnapAI est proposée au téléchargement uniquement via le Mac App Store (une version sera bientôt proposée au téléchargement depuis le site officiel). macOS 13 est nécessaire au minimum et l’interface n’est pas traduite en français.

Rejoignez le Club iGen

Soutenez le travail d'une rédaction indépendante.

Rejoignez la plus grande communauté Apple francophone !

S'abonner