Tech • IA • Crypto
Anthropic vient de changer à jamais la façon de développer des compétences (enregistrement d’écran)
7/10INTRO
Anthropic a introduit une fonctionnalité qui enregistre les actions et la voix des utilisateurs afin de générer automatiquement des compétences Claude réutilisables, dans le but de simplifier l’automatisation sans programmation manuelle.
POINTS CLÉS
L’enregistrement d’écran devient une entrée d’automatisation
La nouvelle fonctionnalité de Claude Co-work permet d’enregistrer l’activité à l’écran, y compris les clics, la saisie et les instructions vocales. Claude analyse ensuite la session et la transforme en une “compétence” structurée et réutilisable, évitant de décrire manuellement chaque étape dans des prompts texte.
Apprentissage guidé par la voix
Les utilisateurs peuvent commenter leurs actions en temps réel, “enseignant” ainsi Claude pendant l’exécution d’une tâche. Cela reproduit la formation d’un assistant humain et rend l’automatisation plus intuitive pour des processus difficiles à décrire précisément par écrit.
Décomposition automatisée des workflows
Après l’enregistrement, Claude traite des dizaines d’étapes et captures d’écran, transcrit la parole et génère un fichier détaillé. Celui-ci inclut l’usage des outils, des instructions pas à pas, une logique de décision et des cas limites, formant un plan d’automatisation complet.
Exemple: idéation de contenu
Un cas présenté consistait à extraire des commentaires YouTube, les coller dans un tableur et évaluer leur potentiel comme idées de vidéos. Claude a transformé ce processus en pipeline structuré avec règles de filtrage et critères d’évaluation.
Atout pour les tâches basées sur le navigateur
La fonctionnalité est particulièrement utile pour les tâches nécessitant une interaction navigateur, comme naviguer sur des sites, copier des données ou remplir des formulaires, souvent difficiles à exécuter de façon fiable via des instructions textuelles seules.
Limites face aux intégrations natives
Pour les applications disposant d’intégrations directes, appelées connecteurs (ex. Slack, Gmail, Google Drive), les API structurées restent plus fiables. Les compétences enregistrées peuvent être moins précises que l’accès direct aux systèmes.
Concurrence avec les plateformes d’intégration
Des outils comme Zapier, qui relient des milliers d’applications, peuvent rester supérieurs pour l’automatisation multi-plateformes, grâce à des intégrations plus stables et évolutives que l’imitation d’actions utilisateur dans un navigateur.
Enjeux de confidentialité et de sécurité
La fonctionnalité soulève des questions importantes, car elle capture l’activité à l’écran et la voix. Il est recommandé de ne pas exposer de données sensibles (mots de passe, informations confidentielles), ce qui souligne les risques en usage réel.
Vers un apprentissage passif des workflows
Cette évolution s’inscrit dans une tendance où les systèmes d’IA apprennent directement des comportements utilisateurs. Certains expérimentent déjà l’enregistrement continu pour optimiser leurs processus, laissant entrevoir une IA capable d’observer et d’améliorer les workflows de façon autonome.
CONCLUSION
La création de compétences par enregistrement chez Anthropic marque un pas vers une automatisation plus intuitive, mais son utilité dépend des cas d’usage, avec des avantages surtout dans le navigateur et des enjeux persistants de fiabilité et de confidentialité.