Test de produit
iPad Mini : entre liseuse électronique et ordinateur de poche
par Michelle Brändle
Test Apple Scribble : l'IA vs l'écriture liée
29/6/2020
Dans la version 14 d'iPadOS, le logiciel Apple reconnaîtra les notes écrites avec le Pencil comme du texte. La fonctionnalité est à environ 90 % de là où elle devrait être. Une belle écriture attachée ne pose aucun problème au logiciel, mais la langue allemande si.
Et pour vraiment nous amuser, nous testerons jusqu'où ira Scribble avant de jeter l'éponge. Comme mon écriture est généralement considérée comme illisible – parfois je ne peux pas lire mes propres notes, mais heureusement, je me souviens de ce que j'ai écrit –, je veux savoir à quel point je peux gribouiller avant que Scribble rende les armes.
Si l'explication de la complexité et la problématique de la reconnaissance de l'écriture manuscrite ne vous intéressent pas, vous pouvez passer au sous-titre « Scribble : caché, mais actif ».
Écriture manuscrite : plus complexe que prévu
Avant de commencer le grand test, quelques mots sur l'écriture manuscrite et ses particularités, ses problèmes et ses avantages. Si vous voulez programmer la reconnaissance de l'écriture, vous êtes confronté à une complexité presque infinie. Lorsque vous lisez une écriture, votre cerveau fait une abstraction extrême.
J'ai demandé à trois collègues s'ils pouvaient écrire le mot « Digitec » sur un morceau de papier.
Si une machine doit comprendre cela, alors elle est confrontée à des images, pas à des écritures. Car lorsque vous tapez sur le clavier, quelle que soit la police que vous choisissez, un « D » est toujours un « D ». Même si elle est écrite en Wingdings, la machine a stocké une valeur qui lui permet d'interpréter la lettre comme un « D » sans se tromper.
Mais Graffiti ne s'est pas imposé et la reconnaissance de l'écriture par le logiciel est passée à la trappe. Apple et l'univers Android ont livré des claviers sur leurs tablettes et ont passé sous silence la reconnaissance de l'écriture manuscrite. Des claviers matériels, filaires et sans fils, ont été construits.
L'idée de la reconnaissance de l'écriture est cependant restée dans les esprits des développeurs et Apple prétend maintenant avoir résolu le problème environ 25 ans après l'idée.
Scribble : caché, mais actif
Lors de la démo présentée dans le cadre de la Key Note Apple de la World Wide Developer Conference (WWDC), la fonctionnalité n'a été montrée qu'en action, et non pas dans sa mise en œuvre. Bonne nouvelle : Scribble est activé par défaut. Dans votre iPad OS, les paramètres se trouvent sous Settings → Apple Pencil.
Typiquement pour Apple, à part la fonction on/off, vous n'obtenez pas beaucoup de réglages. Mais qu'y aurait-il à ajuster ? Vous voulez écrire, l'iPad doit reconnaître et l'IA doit fonctionner. Vous n'avez pas besoin de réglages du genre « Niveau de détection : élevé » ou autre.
C'est encore un peu inhabituel. Surtout que dans ma tête, je pense toujours à des choses comme « est-ce que l'iPad reconnaît ça ? ». En général oui, des fois non.
Sans IA, rien ne fonctionne
Par conséquent, le système pourrait avoir des problèmes avec « Digitec » ou « digitec ». Bien que l'entreprise soit un géant sur le marché suisse, digitec est totalement insignifiante dans le contexte de l'Internet mondial.
Scribble est rapide. L'IA reconnaît certains mots si rapidement qu'il est presque impossible de prendre des captures d'écran de l'écriture dans les champs de recherche. Impressionnant.
Copier / coller ; pénible, mais fonctionnel
Scribble fonctionne également dans Notes, le bloc-notes Apple. Si vous écrivez quelque chose, vous pouvez le sélectionner et le copier. Attention : si vous ne sélectionnez que « Copy », iPadOS vous copie le graphisme de l'écriture. Vous devez sélectionner « Copy as Text » pour copier le texte sous forme de texte. C'est un peu pénible, mais compréhensible. Après tout, que faire si vous souhaitez seulement copier le graphisme un jour ?
Le test de résistance : quand Scribble échoue-t-il ?
Le problème : ce n'est pas parce qu'il existe des logiciels pour reconnaître l'écriture attachée que je veux réapprendre à écrire. Car si le fabricant prétend que mon écriture est reconnue, alors je veux pouvoir utiliser mon écriture. Et, pour mon cas, c'est l'écriture liée, enseignée à travers des années d'écriture au stylo à bille sur du papier faisant presque à chaque fois office de brouillon.
Je soupçonne donc que quelque part se trouve un point où le logiciel rendra les armes. Le test est censé se faire avec le mot « Apple ». J'écris dans Notes, je copie et je cherche dans Google ce que le logiciel a reconnu.
Comme prévu, « Apple » en caractères d'imprimerie fonctionne parfaitement.
J'écris donc Apple en écriture liée soignée. Soignée, selon mes critères. C'est comme ça que j'écris quand je veux écrire quelque chose que d'autres personnes devraient pouvoir lire. Ce n'est pas toujours le cas, mais Scribble s'en tire bien.
Voilà comment j'écris quand je prends des notes. J'en suis au stade « je n'arrive plus à me relire, mais je sais ce que je voulais écrire ». iPadOS me propose « Copy as Text », donc cela pourrait être n'importe quoi. Il reconnaît l'écriture en tant qu'écriture. Encore mieux : iPadOS reconnaît le gribouillage comme « Apple ».
Ajoutons donc de la complexité. Mais cette fois-ci, seulement dans une écriture liée et laide. Je remarque que l'écriture sur le verre de l'iPad est extrêmement laborieuse et glissante. Donc si vous voulez écrire beaucoup à la main sur l'iPad, je vous recommande fortement d'utiliser un protecteur d'écran comme Paperlike.
Normalement, je devrais écrire ces mots-clés directement dans la boîte de recherche Google, mais je ne pourrais pas vous montrer à quoi Scribble doit faire face. C'est pourquoi j'écris dans Notes et fais du copier-coller dans Google.
Ça ne marche qu'à moitié. Scribble ne reconnaît pas « Everything is awesome », mais « Everything is ansane ». Est-ce que le mot « ansane » existe ? J'espère que Google remarquera que ce n'est pas un mot, qu'il ajoutera donc un peu d'IA à l'enchaînement de lettres et reconnaîtra « Awesome ». Non, je trouve des noms de groupes bizarres et autres trucs du genre, mais pas la chanson du film.
Mon écriture est généralement si illisible qu'au fil des ans, j'ai trouvé un mot que personne ne peut vraiment lire du premier coup. Parce que dans mon cas, les lettres « n », « m », « i », « s », « v », « w », « e » et « u » sont constituées du même élément visuel : ∧.
Testons voir ma théorie avec le mot :
Oui, c'est un mot allemand correct. Il est même dans le Duden. Exactement comme je l'ai écrit. Et c'est parce qu'il ressemble à un groupement aléatoire de pics que je pense que Scribble va rendre les armes.
J'écris, je copie et colle le tout dans Google. « Nomuinn ». Je dois accorder à Scribble que « om » est correct. Le reste ? Non. La recherche sur Google pour « Nomuinn » ne donne alors pas grand-chose. Des données climatologiques de l'État américain du Kansas, par exemple.
Si vous arrivez à me dire ce que j'ai écrit, je vous offre un petit rien. C'est un peu comme comme un prix normal, sauf que vous ne recevez rien d'autre qu'un remerciement écrit à la main. Avec un petit cœur. Rédigé sur l'iPad.
Le problème
Voilà, j'ai fini. J'attends de savoir ce que Luca a à dire sur mon magnifique e-mail.
Journaliste. Auteur. Hackers. Je suis un conteur d'histoires à la recherche de limites, de secrets et de tabous. Je documente le monde noir sur blanc. Non pas parce que je peux, mais parce que je ne peux pas m'en empêcher.
Smartphone
Suivez les thèmes et restez informé dans les domaines qui vous intéressent.
Test de produit
Nos expertes et experts testent les produits et leurs applications, de manière indépendante et neutre.
Tout afficher
