Flo's Weblog | Apple News and more... Alles über Apple und Gadgets

Eine der großen Neuerungen in iPadOS 14 ist die Möglichkeit, mit dem Apple Pencil auch Formularfelder, beispielsweise im Web auszufüllen, Adressen in die Suchleiste von Safari einzugeben, Textnachrichten zu verfassen oder mit der eigenen Handschrift in Word-Dokumenten zu schreiben. Apple nennt die Funktion, die die Eingaben anschließend dann in gedruckten Text umwandelt "Scribble". Zur Entwicklung der neuen Funktion hat sich nun Apples Software-Chef Craig Federighi in einem Interview mit den Kollegen von Popular Mechanics geäußert und dabei auch gleich noch den einen oder anderen Einblick in ihre Funktionsweise geliefert.

Federighi erklärt, dass die Basis für Scribble eine vorausgegangene Datensammlung der verschiedensten Handschriften der Nutzer gewesen ist. Hierzu habe man Nutzer auf der ganzen Welt gewinnen können und sie mit dem Apple Pencil Schriftproben abgeben lassen. Nur auf diese Weise sei es möglich gewesen, eine zuverlässige Handschriftenerkennung zu gewährleisten. Das bloße Analysieren von handgeschriebenen Inhalten reichte für Apples Ansatz nicht aus, da aus Datenschutzgründen auch bei Scribble die komplette Analyse und Verarbeitung auf dem Gerät selbst erfolgt. Also benötigte man einen Weg, der direkt beim Ziehen der Linien, also beim Formen der Buchstaben erkennen kann, welches Wort gerade geschrieben wird.

"When it comes to understanding (handwriting) strokes, we do data-gathering. We find people all over the world, and have them write things. We give them a Pencil, and we have them write fast, we have them write slow, write at a tilt. All of this variation. [...] If you understand the strokes and how the strokes went down, that can be used to disambiguate what was being written. [...] It’s gotta be happening in real time, right now, on the device that you’re holding,” Federighi said. “Which means that the computational power of the device has to be such that it can do that level of processing locally."

Das komplette Interview ist durchaus einen Abstecher wert und kann bei den Kollegen von Popular Mechanics eingesehen werden.

YouTube Direktlink