Функция Scribble в iPadOS 14 позволяет с помощью Apple Pencil вручную вписывать текст в любом месте, будь то окно авторизации или текстовый документ, и система автоматически распознает его и трансформирует в печатный. Таким образом можно писать поисковые запросы в браузере, нужный адрес в картах, логин и пароль при регистрации и т. д. Для этого систему научили с высокой точностью распознавать почерк людей. По словам Крейга Федериги, им пришлось собрать действительно много данных.
«Когда дело доходит до понимания почерка, мы собираем данные. Мы находим людей по всему миру и просим их писать. Мы даём им Pencil и просим писать быстро, медленно, под наклоном. Самыми разными способами», — рассказал топ-менеджер Apple.
Крейг Федериги отметил, что их метод отличается от сравнительно простого сканирования и анализа существующих почерков. Им было недостаточно статических примеров. Для создания Scribble необходимо было зафиксировать штрихи, образующие каждую букву. Понимание того, что значит каждый штрих и как он написан, позволяет избавиться от неоднозначности при определении того, что человек пишет.
Как отметил глава Apple по разработке программного обеспечения, cвязка из производительного железа и технологий машинного обучения позволяет распознавать почерк и предсказывать отдельные символы и слова целиком в режиме реального времени прямо на устройстве, без необходимости отправки этих данных на серверы.
Источник: 4pda.ru