Apple представила нові функції доступності для Vision Pro, які можуть перетворити цей шолом на заміну для зору, коли вони стануть доступними в visionOS пізніше цього року. Оновлення використовує основну камеру гарнітури для збільшення того, що бачить користувач, або для надання живих описів оточення на основі машинного навчання.

Нові можливості збільшення

Функція збільшення працює не лише з віртуальними об’єктами, а й з реальними. Один з прикладів, наданих Apple, демонструє, як користувач Vision Pro переходить від збільшеного перегляду реального рецепту до програми Reminders, яка також показується в збільшеному форматі для зручності читання. Це вражаючий застосунок для Vision Pro, адже звільняє одну руку для тих, хто міг би скористатися подібними функціями на смартфоні.

Функція VoiceOver

Крім того, в оновленні буде вдосконалено можливості VoiceOver, за допомогою якого користувачі зможуть “описувати навколишнє середовище, знаходити об’єкти, читати документи та багато іншого” у visionOS.

API для розробників

Компанія випустить API, щоб дозволити затвердженим розробникам отримати доступ до камери Vision Pro для створення додатків доступності. Це може бути використано для “живого, персонального допомоги в візуальній ідентифікації в таких додатках, як Be My Eyes, надаючи користувачам більше способів зрозуміти навколишнє середовище без рук”. Це може не здаватися важливим на сьогодні, враховуючи повідомлення про низькі продажі Vision Pro, проте ці функції можуть бути корисними у майбутніх носимих пристроях Apple, таких як навушники AirPods з камерою або смарт-окуляри, схожі на Meta Ray-Ban.

Новий протокол для BCI

Нарешті, Apple повідомила про введення нового протоколу в visionOS, iOS і iPadOS, який підтримує інтерфейси мозок-комп’ютер (BCI) з використанням функції Switch Control, що надає альтернативні методи введення, такі як керування аспектами телефону за допомогою рухів голови, зафіксованих камерою iPhone.

Згідно з повідомленням, Apple розробляла цей новий стандарт BCI у співпраці з компанією Synchron, яка займається імплантами мозку і дозволяє користувачам вибирати значки на екрані, думаючи про них. Зазначається, що технологія Synchron не дозволяє здійснювати рухи миші, які вдалося реалізувати компанії Neuralink ілона Маска.