Последните актуализации на OpenAI за ChatGPT промениха играта за хората със зрителни увреждания, като предложиха инструменти, които подобряват независимостта, достъпността и способността за по-безпроблемно навигиране в цифровия и физическия свят.
Две забележителни функции в тази версия са споделяне на екрана с взаимодействие и функцията Live View, която използва камерата на устройството, за да опише заобикалящата ви среда. И двете функции се грижат специално за уникалните нужди на потребители с увредено зрение.
Споделяне на екрана и взаимодействие: цифров спътник за вашия телефон
Възможността да споделяте екрана си с ChatGPT отваря нов свят от възможности за хората със зрителни увреждания. Тази функция позволява на потребителите да разчитат на ChatGPT в реално време, докато навигират в своите телефони, създавайки виртуален асистент, който помага за интерпретиране, четене и взаимодействие със съдържанието на екрана.
Как работи?
Когато споделянето на екрана е активирано, ChatGPT може да идентифицира и опише елементите на екрана на вашия телефон, като например:
• Икони на приложения
• Известия
• Текст в уебсайтове или документи
• Бутони, превключватели и настройки в приложенията
Например, ако превъртате през входящата си електронна поща, ChatGPT може да прочете заглавията на имейлите, информацията за подателя и часа, в който са получени. Ако конкретен имейл привлече вниманието ви, ChatGPT може да го отвори вместо вас, да обобщи съдържанието и дори да ви помогне с изготвянето и изпращането на отговор.
Взаимодействието не се ограничава до четене; ChatGPT също така може да помогне и при изпълнението на задачи. Независимо дали става въпрос за онлайн поръчка, публикуване в социални медии или навигиране в меню с настройки, ChatGPT действа едновременно като ръководство и инструмент за изпълнение на команди. Потребителите могат устно да инструктират ChatGPT, като например „Щракнете върху бутона за отговор“ или „Намерете думата „настройки“ на тази страница“ и асистентът ще постави фокуса върху тях.
Ключови ползи
• Ефективна навигация: Пропуснете процеса на проба и грешка, като плъзгате на сляпо по екрана. ChatGPT определя точно къде се намирате и ви насочва директно до вашата дестинация.
• Повишена продуктивност: Задачи, които може да ви отнемат няколко минути, сега могат да бъдат изпълнени за секунди, спестявайки време и намалявайки разочарованията.
• Подобрена достъпност: Преодолява пропуски в приложения или интерфейси, които нямат подходящи функции за достъпност, като описва или взаимодейства с лошо обозначени бутони или менюта.
Преглед на живо: Описване на физическата среда чрез вашата камера
Новата функция Live View извежда достъпността извън дигиталната сфера и я пренася във физическия свят, правейки ежедневната навигация и изследване по-интуитивни за хора с увредено зрение. Като използва камерата на вашето устройство, ChatGPT може да обработва и описва заобикалящата ви среда в реално време.
Как работи?
С Live View потребителите могат да активират своята камера и да я насочат към околната среда. ChatGPT анализира сцената чрез компютърно зрение и предоставя подробни описания. Например, ако стоите в голяма кухня, може да получите описание на:
• Позицията на предмети като плотове, печки или прибори.
• Текст върху уреди или хранителни опаковки (напр. „на Етикета на кутията пише „Спагети 500 г.“).
• Цветове, шарки и дори приблизителни размери.
В друга ситуация, като например ходене в непозната среда, Live View може да идентифицира забележителности, улични знаци и обекти по пътя ви (напр. „Има пейка отляво на около 10 метра“ или „Знакът по-горе казва „улица Алабин.“). Той може да чете и цифрови екрани или табла, като тези на автобусните спирки или гари, за да предостави важна информация за пътуването ви.
Случаи на употреба
• Помощ при навигация: Live View е безценен в непознати среди, като летища, молове или непознати квартали, като гарантира, че можете да навигирате безопасно и независимо.
• Идентификация на обект: Независимо дали търсите предмет в килера или избирате правилния инструмент от кутия, Live View помага да изясните какво има пред вас.
• Четене на печатен текст: От менюта на ресторанти до етикети на лекарства, камерата улавя и превежда визуална информация в устни описания.
Ключови ползи
• Безопасност: Чрез идентифициране на препятствия или опасности, Live View подобрява мобилността и намалява риска от инциденти.
• Увереност в публичните пространства: Вместо да разчитат на други за насоки, потребителите могат самостоятелно да събират информация за заобикалящата ги среда.
• По-голяма информираност: От естетически детайли като цветове до практични детайли като табели, Live View предоставя богати описания, които разширяват разбирането на потребителя за света около тях.
Това, което прави тези функции особено мощни, е как те се допълват една друга. Докато споделянето на екрана позволява по-голяма независимост при навигирането в цифрова среда, Live View дава възможност на потребителите да се ангажират по-уверено с физическата среда. Заедно те гарантират, че потребителите с увредено зрение не са просто пасивни получатели на информация, а активни участници в цифровия и физическия свят.
Източник: verbit.ai
