RU2421779C2 - Звуковая обратная связь при навигации по меню - Google Patents

Звуковая обратная связь при навигации по меню Download PDF

Info

Publication number
RU2421779C2
RU2421779C2 RU2008150853/08A RU2008150853A RU2421779C2 RU 2421779 C2 RU2421779 C2 RU 2421779C2 RU 2008150853/08 A RU2008150853/08 A RU 2008150853/08A RU 2008150853 A RU2008150853 A RU 2008150853A RU 2421779 C2 RU2421779 C2 RU 2421779C2
Authority
RU
Russia
Prior art keywords
menu
sound
items
item
intended
Prior art date
Application number
RU2008150853/08A
Other languages
English (en)
Other versions
RU2008150853A (ru
Inventor
АЛЬМОС Ранни-Лисе ЕЛЬМЕЛАНН (NO)
АЛЬМОС Ранни-Лисе ЕЛЬМЕЛАНН
Original Assignee
Сони Эрикссон Мобайл Коммьюникейшнз Аб
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Сони Эрикссон Мобайл Коммьюникейшнз Аб filed Critical Сони Эрикссон Мобайл Коммьюникейшнз Аб
Publication of RU2008150853A publication Critical patent/RU2008150853A/ru
Application granted granted Critical
Publication of RU2421779C2 publication Critical patent/RU2421779C2/ru

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • User Interface Of Digital Computer (AREA)
  • Telephone Function (AREA)

Abstract

Изобретение относится к устройствам для представления информации с навигацией в структуре меню. Технический результат заключается в обеспечении обратной связи для информирования пользователя, в каком месте структуры меню он находится. Устройство содержит блок генерации звука, по меньшей мере, один первый блок ввода пользователя, блок управления, который обеспечивает выбираемые пункты в структуре меню, причем пункты связаны с функциями, приложениями или настройками устройства для представления информации, а каждый пункт связан, по меньшей мере, с одним звуком, и при обнаружении активированного определенного пункта с помощью блока ввода пользователя передается команда блоку (генерации звука) генерации звука, связанного с этим пунктом. При этом генерируют определенный звук, так чтобы он воспринимался как исходящий из точки между, по меньшей мере, двумя динамиками, связанными с устройством, что указывает на направление перемещения в структуре меню относительно определенного пункта меню без представления визуальной информации, относящейся к направлению перемещения в структуре меню относительно определенного пункта меню. 4 н. и 21 з.п.ф-лы, 4 ил.

Description

ОБЛАСТЬ ТЕХНИКИ, К КОТОРОЙ ОТНОСИТСЯ ИЗОБРЕТЕНИЕ
Настоящее изобретение относится к области устройств для представления информации, в частности к способу навигации по меню устройства для представления информации, устройствам для представления информации с навигацией в структуре меню, а также компьютерным программам для навигации в структуре меню устройства для представления информации.
УРОВЕНЬ ТЕХНИКИ
Устройства для представления информации, например в виде мобильных телефонов, сегодня имеют все больше различных функций и приложений. Чтобы осуществить выбор между различными функциями и приложениями, а также выполнить настройку этих функций и приложений, устройство обычно снабжается системой меню, в котором осуществлена привязка пунктов к этим функциям, приложениям и настройкам.
Чтобы осуществлять навигацию между различными пунктами меню, структура пунктов меню имеет логическое построение, что упрощает их привязку. Такая структура меню обычно представлена пользователю устройства в визуальном виде на дисплее. Однако это накладывает ограничения для пользователей таких устройств. Например, незрячие люди не могут легко осуществлять навигацию по структуре меню. Также затруднительно это делать людям, занятым другим делом, например, водителям автомобиля. Таким образом, имеется множество ситуаций, когда было бы преимуществом дать пользователю возможность осуществлять навигацию по пунктам меню устройства для представления информации способом, не требующим просмотра дисплея. Для осуществления такого способа навигации необходима обратная связь, информирующая пользователя, в каком месте структуры он находится.
СУЩНОСТЬ ИЗОБРЕТЕНИЯ
Настоящее изобретение предназначено для решения проблемы обеспечения обратной связи для информирования пользователя, в каком месте структуры он находится, в том случае, когда получение визуальной информации невозможно или нежелательно.
Задачей настоящего изобретения является предоставление способа, обеспечивающего возможность управления меню в структуре меню устройства для представления информации, обеспечивающего обратную связь для информирования пользователя, в каком месте структуры он находится, в том случае, когда получение визуальной информации невозможно или нежелательно.
В соответствии с первым аспектом настоящего изобретения задача осуществляется с помощью способа, обеспечивающего возможность управления меню в структуре меню устройства для представления информации, содержащего следующие этапы:
обеспечивают выбираемые пункты в структуре меню, причем пункты относятся к функциям, приложениям или настройкам устройства для представления информации,
связывают каждый пункт, по меньшей мере, с одним предназначенным звуком и;
при обнаружении активирования определенного пункта генерируется звук, связанный с этим пунктом.
Второй аспект данного изобретения направлен на способ, содержащий признаки первого аспекта, в котором этап, по меньшей мере, управления генерацией звука содержит генерацию звука.
Третий аспект данного изобретения направлен на способ, включающий в себя признаки первого аспекта, причем свойства звуков пунктов взаимосвязаны для индикации направления перемещения и/или положения в структуре в зависимости от активированных пунктов в структуре.
Четвертый аспект данного изобретения направлен на способ, включающий в себя признаки третьего аспекта, в котором звуки обеспечены с различной частотой для индикации направления перемещения и/или положения в структуре в зависимости от активированных пунктов.
Пятый аспект данного изобретения направлен на способ, включающий в себя признаки третьего аспекта, причем каждый звук обеспечен, по меньшей мере, одним тоном, причем количество тонов каждого звука характеризует направление перемещения и/или положения в структуре в зависимости от активированных пунктов.
Шестой аспект данного изобретения направлен на способ, включающий признаки третьего аспекта, в котором звуки обеспечены в качестве голосовой речевой информации о направлении перемещения и/или положения в структуре в зависимости от активированных пунктов.
Седьмой аспект данного изобретения направлен на способ, включающий в себя признаки третьего аспекта, в котором звуки обеспечены в качестве стереозвуков, воспринимаемых как находящиеся в различных точках структуры.
Восьмой аспект данного изобретения направлен на способ, включающий в себя признаки первого аспекта, в котором структура включает в себя несколько групп пунктов, причем, по меньшей мере, один пункт из группы связан с дополнительной группой пунктов.
Девятый аспект данного изобретения направлен на способ, включающий в себя признаки восьмого аспекта, в котором звуки, обеспеченные для нескольких пунктов внутри группы, являются музыкальными звуками определенного типа.
Десятый аспект данного изобретения направлен на способ, включающий в себя признаки первого аспекта, в котором каждый пункт обеспечен одним звуком для каждого направления, в котором перемещение может быть сделано относительно этого пункта.
Другой задачей данного изобретения является обеспечение управления меню устройства для представления информации, обеспечивающее обратную связь для информирования пользователя, в каком месте структуры он находится, если визуальная информация недоступна или нежелательна.
В соответствии с одиннадцатым аспектом данного изобретения решение задачи достигается с помощью устройства для представления информации, обеспечивающего возможность управления меню в структуре меню, причем устройство содержит
по меньшей мере, один блок ввода пользователя; и
блок управления, выполненный с возможностью
обеспечения выбираемых пунктов в структуре меню, причем пункты относятся к функциям, приложениям или настройкам устройства для представления информации,
связывания каждого пункта, по меньшей мере, с одним, предназначенным звуком, и;
при обнаружении активирования пользователем определенного пункта посредством блока ввода пользователя передачи команды блоку генерации звука для генерации звука, связанного с этим пунктом.
Двенадцатый аспект данного изобретения направлен на устройство, включающее в себя признаки одиннадцатого аспекта и дополнительно содержащее блок генерации звука, выполненный с возможностью генерирования этого звука.
Тринадцатый аспект данного изобретения направлен на устройство, включающее в себя признаки одиннадцатого аспекта, причем свойства звуков пунктов взаимосвязаны для индикации направления перемещения и/или положения в структуре в зависимости от активированных пунктов в структуре.
Четырнадцатый аспект данного изобретения направлен на устройство, включающее в себя признаки тринадцатого аспекта, в котором звуки обеспечены с различной частотой для индикации направления перемещения и/или положения в структуре в зависимости от активированных пунктов.
Пятнадцатый аспект данного изобретения направлен на устройство, включающее в себя признаки тринадцатого аспекта, причем каждый звук обеспечен, по меньшей мере, одним тоном, причем количество тонов каждого звука характеризует направление перемещения и/или положения в структуре в зависимости от активированных пунктов.
Шестнадцатый аспект данного изобретения направлен на устройство, включающее в себя признаки тринадцатого аспекта, в котором звуки обеспечены в качестве голосовой речевой информации о направлении перемещения и/или положения в структуре в зависимости от активированных пунктов.
Семнадцатый аспект данного изобретения направлен на устройство, включающее в себя признаки тринадцатого аспекта, причем звуки обеспечены в качестве стереозвуков, воспринимаемых как находящиеся в различных точках структуры.
Восемнадцатый аспект данного изобретения направлен на устройство, включающее в себя признаки одиннадцатого аспекта, причем структура меню включает в себя несколько групп пунктов, причем, по меньшей мере, один пункт группы связан с дополнительной группой пунктов.
Девятнадцатый аспект данного изобретения направлен на устройство, включающее в себя признаки восемнадцатого аспекта, причем звуки, обеспеченные для нескольких пунктов внутри группы, являются музыкальными звуками определенного типа.
Двадцатый аспект данного изобретения направлен на устройство, включающее в себя признаки одиннадцатого аспекта, причем каждый пункт обеспечен одним звуком для каждого направления, в котором перемещение может быть сделано относительно этого пункта.
Двадцать первый аспект данного изобретения направлен на устройство, включающее в себя признаки одиннадцатого аспекта, причем устройство является переносным электронным устройством.
Двадцать второй аспект данного изобретения направлен на устройство, включающее в себя признаки двадцать первого аспекта, причем устройство является переносным устройством связи.
Двадцать третий аспект данного изобретения направлен на устройство, включающее в себя признаки двадцать второго аспекта, причем устройство является мобильным телефоном.
Двадцать четвертый аспект данного изобретения направлен на устройство представления информации, обеспечивающее возможность управления меню в структуре меню, содержащее:
средство для обеспечения выбираемых пунктов в структуре меню, причем пункты относятся к функциям, приложениям или настройкам устройства для представления информации,
средство для связывания каждого пункта с предназначенным звуком и;
средство, которое при обнаружении активирования определенного пункта, по меньшей мере, передает команду генерации звука, связанного с этим пунктом.
Другой задачей настоящего изобретения является предоставление компьютерной программы для управления меню в структуре меню, обеспечивающей обратную связь для информирования пользователя, в каком месте структуры он находится, в том случае, когда получение визуальной информации невозможно или нежелательно.
В соответствии с двадцать пятым аспектом настоящего изобретения задача осуществляется с помощью компьютерной программы, обеспечивающей возможность управления меню в структуре меню устройства для представления информации и содержащей компьютерный программный код, который при загрузке в устройство для представления информации
обеспечивает выбираемые пункты в структуре меню, причем пункты относятся к функциям, приложениям и настройкам устройства для представления информации,
связывает каждый пункт с одним предназначенным звуком, и
при обнаружении активирования определенного пункта передает команду для генерации звука, связанного с этим пунктом.
Изобретение имеет следующие преимущества. Оно дает возможность пользователю непосредственно получать информацию о направлении перемещения, не глядя на устройство для представления информации. Это является преимуществом для незрячих людей или людей, занятых другим делом, не позволяющим им смотреть на устройство. Это также позволяет использовать устройства без дисплея или подсоединения к устройству, отображающему структуру меню без дисплея. Осуществление изобретения не требует больших затрат, так как большинство функций, необходимых для осуществления изобретения, уже имеется в устройствах для представления информации. Дополнительно требуется лишь компьютерная программа.
Следует заметить, что термин «содержит/содержащий» используется в данном описании для перечисления признаков чисел, этапов или составляющих, но не исключает наличия дополнительных признаков чисел, этапов, составляющих или их групп.
КРАТКОЕ ОПИСАНИЕ ЧЕРТЕЖЕЙ
Более подробное описание изобретения дано на прилагаемых чертежах, а именно:
на фиг. 1 показан вид спереди устройства для представления информации в виде мобильного телефона,
на фиг. 2 изображена блок-схема относящихся к изобретению элементов внутреннего устройства телефона, представленного на фиг. 1,
на фиг. 3 показана система структуры меню в соответствии с изобретением, а
на фиг. 4 представлена схема последовательности действий способа в соответствии с изобретением.
ПОДРОБНОЕ ОПИСАНИЕ ВАРИАНТОВ ОСУЩЕСТВЛЕНИЯ ИЗОБРЕТЕНИЯ
На фиг. 1 показан вид спереди устройства для представления информации 10 в соответствии с изобретением. Предпочтительным вариантом осуществления изобретения является мобильный телефон 10, включающий в себя дисплей 24, клавиатуру 12 с некоторым количеством блоков ввода пользователя в виде клавишей, где первый блок 14 ввода пользователя является первой программной клавишей, второй блок 16 ввода пользователя - второй программной клавишей, третий блок 18 ввода пользователя является джойстиком, который обеспечивает перемещение вверх, вниз, налево и направо, а четвертый блок 20 ввода пользователя - это клавиша «возврата», функционирование которой более подробно будет описано далее. Помимо возможности делать вызовы и отвечать на вызовы, клавиша 18 используется для ввода информации, например, выбора функций и приложений и ответа на приглашение, а дисплей 24 обычно используется для отображения функций и приглашений пользователю телефона. Первый, второй, третий и четвертый блоки ввода 14, 16, 18 и 20 пользователя могут использоваться для управления системой меню в этом телефоне. Телефон также включает в себя блок генерации звука в виде динамика 26, выполненного с возможностью издавать звуки для пользователя телефоном. Мобильный телефон является лишь примером переносного устройства связи. Переносное устройство связи, в свою очередь, является одним из видов переносных электронных устройств. Все типы этих устройств являются устройствами для представления информации, имеющими описанную структуру меню. Другими типами устройств, помимо мобильных телефонов, являются КПК (карманные персональные компьютеры), наладонные компьютеры, ноутбуки, смартфоны и игровые приставки. Изобретение может использоваться также в персональных компьютерах, телевизорах, телевизионных приставках для приема и декодирования сигналов цифрового телевидения, в стерео- и видеоустройствах управления или в приборах любого типа, использующих структуру меню для представления информации потребителю.
На фиг. 2 показана блок-схема различных узлов телефона 10, относящегося к представленному изобретению. Дисплей 24 и клавиатура 12 показаны как отдельные узлы, соединенные с блоком 28 управления. Блок 28 управления подключен к блоку 30 привода динамика, который соединен с динамиком 26 для привода его в действие, к запоминающему устройству 32 звуков пункта меню и к функциональному блоку 34, выполненному с возможностью выполнения функции, которую выбирает пользователь телефона путем выбора пунктов в системе меню. Должно быть понятно, что блок 28 управления может быть связан с несколькими другими функциональными блоками для выполнения других функций, приложений и настроек телефона. Однако для лучшего разъяснения изобретения представлена только одна функция.
На фиг. 3 представлена логическая структура 36 одного примера системы меню в соответствии с данным изобретением. Система 36 меню имеет иерархическую структуру пунктов, которые могут быть выбраны пользователем телефона. В одном примере она может содержать верхний уровень меню «Верхний уровень», который обычно является точкой входа в систему меню, когда телефон включен. От этого верхнего уровня можно перейти к первому подуровню, включающему в себя несколько пунктов, обычно соответствующих некоторым основным функциям телефона. На первом подуровне показаны пункты «Вызовы», «Сообщения» и «Органайзер». Различные возможные настройки и функции могут быть получены путем последующих выборов пунктов первого подуровня. Так, выбор пункта «Вызовы» позволяет пользователю выполнить вызов, посмотреть различные журналы вызовов и произвести упорядочение вызовов. Таким же образом для пользователя имеется возможность послать, прочитать и написать сообщения, используя пункт «Сообщения», а также настроить часы и календарь, используя пункт «Органайзер». На этом уровне может быть несколько больше или несколько меньше пунктов. Однако в данном случае они отсутствуют, чтобы лучше пояснить изобретение. Некоторыми другими дополнительными пунктами этого уровня могут быть «Доступ в Интернет», «Фотокамера», «Музыкальный плеер», «Картинки и звуки», «Игры», «Настройки» и «Телефонная книга». Каждый из этих пунктов может быть представлен в структуре меню сверху вниз, как показано на фиг. 3. Однако пункты меню могут быть расположены также один возле другого слева направо или в виде таблицы. Можно выбрать любой пункт первого подуровня, а затем перейти ко второму подуровню, связанному с выбранным пунктом, как показано на примере; от пункта «Сообщения» можно перейти к пунктам «Голосовая почта», «Текст» и «Сообщения электронной почты». На втором подуровне может быть реализовано дополнительное количество пунктов. Итак, выбор пункта «Сообщения» может привести к представлению пункта «Голосовая почта», «Текст» или «Сообщения электронной почты». Выбор одного из пунктов второго подуровня может привести к представлению пунктов третьего подуровня, если они имеются. Например, выбор пункта «Текст» приведет к представлению пунктов «Написать новое», «Входящие», «Опции» и «Отправленное». Далее выбор пункта «Входящие» может затем привести к четвертому подуровню, а именно «Сообщение 1», «Сообщение 2» и «Сообщение 3», а выбор пункта «Опции» приводит к четвертому подуровню «Тип SMS», который, в свою очередь, ведет к пунктам меню пятого подуровня «Текст», «Электронное сообщение» и «Пейджер», связанным с пунктом «Тип SMS». Пункты нижнего уровня часто не приводят к другому уровню, но они непосредственно обеспечивают настройку, приложение или функцию устройства. Структура 36 меню, описанная выше, является лишь примером структуры меню, по которому можно перемещаться вперед и назад. Обычно существует обратная связь, при помощи которой происходит визуальное информирование пользователя о перемещениях в структуре путем подсветки отмеченного пункта и отображения списка следующих пунктов после выбора отмеченного пункта. Целью данного изобретения является разработка альтернативной этому способу звуковой обратной связи, использующейся в сочетании или вместо визуальной обратной связи для индикации направления перемещения по структуре меню.
Предпочтительный вариант осуществления изобретения пояснен на фиг. 1, 2, 3 и 4, причем на фиг. 4 показана схема последовательности действий способа в соответствии с изобретением. Считается, что этот вариант является в настоящее время лучшим вариантом осуществления изобретения. Блок 28 управления связывает пункты структуры 36 с блоками ввода пользователя клавиатуры 12, причем первый блок 14 ввода пользователя позволяет выбрать пункты меню структуры 36 меню, третий блок 18 ввода пользователя осуществляет перемещение по меню вверх, вниз и в стороны по структуре 36 меню, а четвертый блок 20 ввода пользователя осуществляет возврат на один шаг структуры 36 меню. Второй блок 16 ввода пользователя дает дополнительную информацию по отмеченному пункту. Эта информация в соответствии с настоящим изобретением может сопровождаться звуковым сигналом вместо визуального или вместе с ним. Описание способа начинается с этапа 40 вхождения в меню системы, контролируемого блоком 28 управления, причем структура 36 меню содержит пункты меню, как представлено в качестве примера на фиг. 3. Каждый пункт меню связан, по меньшей мере, с одним звуком, причем звук информирует о направлении перемещения при управлении меню в структуре меню, этап 42. Используемые для генерации звуков коды сохранены в запоминающем устройстве 32 звуков пункта меню. Затем блок 28 управления находится в состоянии ожидания активации блока ввода пользователя пользователем устройства 10 или активации первого, третьего или четвертого блоков 14, 18 и 20 ввода пользователя для управления меню в системе 36 меню, этап 44, причем если пункт отмечен, этап 44, что обычно делается джойстиком 18, блок 28 управления анализирует, какой пункт в структуре отмечен, и ищет в запоминающем устройстве звуков по коду тот звук, который должен быть генерирован в соответствии с отмеченным пунктом, и обеспечивает передачу звука в блок 30 привода динамика. Далее на блок 30 привода динамика передается команда подачи звука, связанного с отмеченным пунктом, этап 46. Это может быть сделано путем подачи звуковой информации, указывающей перемещение в структуре вверх, вниз, налево или направо. Для того чтобы определить направление перемещения, необходимо учесть, какой пункт в подуровне был перед этим отмечен. Если пункт отмечен, этап 44, блок 28 управления анализирует, был ли пункт выбран, причем выбор обычно осуществляется активацией первой программной клавиши 14, этап 50. Если направление перемещения указано, причем направление перемещения теперь может быть перемещением внутрь структуры 34, например, на более низкий подуровень из-за выбранного пункта, блок 28 управления снова анализирует, какой звук из запоминающего устройства 32 должен быть сгенерирован, и передает на блок 30 привода динамика управляющий звук, связанный с выбранным пунктом, из дополнительного устройства звуков. Для получения информации о направлении перемещения внутрь в структуру может быть использован звуковой сигнал. Соответственно на блок 30 привода динамика передается команда подачи звука, связанного с выбранным пунктом, этап 52. Далее возможно выполнить действие, связанное с этим пунктом, этап 54, например, с использованием блока 28 управления активизировать функциональный блок 34. Альтернативным действием может быть выбор подуровня более низкого порядка. В том случае, если пункт не выбран, этап 50, или пункт не отмечен, этап 44, блок 28 управления анализирует, выбран ли этап возврата к предыдущему подуровню или верхнему уровню нажатием пользователем клавиши 20 возврата, этап 48. Если выбран этап возврата, этап 48, блок 28 управления путем поиска в запоминающем устройстве 32 снова анализирует, какой звук следует подать, и приводит в действие блок 30 привода динамика для получения из запоминающего устройства звукового сигнала, соответствующего возврату от этого пункта на предыдущий или более высокий уровень, этап 56. Затем блок 30 привода динамика выбирает из запоминающего устройства 32 звуковой код, соответствующий этапу возврата, и динамик 26 подает звуковой сигнал в соответствии со звуковым кодом. Для получения информации о направлении перемещения из структуры за ее пределы может быть использован звуковой сигнал. После этого блок 28 управления возвращается в прежнее состояние и ожидает ввода пользователя, этап 44.
В соответствии с изобретением при активации пункта, который может быть выбран, отмечен или произведен возврат, подается звуковой сигнал, информирующий пользователя о том, как пользователь перемещается по структуре меню. Соответственно каждый пункт связан с одним звуком для каждого направления перемещения от этого пункта. Генерируемые звуки могут быть различного типа. Например, может быть использована тональность звука, причем различная частота звука соответствует пунктам, расположенным выше, ниже или рядом друг с другом. Можно назначить различные интервалы частоты для разных подменю. В качестве альтернативы можно использовать последовательные тоны или гудки на той же частоте, что и звуковой сигнал, так чтобы один уровень имел только один тон, следующий ниже или выше уровень - два тона и т.д. Преимущество заключается в том, что можно использовать разные частоты. Еще одной альтернативой является использование стереозвука для получения информации о направлении перемещения в структуре меню при управлении меню. При использовании двух динамиков звук возникает в определенной точке пространства между динамиками, и по сдвигу этой точки можно определять направление перемещения. Последний вариант имеет преимущество, если используются наушники. Далее, возможно использовать голосовую информацию с записанными словами «налево, направо, вверх, вниз, внутрь, наружу» и т.д. Различными описанными выше способами можно обеспечить пользователя сведениями о пунктах меню и направлении перемещения в пространстве, составляющем 360 градусов вокруг пользователя.
Согласно другому варианту осуществления изобретения можно использовать мелодии различного типа для определения направления перемещения в структуре, когда, например, пункты на одном уровне соответствуют определенному типу мелодий, например, классическая, диско или рэп, а более низкому уровню - различные музыкальные произведения данной категории.
Данное изобретение имеет много преимуществ. Оно позволяет пользователю получать информацию о направлении перемещения в меню без просмотра дисплея устройства для представления информации. Это является преимуществом для незрячих людей или людей, занятых другим делом, не позволяющим смотреть на устройство. Это также позволяет использовать устройства без дисплея или без присоединения к устройству, отображающему структуру меню, которое не имеет дисплея. Осуществление этого изобретения просто и дешево, так как множество необходимых для него функций уже имеется в большинстве приборов для представления информации. Для осуществления необходима лишь дополнительная компьютерная программа.
Возможны различные варианты осуществления изобретения. Можно отмечать положение пункта дополнительно или вместо определения направления перемещения в структуре. Возможно также в дополнение к определению направления перемещения и/или положения определять также вид пункта в подуровне, например, с использованием записанного голоса. Меню системы может не содержать описанного выше верхнего уровня, и пункты первого подуровня в действительности выполняют роль верхнего уровня. Настоящее изобретение не ограничивается также описанными выше клавишами, и для управления меню могут быть использованы любые клавиши устройства. Изобретение может также использоваться в сочетании с визуальным изображением меню или без представления меню в визуальном виде. Разработанное устройство может также иметь собственный блок генерации звука или другое устройство с блоком генерации звука и давать команду другому устройству на подачу звукового сигнала совместно с визуальной информацией.
Блок управления, функциональный блок и блок привода динамика обычно представляют собой один или несколько процессоров, содержащих в памяти соответствующие программы с подходящими программными кодами. Запоминающее устройство пунктов меню предпочтительно представляет собой микросхемы постоянной или оперативной памяти. Программа может находиться на носителе данных, например на CD-компакт диске или карте памяти, и при загрузке в устройство для представления информации выполняет процедуру описанного в изобретении способа. Программа может быть установлена на сервер, с которого может быть загружена в устройство для представления информации.

Claims (25)

1. Способ, обеспечивающий возможность управления в структуре меню сотового телефона, содержащий этапы, на которых
обеспечивают множество выбираемых пунктов в структуре меню, причем выбираемые пункты относятся, по меньшей мере, к одному из: функции, приложения и настройки сотового телефона,
связывают каждый из пунктов меню, по меньшей мере, с одним предназначенным звуком;
идентифицируют при обнаружении выбора определенного одного из пунктов меню в структуре меню, определенный один из, по меньшей мере, одного предназначенного звука, связанного с определенным пунктом меню; и
генерируют определенный предназначенный стереофонический звук так, чтобы он воспринимался как исходящим из точки между, по меньшей мере, двумя динамиками, связанными с сотовым телефоном, что указывает на направление перемещения в структуре меню относительно определенного пункта меню без представления визуальной информации, относящейся к направлению перемещения в структуре меню относительно определенного пункта меню.
2. Способ по п.1, в котором управляют сотовым телефоном, который не содержит визуальный дисплей, посредством которого представляют структуру меню.
3. Способ по п.1, в котором свойства звука, по меньшей мере, одного предназначенного звука, связанного с каждым из пунктов меню, взаимосвязаны для индикации направления перемещения или положения в структуре относительно выбранных пунктов меню в структуре меню.
4. Способ по п.3, в котором предназначенные звуки имеют различные частоты для индикации направления перемещения или положения в структуре меню относительно выбранных пунктов меню.
5. Способ по п.3, в котором предназначенные звуки обеспечивают, по меньшей мере, один тоном, причем количество тонов каждого предназначенного звука характеризует направление перемещения или положение в структуре меню относительно выбранных пунктов меню.
6. Способ по п.3, в котором предназначенные звуки обеспечивают речь, которая озвучивает направление перемещения или положения в структуре меню в зависимости от выбранных пунктов меню.
7. Способ по п.2, в котором дополнительно обеспечивают генерированный звук в наушниках в виде стереозвука в аудиопространстве, составляющем 360° вокруг пользователя аудионаушников.
8. Способ по п.1, в котором указанная структура меню включает в себя несколько различных групп пунктов меню, причем, по меньшей мере, один пункт меню из одной из групп связан с другим одним из групп пунктов меню.
9. Способ по п.8, в котором предназначенные звуки, связанные с несколькими пунктами меню в одной и той же группе, являются музыкальными звуками определенного типа.
10. Способ по п.1, в котором каждый пункт меню предусмотрен со звуком для каждого направления, в котором перемещение может быть сделано относительно этого пункта меню.
11. Способ по п.2, в котором дополнительно сдвигают генерированный звук от этой точки к другой точке между, по меньшей мере, двумя динамиками, основываясь на направлении перемещения.
12. Сотовый телефон, обеспечивающий возможность управления меню в структуре меню, содержащий по меньшей мере один первый блок ввода пользователя; блок генерирования звука; блок управления, выполненный с возможностью обеспечения пунктов меню, выбираемых в структуре меню, причем пункты меню относятся, по меньшей мере, к одному из: функции, приложения и настройки сотового телефона, связывания, по меньшей мере, одного предназначенного звука с определенным одним из пунктов меню; идентифицирования при обнаружении выбора определенного пункта меню посредством, по меньшей мере, одного первого блока ввода пользователя сотового телефона, по меньшей мере, одного предназначенного звука, связанного с определенным пунктом меню; и генерирования, по меньшей мере, одного предназначенного стереофонического звука так, чтобы он воспринимался как исходящим из точки между, по меньшей мере двумя динамиками, связанными с сотовым телефоном, что указывает на направление перемещения в структуре меню относительно определенного пункта меню, причем, по меньшей мере один предназначенный звук генерируется независимо от визуальной информации, относящейся к направлению перемещения в структуре меню относительно определенного пункта меню.
13. Сотовый телефон по п.12, в котором блок генерирования звука выполнен с возможностью сдвигать, по меньшей мере, один предназначенный звук от этой точки в другую точку между, по меньшей мере, двумя динамиками, основываясь на направлении перемещения.
14. Сотовый телефон по п.12, в котором свойства звука, по меньшей мере, одного предназначенного звука, связанные с каждым из пунктов меню, взаимосвязаны для индикации направления перемещения или положения в структуре меню относительно выбранных пунктов меню в структуре меню.
15. Сотовый телефон по п.12, в котором предназначенные звуки имеют различные частоты для индикации направления перемещения или положения в структуре меню относительно выбранных пунктов меню.
16. Сотовый телефон по п.12, в котором предназначенные звуки обеспечивают, по меньшей мере, один тоном, причем количество тонов каждого предназначенного звука характеризует направление перемещения или положение в структуре меню относительно выбранных пунктов меню.
17. Сотовый телефон по п.12, в котором предназначенные звуки обеспечивают речь, которая озвучивает направление перемещения или положения в структуре меню в зависимости от выбранных пунктов меню.
18. Сотовый телефон по п.12, в котором блок управления обеспечивает генерированный, по меньшей мере, один из предназначенного звука в наушниках в виде стереозвука в аудиопространстве, составляющем 360° вокруг пользователя аудионаушников.
19. Сотовый телефон по п.11, в котором указанная структура меню включает в себя несколько различных групп пунктов меню, причем, по меньшей мере, один пункт меню в одной из групп связан с одним другим из групп пунктов меню.
20. Сотовый телефон по п.19, в котором предназначенные звуки, связанные с несколькими пунктами меню в одной и той же группе, являются музыкальными звуками определенного типа.
21. Сотовый телефон по п.12, в котором каждый пункт меню предусмотрен со звуком для каждого направления, в котором перемещение может быть сделано относительно этого пункта меню.
22. Сотовый телефон по п.12, в котором сотовый телефон не имеет визуального дисплея, посредством которого представляют структуру меню.
23. Устройство для представления информации для управления меню в структуре меню, содержащее
средство для обеспечения выбираемых пользователем пунктов в структуре меню, причем пункты относятся, по меньшей мере, к одному из: функции, приложения и настройки устройства для представления информации,
средство для связывания каждого из пунктов с предназначенным звуком; и
средство при обнаружении выбора пользователя определенного одного из пунктов обеспечивает возможность генерирования предназначенного звука, связанного с определенным пунктом, причем устройство для представления информации не включает в себя визуальный дисплей, посредством которого представляют структуру меню, или соединение с устройством, посредством которого представляют структуру меню.
24. Машиночитаемый носитель, имеющий сохраненный на нем компьютерный программный продукт, имеющий компьютерный программный код, который при исполнении, по меньшей мере, одним процессором обеспечивает управление меню в структуре меню сотового телефона, содержащий
инструкции для обеспечения множества пунктов меню в иерархической структуре, причем множество пунктов меню относятся, по меньшей мере к одному из: функции, приложения и настройки сотового телефона,
инструкции для связывания каждого из множества пунктов меню с предназначенным звуком; и
инструкции для обнаружения выбора определенного одного из множества пунктов посредством активирования устройства ввода пользователя, соответствующего определенному пункту меню; и
инструкции для обеспечения, вместо визуальной обратной связи, при обнаружении выбора определенного пункта меню звуковой инструкции для обеспечения, вместо визуальной обратной связи, при обнаружении выбора определенного пункта меню звуковой стереофонической обратной связи, включающей в себя предназначенный звук, связанный с определенным пунктом меню.
25. Машиночитаемый носитель по п.24, дополнительно содержащий инструкции для генерирования определенного предназначенного звука и управления, по меньшей мере, двумя динамиками, связанными с сотовым телефоном, так, чтобы генерированный звук возникал в первой точке между, по меньшей мере, двумя динамиками, и инструкции для сдвига определенной точки ко второй точке между, по меньшей мере, двумя динамиками, относящейся к направлению перемещения в иерархической структуре, относящейся к определенному пункту меню.
RU2008150853/08A 2006-05-23 2006-11-21 Звуковая обратная связь при навигации по меню RU2421779C2 (ru)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US74799606P 2006-05-23 2006-05-23
US60/747,996 2006-05-23
US11/535,654 2006-09-27
US11/535,654 US7596765B2 (en) 2006-05-23 2006-09-27 Sound feedback on menu navigation

Publications (2)

Publication Number Publication Date
RU2008150853A RU2008150853A (ru) 2010-06-27
RU2421779C2 true RU2421779C2 (ru) 2011-06-20

Family

ID=37685729

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2008150853/08A RU2421779C2 (ru) 2006-05-23 2006-11-21 Звуковая обратная связь при навигации по меню

Country Status (7)

Country Link
US (1) US7596765B2 (ru)
EP (1) EP2021909A1 (ru)
JP (1) JP2009537916A (ru)
BR (1) BRPI0621736A2 (ru)
MX (1) MX2008014385A (ru)
RU (1) RU2421779C2 (ru)
WO (1) WO2007134644A1 (ru)

Families Citing this family (166)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8645137B2 (en) 2000-03-16 2014-02-04 Apple Inc. Fast, language-independent method for user authentication by voice
US8677377B2 (en) 2005-09-08 2014-03-18 Apple Inc. Method and apparatus for building an intelligent automated assistant
US8920343B2 (en) 2006-03-23 2014-12-30 Michael Edward Sabatino Apparatus for acquiring and processing of physiological auditory signals
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
KR20080063041A (ko) * 2006-12-29 2008-07-03 삼성전자주식회사 사용자 인터페이스 방법 및 장치
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
US10002189B2 (en) 2007-12-20 2018-06-19 Apple Inc. Method and apparatus for searching using an active ontology
US9330720B2 (en) 2008-01-03 2016-05-03 Apple Inc. Methods and apparatus for altering audio output signals
US8996376B2 (en) 2008-04-05 2015-03-31 Apple Inc. Intelligent text-to-speech conversion
US10496753B2 (en) 2010-01-18 2019-12-03 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US20100030549A1 (en) 2008-07-31 2010-02-04 Lee Michael M Mobile device having human language translation capability with positional feedback
US8676904B2 (en) 2008-10-02 2014-03-18 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
US9858925B2 (en) 2009-06-05 2018-01-02 Apple Inc. Using context information to facilitate processing of commands in a virtual assistant
US10241752B2 (en) 2011-09-30 2019-03-26 Apple Inc. Interface for a virtual digital assistant
US10241644B2 (en) 2011-06-03 2019-03-26 Apple Inc. Actionable reminder entries
US10706373B2 (en) 2011-06-03 2020-07-07 Apple Inc. Performing actions associated with task items that represent tasks to perform
US9431006B2 (en) 2009-07-02 2016-08-30 Apple Inc. Methods and apparatuses for automatic speech recognition
US8923995B2 (en) * 2009-12-22 2014-12-30 Apple Inc. Directional audio interface for portable media device
JP5520318B2 (ja) * 2009-12-28 2014-06-11 パナソニック株式会社 操作音ガイド装置及び操作音ガイド方法
US10679605B2 (en) 2010-01-18 2020-06-09 Apple Inc. Hands-free list-reading by intelligent automated assistant
US10705794B2 (en) 2010-01-18 2020-07-07 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US10276170B2 (en) 2010-01-18 2019-04-30 Apple Inc. Intelligent automated assistant
US10553209B2 (en) 2010-01-18 2020-02-04 Apple Inc. Systems and methods for hands-free notification summaries
DE202011111062U1 (de) 2010-01-25 2019-02-19 Newvaluexchange Ltd. Vorrichtung und System für eine Digitalkonversationsmanagementplattform
US8682667B2 (en) 2010-02-25 2014-03-25 Apple Inc. User profiling for selecting user specific voice input processing information
US9262612B2 (en) 2011-03-21 2016-02-16 Apple Inc. Device access using voice authentication
US10057736B2 (en) 2011-06-03 2018-08-21 Apple Inc. Active transport based notifications
US9829978B2 (en) * 2011-08-17 2017-11-28 Project Ray Ltd. Interface layer and operating system facilitating use, including by blind and visually-impaired users, of touch-screen-controlled consumer electronic devices
US8994660B2 (en) 2011-08-29 2015-03-31 Apple Inc. Text correction processing
US9563278B2 (en) 2011-12-19 2017-02-07 Qualcomm Incorporated Gesture controlled audio user interface
US10134385B2 (en) 2012-03-02 2018-11-20 Apple Inc. Systems and methods for name pronunciation
US9483461B2 (en) 2012-03-06 2016-11-01 Apple Inc. Handling speech synthesis of content for multiple languages
US9280610B2 (en) 2012-05-14 2016-03-08 Apple Inc. Crowd sourcing information to fulfill user requests
US10417037B2 (en) 2012-05-15 2019-09-17 Apple Inc. Systems and methods for integrating third party services with a digital assistant
US9721563B2 (en) 2012-06-08 2017-08-01 Apple Inc. Name recognition system
US9495129B2 (en) 2012-06-29 2016-11-15 Apple Inc. Device, method, and user interface for voice-activated navigation and browsing of a document
US9547647B2 (en) 2012-09-19 2017-01-17 Apple Inc. Voice-based media searching
EP4138075A1 (en) 2013-02-07 2023-02-22 Apple Inc. Voice trigger for a digital assistant
US10255038B2 (en) * 2013-04-26 2019-04-09 Microsoft Technology Licensing, Llc Techniques to present a user interface for the visually impaired
WO2014197334A2 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for user-specified pronunciation of words for speech synthesis and recognition
WO2014197336A1 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for detecting errors in interactions with a voice-based digital assistant
US9582608B2 (en) 2013-06-07 2017-02-28 Apple Inc. Unified ranking with entropy-weighted information for phrase-based semantic auto-completion
WO2014197335A1 (en) 2013-06-08 2014-12-11 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
EP3937002A1 (en) 2013-06-09 2022-01-12 Apple Inc. Device, method, and graphical user interface for enabling conversation persistence across two or more instances of a digital assistant
US10176167B2 (en) 2013-06-09 2019-01-08 Apple Inc. System and method for inferring user intent from speech inputs
US10296160B2 (en) 2013-12-06 2019-05-21 Apple Inc. Method for extracting salient dialog usage from live data
US9430463B2 (en) 2014-05-30 2016-08-30 Apple Inc. Exemplar-based natural language processing
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US9633004B2 (en) 2014-05-30 2017-04-25 Apple Inc. Better resolution when referencing to concepts
US9842101B2 (en) 2014-05-30 2017-12-12 Apple Inc. Predictive conversion of language input
CN106471570B (zh) 2014-05-30 2019-10-01 苹果公司 多命令单一话语输入方法
US9785630B2 (en) 2014-05-30 2017-10-10 Apple Inc. Text prediction using combined word N-gram and unigram language models
US10078631B2 (en) 2014-05-30 2018-09-18 Apple Inc. Entropy-guided text prediction using combined word and character n-gram language models
US9760559B2 (en) 2014-05-30 2017-09-12 Apple Inc. Predictive text input
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US10659851B2 (en) 2014-06-30 2020-05-19 Apple Inc. Real-time digital assistant knowledge updates
US10446141B2 (en) 2014-08-28 2019-10-15 Apple Inc. Automatic speech recognition based on user feedback
US9818400B2 (en) 2014-09-11 2017-11-14 Apple Inc. Method and apparatus for discovering trending terms in speech requests
US10789041B2 (en) 2014-09-12 2020-09-29 Apple Inc. Dynamic thresholds for always listening speech trigger
US10127911B2 (en) 2014-09-30 2018-11-13 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
US9886432B2 (en) 2014-09-30 2018-02-06 Apple Inc. Parsimonious handling of word inflection via categorical stem + suffix N-gram language models
US9646609B2 (en) 2014-09-30 2017-05-09 Apple Inc. Caching apparatus for serving phonetic pronunciations
US10074360B2 (en) 2014-09-30 2018-09-11 Apple Inc. Providing an indication of the suitability of speech recognition
US9668121B2 (en) 2014-09-30 2017-05-30 Apple Inc. Social reminders
US9612722B2 (en) 2014-10-31 2017-04-04 Microsoft Technology Licensing, Llc Facilitating interaction between users and their environments using sounds
US10552013B2 (en) 2014-12-02 2020-02-04 Apple Inc. Data detection
US10152299B2 (en) 2015-03-06 2018-12-11 Apple Inc. Reducing response latency of intelligent automated assistants
US9865280B2 (en) 2015-03-06 2018-01-09 Apple Inc. Structured dictation using intelligent automated assistants
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US10567477B2 (en) 2015-03-08 2020-02-18 Apple Inc. Virtual assistant continuity
US9721566B2 (en) 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
US9899019B2 (en) 2015-03-18 2018-02-20 Apple Inc. Systems and methods for structured stem and suffix language models
US9842105B2 (en) 2015-04-16 2017-12-12 Apple Inc. Parsimonious continuous-space phrase representations for natural language processing
US10460227B2 (en) 2015-05-15 2019-10-29 Apple Inc. Virtual assistant in a communication session
US10083688B2 (en) 2015-05-27 2018-09-25 Apple Inc. Device voice control for selecting a displayed affordance
US10127220B2 (en) 2015-06-04 2018-11-13 Apple Inc. Language identification from short strings
US10101822B2 (en) 2015-06-05 2018-10-16 Apple Inc. Language input correction
US9578173B2 (en) 2015-06-05 2017-02-21 Apple Inc. Virtual assistant aided communication with 3rd party service in a communication session
US10255907B2 (en) 2015-06-07 2019-04-09 Apple Inc. Automatic accent detection using acoustic models
US10186254B2 (en) 2015-06-07 2019-01-22 Apple Inc. Context-based endpoint detection
US11025565B2 (en) 2015-06-07 2021-06-01 Apple Inc. Personalized prediction of responses for instant messaging
US20160378747A1 (en) 2015-06-29 2016-12-29 Apple Inc. Virtual assistant for media playback
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US9697820B2 (en) 2015-09-24 2017-07-04 Apple Inc. Unit-selection text-to-speech synthesis using concatenation-sensitive neural networks
US11010550B2 (en) 2015-09-29 2021-05-18 Apple Inc. Unified language modeling framework for word prediction, auto-completion and auto-correction
US10366158B2 (en) 2015-09-29 2019-07-30 Apple Inc. Efficient word encoding for recurrent neural network language models
US11587559B2 (en) 2015-09-30 2023-02-21 Apple Inc. Intelligent device identification
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US10049668B2 (en) 2015-12-02 2018-08-14 Apple Inc. Applying neural network language models to weighted finite state transducers for automatic speech recognition
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
CN105653232A (zh) * 2015-12-29 2016-06-08 北京金山安全软件有限公司 一种声音播放方法及装置
US10446143B2 (en) 2016-03-14 2019-10-15 Apple Inc. Identification of voice inputs providing credentials
US9934775B2 (en) 2016-05-26 2018-04-03 Apple Inc. Unit-selection text-to-speech synthesis based on predicted concatenation parameters
US9972304B2 (en) 2016-06-03 2018-05-15 Apple Inc. Privacy preserving distributed evaluation framework for embedded personalized systems
US11227589B2 (en) 2016-06-06 2022-01-18 Apple Inc. Intelligent list reading
US10249300B2 (en) 2016-06-06 2019-04-02 Apple Inc. Intelligent list reading
US10049663B2 (en) 2016-06-08 2018-08-14 Apple, Inc. Intelligent automated assistant for media exploration
DK179309B1 (en) 2016-06-09 2018-04-23 Apple Inc Intelligent automated assistant in a home environment
US10490187B2 (en) 2016-06-10 2019-11-26 Apple Inc. Digital assistant providing automated status report
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
US10192552B2 (en) 2016-06-10 2019-01-29 Apple Inc. Digital assistant providing whispered speech
US10509862B2 (en) 2016-06-10 2019-12-17 Apple Inc. Dynamic phrase expansion of language input
US10067938B2 (en) 2016-06-10 2018-09-04 Apple Inc. Multilingual word prediction
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
DK179343B1 (en) 2016-06-11 2018-05-14 Apple Inc Intelligent task discovery
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
DK179049B1 (en) 2016-06-11 2017-09-18 Apple Inc Data driven natural language event detection and classification
US10474753B2 (en) 2016-09-07 2019-11-12 Apple Inc. Language identification using recurrent neural networks
US10043516B2 (en) 2016-09-23 2018-08-07 Apple Inc. Intelligent automated assistant
US11281993B2 (en) 2016-12-05 2022-03-22 Apple Inc. Model and ensemble compression for metric learning
US10593346B2 (en) 2016-12-22 2020-03-17 Apple Inc. Rank-reduced token representation for automatic speech recognition
US11204787B2 (en) 2017-01-09 2021-12-21 Apple Inc. Application integration with a digital assistant
US10417266B2 (en) 2017-05-09 2019-09-17 Apple Inc. Context-aware ranking of intelligent response suggestions
DK201770383A1 (en) 2017-05-09 2018-12-14 Apple Inc. USER INTERFACE FOR CORRECTING RECOGNITION ERRORS
DK201770439A1 (en) 2017-05-11 2018-12-13 Apple Inc. Offline personal assistant
US10395654B2 (en) 2017-05-11 2019-08-27 Apple Inc. Text normalization based on a data-driven learning network
US10726832B2 (en) 2017-05-11 2020-07-28 Apple Inc. Maintaining privacy of personal information
DK179745B1 (en) 2017-05-12 2019-05-01 Apple Inc. SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT
DK201770428A1 (en) 2017-05-12 2019-02-18 Apple Inc. LOW-LATENCY INTELLIGENT AUTOMATED ASSISTANT
US11301477B2 (en) 2017-05-12 2022-04-12 Apple Inc. Feedback analysis of a digital assistant
DK179496B1 (en) 2017-05-12 2019-01-15 Apple Inc. USER-SPECIFIC Acoustic Models
DK201770431A1 (en) 2017-05-15 2018-12-20 Apple Inc. Optimizing dialogue policy decisions for digital assistants using implicit feedback
DK201770432A1 (en) 2017-05-15 2018-12-21 Apple Inc. Hierarchical belief states for digital assistants
DK179560B1 (en) 2017-05-16 2019-02-18 Apple Inc. FAR-FIELD EXTENSION FOR DIGITAL ASSISTANT SERVICES
US10403278B2 (en) 2017-05-16 2019-09-03 Apple Inc. Methods and systems for phonetic matching in digital assistant services
US20180336275A1 (en) 2017-05-16 2018-11-22 Apple Inc. Intelligent automated assistant for media exploration
US10311144B2 (en) 2017-05-16 2019-06-04 Apple Inc. Emoji word sense disambiguation
US10657328B2 (en) 2017-06-02 2020-05-19 Apple Inc. Multi-task recurrent neural network architecture for efficient morphology handling in neural language modeling
US10445429B2 (en) 2017-09-21 2019-10-15 Apple Inc. Natural language understanding using vocabularies with compressed serialized tries
US10755051B2 (en) 2017-09-29 2020-08-25 Apple Inc. Rule-based natural language processing
US10636424B2 (en) 2017-11-30 2020-04-28 Apple Inc. Multi-turn canned dialog
US10733982B2 (en) 2018-01-08 2020-08-04 Apple Inc. Multi-directional dialog
US10733375B2 (en) 2018-01-31 2020-08-04 Apple Inc. Knowledge-based framework for improving natural language understanding
US10789959B2 (en) 2018-03-02 2020-09-29 Apple Inc. Training speaker recognition models for digital assistants
US10592604B2 (en) 2018-03-12 2020-03-17 Apple Inc. Inverse text normalization for automatic speech recognition
US10818288B2 (en) 2018-03-26 2020-10-27 Apple Inc. Natural assistant interaction
US10909331B2 (en) 2018-03-30 2021-02-02 Apple Inc. Implicit identification of translation payload with neural machine translation
US11145294B2 (en) 2018-05-07 2021-10-12 Apple Inc. Intelligent automated assistant for delivering content from user experiences
US10928918B2 (en) 2018-05-07 2021-02-23 Apple Inc. Raise to speak
US20190347069A1 (en) * 2018-05-11 2019-11-14 Nathan Park Accessing a desktop computer with proprioception
US10984780B2 (en) 2018-05-21 2021-04-20 Apple Inc. Global semantic word embeddings using bi-directional recurrent neural networks
DK201870355A1 (en) 2018-06-01 2019-12-16 Apple Inc. VIRTUAL ASSISTANT OPERATION IN MULTI-DEVICE ENVIRONMENTS
DK179822B1 (da) 2018-06-01 2019-07-12 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
US11386266B2 (en) 2018-06-01 2022-07-12 Apple Inc. Text correction
DK180639B1 (en) 2018-06-01 2021-11-04 Apple Inc DISABILITY OF ATTENTION-ATTENTIVE VIRTUAL ASSISTANT
US10892996B2 (en) 2018-06-01 2021-01-12 Apple Inc. Variable latency device coordination
US10504518B1 (en) 2018-06-03 2019-12-10 Apple Inc. Accelerated task performance
US11010561B2 (en) 2018-09-27 2021-05-18 Apple Inc. Sentiment prediction from textual data
US11170166B2 (en) 2018-09-28 2021-11-09 Apple Inc. Neural typographical error modeling via generative adversarial networks
US11462215B2 (en) 2018-09-28 2022-10-04 Apple Inc. Multi-modal inputs for voice commands
US10839159B2 (en) 2018-09-28 2020-11-17 Apple Inc. Named entity normalization in a spoken dialog system
US11475898B2 (en) 2018-10-26 2022-10-18 Apple Inc. Low-latency multi-speaker speech recognition
US11638059B2 (en) 2019-01-04 2023-04-25 Apple Inc. Content playback on multiple devices
US11348573B2 (en) 2019-03-18 2022-05-31 Apple Inc. Multimodality in digital assistant systems
US11475884B2 (en) 2019-05-06 2022-10-18 Apple Inc. Reducing digital assistant latency when a language is incorrectly determined
US11307752B2 (en) 2019-05-06 2022-04-19 Apple Inc. User configurable task triggers
US11423908B2 (en) 2019-05-06 2022-08-23 Apple Inc. Interpreting spoken requests
DK201970509A1 (en) 2019-05-06 2021-01-15 Apple Inc Spoken notifications
US11140099B2 (en) 2019-05-21 2021-10-05 Apple Inc. Providing message response suggestions
DK180129B1 (en) 2019-05-31 2020-06-02 Apple Inc. USER ACTIVITY SHORTCUT SUGGESTIONS
US11289073B2 (en) 2019-05-31 2022-03-29 Apple Inc. Device text to speech
US11496600B2 (en) 2019-05-31 2022-11-08 Apple Inc. Remote execution of machine-learned models
US11360641B2 (en) 2019-06-01 2022-06-14 Apple Inc. Increasing the relevance of new available information
WO2021056255A1 (en) 2019-09-25 2021-04-01 Apple Inc. Text detection using global geometry estimators

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0784724A (ja) * 1993-09-13 1995-03-31 Sumitomo Electric Ind Ltd 入力装置
JPH09258946A (ja) * 1996-03-26 1997-10-03 Fujitsu Ltd 情報処理装置
JPH1040067A (ja) * 1996-07-19 1998-02-13 Nec Corp ポインティングデバイスの操作に連動した音の制御方式
FR2769781B1 (fr) 1997-10-14 2000-01-07 Sagem Telephone mobile a diffusion de messages sonores
US6297818B1 (en) * 1998-05-08 2001-10-02 Apple Computer, Inc. Graphical user interface having sound effects for operating control elements and dragging objects
JP3285835B2 (ja) * 1998-12-25 2002-05-27 三菱電機株式会社 メニュー選択装置
US6469712B1 (en) * 1999-03-25 2002-10-22 International Business Machines Corporation Projected audio for computer displays
GB2374772B (en) * 2001-01-29 2004-12-29 Hewlett Packard Co Audio user interface
JP2002236579A (ja) * 2001-02-09 2002-08-23 Clarion Co Ltd 車載用情報機器及びその入力方法
US7127679B2 (en) * 2001-06-29 2006-10-24 Softrek, Inc. Method for generating and navigating a plurality of menus using a database and a menu template
US7318198B2 (en) * 2002-04-30 2008-01-08 Ricoh Company, Ltd. Apparatus operation device for operating an apparatus without using eyesight
US7966184B2 (en) * 2006-03-06 2011-06-21 Audioeye, Inc. System and method for audible web site navigation
AU2002338941A1 (en) 2002-11-14 2004-06-03 Nokia Corporation Device with a graphical user interface
US7757173B2 (en) 2003-07-18 2010-07-13 Apple Inc. Voice menu system
US7379047B2 (en) * 2004-06-30 2008-05-27 Microsoft Corporation Using a physical object to control an attribute of an interactive display application
US7362312B2 (en) * 2004-11-01 2008-04-22 Nokia Corporation Mobile communication terminal and method
US8375327B2 (en) * 2005-01-16 2013-02-12 Zlango Ltd. Iconic communication

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
БЕРЛИНЕР Э.М. и др. Microsoft Office 2003. - Тверь: Бином-Пресс, 2004, с.173-178. *

Also Published As

Publication number Publication date
RU2008150853A (ru) 2010-06-27
EP2021909A1 (en) 2009-02-11
MX2008014385A (es) 2008-11-27
BRPI0621736A2 (pt) 2011-12-20
JP2009537916A (ja) 2009-10-29
WO2007134644A1 (en) 2007-11-29
US20070277107A1 (en) 2007-11-29
US7596765B2 (en) 2009-09-29

Similar Documents

Publication Publication Date Title
RU2421779C2 (ru) Звуковая обратная связь при навигации по меню
KR101640460B1 (ko) 휴대 단말기의 분할 화면 운용 방법 및 이를 지원하는 휴대 단말기
CN100496066C (zh) 移动终端中的屏幕改变方法
US8849252B2 (en) Mobile device having messenger function and related supporting method
US20070174787A1 (en) Device and method for providing information about relationships between respective sharers based on shared information
US20170359283A1 (en) Music creation app in messaging app
JP5826753B2 (ja) モバイル通信装置のためのユーザーが選択可能な環境
US20070094596A1 (en) Glance modules
MX2007006272A (es) Terminal de comunicacion movil con pantalla tactil y metodo de entrada de informacion usando la misma.
RU2008126780A (ru) Терминал мобильной связи и способ управления его меню
US20090303185A1 (en) User interface, device and method for an improved operating mode
EP2760190A1 (en) Method and electronic device for providing call rejection function
US20070129050A1 (en) Mobile communication terminal with display shortcut key and method of enabling the same
JP2012105312A (ja) メディアの一部を選択するシステム及び方法
KR20080025772A (ko) 휴대 단말기의 음악 메시지 송수신 방법 및 음악 메시지서비스 시스템
KR100783113B1 (ko) 이동 통신 단말기의 음악 파일 단축 저장 방법
CN108062952A (zh) 一种语音控制方法、装置及***
KR101248165B1 (ko) 휴대전화 및 그 데이터 검색방법
KR100664241B1 (ko) 멀티 편집기능을 구비한 휴대용 단말기 및 그의 운용방법
KR100754638B1 (ko) 이동 통신 단말기의 대기화면에서 빠른 메뉴 진입 방법 및장치
US7221965B2 (en) Multiple page sound tone dialog in communication device
US8054948B1 (en) Audio experience for a communications device user
CN101449236A (zh) 菜单导航的声音反馈
KR100672843B1 (ko) 서비스 이력을 디스플레이하는 이동통신 단말기 및 이를이용한 서비스 방법
KR20060017043A (ko) Ｍｐ3 음악을 이용한 휴대폰의 벨소리 서비스방법

Legal Events

Date Code Title Description
PD4A Correction of name of patent owner
PC41 Official registration of the transfer of exclusive right

Effective date: 20160713

Effective date: 20160712