RU2421779C2 - Звуковая обратная связь при навигации по меню - Google Patents
Звуковая обратная связь при навигации по меню Download PDFInfo
- Publication number
- RU2421779C2 RU2421779C2 RU2008150853/08A RU2008150853A RU2421779C2 RU 2421779 C2 RU2421779 C2 RU 2421779C2 RU 2008150853/08 A RU2008150853/08 A RU 2008150853/08A RU 2008150853 A RU2008150853 A RU 2008150853A RU 2421779 C2 RU2421779 C2 RU 2421779C2
- Authority
- RU
- Russia
- Prior art keywords
- menu
- sound
- items
- item
- intended
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/0482—Interaction with lists of selectable items, e.g. menus
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- General Health & Medical Sciences (AREA)
- User Interface Of Digital Computer (AREA)
- Telephone Function (AREA)
Abstract
Изобретение относится к устройствам для представления информации с навигацией в структуре меню. Технический результат заключается в обеспечении обратной связи для информирования пользователя, в каком месте структуры меню он находится. Устройство содержит блок генерации звука, по меньшей мере, один первый блок ввода пользователя, блок управления, который обеспечивает выбираемые пункты в структуре меню, причем пункты связаны с функциями, приложениями или настройками устройства для представления информации, а каждый пункт связан, по меньшей мере, с одним звуком, и при обнаружении активированного определенного пункта с помощью блока ввода пользователя передается команда блоку (генерации звука) генерации звука, связанного с этим пунктом. При этом генерируют определенный звук, так чтобы он воспринимался как исходящий из точки между, по меньшей мере, двумя динамиками, связанными с устройством, что указывает на направление перемещения в структуре меню относительно определенного пункта меню без представления визуальной информации, относящейся к направлению перемещения в структуре меню относительно определенного пункта меню. 4 н. и 21 з.п.ф-лы, 4 ил.
Description
ОБЛАСТЬ ТЕХНИКИ, К КОТОРОЙ ОТНОСИТСЯ ИЗОБРЕТЕНИЕ
Настоящее изобретение относится к области устройств для представления информации, в частности к способу навигации по меню устройства для представления информации, устройствам для представления информации с навигацией в структуре меню, а также компьютерным программам для навигации в структуре меню устройства для представления информации.
УРОВЕНЬ ТЕХНИКИ
Устройства для представления информации, например в виде мобильных телефонов, сегодня имеют все больше различных функций и приложений. Чтобы осуществить выбор между различными функциями и приложениями, а также выполнить настройку этих функций и приложений, устройство обычно снабжается системой меню, в котором осуществлена привязка пунктов к этим функциям, приложениям и настройкам.
Чтобы осуществлять навигацию между различными пунктами меню, структура пунктов меню имеет логическое построение, что упрощает их привязку. Такая структура меню обычно представлена пользователю устройства в визуальном виде на дисплее. Однако это накладывает ограничения для пользователей таких устройств. Например, незрячие люди не могут легко осуществлять навигацию по структуре меню. Также затруднительно это делать людям, занятым другим делом, например, водителям автомобиля. Таким образом, имеется множество ситуаций, когда было бы преимуществом дать пользователю возможность осуществлять навигацию по пунктам меню устройства для представления информации способом, не требующим просмотра дисплея. Для осуществления такого способа навигации необходима обратная связь, информирующая пользователя, в каком месте структуры он находится.
СУЩНОСТЬ ИЗОБРЕТЕНИЯ
Настоящее изобретение предназначено для решения проблемы обеспечения обратной связи для информирования пользователя, в каком месте структуры он находится, в том случае, когда получение визуальной информации невозможно или нежелательно.
Задачей настоящего изобретения является предоставление способа, обеспечивающего возможность управления меню в структуре меню устройства для представления информации, обеспечивающего обратную связь для информирования пользователя, в каком месте структуры он находится, в том случае, когда получение визуальной информации невозможно или нежелательно.
В соответствии с первым аспектом настоящего изобретения задача осуществляется с помощью способа, обеспечивающего возможность управления меню в структуре меню устройства для представления информации, содержащего следующие этапы:
обеспечивают выбираемые пункты в структуре меню, причем пункты относятся к функциям, приложениям или настройкам устройства для представления информации,
связывают каждый пункт, по меньшей мере, с одним предназначенным звуком и;
при обнаружении активирования определенного пункта генерируется звук, связанный с этим пунктом.
Второй аспект данного изобретения направлен на способ, содержащий признаки первого аспекта, в котором этап, по меньшей мере, управления генерацией звука содержит генерацию звука.
Третий аспект данного изобретения направлен на способ, включающий в себя признаки первого аспекта, причем свойства звуков пунктов взаимосвязаны для индикации направления перемещения и/или положения в структуре в зависимости от активированных пунктов в структуре.
Четвертый аспект данного изобретения направлен на способ, включающий в себя признаки третьего аспекта, в котором звуки обеспечены с различной частотой для индикации направления перемещения и/или положения в структуре в зависимости от активированных пунктов.
Пятый аспект данного изобретения направлен на способ, включающий в себя признаки третьего аспекта, причем каждый звук обеспечен, по меньшей мере, одним тоном, причем количество тонов каждого звука характеризует направление перемещения и/или положения в структуре в зависимости от активированных пунктов.
Шестой аспект данного изобретения направлен на способ, включающий признаки третьего аспекта, в котором звуки обеспечены в качестве голосовой речевой информации о направлении перемещения и/или положения в структуре в зависимости от активированных пунктов.
Седьмой аспект данного изобретения направлен на способ, включающий в себя признаки третьего аспекта, в котором звуки обеспечены в качестве стереозвуков, воспринимаемых как находящиеся в различных точках структуры.
Восьмой аспект данного изобретения направлен на способ, включающий в себя признаки первого аспекта, в котором структура включает в себя несколько групп пунктов, причем, по меньшей мере, один пункт из группы связан с дополнительной группой пунктов.
Девятый аспект данного изобретения направлен на способ, включающий в себя признаки восьмого аспекта, в котором звуки, обеспеченные для нескольких пунктов внутри группы, являются музыкальными звуками определенного типа.
Десятый аспект данного изобретения направлен на способ, включающий в себя признаки первого аспекта, в котором каждый пункт обеспечен одним звуком для каждого направления, в котором перемещение может быть сделано относительно этого пункта.
Другой задачей данного изобретения является обеспечение управления меню устройства для представления информации, обеспечивающее обратную связь для информирования пользователя, в каком месте структуры он находится, если визуальная информация недоступна или нежелательна.
В соответствии с одиннадцатым аспектом данного изобретения решение задачи достигается с помощью устройства для представления информации, обеспечивающего возможность управления меню в структуре меню, причем устройство содержит
по меньшей мере, один блок ввода пользователя; и
блок управления, выполненный с возможностью
обеспечения выбираемых пунктов в структуре меню, причем пункты относятся к функциям, приложениям или настройкам устройства для представления информации,
связывания каждого пункта, по меньшей мере, с одним, предназначенным звуком, и;
при обнаружении активирования пользователем определенного пункта посредством блока ввода пользователя передачи команды блоку генерации звука для генерации звука, связанного с этим пунктом.
Двенадцатый аспект данного изобретения направлен на устройство, включающее в себя признаки одиннадцатого аспекта и дополнительно содержащее блок генерации звука, выполненный с возможностью генерирования этого звука.
Тринадцатый аспект данного изобретения направлен на устройство, включающее в себя признаки одиннадцатого аспекта, причем свойства звуков пунктов взаимосвязаны для индикации направления перемещения и/или положения в структуре в зависимости от активированных пунктов в структуре.
Четырнадцатый аспект данного изобретения направлен на устройство, включающее в себя признаки тринадцатого аспекта, в котором звуки обеспечены с различной частотой для индикации направления перемещения и/или положения в структуре в зависимости от активированных пунктов.
Пятнадцатый аспект данного изобретения направлен на устройство, включающее в себя признаки тринадцатого аспекта, причем каждый звук обеспечен, по меньшей мере, одним тоном, причем количество тонов каждого звука характеризует направление перемещения и/или положения в структуре в зависимости от активированных пунктов.
Шестнадцатый аспект данного изобретения направлен на устройство, включающее в себя признаки тринадцатого аспекта, в котором звуки обеспечены в качестве голосовой речевой информации о направлении перемещения и/или положения в структуре в зависимости от активированных пунктов.
Семнадцатый аспект данного изобретения направлен на устройство, включающее в себя признаки тринадцатого аспекта, причем звуки обеспечены в качестве стереозвуков, воспринимаемых как находящиеся в различных точках структуры.
Восемнадцатый аспект данного изобретения направлен на устройство, включающее в себя признаки одиннадцатого аспекта, причем структура меню включает в себя несколько групп пунктов, причем, по меньшей мере, один пункт группы связан с дополнительной группой пунктов.
Девятнадцатый аспект данного изобретения направлен на устройство, включающее в себя признаки восемнадцатого аспекта, причем звуки, обеспеченные для нескольких пунктов внутри группы, являются музыкальными звуками определенного типа.
Двадцатый аспект данного изобретения направлен на устройство, включающее в себя признаки одиннадцатого аспекта, причем каждый пункт обеспечен одним звуком для каждого направления, в котором перемещение может быть сделано относительно этого пункта.
Двадцать первый аспект данного изобретения направлен на устройство, включающее в себя признаки одиннадцатого аспекта, причем устройство является переносным электронным устройством.
Двадцать второй аспект данного изобретения направлен на устройство, включающее в себя признаки двадцать первого аспекта, причем устройство является переносным устройством связи.
Двадцать третий аспект данного изобретения направлен на устройство, включающее в себя признаки двадцать второго аспекта, причем устройство является мобильным телефоном.
Двадцать четвертый аспект данного изобретения направлен на устройство представления информации, обеспечивающее возможность управления меню в структуре меню, содержащее:
средство для обеспечения выбираемых пунктов в структуре меню, причем пункты относятся к функциям, приложениям или настройкам устройства для представления информации,
средство для связывания каждого пункта с предназначенным звуком и;
средство, которое при обнаружении активирования определенного пункта, по меньшей мере, передает команду генерации звука, связанного с этим пунктом.
Другой задачей настоящего изобретения является предоставление компьютерной программы для управления меню в структуре меню, обеспечивающей обратную связь для информирования пользователя, в каком месте структуры он находится, в том случае, когда получение визуальной информации невозможно или нежелательно.
В соответствии с двадцать пятым аспектом настоящего изобретения задача осуществляется с помощью компьютерной программы, обеспечивающей возможность управления меню в структуре меню устройства для представления информации и содержащей компьютерный программный код, который при загрузке в устройство для представления информации
обеспечивает выбираемые пункты в структуре меню, причем пункты относятся к функциям, приложениям и настройкам устройства для представления информации,
связывает каждый пункт с одним предназначенным звуком, и
при обнаружении активирования определенного пункта передает команду для генерации звука, связанного с этим пунктом.
Изобретение имеет следующие преимущества. Оно дает возможность пользователю непосредственно получать информацию о направлении перемещения, не глядя на устройство для представления информации. Это является преимуществом для незрячих людей или людей, занятых другим делом, не позволяющим им смотреть на устройство. Это также позволяет использовать устройства без дисплея или подсоединения к устройству, отображающему структуру меню без дисплея. Осуществление изобретения не требует больших затрат, так как большинство функций, необходимых для осуществления изобретения, уже имеется в устройствах для представления информации. Дополнительно требуется лишь компьютерная программа.
Следует заметить, что термин «содержит/содержащий» используется в данном описании для перечисления признаков чисел, этапов или составляющих, но не исключает наличия дополнительных признаков чисел, этапов, составляющих или их групп.
КРАТКОЕ ОПИСАНИЕ ЧЕРТЕЖЕЙ
Более подробное описание изобретения дано на прилагаемых чертежах, а именно:
на фиг. 1 показан вид спереди устройства для представления информации в виде мобильного телефона,
на фиг. 2 изображена блок-схема относящихся к изобретению элементов внутреннего устройства телефона, представленного на фиг. 1,
на фиг. 3 показана система структуры меню в соответствии с изобретением, а
на фиг. 4 представлена схема последовательности действий способа в соответствии с изобретением.
ПОДРОБНОЕ ОПИСАНИЕ ВАРИАНТОВ ОСУЩЕСТВЛЕНИЯ ИЗОБРЕТЕНИЯ
На фиг. 1 показан вид спереди устройства для представления информации 10 в соответствии с изобретением. Предпочтительным вариантом осуществления изобретения является мобильный телефон 10, включающий в себя дисплей 24, клавиатуру 12 с некоторым количеством блоков ввода пользователя в виде клавишей, где первый блок 14 ввода пользователя является первой программной клавишей, второй блок 16 ввода пользователя - второй программной клавишей, третий блок 18 ввода пользователя является джойстиком, который обеспечивает перемещение вверх, вниз, налево и направо, а четвертый блок 20 ввода пользователя - это клавиша «возврата», функционирование которой более подробно будет описано далее. Помимо возможности делать вызовы и отвечать на вызовы, клавиша 18 используется для ввода информации, например, выбора функций и приложений и ответа на приглашение, а дисплей 24 обычно используется для отображения функций и приглашений пользователю телефона. Первый, второй, третий и четвертый блоки ввода 14, 16, 18 и 20 пользователя могут использоваться для управления системой меню в этом телефоне. Телефон также включает в себя блок генерации звука в виде динамика 26, выполненного с возможностью издавать звуки для пользователя телефоном. Мобильный телефон является лишь примером переносного устройства связи. Переносное устройство связи, в свою очередь, является одним из видов переносных электронных устройств. Все типы этих устройств являются устройствами для представления информации, имеющими описанную структуру меню. Другими типами устройств, помимо мобильных телефонов, являются КПК (карманные персональные компьютеры), наладонные компьютеры, ноутбуки, смартфоны и игровые приставки. Изобретение может использоваться также в персональных компьютерах, телевизорах, телевизионных приставках для приема и декодирования сигналов цифрового телевидения, в стерео- и видеоустройствах управления или в приборах любого типа, использующих структуру меню для представления информации потребителю.
На фиг. 2 показана блок-схема различных узлов телефона 10, относящегося к представленному изобретению. Дисплей 24 и клавиатура 12 показаны как отдельные узлы, соединенные с блоком 28 управления. Блок 28 управления подключен к блоку 30 привода динамика, который соединен с динамиком 26 для привода его в действие, к запоминающему устройству 32 звуков пункта меню и к функциональному блоку 34, выполненному с возможностью выполнения функции, которую выбирает пользователь телефона путем выбора пунктов в системе меню. Должно быть понятно, что блок 28 управления может быть связан с несколькими другими функциональными блоками для выполнения других функций, приложений и настроек телефона. Однако для лучшего разъяснения изобретения представлена только одна функция.
На фиг. 3 представлена логическая структура 36 одного примера системы меню в соответствии с данным изобретением. Система 36 меню имеет иерархическую структуру пунктов, которые могут быть выбраны пользователем телефона. В одном примере она может содержать верхний уровень меню «Верхний уровень», который обычно является точкой входа в систему меню, когда телефон включен. От этого верхнего уровня можно перейти к первому подуровню, включающему в себя несколько пунктов, обычно соответствующих некоторым основным функциям телефона. На первом подуровне показаны пункты «Вызовы», «Сообщения» и «Органайзер». Различные возможные настройки и функции могут быть получены путем последующих выборов пунктов первого подуровня. Так, выбор пункта «Вызовы» позволяет пользователю выполнить вызов, посмотреть различные журналы вызовов и произвести упорядочение вызовов. Таким же образом для пользователя имеется возможность послать, прочитать и написать сообщения, используя пункт «Сообщения», а также настроить часы и календарь, используя пункт «Органайзер». На этом уровне может быть несколько больше или несколько меньше пунктов. Однако в данном случае они отсутствуют, чтобы лучше пояснить изобретение. Некоторыми другими дополнительными пунктами этого уровня могут быть «Доступ в Интернет», «Фотокамера», «Музыкальный плеер», «Картинки и звуки», «Игры», «Настройки» и «Телефонная книга». Каждый из этих пунктов может быть представлен в структуре меню сверху вниз, как показано на фиг. 3. Однако пункты меню могут быть расположены также один возле другого слева направо или в виде таблицы. Можно выбрать любой пункт первого подуровня, а затем перейти ко второму подуровню, связанному с выбранным пунктом, как показано на примере; от пункта «Сообщения» можно перейти к пунктам «Голосовая почта», «Текст» и «Сообщения электронной почты». На втором подуровне может быть реализовано дополнительное количество пунктов. Итак, выбор пункта «Сообщения» может привести к представлению пункта «Голосовая почта», «Текст» или «Сообщения электронной почты». Выбор одного из пунктов второго подуровня может привести к представлению пунктов третьего подуровня, если они имеются. Например, выбор пункта «Текст» приведет к представлению пунктов «Написать новое», «Входящие», «Опции» и «Отправленное». Далее выбор пункта «Входящие» может затем привести к четвертому подуровню, а именно «Сообщение 1», «Сообщение 2» и «Сообщение 3», а выбор пункта «Опции» приводит к четвертому подуровню «Тип SMS», который, в свою очередь, ведет к пунктам меню пятого подуровня «Текст», «Электронное сообщение» и «Пейджер», связанным с пунктом «Тип SMS». Пункты нижнего уровня часто не приводят к другому уровню, но они непосредственно обеспечивают настройку, приложение или функцию устройства. Структура 36 меню, описанная выше, является лишь примером структуры меню, по которому можно перемещаться вперед и назад. Обычно существует обратная связь, при помощи которой происходит визуальное информирование пользователя о перемещениях в структуре путем подсветки отмеченного пункта и отображения списка следующих пунктов после выбора отмеченного пункта. Целью данного изобретения является разработка альтернативной этому способу звуковой обратной связи, использующейся в сочетании или вместо визуальной обратной связи для индикации направления перемещения по структуре меню.
Предпочтительный вариант осуществления изобретения пояснен на фиг. 1, 2, 3 и 4, причем на фиг. 4 показана схема последовательности действий способа в соответствии с изобретением. Считается, что этот вариант является в настоящее время лучшим вариантом осуществления изобретения. Блок 28 управления связывает пункты структуры 36 с блоками ввода пользователя клавиатуры 12, причем первый блок 14 ввода пользователя позволяет выбрать пункты меню структуры 36 меню, третий блок 18 ввода пользователя осуществляет перемещение по меню вверх, вниз и в стороны по структуре 36 меню, а четвертый блок 20 ввода пользователя осуществляет возврат на один шаг структуры 36 меню. Второй блок 16 ввода пользователя дает дополнительную информацию по отмеченному пункту. Эта информация в соответствии с настоящим изобретением может сопровождаться звуковым сигналом вместо визуального или вместе с ним. Описание способа начинается с этапа 40 вхождения в меню системы, контролируемого блоком 28 управления, причем структура 36 меню содержит пункты меню, как представлено в качестве примера на фиг. 3. Каждый пункт меню связан, по меньшей мере, с одним звуком, причем звук информирует о направлении перемещения при управлении меню в структуре меню, этап 42. Используемые для генерации звуков коды сохранены в запоминающем устройстве 32 звуков пункта меню. Затем блок 28 управления находится в состоянии ожидания активации блока ввода пользователя пользователем устройства 10 или активации первого, третьего или четвертого блоков 14, 18 и 20 ввода пользователя для управления меню в системе 36 меню, этап 44, причем если пункт отмечен, этап 44, что обычно делается джойстиком 18, блок 28 управления анализирует, какой пункт в структуре отмечен, и ищет в запоминающем устройстве звуков по коду тот звук, который должен быть генерирован в соответствии с отмеченным пунктом, и обеспечивает передачу звука в блок 30 привода динамика. Далее на блок 30 привода динамика передается команда подачи звука, связанного с отмеченным пунктом, этап 46. Это может быть сделано путем подачи звуковой информации, указывающей перемещение в структуре вверх, вниз, налево или направо. Для того чтобы определить направление перемещения, необходимо учесть, какой пункт в подуровне был перед этим отмечен. Если пункт отмечен, этап 44, блок 28 управления анализирует, был ли пункт выбран, причем выбор обычно осуществляется активацией первой программной клавиши 14, этап 50. Если направление перемещения указано, причем направление перемещения теперь может быть перемещением внутрь структуры 34, например, на более низкий подуровень из-за выбранного пункта, блок 28 управления снова анализирует, какой звук из запоминающего устройства 32 должен быть сгенерирован, и передает на блок 30 привода динамика управляющий звук, связанный с выбранным пунктом, из дополнительного устройства звуков. Для получения информации о направлении перемещения внутрь в структуру может быть использован звуковой сигнал. Соответственно на блок 30 привода динамика передается команда подачи звука, связанного с выбранным пунктом, этап 52. Далее возможно выполнить действие, связанное с этим пунктом, этап 54, например, с использованием блока 28 управления активизировать функциональный блок 34. Альтернативным действием может быть выбор подуровня более низкого порядка. В том случае, если пункт не выбран, этап 50, или пункт не отмечен, этап 44, блок 28 управления анализирует, выбран ли этап возврата к предыдущему подуровню или верхнему уровню нажатием пользователем клавиши 20 возврата, этап 48. Если выбран этап возврата, этап 48, блок 28 управления путем поиска в запоминающем устройстве 32 снова анализирует, какой звук следует подать, и приводит в действие блок 30 привода динамика для получения из запоминающего устройства звукового сигнала, соответствующего возврату от этого пункта на предыдущий или более высокий уровень, этап 56. Затем блок 30 привода динамика выбирает из запоминающего устройства 32 звуковой код, соответствующий этапу возврата, и динамик 26 подает звуковой сигнал в соответствии со звуковым кодом. Для получения информации о направлении перемещения из структуры за ее пределы может быть использован звуковой сигнал. После этого блок 28 управления возвращается в прежнее состояние и ожидает ввода пользователя, этап 44.
В соответствии с изобретением при активации пункта, который может быть выбран, отмечен или произведен возврат, подается звуковой сигнал, информирующий пользователя о том, как пользователь перемещается по структуре меню. Соответственно каждый пункт связан с одним звуком для каждого направления перемещения от этого пункта. Генерируемые звуки могут быть различного типа. Например, может быть использована тональность звука, причем различная частота звука соответствует пунктам, расположенным выше, ниже или рядом друг с другом. Можно назначить различные интервалы частоты для разных подменю. В качестве альтернативы можно использовать последовательные тоны или гудки на той же частоте, что и звуковой сигнал, так чтобы один уровень имел только один тон, следующий ниже или выше уровень - два тона и т.д. Преимущество заключается в том, что можно использовать разные частоты. Еще одной альтернативой является использование стереозвука для получения информации о направлении перемещения в структуре меню при управлении меню. При использовании двух динамиков звук возникает в определенной точке пространства между динамиками, и по сдвигу этой точки можно определять направление перемещения. Последний вариант имеет преимущество, если используются наушники. Далее, возможно использовать голосовую информацию с записанными словами «налево, направо, вверх, вниз, внутрь, наружу» и т.д. Различными описанными выше способами можно обеспечить пользователя сведениями о пунктах меню и направлении перемещения в пространстве, составляющем 360 градусов вокруг пользователя.
Согласно другому варианту осуществления изобретения можно использовать мелодии различного типа для определения направления перемещения в структуре, когда, например, пункты на одном уровне соответствуют определенному типу мелодий, например, классическая, диско или рэп, а более низкому уровню - различные музыкальные произведения данной категории.
Данное изобретение имеет много преимуществ. Оно позволяет пользователю получать информацию о направлении перемещения в меню без просмотра дисплея устройства для представления информации. Это является преимуществом для незрячих людей или людей, занятых другим делом, не позволяющим смотреть на устройство. Это также позволяет использовать устройства без дисплея или без присоединения к устройству, отображающему структуру меню, которое не имеет дисплея. Осуществление этого изобретения просто и дешево, так как множество необходимых для него функций уже имеется в большинстве приборов для представления информации. Для осуществления необходима лишь дополнительная компьютерная программа.
Возможны различные варианты осуществления изобретения. Можно отмечать положение пункта дополнительно или вместо определения направления перемещения в структуре. Возможно также в дополнение к определению направления перемещения и/или положения определять также вид пункта в подуровне, например, с использованием записанного голоса. Меню системы может не содержать описанного выше верхнего уровня, и пункты первого подуровня в действительности выполняют роль верхнего уровня. Настоящее изобретение не ограничивается также описанными выше клавишами, и для управления меню могут быть использованы любые клавиши устройства. Изобретение может также использоваться в сочетании с визуальным изображением меню или без представления меню в визуальном виде. Разработанное устройство может также иметь собственный блок генерации звука или другое устройство с блоком генерации звука и давать команду другому устройству на подачу звукового сигнала совместно с визуальной информацией.
Блок управления, функциональный блок и блок привода динамика обычно представляют собой один или несколько процессоров, содержащих в памяти соответствующие программы с подходящими программными кодами. Запоминающее устройство пунктов меню предпочтительно представляет собой микросхемы постоянной или оперативной памяти. Программа может находиться на носителе данных, например на CD-компакт диске или карте памяти, и при загрузке в устройство для представления информации выполняет процедуру описанного в изобретении способа. Программа может быть установлена на сервер, с которого может быть загружена в устройство для представления информации.
Claims (25)
1. Способ, обеспечивающий возможность управления в структуре меню сотового телефона, содержащий этапы, на которых
обеспечивают множество выбираемых пунктов в структуре меню, причем выбираемые пункты относятся, по меньшей мере, к одному из: функции, приложения и настройки сотового телефона,
связывают каждый из пунктов меню, по меньшей мере, с одним предназначенным звуком;
идентифицируют при обнаружении выбора определенного одного из пунктов меню в структуре меню, определенный один из, по меньшей мере, одного предназначенного звука, связанного с определенным пунктом меню; и
генерируют определенный предназначенный стереофонический звук так, чтобы он воспринимался как исходящим из точки между, по меньшей мере, двумя динамиками, связанными с сотовым телефоном, что указывает на направление перемещения в структуре меню относительно определенного пункта меню без представления визуальной информации, относящейся к направлению перемещения в структуре меню относительно определенного пункта меню.
обеспечивают множество выбираемых пунктов в структуре меню, причем выбираемые пункты относятся, по меньшей мере, к одному из: функции, приложения и настройки сотового телефона,
связывают каждый из пунктов меню, по меньшей мере, с одним предназначенным звуком;
идентифицируют при обнаружении выбора определенного одного из пунктов меню в структуре меню, определенный один из, по меньшей мере, одного предназначенного звука, связанного с определенным пунктом меню; и
генерируют определенный предназначенный стереофонический звук так, чтобы он воспринимался как исходящим из точки между, по меньшей мере, двумя динамиками, связанными с сотовым телефоном, что указывает на направление перемещения в структуре меню относительно определенного пункта меню без представления визуальной информации, относящейся к направлению перемещения в структуре меню относительно определенного пункта меню.
2. Способ по п.1, в котором управляют сотовым телефоном, который не содержит визуальный дисплей, посредством которого представляют структуру меню.
3. Способ по п.1, в котором свойства звука, по меньшей мере, одного предназначенного звука, связанного с каждым из пунктов меню, взаимосвязаны для индикации направления перемещения или положения в структуре относительно выбранных пунктов меню в структуре меню.
4. Способ по п.3, в котором предназначенные звуки имеют различные частоты для индикации направления перемещения или положения в структуре меню относительно выбранных пунктов меню.
5. Способ по п.3, в котором предназначенные звуки обеспечивают, по меньшей мере, один тоном, причем количество тонов каждого предназначенного звука характеризует направление перемещения или положение в структуре меню относительно выбранных пунктов меню.
6. Способ по п.3, в котором предназначенные звуки обеспечивают речь, которая озвучивает направление перемещения или положения в структуре меню в зависимости от выбранных пунктов меню.
7. Способ по п.2, в котором дополнительно обеспечивают генерированный звук в наушниках в виде стереозвука в аудиопространстве, составляющем 360° вокруг пользователя аудионаушников.
8. Способ по п.1, в котором указанная структура меню включает в себя несколько различных групп пунктов меню, причем, по меньшей мере, один пункт меню из одной из групп связан с другим одним из групп пунктов меню.
9. Способ по п.8, в котором предназначенные звуки, связанные с несколькими пунктами меню в одной и той же группе, являются музыкальными звуками определенного типа.
10. Способ по п.1, в котором каждый пункт меню предусмотрен со звуком для каждого направления, в котором перемещение может быть сделано относительно этого пункта меню.
11. Способ по п.2, в котором дополнительно сдвигают генерированный звук от этой точки к другой точке между, по меньшей мере, двумя динамиками, основываясь на направлении перемещения.
12. Сотовый телефон, обеспечивающий возможность управления меню в структуре меню, содержащий по меньшей мере один первый блок ввода пользователя; блок генерирования звука; блок управления, выполненный с возможностью обеспечения пунктов меню, выбираемых в структуре меню, причем пункты меню относятся, по меньшей мере, к одному из: функции, приложения и настройки сотового телефона, связывания, по меньшей мере, одного предназначенного звука с определенным одним из пунктов меню; идентифицирования при обнаружении выбора определенного пункта меню посредством, по меньшей мере, одного первого блока ввода пользователя сотового телефона, по меньшей мере, одного предназначенного звука, связанного с определенным пунктом меню; и генерирования, по меньшей мере, одного предназначенного стереофонического звука так, чтобы он воспринимался как исходящим из точки между, по меньшей мере двумя динамиками, связанными с сотовым телефоном, что указывает на направление перемещения в структуре меню относительно определенного пункта меню, причем, по меньшей мере один предназначенный звук генерируется независимо от визуальной информации, относящейся к направлению перемещения в структуре меню относительно определенного пункта меню.
13. Сотовый телефон по п.12, в котором блок генерирования звука выполнен с возможностью сдвигать, по меньшей мере, один предназначенный звук от этой точки в другую точку между, по меньшей мере, двумя динамиками, основываясь на направлении перемещения.
14. Сотовый телефон по п.12, в котором свойства звука, по меньшей мере, одного предназначенного звука, связанные с каждым из пунктов меню, взаимосвязаны для индикации направления перемещения или положения в структуре меню относительно выбранных пунктов меню в структуре меню.
15. Сотовый телефон по п.12, в котором предназначенные звуки имеют различные частоты для индикации направления перемещения или положения в структуре меню относительно выбранных пунктов меню.
16. Сотовый телефон по п.12, в котором предназначенные звуки обеспечивают, по меньшей мере, один тоном, причем количество тонов каждого предназначенного звука характеризует направление перемещения или положение в структуре меню относительно выбранных пунктов меню.
17. Сотовый телефон по п.12, в котором предназначенные звуки обеспечивают речь, которая озвучивает направление перемещения или положения в структуре меню в зависимости от выбранных пунктов меню.
18. Сотовый телефон по п.12, в котором блок управления обеспечивает генерированный, по меньшей мере, один из предназначенного звука в наушниках в виде стереозвука в аудиопространстве, составляющем 360° вокруг пользователя аудионаушников.
19. Сотовый телефон по п.11, в котором указанная структура меню включает в себя несколько различных групп пунктов меню, причем, по меньшей мере, один пункт меню в одной из групп связан с одним другим из групп пунктов меню.
20. Сотовый телефон по п.19, в котором предназначенные звуки, связанные с несколькими пунктами меню в одной и той же группе, являются музыкальными звуками определенного типа.
21. Сотовый телефон по п.12, в котором каждый пункт меню предусмотрен со звуком для каждого направления, в котором перемещение может быть сделано относительно этого пункта меню.
22. Сотовый телефон по п.12, в котором сотовый телефон не имеет визуального дисплея, посредством которого представляют структуру меню.
23. Устройство для представления информации для управления меню в структуре меню, содержащее
средство для обеспечения выбираемых пользователем пунктов в структуре меню, причем пункты относятся, по меньшей мере, к одному из: функции, приложения и настройки устройства для представления информации,
средство для связывания каждого из пунктов с предназначенным звуком; и
средство при обнаружении выбора пользователя определенного одного из пунктов обеспечивает возможность генерирования предназначенного звука, связанного с определенным пунктом, причем устройство для представления информации не включает в себя визуальный дисплей, посредством которого представляют структуру меню, или соединение с устройством, посредством которого представляют структуру меню.
средство для обеспечения выбираемых пользователем пунктов в структуре меню, причем пункты относятся, по меньшей мере, к одному из: функции, приложения и настройки устройства для представления информации,
средство для связывания каждого из пунктов с предназначенным звуком; и
средство при обнаружении выбора пользователя определенного одного из пунктов обеспечивает возможность генерирования предназначенного звука, связанного с определенным пунктом, причем устройство для представления информации не включает в себя визуальный дисплей, посредством которого представляют структуру меню, или соединение с устройством, посредством которого представляют структуру меню.
24. Машиночитаемый носитель, имеющий сохраненный на нем компьютерный программный продукт, имеющий компьютерный программный код, который при исполнении, по меньшей мере, одним процессором обеспечивает управление меню в структуре меню сотового телефона, содержащий
инструкции для обеспечения множества пунктов меню в иерархической структуре, причем множество пунктов меню относятся, по меньшей мере к одному из: функции, приложения и настройки сотового телефона,
инструкции для связывания каждого из множества пунктов меню с предназначенным звуком; и
инструкции для обнаружения выбора определенного одного из множества пунктов посредством активирования устройства ввода пользователя, соответствующего определенному пункту меню; и
инструкции для обеспечения, вместо визуальной обратной связи, при обнаружении выбора определенного пункта меню звуковой инструкции для обеспечения, вместо визуальной обратной связи, при обнаружении выбора определенного пункта меню звуковой стереофонической обратной связи, включающей в себя предназначенный звук, связанный с определенным пунктом меню.
инструкции для обеспечения множества пунктов меню в иерархической структуре, причем множество пунктов меню относятся, по меньшей мере к одному из: функции, приложения и настройки сотового телефона,
инструкции для связывания каждого из множества пунктов меню с предназначенным звуком; и
инструкции для обнаружения выбора определенного одного из множества пунктов посредством активирования устройства ввода пользователя, соответствующего определенному пункту меню; и
инструкции для обеспечения, вместо визуальной обратной связи, при обнаружении выбора определенного пункта меню звуковой инструкции для обеспечения, вместо визуальной обратной связи, при обнаружении выбора определенного пункта меню звуковой стереофонической обратной связи, включающей в себя предназначенный звук, связанный с определенным пунктом меню.
25. Машиночитаемый носитель по п.24, дополнительно содержащий инструкции для генерирования определенного предназначенного звука и управления, по меньшей мере, двумя динамиками, связанными с сотовым телефоном, так, чтобы генерированный звук возникал в первой точке между, по меньшей мере, двумя динамиками, и инструкции для сдвига определенной точки ко второй точке между, по меньшей мере, двумя динамиками, относящейся к направлению перемещения в иерархической структуре, относящейся к определенному пункту меню.
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US74799606P | 2006-05-23 | 2006-05-23 | |
US60/747,996 | 2006-05-23 | ||
US11/535,654 | 2006-09-27 | ||
US11/535,654 US7596765B2 (en) | 2006-05-23 | 2006-09-27 | Sound feedback on menu navigation |
Publications (2)
Publication Number | Publication Date |
---|---|
RU2008150853A RU2008150853A (ru) | 2010-06-27 |
RU2421779C2 true RU2421779C2 (ru) | 2011-06-20 |
Family
ID=37685729
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
RU2008150853/08A RU2421779C2 (ru) | 2006-05-23 | 2006-11-21 | Звуковая обратная связь при навигации по меню |
Country Status (7)
Country | Link |
---|---|
US (1) | US7596765B2 (ru) |
EP (1) | EP2021909A1 (ru) |
JP (1) | JP2009537916A (ru) |
BR (1) | BRPI0621736A2 (ru) |
MX (1) | MX2008014385A (ru) |
RU (1) | RU2421779C2 (ru) |
WO (1) | WO2007134644A1 (ru) |
Families Citing this family (166)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8645137B2 (en) | 2000-03-16 | 2014-02-04 | Apple Inc. | Fast, language-independent method for user authentication by voice |
US8677377B2 (en) | 2005-09-08 | 2014-03-18 | Apple Inc. | Method and apparatus for building an intelligent automated assistant |
US8920343B2 (en) | 2006-03-23 | 2014-12-30 | Michael Edward Sabatino | Apparatus for acquiring and processing of physiological auditory signals |
US9318108B2 (en) | 2010-01-18 | 2016-04-19 | Apple Inc. | Intelligent automated assistant |
KR20080063041A (ko) * | 2006-12-29 | 2008-07-03 | 삼성전자주식회사 | 사용자 인터페이스 방법 및 장치 |
US8977255B2 (en) | 2007-04-03 | 2015-03-10 | Apple Inc. | Method and system for operating a multi-function portable electronic device using voice-activation |
US10002189B2 (en) | 2007-12-20 | 2018-06-19 | Apple Inc. | Method and apparatus for searching using an active ontology |
US9330720B2 (en) | 2008-01-03 | 2016-05-03 | Apple Inc. | Methods and apparatus for altering audio output signals |
US8996376B2 (en) | 2008-04-05 | 2015-03-31 | Apple Inc. | Intelligent text-to-speech conversion |
US10496753B2 (en) | 2010-01-18 | 2019-12-03 | Apple Inc. | Automatically adapting user interfaces for hands-free interaction |
US20100030549A1 (en) | 2008-07-31 | 2010-02-04 | Lee Michael M | Mobile device having human language translation capability with positional feedback |
US8676904B2 (en) | 2008-10-02 | 2014-03-18 | Apple Inc. | Electronic devices with voice command and contextual data processing capabilities |
US9858925B2 (en) | 2009-06-05 | 2018-01-02 | Apple Inc. | Using context information to facilitate processing of commands in a virtual assistant |
US10241752B2 (en) | 2011-09-30 | 2019-03-26 | Apple Inc. | Interface for a virtual digital assistant |
US10241644B2 (en) | 2011-06-03 | 2019-03-26 | Apple Inc. | Actionable reminder entries |
US10706373B2 (en) | 2011-06-03 | 2020-07-07 | Apple Inc. | Performing actions associated with task items that represent tasks to perform |
US9431006B2 (en) | 2009-07-02 | 2016-08-30 | Apple Inc. | Methods and apparatuses for automatic speech recognition |
US8923995B2 (en) * | 2009-12-22 | 2014-12-30 | Apple Inc. | Directional audio interface for portable media device |
JP5520318B2 (ja) * | 2009-12-28 | 2014-06-11 | パナソニック株式会社 | 操作音ガイド装置及び操作音ガイド方法 |
US10679605B2 (en) | 2010-01-18 | 2020-06-09 | Apple Inc. | Hands-free list-reading by intelligent automated assistant |
US10705794B2 (en) | 2010-01-18 | 2020-07-07 | Apple Inc. | Automatically adapting user interfaces for hands-free interaction |
US10276170B2 (en) | 2010-01-18 | 2019-04-30 | Apple Inc. | Intelligent automated assistant |
US10553209B2 (en) | 2010-01-18 | 2020-02-04 | Apple Inc. | Systems and methods for hands-free notification summaries |
DE202011111062U1 (de) | 2010-01-25 | 2019-02-19 | Newvaluexchange Ltd. | Vorrichtung und System für eine Digitalkonversationsmanagementplattform |
US8682667B2 (en) | 2010-02-25 | 2014-03-25 | Apple Inc. | User profiling for selecting user specific voice input processing information |
US9262612B2 (en) | 2011-03-21 | 2016-02-16 | Apple Inc. | Device access using voice authentication |
US10057736B2 (en) | 2011-06-03 | 2018-08-21 | Apple Inc. | Active transport based notifications |
US9829978B2 (en) * | 2011-08-17 | 2017-11-28 | Project Ray Ltd. | Interface layer and operating system facilitating use, including by blind and visually-impaired users, of touch-screen-controlled consumer electronic devices |
US8994660B2 (en) | 2011-08-29 | 2015-03-31 | Apple Inc. | Text correction processing |
US9563278B2 (en) | 2011-12-19 | 2017-02-07 | Qualcomm Incorporated | Gesture controlled audio user interface |
US10134385B2 (en) | 2012-03-02 | 2018-11-20 | Apple Inc. | Systems and methods for name pronunciation |
US9483461B2 (en) | 2012-03-06 | 2016-11-01 | Apple Inc. | Handling speech synthesis of content for multiple languages |
US9280610B2 (en) | 2012-05-14 | 2016-03-08 | Apple Inc. | Crowd sourcing information to fulfill user requests |
US10417037B2 (en) | 2012-05-15 | 2019-09-17 | Apple Inc. | Systems and methods for integrating third party services with a digital assistant |
US9721563B2 (en) | 2012-06-08 | 2017-08-01 | Apple Inc. | Name recognition system |
US9495129B2 (en) | 2012-06-29 | 2016-11-15 | Apple Inc. | Device, method, and user interface for voice-activated navigation and browsing of a document |
US9547647B2 (en) | 2012-09-19 | 2017-01-17 | Apple Inc. | Voice-based media searching |
EP4138075A1 (en) | 2013-02-07 | 2023-02-22 | Apple Inc. | Voice trigger for a digital assistant |
US10255038B2 (en) * | 2013-04-26 | 2019-04-09 | Microsoft Technology Licensing, Llc | Techniques to present a user interface for the visually impaired |
WO2014197334A2 (en) | 2013-06-07 | 2014-12-11 | Apple Inc. | System and method for user-specified pronunciation of words for speech synthesis and recognition |
WO2014197336A1 (en) | 2013-06-07 | 2014-12-11 | Apple Inc. | System and method for detecting errors in interactions with a voice-based digital assistant |
US9582608B2 (en) | 2013-06-07 | 2017-02-28 | Apple Inc. | Unified ranking with entropy-weighted information for phrase-based semantic auto-completion |
WO2014197335A1 (en) | 2013-06-08 | 2014-12-11 | Apple Inc. | Interpreting and acting upon commands that involve sharing information with remote devices |
EP3937002A1 (en) | 2013-06-09 | 2022-01-12 | Apple Inc. | Device, method, and graphical user interface for enabling conversation persistence across two or more instances of a digital assistant |
US10176167B2 (en) | 2013-06-09 | 2019-01-08 | Apple Inc. | System and method for inferring user intent from speech inputs |
US10296160B2 (en) | 2013-12-06 | 2019-05-21 | Apple Inc. | Method for extracting salient dialog usage from live data |
US9430463B2 (en) | 2014-05-30 | 2016-08-30 | Apple Inc. | Exemplar-based natural language processing |
US9715875B2 (en) | 2014-05-30 | 2017-07-25 | Apple Inc. | Reducing the need for manual start/end-pointing and trigger phrases |
US9633004B2 (en) | 2014-05-30 | 2017-04-25 | Apple Inc. | Better resolution when referencing to concepts |
US9842101B2 (en) | 2014-05-30 | 2017-12-12 | Apple Inc. | Predictive conversion of language input |
CN106471570B (zh) | 2014-05-30 | 2019-10-01 | 苹果公司 | 多命令单一话语输入方法 |
US9785630B2 (en) | 2014-05-30 | 2017-10-10 | Apple Inc. | Text prediction using combined word N-gram and unigram language models |
US10078631B2 (en) | 2014-05-30 | 2018-09-18 | Apple Inc. | Entropy-guided text prediction using combined word and character n-gram language models |
US9760559B2 (en) | 2014-05-30 | 2017-09-12 | Apple Inc. | Predictive text input |
US10170123B2 (en) | 2014-05-30 | 2019-01-01 | Apple Inc. | Intelligent assistant for home automation |
US9338493B2 (en) | 2014-06-30 | 2016-05-10 | Apple Inc. | Intelligent automated assistant for TV user interactions |
US10659851B2 (en) | 2014-06-30 | 2020-05-19 | Apple Inc. | Real-time digital assistant knowledge updates |
US10446141B2 (en) | 2014-08-28 | 2019-10-15 | Apple Inc. | Automatic speech recognition based on user feedback |
US9818400B2 (en) | 2014-09-11 | 2017-11-14 | Apple Inc. | Method and apparatus for discovering trending terms in speech requests |
US10789041B2 (en) | 2014-09-12 | 2020-09-29 | Apple Inc. | Dynamic thresholds for always listening speech trigger |
US10127911B2 (en) | 2014-09-30 | 2018-11-13 | Apple Inc. | Speaker identification and unsupervised speaker adaptation techniques |
US9886432B2 (en) | 2014-09-30 | 2018-02-06 | Apple Inc. | Parsimonious handling of word inflection via categorical stem + suffix N-gram language models |
US9646609B2 (en) | 2014-09-30 | 2017-05-09 | Apple Inc. | Caching apparatus for serving phonetic pronunciations |
US10074360B2 (en) | 2014-09-30 | 2018-09-11 | Apple Inc. | Providing an indication of the suitability of speech recognition |
US9668121B2 (en) | 2014-09-30 | 2017-05-30 | Apple Inc. | Social reminders |
US9612722B2 (en) | 2014-10-31 | 2017-04-04 | Microsoft Technology Licensing, Llc | Facilitating interaction between users and their environments using sounds |
US10552013B2 (en) | 2014-12-02 | 2020-02-04 | Apple Inc. | Data detection |
US10152299B2 (en) | 2015-03-06 | 2018-12-11 | Apple Inc. | Reducing response latency of intelligent automated assistants |
US9865280B2 (en) | 2015-03-06 | 2018-01-09 | Apple Inc. | Structured dictation using intelligent automated assistants |
US9886953B2 (en) | 2015-03-08 | 2018-02-06 | Apple Inc. | Virtual assistant activation |
US10567477B2 (en) | 2015-03-08 | 2020-02-18 | Apple Inc. | Virtual assistant continuity |
US9721566B2 (en) | 2015-03-08 | 2017-08-01 | Apple Inc. | Competing devices responding to voice triggers |
US9899019B2 (en) | 2015-03-18 | 2018-02-20 | Apple Inc. | Systems and methods for structured stem and suffix language models |
US9842105B2 (en) | 2015-04-16 | 2017-12-12 | Apple Inc. | Parsimonious continuous-space phrase representations for natural language processing |
US10460227B2 (en) | 2015-05-15 | 2019-10-29 | Apple Inc. | Virtual assistant in a communication session |
US10083688B2 (en) | 2015-05-27 | 2018-09-25 | Apple Inc. | Device voice control for selecting a displayed affordance |
US10127220B2 (en) | 2015-06-04 | 2018-11-13 | Apple Inc. | Language identification from short strings |
US10101822B2 (en) | 2015-06-05 | 2018-10-16 | Apple Inc. | Language input correction |
US9578173B2 (en) | 2015-06-05 | 2017-02-21 | Apple Inc. | Virtual assistant aided communication with 3rd party service in a communication session |
US10255907B2 (en) | 2015-06-07 | 2019-04-09 | Apple Inc. | Automatic accent detection using acoustic models |
US10186254B2 (en) | 2015-06-07 | 2019-01-22 | Apple Inc. | Context-based endpoint detection |
US11025565B2 (en) | 2015-06-07 | 2021-06-01 | Apple Inc. | Personalized prediction of responses for instant messaging |
US20160378747A1 (en) | 2015-06-29 | 2016-12-29 | Apple Inc. | Virtual assistant for media playback |
US10747498B2 (en) | 2015-09-08 | 2020-08-18 | Apple Inc. | Zero latency digital assistant |
US10671428B2 (en) | 2015-09-08 | 2020-06-02 | Apple Inc. | Distributed personal assistant |
US9697820B2 (en) | 2015-09-24 | 2017-07-04 | Apple Inc. | Unit-selection text-to-speech synthesis using concatenation-sensitive neural networks |
US11010550B2 (en) | 2015-09-29 | 2021-05-18 | Apple Inc. | Unified language modeling framework for word prediction, auto-completion and auto-correction |
US10366158B2 (en) | 2015-09-29 | 2019-07-30 | Apple Inc. | Efficient word encoding for recurrent neural network language models |
US11587559B2 (en) | 2015-09-30 | 2023-02-21 | Apple Inc. | Intelligent device identification |
US10691473B2 (en) | 2015-11-06 | 2020-06-23 | Apple Inc. | Intelligent automated assistant in a messaging environment |
US10049668B2 (en) | 2015-12-02 | 2018-08-14 | Apple Inc. | Applying neural network language models to weighted finite state transducers for automatic speech recognition |
US10223066B2 (en) | 2015-12-23 | 2019-03-05 | Apple Inc. | Proactive assistance based on dialog communication between devices |
CN105653232A (zh) * | 2015-12-29 | 2016-06-08 | 北京金山安全软件有限公司 | 一种声音播放方法及装置 |
US10446143B2 (en) | 2016-03-14 | 2019-10-15 | Apple Inc. | Identification of voice inputs providing credentials |
US9934775B2 (en) | 2016-05-26 | 2018-04-03 | Apple Inc. | Unit-selection text-to-speech synthesis based on predicted concatenation parameters |
US9972304B2 (en) | 2016-06-03 | 2018-05-15 | Apple Inc. | Privacy preserving distributed evaluation framework for embedded personalized systems |
US11227589B2 (en) | 2016-06-06 | 2022-01-18 | Apple Inc. | Intelligent list reading |
US10249300B2 (en) | 2016-06-06 | 2019-04-02 | Apple Inc. | Intelligent list reading |
US10049663B2 (en) | 2016-06-08 | 2018-08-14 | Apple, Inc. | Intelligent automated assistant for media exploration |
DK179309B1 (en) | 2016-06-09 | 2018-04-23 | Apple Inc | Intelligent automated assistant in a home environment |
US10490187B2 (en) | 2016-06-10 | 2019-11-26 | Apple Inc. | Digital assistant providing automated status report |
US10586535B2 (en) | 2016-06-10 | 2020-03-10 | Apple Inc. | Intelligent digital assistant in a multi-tasking environment |
US10192552B2 (en) | 2016-06-10 | 2019-01-29 | Apple Inc. | Digital assistant providing whispered speech |
US10509862B2 (en) | 2016-06-10 | 2019-12-17 | Apple Inc. | Dynamic phrase expansion of language input |
US10067938B2 (en) | 2016-06-10 | 2018-09-04 | Apple Inc. | Multilingual word prediction |
DK179415B1 (en) | 2016-06-11 | 2018-06-14 | Apple Inc | Intelligent device arbitration and control |
DK179343B1 (en) | 2016-06-11 | 2018-05-14 | Apple Inc | Intelligent task discovery |
DK201670540A1 (en) | 2016-06-11 | 2018-01-08 | Apple Inc | Application integration with a digital assistant |
DK179049B1 (en) | 2016-06-11 | 2017-09-18 | Apple Inc | Data driven natural language event detection and classification |
US10474753B2 (en) | 2016-09-07 | 2019-11-12 | Apple Inc. | Language identification using recurrent neural networks |
US10043516B2 (en) | 2016-09-23 | 2018-08-07 | Apple Inc. | Intelligent automated assistant |
US11281993B2 (en) | 2016-12-05 | 2022-03-22 | Apple Inc. | Model and ensemble compression for metric learning |
US10593346B2 (en) | 2016-12-22 | 2020-03-17 | Apple Inc. | Rank-reduced token representation for automatic speech recognition |
US11204787B2 (en) | 2017-01-09 | 2021-12-21 | Apple Inc. | Application integration with a digital assistant |
US10417266B2 (en) | 2017-05-09 | 2019-09-17 | Apple Inc. | Context-aware ranking of intelligent response suggestions |
DK201770383A1 (en) | 2017-05-09 | 2018-12-14 | Apple Inc. | USER INTERFACE FOR CORRECTING RECOGNITION ERRORS |
DK201770439A1 (en) | 2017-05-11 | 2018-12-13 | Apple Inc. | Offline personal assistant |
US10395654B2 (en) | 2017-05-11 | 2019-08-27 | Apple Inc. | Text normalization based on a data-driven learning network |
US10726832B2 (en) | 2017-05-11 | 2020-07-28 | Apple Inc. | Maintaining privacy of personal information |
DK179745B1 (en) | 2017-05-12 | 2019-05-01 | Apple Inc. | SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT |
DK201770428A1 (en) | 2017-05-12 | 2019-02-18 | Apple Inc. | LOW-LATENCY INTELLIGENT AUTOMATED ASSISTANT |
US11301477B2 (en) | 2017-05-12 | 2022-04-12 | Apple Inc. | Feedback analysis of a digital assistant |
DK179496B1 (en) | 2017-05-12 | 2019-01-15 | Apple Inc. | USER-SPECIFIC Acoustic Models |
DK201770431A1 (en) | 2017-05-15 | 2018-12-20 | Apple Inc. | Optimizing dialogue policy decisions for digital assistants using implicit feedback |
DK201770432A1 (en) | 2017-05-15 | 2018-12-21 | Apple Inc. | Hierarchical belief states for digital assistants |
DK179560B1 (en) | 2017-05-16 | 2019-02-18 | Apple Inc. | FAR-FIELD EXTENSION FOR DIGITAL ASSISTANT SERVICES |
US10403278B2 (en) | 2017-05-16 | 2019-09-03 | Apple Inc. | Methods and systems for phonetic matching in digital assistant services |
US20180336275A1 (en) | 2017-05-16 | 2018-11-22 | Apple Inc. | Intelligent automated assistant for media exploration |
US10311144B2 (en) | 2017-05-16 | 2019-06-04 | Apple Inc. | Emoji word sense disambiguation |
US10657328B2 (en) | 2017-06-02 | 2020-05-19 | Apple Inc. | Multi-task recurrent neural network architecture for efficient morphology handling in neural language modeling |
US10445429B2 (en) | 2017-09-21 | 2019-10-15 | Apple Inc. | Natural language understanding using vocabularies with compressed serialized tries |
US10755051B2 (en) | 2017-09-29 | 2020-08-25 | Apple Inc. | Rule-based natural language processing |
US10636424B2 (en) | 2017-11-30 | 2020-04-28 | Apple Inc. | Multi-turn canned dialog |
US10733982B2 (en) | 2018-01-08 | 2020-08-04 | Apple Inc. | Multi-directional dialog |
US10733375B2 (en) | 2018-01-31 | 2020-08-04 | Apple Inc. | Knowledge-based framework for improving natural language understanding |
US10789959B2 (en) | 2018-03-02 | 2020-09-29 | Apple Inc. | Training speaker recognition models for digital assistants |
US10592604B2 (en) | 2018-03-12 | 2020-03-17 | Apple Inc. | Inverse text normalization for automatic speech recognition |
US10818288B2 (en) | 2018-03-26 | 2020-10-27 | Apple Inc. | Natural assistant interaction |
US10909331B2 (en) | 2018-03-30 | 2021-02-02 | Apple Inc. | Implicit identification of translation payload with neural machine translation |
US11145294B2 (en) | 2018-05-07 | 2021-10-12 | Apple Inc. | Intelligent automated assistant for delivering content from user experiences |
US10928918B2 (en) | 2018-05-07 | 2021-02-23 | Apple Inc. | Raise to speak |
US20190347069A1 (en) * | 2018-05-11 | 2019-11-14 | Nathan Park | Accessing a desktop computer with proprioception |
US10984780B2 (en) | 2018-05-21 | 2021-04-20 | Apple Inc. | Global semantic word embeddings using bi-directional recurrent neural networks |
DK201870355A1 (en) | 2018-06-01 | 2019-12-16 | Apple Inc. | VIRTUAL ASSISTANT OPERATION IN MULTI-DEVICE ENVIRONMENTS |
DK179822B1 (da) | 2018-06-01 | 2019-07-12 | Apple Inc. | Voice interaction at a primary device to access call functionality of a companion device |
US11386266B2 (en) | 2018-06-01 | 2022-07-12 | Apple Inc. | Text correction |
DK180639B1 (en) | 2018-06-01 | 2021-11-04 | Apple Inc | DISABILITY OF ATTENTION-ATTENTIVE VIRTUAL ASSISTANT |
US10892996B2 (en) | 2018-06-01 | 2021-01-12 | Apple Inc. | Variable latency device coordination |
US10504518B1 (en) | 2018-06-03 | 2019-12-10 | Apple Inc. | Accelerated task performance |
US11010561B2 (en) | 2018-09-27 | 2021-05-18 | Apple Inc. | Sentiment prediction from textual data |
US11170166B2 (en) | 2018-09-28 | 2021-11-09 | Apple Inc. | Neural typographical error modeling via generative adversarial networks |
US11462215B2 (en) | 2018-09-28 | 2022-10-04 | Apple Inc. | Multi-modal inputs for voice commands |
US10839159B2 (en) | 2018-09-28 | 2020-11-17 | Apple Inc. | Named entity normalization in a spoken dialog system |
US11475898B2 (en) | 2018-10-26 | 2022-10-18 | Apple Inc. | Low-latency multi-speaker speech recognition |
US11638059B2 (en) | 2019-01-04 | 2023-04-25 | Apple Inc. | Content playback on multiple devices |
US11348573B2 (en) | 2019-03-18 | 2022-05-31 | Apple Inc. | Multimodality in digital assistant systems |
US11475884B2 (en) | 2019-05-06 | 2022-10-18 | Apple Inc. | Reducing digital assistant latency when a language is incorrectly determined |
US11307752B2 (en) | 2019-05-06 | 2022-04-19 | Apple Inc. | User configurable task triggers |
US11423908B2 (en) | 2019-05-06 | 2022-08-23 | Apple Inc. | Interpreting spoken requests |
DK201970509A1 (en) | 2019-05-06 | 2021-01-15 | Apple Inc | Spoken notifications |
US11140099B2 (en) | 2019-05-21 | 2021-10-05 | Apple Inc. | Providing message response suggestions |
DK180129B1 (en) | 2019-05-31 | 2020-06-02 | Apple Inc. | USER ACTIVITY SHORTCUT SUGGESTIONS |
US11289073B2 (en) | 2019-05-31 | 2022-03-29 | Apple Inc. | Device text to speech |
US11496600B2 (en) | 2019-05-31 | 2022-11-08 | Apple Inc. | Remote execution of machine-learned models |
US11360641B2 (en) | 2019-06-01 | 2022-06-14 | Apple Inc. | Increasing the relevance of new available information |
WO2021056255A1 (en) | 2019-09-25 | 2021-04-01 | Apple Inc. | Text detection using global geometry estimators |
Family Cites Families (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0784724A (ja) * | 1993-09-13 | 1995-03-31 | Sumitomo Electric Ind Ltd | 入力装置 |
JPH09258946A (ja) * | 1996-03-26 | 1997-10-03 | Fujitsu Ltd | 情報処理装置 |
JPH1040067A (ja) * | 1996-07-19 | 1998-02-13 | Nec Corp | ポインティングデバイスの操作に連動した音の制御方式 |
FR2769781B1 (fr) | 1997-10-14 | 2000-01-07 | Sagem | Telephone mobile a diffusion de messages sonores |
US6297818B1 (en) * | 1998-05-08 | 2001-10-02 | Apple Computer, Inc. | Graphical user interface having sound effects for operating control elements and dragging objects |
JP3285835B2 (ja) * | 1998-12-25 | 2002-05-27 | 三菱電機株式会社 | メニュー選択装置 |
US6469712B1 (en) * | 1999-03-25 | 2002-10-22 | International Business Machines Corporation | Projected audio for computer displays |
GB2374772B (en) * | 2001-01-29 | 2004-12-29 | Hewlett Packard Co | Audio user interface |
JP2002236579A (ja) * | 2001-02-09 | 2002-08-23 | Clarion Co Ltd | 車載用情報機器及びその入力方法 |
US7127679B2 (en) * | 2001-06-29 | 2006-10-24 | Softrek, Inc. | Method for generating and navigating a plurality of menus using a database and a menu template |
US7318198B2 (en) * | 2002-04-30 | 2008-01-08 | Ricoh Company, Ltd. | Apparatus operation device for operating an apparatus without using eyesight |
US7966184B2 (en) * | 2006-03-06 | 2011-06-21 | Audioeye, Inc. | System and method for audible web site navigation |
AU2002338941A1 (en) | 2002-11-14 | 2004-06-03 | Nokia Corporation | Device with a graphical user interface |
US7757173B2 (en) | 2003-07-18 | 2010-07-13 | Apple Inc. | Voice menu system |
US7379047B2 (en) * | 2004-06-30 | 2008-05-27 | Microsoft Corporation | Using a physical object to control an attribute of an interactive display application |
US7362312B2 (en) * | 2004-11-01 | 2008-04-22 | Nokia Corporation | Mobile communication terminal and method |
US8375327B2 (en) * | 2005-01-16 | 2013-02-12 | Zlango Ltd. | Iconic communication |
-
2006
- 2006-09-27 US US11/535,654 patent/US7596765B2/en active Active
- 2006-11-21 WO PCT/EP2006/068702 patent/WO2007134644A1/en active Application Filing
- 2006-11-21 JP JP2009511347A patent/JP2009537916A/ja active Pending
- 2006-11-21 BR BRPI0621736-2A patent/BRPI0621736A2/pt not_active IP Right Cessation
- 2006-11-21 MX MX2008014385A patent/MX2008014385A/es active IP Right Grant
- 2006-11-21 RU RU2008150853/08A patent/RU2421779C2/ru active
- 2006-11-21 EP EP06830051A patent/EP2021909A1/en not_active Withdrawn
Non-Patent Citations (1)
Title |
---|
БЕРЛИНЕР Э.М. и др. Microsoft Office 2003. - Тверь: Бином-Пресс, 2004, с.173-178. * |
Also Published As
Publication number | Publication date |
---|---|
RU2008150853A (ru) | 2010-06-27 |
EP2021909A1 (en) | 2009-02-11 |
MX2008014385A (es) | 2008-11-27 |
BRPI0621736A2 (pt) | 2011-12-20 |
JP2009537916A (ja) | 2009-10-29 |
WO2007134644A1 (en) | 2007-11-29 |
US20070277107A1 (en) | 2007-11-29 |
US7596765B2 (en) | 2009-09-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
RU2421779C2 (ru) | Звуковая обратная связь при навигации по меню | |
KR101640460B1 (ko) | 휴대 단말기의 분할 화면 운용 방법 및 이를 지원하는 휴대 단말기 | |
CN100496066C (zh) | 移动终端中的屏幕改变方法 | |
US8849252B2 (en) | Mobile device having messenger function and related supporting method | |
US20070174787A1 (en) | Device and method for providing information about relationships between respective sharers based on shared information | |
US20170359283A1 (en) | Music creation app in messaging app | |
JP5826753B2 (ja) | モバイル通信装置のためのユーザーが選択可能な環境 | |
US20070094596A1 (en) | Glance modules | |
MX2007006272A (es) | Terminal de comunicacion movil con pantalla tactil y metodo de entrada de informacion usando la misma. | |
RU2008126780A (ru) | Терминал мобильной связи и способ управления его меню | |
US20090303185A1 (en) | User interface, device and method for an improved operating mode | |
EP2760190A1 (en) | Method and electronic device for providing call rejection function | |
US20070129050A1 (en) | Mobile communication terminal with display shortcut key and method of enabling the same | |
JP2012105312A (ja) | メディアの一部を選択するシステム及び方法 | |
KR20080025772A (ko) | 휴대 단말기의 음악 메시지 송수신 방법 및 음악 메시지서비스 시스템 | |
KR100783113B1 (ko) | 이동 통신 단말기의 음악 파일 단축 저장 방법 | |
CN108062952A (zh) | 一种语音控制方法、装置及*** | |
KR101248165B1 (ko) | 휴대전화 및 그 데이터 검색방법 | |
KR100664241B1 (ko) | 멀티 편집기능을 구비한 휴대용 단말기 및 그의 운용방법 | |
KR100754638B1 (ko) | 이동 통신 단말기의 대기화면에서 빠른 메뉴 진입 방법 및장치 | |
US7221965B2 (en) | Multiple page sound tone dialog in communication device | |
US8054948B1 (en) | Audio experience for a communications device user | |
CN101449236A (zh) | 菜单导航的声音反馈 | |
KR100672843B1 (ko) | 서비스 이력을 디스플레이하는 이동통신 단말기 및 이를이용한 서비스 방법 | |
KR20060017043A (ko) | Mp3 음악을 이용한 휴대폰의 벨소리 서비스방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PD4A | Correction of name of patent owner | ||
PC41 | Official registration of the transfer of exclusive right |
Effective date: 20160713 Effective date: 20160712 |