RU2746468C1 - Computer device for communication with the user - Google Patents

Computer device for communication with the user Download PDF

Info

Publication number
RU2746468C1
RU2746468C1 RU2020109784A RU2020109784A RU2746468C1 RU 2746468 C1 RU2746468 C1 RU 2746468C1 RU 2020109784 A RU2020109784 A RU 2020109784A RU 2020109784 A RU2020109784 A RU 2020109784A RU 2746468 C1 RU2746468 C1 RU 2746468C1
Authority
RU
Russia
Prior art keywords
user
display
volumetric display
visual information
volumetric
Prior art date
Application number
RU2020109784A
Other languages
Russian (ru)
Inventor
Михаил Юрьевич Шагиев
Григорий Бубнов
Original Assignee
Михаил Юрьевич Шагиев
Григорий Бубнов
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Михаил Юрьевич Шагиев, Григорий Бубнов filed Critical Михаил Юрьевич Шагиев
Priority to RU2020109784A priority Critical patent/RU2746468C1/en
Application granted granted Critical
Publication of RU2746468C1 publication Critical patent/RU2746468C1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637Details related to the display arrangement, including those related to the mounting of the display in the housing
    • G06F1/1652Details related to the display arrangement, including those related to the mounting of the display in the housing the display being flexible, e.g. mimicking a sheet of paper, or rollable
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09FDISPLAYING; ADVERTISING; SIGNS; LABELS OR NAME-PLATES; SEALS
    • G09F9/00Indicating arrangements for variable information in which the information is built-up on a support by selection or combination of individual elements
    • G09F9/30Indicating arrangements for variable information in which the information is built-up on a support by selection or combination of individual elements in which the desired character or characters are formed by combining individual elements
    • G09F9/301Indicating arrangements for variable information in which the information is built-up on a support by selection or combination of individual elements in which the desired character or characters are formed by combining individual elements flexible foldable or roll-able electronic displays, e.g. thin LCD, OLED

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

FIELD: computer devices.SUBSTANCE: invention relates to a computer device for communicating with a user. This result is achieved by the fact that the device has a visual information output module made in the form of a volumetric display, and the microprocessor has a visual information processing module configured to process a video stream of video information found on the Internet, which is a response to a user's request, so that it can transfer exactly to the volumetric display.EFFECT: invention is aimed at providing an opportunity, in response to the user's voice requests, to transmit to him volumetric visual information from external sources, while adapting it for output to a volumetric display.8 cl, 5 dwg

Description

Область техники, к которой относится изобретениеThe technical field to which the invention relates ....

Изобретение относится к компьютерным устройствам коммуникации с пользователем, включающее в себя корпус, в котором размещен микрофон, соединенный с микропроцессором, имеющим модуль распознавания речи пользователя, модуль соединения с объединенной сетью, микропроцессор соединен с динамиком и может быть использовано для взаимодействия с пользователем и передачи ему объемной визуальной информации, в том числе визуализации антропоморфной головы собеседника, выражающей мимику.The invention relates to computer devices for communicating with a user, including a housing that houses a microphone connected to a microprocessor having a user speech recognition module, a network connection module, the microprocessor is connected to a speaker and can be used to interact with the user and transmit to him volumetric visual information, including visualization of the interlocutor's anthropomorphic head, expressing facial expressions.

В настоящем описании использованы следующие термины и сокращенияIn this description, the following terms and abbreviations are used

Объединенная сеть включает в себя различные топологии, конфигурации и компоновки компонентов межсетевого соединения, выполненные с возможностью соединять между собой корпоративные, глобальные и локальные вычислительные сети, и включает в себя, без ограничения, традиционные проводные, беспроводные, спутниковые, оптические и эквивалентные сетевые технологии, которые должны быть очевидны специалистам в данной области техники. An interconnected network includes various topologies, configurations, and layouts of interconnection components configured to interconnect corporate, WAN, and local area networks, and includes, without limitation, traditional wired, wireless, satellite, optical, and equivalent networking technologies. which should be obvious to those skilled in the art.

OLED (Organic Light-Emitting Diode - органический светодиод) - технология создания дисплеев, основанная на том, что органическая пленка на углеродной основе помещается между двумя проводниками, пропускающими электрический ток, из-за которого пленка самостоятельно излучает свет. Особенность технологии в том, что свет испускается каждым пикселем в отдельности. Белый или цветной пиксель может находиться возле черного (выключенного пикселя) и они совершенно не будут друг на друга влиять, у каждого может быть своя яркость. В этом принципиальное отличие OLED от ЖК-матриц, которые оснащаются специальной подсветкой пикселей, поэтому никогда не могут воспроизвести настоящий (абсолютный) черный цвет из-за наличия остаточной освещенности пикселей, при этом абсолютно черный цвет является основой для получения высококонтрастного изображения. OLED (Organic Light-Emitting Diode - organic light-emitting diode) is a display technology based on the fact that a carbon-based organic film is placed between two conductors that conduct an electric current, which causes the film to emit light on its own. The peculiarity of the technology is that light is emitted by each pixel separately. A white or a colored pixel can be near a black (off pixel) and they will not affect each other at all, each can have its own brightness. This is the fundamental difference between OLED and LCD matrices, which are equipped with special pixel backlighting, so they can never reproduce true (absolute) black color due to the presence of residual illumination of the pixels, while absolutely black color is the basis for obtaining a high-contrast image.

Светодиодный экран (LED screen, LED display) - устройство отображения и передачи визуальной информации (дисплей, монитор, телевизор), в котором каждой точкой - пикселем - является один или несколько полупроводниковых светодиодов (LED). LED screen (LED screen, LED display) - a device for displaying and transmitting visual information (display, monitor, TV), in which each point - a pixel - is one or more semiconductor light-emitting diodes (LED).

Объемный дисплей - дисплей, который имеет не плоскую поверхность, а криволинейную в пространстве, выпуклую, в виде многогранника, сферы и т.д. Volumetric display - a display that does not have a flat surface, but curved in space, convex, in the form of a polyhedron, a sphere, etc.

Уровень техники.State of the art.

В настоящее время все большее значение приобретает взаимодействие человека и компьютерных устройств.Nowadays, the interaction between humans and computer devices is becoming increasingly important.

Так известно, например, компьютерное устройство коммуникации с пользователем, включающее в себя корпус, в котором размещен микрофон, соединенный с микропроцессором, имеющим модуль распознавания речи пользователя, модуль соединения с объединенной сетью, микропроцессор соединен с динамиком, которое является Яндекс-станцией, см, например:So it is known, for example, a computer device for communicating with a user, which includes a housing in which a microphone is located, connected to a microprocessor having a user speech recognition module, a module for connecting to a united network, the microprocessor is connected to a speaker, which is a Yandex station, see, eg:

https://yandex.ru/alice/station?utm_source=serp&utm_medium=facts&utm_campaign=station_descriptionhttps://yandex.ru/alice/station?utm_source=serp&utm_medium=facts&utm_campaign=station_description

Данное устройство является наиболее близким по технической сути и достигаемому техническому результату и выбрано за прототип предлагаемого изобретения как устройства.This device is the closest in technical essence and the achieved technical result and is chosen as a prototype of the proposed invention as a device.

Недостатком этого прототипа является то что оно не может в ответ на голосовые запросы пользователя передавать ему объемную визуальную информацию.The disadvantage of this prototype is that it cannot transmit voluminous visual information in response to the user's voice requests.

Раскрытие изобретения.Disclosure of the invention.

Настоящее изобретение, главным образом, имеет целью предложить компьютерное устройство коммуникации с пользователем, включающее в себя корпус, в котором размещен микрофон, соединенный с микропроцессором, имеющим модуль распознавания речи пользователя, модуль соединения с объединенной сетью, микропроцессор соединен с динамиком, позволяющее, по меньшей мере, сгладить, как минимум, один из указанных выше недостатков, а именно: обеспечить возможность в ответ на голосовые запросы пользователя передавать ему объемную визуальную информацию, что и является решаемой поставленной задачей.The present invention mainly aims to provide a computer communication device with a user, including a housing that houses a microphone connected to a microprocessor having a user speech recognition module, a network connection module, a microprocessor connected to a speaker, allowing at least at least, to smooth out at least one of the above drawbacks, namely: to provide the ability in response to the user's voice requests to transmit to him voluminous visual information, which is the task to be solved.

Для достижения этой цели устройство имеет модуль вывода визуальной информации, выполненный в виде объемного дисплея, а микропроцессор имеет модуль обработки визуальной информации для вывода ее на объемный дисплей.To achieve this goal, the device has a visual information output module made in the form of a volumetric display, and the microprocessor has a visual information processing module for outputting it to a volumetric display.

Благодаря данным выгодным характеристикам появляется возможность в ответ на голосовые запросы пользователя не только подбирать и озвучивать релевантный ответ, но также выводить на объемный дисплей соответствующую визуальную информацию. Например, при запросе «Какая погода» - показывать ситуацию в данный момент, например, в виде карты осадков. При этом модуль обработки визуальной информации для вывода ее на объемный дисплей специально обрабатывает видеопоток найденной в интернете видеоинформации таким образом, что его можно было передавать именно на объемный дисплей, в отличие от плоского дисплея, для которого основной массив видеоинформации и существует.Thanks to these advantageous characteristics, it becomes possible, in response to the user's voice requests, not only to select and voice the relevant response, but also to display the corresponding visual information on the volumetric display. For example, when requesting "What is the weather" - show the situation at the moment, for example, in the form of a precipitation map. At the same time, the module for processing visual information to display it on a volumetric display specially processes the video stream of video information found on the Internet in such a way that it could be transmitted exactly to a volumetric display, in contrast to a flat display, for which the main array of video information exists.

Существует вариант изобретения, в котором объемный дисплей выполнен в виде слепка головы персонажа, например, робота, или животного.There is a variant of the invention in which the volumetric display is made in the form of a cast of the head of a character, for example, a robot, or an animal.

Благодаря данным выгодным характеристикам появляется возможность того, что изображение лица с мимикой, создаваемое устройством, в таком варианте может проецироваться на лицо персонажа.Thanks to these advantageous characteristics, it becomes possible that the facial image created by the device in this embodiment can be projected onto the character's face.

Существует вариант изобретения, в котором объемный дисплей является сферическим.There is an embodiment of the invention in which the volumetric display is spherical.

Благодаря данным выгодным характеристикам появляется возможность реализации изобретения, в котором дисплей представляет собой шар. Это позволяет наблюдать его со всех сторон, за исключением, места закрепления сферического дисплея, и по одинаковым алгоритмам преобразовывать видеопоток, предназначенный для воспроизведения на плоских дисплеях в видепоток для сферического дисплея.These advantageous characteristics make it possible to implement the invention in which the display is a ball. This allows you to observe it from all sides, with the exception of the place where the spherical display is attached, and, using the same algorithms, convert the video stream intended for playback on flat panel displays into a video stream for the spherical display.

Существует еще и такой вариант изобретения, в котором устройство в себя проектор, который через зеркала и линзы передает изображение на внутреннюю поверхность сферического дисплея. Благодаря просвечивающему материалу дисплея изображение передается с внутренней на внешнюю сторону дисплея.There is also such a variant of the invention, in which the device includes a projector, which transmits an image through mirrors and lenses to the inner surface of a spherical display. Thanks to the translucent material of the display, the image is transmitted from the inside to the outside of the display.

Благодаря данной выгодным характеристикам появляется возможность конкретной реализации осуществления возможности трансляции изображения на внутреннюю поверхность сферического дисплея.Thanks to these advantageous characteristics, it becomes possible to concretely implement the possibility of transmitting an image to the inner surface of a spherical display.

Существует также вариант изобретения, в котором среди линз используется линза «Рыбий глаз».There is also an embodiment of the invention in which a fisheye lens is used among the lenses.

Благодаря данной выгодной характеристике появляется еще одна возможность конкретной реализации осуществления возможности трансляции изображения на внутреннюю поверхность сферического дисплея.Thanks to this advantageous characteristic, there is another possibility of concretely realizing the possibility of transmitting an image to the inner surface of a spherical display.

Существует кроме того и такой вариант изобретения, в котором объемный дисплей выполнен в виде гибкого LED/OLED экрана.There is also such a variant of the invention, in which the volumetric display is made in the form of a flexible LED / OLED screen.

Благодаря данной выгодной характеристике появляется альтернативная возможность конкретной реализации осуществления возможности трансляции изображения на поверхность сферического дисплея.Thanks to this advantageous characteristic, there appears an alternative possibility of concretely realizing the possibility of transmitting an image to the surface of a spherical display.

Существует кроме того и такой вариант изобретения, в котором объемный дисплей выполнен в виде экрана, реагирующего на прикосновения к нему пользователя (тач-скрин).In addition, there is such a variant of the invention, in which the volumetric display is made in the form of a screen that responds to the user's touches (touch-screen).

Благодаря данной выгодной характеристике появляется возможность при выводе визуальной информации легко ее видоизменять, например, менять масштаб, или дополнительно осуществлять ввод команд.Due to this advantageous characteristic, it becomes possible to easily modify it when displaying visual information, for example, to change the scale, or additionally carry out the input of commands.

Существует, наконец, вариант изобретения, в котором устройство включает видеокамеру, соединенную с микропроцессором, который имеет модуль автоматического определения положения пользователя и его частей в пространстве.Finally, there is a variant of the invention, in which the device includes a video camera connected to a microprocessor, which has a module for automatic determination of the position of the user and his parts in space.

Благодаря данной выгодной характеристике появляется возможность выводить на объемный дисплей визуальную информацию преимущественно с той стороны объемного дисплея, с которой находится пользователь. Также можно визуализировать лицо виртуально собеседник, глаза которого будет направлены на пользователя что повышает ощущение контакта.Thanks to this advantageous feature, it becomes possible to display visual information on the volumetric display mainly from that side of the volumetric display, which is where the user is located. You can also visualize the face of the virtual interlocutor, whose eyes will be directed to the user, which increases the feeling of contact.

Краткое описание чертежей.Brief description of the drawings.

Другие отличительные признаки и преимущества изобретения ясно вытекают из описания, приведенного ниже для иллюстрации и не являющегося ограничительным, со ссылками на прилагаемые рисунки, на которых:Other distinctive features and advantages of the invention will clearly follow from the description given below by way of illustration and not limiting, with reference to the accompanying drawings, in which:

- фигура 1 схематично изображает функциональную схему компьютерного устройства коммуникации с пользователем, согласно изобретению,- figure 1 schematically depicts a functional diagram of a computer device for communication with a user, according to the invention,

- фигура 2 схематично изображает функциональную схему передачи изображения на внутреннюю поверхность объемного дисплея компьютерного устройства коммуникации с пользователем, согласно изобретению,- figure 2 schematically depicts a functional diagram of image transmission to the inner surface of the volumetric display of a computer device for communication with a user, according to the invention,

- фигура 3 схематично изображает альтернативный вариант функциональной схемы передачи изображения на внутреннюю поверхность объемного дисплея компьютерного устройства коммуникации с пользователем, согласно изобретению,- figure 3 schematically depicts an alternative embodiment of the functional diagram of image transmission to the inner surface of the volumetric display of a computer device for communication with a user, according to the invention,

- фигура 4 схематично изображает еще один альтернативный вариант функциональной схемы передачи изображения на внутреннюю поверхность объемного дисплея компьютерного устройства коммуникации с пользователем, согласно изобретению,- figure 4 schematically depicts another alternative embodiment of the functional diagram of image transmission to the inner surface of the volumetric display of a computer device for communication with a user, according to the invention,

- фигура 5 схематично изображает еще один альтернативный вариант функциональной схемы передачи изображения на внутреннюю поверхность объемного дисплея компьютерного устройства коммуникации с пользователем, согласно изобретению.- figure 5 schematically depicts another alternative functional scheme for transmitting an image to the inner surface of a volumetric display of a computer device for communication with a user, according to the invention.

Согласно фигурам 1-5 компьютерное устройство коммуникации с пользователем, включающее в себя корпус 1, в котором размещен микрофон 2, соединенный с микропроцессором 3, имеющим модуль 4 распознавания речи пользователя, модуль 5 соединения с объединенной сетью, микропроцессор 3 соединен с динамиком 6. Устройство имеет модуль вывода визуальной информации, выполненный в виде объемного дисплея 7, а микропроцессор 3 имеет модуль 8 обработки визуальной информации для вывода ее на объемный дисплей 7.According to figures 1-5, a computer device for communication with a user, including a housing 1, in which a microphone 2 is located, connected to a microprocessor 3, having a user speech recognition module 4, a module 5 for connecting to a network, the microprocessor 3 is connected to a speaker 6. The device has a visual information output module made in the form of a volumetric display 7, and the microprocessor 3 has a visual information processing module 8 for outputting it to a volumetric display 7.

Объемный дисплей преимущественно является сферическим. Но может быть также выполнен в виде антропоморфной головы, цилиндра, многогранника и иметь другие формы.The volumetric display is predominantly spherical. But it can also be made in the form of an anthropomorphic head, cylinder, polyhedron and other shapes.

Устройство может иметь собственное питание или внешнее, на фигурах не показано.The device can have its own power supply or external, not shown in the figures.

На фигуре 1 условно показано выводимое объемное изображение земного шара 9. Также условно показан удаленный сервер 10, с которым происходит обмен данными.Figure 1 conventionally shows the output three-dimensional image of the globe 9. Also conventionally shows the remote server 10, with which data is exchanged.

Устройство в одном из вариантов своего осуществления включает в себя проектор 11, который через зеркало 12 и линзы 13 и 14 и 15 передает изображение на внутреннюю поверхность сферического дисплея, и благодаря материалу дисплея изображение передается на внешнюю сторону дисплея. См. фигуру 2.The device, in one of its embodiments, includes a projector 11, which, through a mirror 12 and lenses 13 and 14 and 15, transmits an image to the inner surface of the spherical display, and thanks to the display material, the image is transmitted to the outer side of the display. See figure 2.

Среди линз может использоваться линза «Рыбий глаз». Показана как позиция 15.Among the lenses, a fisheye lens can be used. Shown as position 15.

На фигуре 3 показан вариант с поворотом через зеркало 12.Figure 3 shows a version with a turn through mirror 12.

На фигуре 4 показан вариант вывода изображения через сферическое зеркало 16.Figure 4 shows a variant of image output through a spherical mirror 16.

На фигуре 5 показан еще один возможный вариант осуществления изобретения, в котором использован призма-делитель 19, которая разводит изображение из проектора на две полусферы через линзы 17 и 18.Figure 5 shows another possible embodiment of the invention, in which a divider prism 19 is used, which divides the image from the projector into two hemispheres through the lenses 17 and 18.

Объемный дисплей может быть выполнен в виде гибкого LED/OLED экрана.The volumetric display can be designed as a flexible LED / OLED screen.

Объемный дисплей может быть выполнен в виде экрана, реагирующего на прикосновения к нему пользователяThe volumetric display can be made in the form of a screen that responds to the user's touch.

Устройство может включать видеокамеру 19, соединенную с микропроцессором, который имеет модуль автоматического определения положения пользователя и его частей в пространстве.The device may include a video camera 19 connected to a microprocessor, which has a module for automatically determining the position of the user and his parts in space.

Осуществление изобретения.Implementation of the invention.

Компьютерное устройство коммуникации с пользователем работает следующим образом.The computer device for communication with the user works as follows.

Этап А1. Пользователь обращается к устройству посредством голосовой команды на активацию. Stage A1. The user addresses the device by means of a voice command for activation.

Этап А2. Устройство реагирует готовностью, выдавая звуковой ответ и выводя на объемный дисплей визуальную информацию. Stage A2. The device responds readily, giving an audible response and displaying visual information on the volumetric display.

Этап А3. Пользователь задает вопрос. Stage A3. The user asks a question.

Этап А4. Устройство в ответ на вопрос анализирует его, обращается к удаленному серверу, получает ответ, который преобразует в звуковой ответ и выводя на объемный дисплей визуальную информацию, соответствующую вопросу пользователя. Stage A4. The device, in response to a question, analyzes it, addresses a remote server, receives a response, which converts it into a sound response and displays visual information corresponding to the user's question on a volumetric display.

Опционально пользователь может также передавать управляющие команды путем касания дисплея, так можно менять масштаб, поворачивать изображение, наживать на интерактивные кнопки. Optionally, the user can also transmit control commands by touching the display, so you can change the scale, rotate the image, click on the interactive buttons.

Опционально устройство может отслеживать положение пользователя по отношению к самому устройству и адаптировать изображение под местоположение пользователя, например, показывать текст именно со стороны пользователя, или выводить изображение его головы виртуального собеседника, который глазами смотрит на пользователя. Точно также устройство может автоматически генерировать изображение движения губ головы виртуального собеседника, а также различные эмоции.Optionally, the device can track the user's position in relation to the device itself and adapt the image to the user's location, for example, display text from the user's side, or display an image of his head of a virtual interlocutor who looks at the user with his eyes. Likewise, the device can automatically generate an image of the movement of the lips of the head of the virtual interlocutor, as well as various emotions.

Промышленная применимость.Industrial applicability.

Компьютерное устройство коммуникации с пользователем может быть осуществлено специалистом на практике и при осуществлении обеспечивает реализацию заявленного назначения, что позволяет сделать вывод о соответствии критерию «промышленная применимость» для изобретения.A computer device for communicating with a user can be carried out by a specialist in practice and, when implemented, ensures the implementation of the declared purpose, which makes it possible to conclude that the criterion of "industrial applicability" for the invention is met.

В соответствии с предложенным изобретением изготовлен опытный образец компьютерного устройства коммуникации с пользователем.In accordance with the proposed invention, a prototype of a computer device for communicating with a user has been manufactured.

Испытания опытного образца устройства показали, что он обеспечивает возможность в ответ на голосовые запросы пользователя передавать ему объемную визуальную информацию.Tests of the prototype of the device have shown that it provides the ability to transmit voluminous visual information in response to the user's voice requests.

Это происходит за счет того, что устройство позволят производить:This is due to the fact that the device will allow to produce:

1. автоматическое распознавание речи пользователя;1.automatic recognition of the user's speech;

2. автоматическое распознавание смысла вопроса по относительно контекста;2. automatic recognition of the meaning of the question in relation to the context;

3. автоматически генерировать синтез текстового ответа по заданному контексту, в том числе, обращаясь для этого к удаленному серверу;3. Automatically generate a text response synthesis for a given context, including referring to a remote server for this;

4. автоматически генерировать синтез речи по тексту и заданной эмоции и отображать ее на объемный дисплей;4. automatically generate speech synthesis from text and a given emotion and display it on a volumetric display;

5. автоматически генерировать синтез мимики по речи и заданной эмоции и отображать ее на объемный дисплей;5. automatically generate a synthesis of facial expressions by speech and a given emotion and display it on a volumetric display;

6. производить автоматический расчет трехмерного изображения лица виртуального собеседника по мимике;6. make an automatic calculation of a three-dimensional image of a virtual interlocutor's face by facial expressions;

7. производить просчет наложения проекции лица виртуального собеседника на нелинейную маску изнутри;7. make a miscalculation of the imposition of the projection of the face of the virtual interlocutor on the nonlinear mask from the inside;

8. производить обратную проекцию, когда проектор светит изнутри устройства на дисплей, который выполнен в виде маски. Маска может быть выполнена из прозрачного пластика и покрыта краской для экранов обратной проекции.8. make a rear projection, when the projector shines from the inside of the device on the display, which is made in the form of a mask. The mask can be made of clear plastic and painted for rear projection screens.

Таким образом, за счет того, что устройство имеет модуль вывода визуальной информации, выполненный в виде объемного дисплея, а микропроцессор имеет модуль обработки визуальной информации для вывода ее на объемный дисплей и достигается заявленный технический результат, а именно: возможность в ответ на голосовые запросы пользователя передавать ему объемную визуальную информацию.Thus, due to the fact that the device has a visual information output module made in the form of a volumetric display, and the microprocessor has a visual information processing module for displaying it on a volumetric display, and the claimed technical result is achieved, namely: the ability to respond to the user's voice requests give him volumetric visual information.

Предлагаемое изобретение, в варианте, когда объемный дисплей выполнен в виде сферы, возможно использовать в качестве:The proposed invention, in the variant when the volumetric display is made in the form of a sphere, can be used as:

1. Пособия в школе, так как на нем удобно визуализировать планеты на астрономии, клетки на биологии, глобусом на географии и т.д.1. Aids at school, as it is convenient to visualize planets in astronomy, cells in biology, a globe in geography, etc.

2. Как просто сферический дисплей, который показывает объекты по запросу.2. As simple as a spherical display that shows objects on demand.

3. Как шарообразный персонаж типа «Смешарик», BB8 из «Звездных войн» и т. д., любой шарообразный персонаж, с которым можно вести диалог.3. As a spherical character like "Smesharik", BB8 from "Star Wars", etc., any spherical character with whom you can conduct a dialogue.

4. Как сферический дисплей, который показывает "Google street view" и другие 360° панорамы, статические или видео.4. As a spherical display that shows "Google street view" and other 360 ° panoramas, static or video.

5. сферический дисплей, который показывает отображение записей с камеры 360°.5. Spherical display, which shows the display of recordings from the camera 360 °.

6. Может отображать 3D объекты, если отслеживать местоположение глаз смотрящего и перестраивать перспективу.6. Can display 3D objects by tracking the location of the beholder's eyes and rebuilding the perspective.

Предлагаемое изобретение, в варианте, когда объемный дисплей выполнен в виде антропоморфной головы, возможно использовать в качестве:The proposed invention, in the variant when the volumetric display is made in the form of an anthropomorphic head, can be used as:

7. Информационного киоска, оно может вести диалог с посетителем на ресепшн.7. Information kiosk, it can conduct a dialogue with the visitor at the reception.

8. Проморобота на выставке или в ритейле, оно может привлекать посетителей и продвигать услуги или товары.8. Promobot at an exhibition or in retail, it can attract visitors and promote services or goods.

Claims (8)

1. Компьютерное устройство коммуникации с пользователем, включающее в себя корпус, в котором размещен микрофон, соединенный с микропроцессором, имеющим модуль распознавания речи пользователя, модуль соединения с объединенной сетью, устройство имеет модуль вывода визуальной информации, выполненный в виде объемного дисплея, а микропроцессор имеет модуль обработки визуальной информации для вывода ее на объемный дисплей, отличающееся тем, что микропроцессор соединен с динамиком для коммуникации с пользователем, при этом модуль обработки визуальной информации для вывода ее на объемный дисплей выполнен с возможностью обработки видеопотока найденной в интернете видеоинформации, являющейся ответом на запрос пользователя, таким образом, что его можно было передавать именно на объемный дисплей. 1. A computer device for communicating with a user, including a housing that houses a microphone connected to a microprocessor having a user speech recognition module, a module for connecting to a network, the device has a visual information output module made in the form of a volumetric display, and the microprocessor has a visual information processing module for displaying it on a volumetric display, characterized in that the microprocessor is connected to a speaker for communicating with the user, while the visual information processing module for displaying it on a volumetric display is configured to process a video stream of video information found on the Internet, which is a response to a request the user, in such a way that it could be transferred precisely to the volumetric display. 2. Устройство по п. 1, отличающееся тем, что объемный дисплей является сферическим. 2. The device according to claim. 1, characterized in that the volumetric display is spherical. 3. Устройство по п. 2, отличающееся тем, что устройство включает в себя проектор, который через зеркала и линзы передает изображение на внутреннюю поверхность сферического дисплея. 3. The device according to claim. 2, characterized in that the device includes a projector that transmits an image through mirrors and lenses to the inner surface of the spherical display. 4. Устройство по п. 3, отличающееся тем, что среди линз используется линза «Рыбий глаз».4. A device according to claim 3, characterized in that a “Fisheye” lens is used among the lenses. 5. Устройство по п. 1, отличающееся тем, что объемный дисплей выполнен в виде гибкого LED/OLED экрана. 5. The device according to claim. 1, characterized in that the volumetric display is made in the form of a flexible LED / OLED screen. 6. Устройство по п. 1, отличающееся тем, что объемный дисплей выполнен в виде экрана, реагирующего на прикосновения к нему пользователя.6. The device according to claim. 1, characterized in that the volumetric display is made in the form of a screen that responds to the user's touch to it. 7. Устройство по п. 1, отличающееся тем, что объемный дисплей выполнен в виде слепка головы персонажа, например робота, или животного7. The device according to claim 1, characterized in that the volumetric display is made in the form of a cast of the head of a character, for example, a robot, or an animal 8. Устройство по п. 1, отличающееся тем, что устройство включает видеокамеру, соединенную с микропроцессором, который имеет модуль автоматического определения положения пользователя и его частей в пространстве.8. The device according to claim. 1, characterized in that the device includes a video camera connected to a microprocessor, which has a module for automatically determining the position of the user and its parts in space.
RU2020109784A 2020-03-05 2020-03-05 Computer device for communication with the user RU2746468C1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
RU2020109784A RU2746468C1 (en) 2020-03-05 2020-03-05 Computer device for communication with the user

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
RU2020109784A RU2746468C1 (en) 2020-03-05 2020-03-05 Computer device for communication with the user

Publications (1)

Publication Number Publication Date
RU2746468C1 true RU2746468C1 (en) 2021-04-14

Family

ID=75521197

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2020109784A RU2746468C1 (en) 2020-03-05 2020-03-05 Computer device for communication with the user

Country Status (1)

Country Link
RU (1) RU2746468C1 (en)

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015012459A1 (en) * 2013-07-22 2015-01-29 영남대학교 산학협력단 Responsive digital map device
CN204537616U (en) * 2015-02-13 2015-08-05 广西科技大学鹿山学院 Human-computer interaction intelligent terrestrial globe
JP2015219370A (en) * 2014-05-16 2015-12-07 株式会社 オルタステクノロジー Spherical surface projection display device
CN206058802U (en) * 2016-08-25 2017-03-29 上海路东光电股份有限公司 A kind of interactive LED ball shape screen
CN206271317U (en) * 2016-11-24 2017-06-20 广州尚汉信息科技有限公司 A kind of improvement type tellurion
RU2632413C2 (en) * 2012-08-23 2017-10-04 Самсунг Электроникс Ко., Лтд. Flexible device and control method therefor
CN107256674A (en) * 2017-08-11 2017-10-17 安徽状元郎电子科技有限公司 A kind of novel interactive voice terrestrial globe of geography learning
CN108481347A (en) * 2018-07-03 2018-09-04 江苏二十六度节能科技有限公司 A kind of robot of alterable face
CN108646922A (en) * 2018-05-24 2018-10-12 国家基础地理信息中心 A kind of interactive digital tellurion and exchange method

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2632413C2 (en) * 2012-08-23 2017-10-04 Самсунг Электроникс Ко., Лтд. Flexible device and control method therefor
WO2015012459A1 (en) * 2013-07-22 2015-01-29 영남대학교 산학협력단 Responsive digital map device
JP2015219370A (en) * 2014-05-16 2015-12-07 株式会社 オルタステクノロジー Spherical surface projection display device
CN204537616U (en) * 2015-02-13 2015-08-05 广西科技大学鹿山学院 Human-computer interaction intelligent terrestrial globe
CN206058802U (en) * 2016-08-25 2017-03-29 上海路东光电股份有限公司 A kind of interactive LED ball shape screen
CN206271317U (en) * 2016-11-24 2017-06-20 广州尚汉信息科技有限公司 A kind of improvement type tellurion
CN107256674A (en) * 2017-08-11 2017-10-17 安徽状元郎电子科技有限公司 A kind of novel interactive voice terrestrial globe of geography learning
CN108646922A (en) * 2018-05-24 2018-10-12 国家基础地理信息中心 A kind of interactive digital tellurion and exchange method
CN108481347A (en) * 2018-07-03 2018-09-04 江苏二十六度节能科技有限公司 A kind of robot of alterable face

Similar Documents

Publication Publication Date Title
CA2953335C (en) Methods and systems for creating virtual and augmented reality
KR20210137473A (en) Video communication including holographic content
JP2022525862A (en) Lightfield display system for vehicle expansion
CN110383214B (en) Information processing apparatus, information processing method, and recording medium
US20230035915A1 (en) Device to create and display free space hologram
US11948256B2 (en) Systems and methods for artificial intelligence-based virtual and augmented reality
JP2023100820A (en) Photo-real character configuration for spatial computing
JP2022552770A (en) Digital Signage System Based on the Light Field Display System Inventors: Jonathan Shan Calaffin, Brendan Elwood Bevensey, John Dome
US20170139375A1 (en) Display device and driving method thereof
US20170004806A1 (en) Method and apparatus to enable smartphones and computer tablet devices to communicate with interactive devices
KR20230029885A (en) Augmented reality eyewear with speech bubbles and translation
US11175744B2 (en) Holographic projection system
JP6686791B2 (en) Video display method and video display system
US20230012909A1 (en) Non-uniform stereo rendering
KR20160017908A (en) Floating Hologram display device
US9195127B1 (en) Rear projection screen with infrared transparency
JP2003035933A (en) Video display unit
RU2746468C1 (en) Computer device for communication with the user
US9262983B1 (en) Rear projection system with passive display screen
JP7189406B2 (en) Communication device and remote communication system
Kuratate et al. Mask-bot''-a life-size talking head animated robot for AV speech and human-robot communication research
CN112286355B (en) Interactive method and system for immersive content
Fukuda et al. Evaluating Smartphone Vibration Patterns and Evoked
US20240161390A1 (en) Method, apparatus, electronic device and storage medium for control based on extended reality
KR102293041B1 (en) System for the science exhibition of bronze mirrors