BR112015022914B1 - Método de controle de tela de exibição de um dispositivo eletrônico e dispositivo eletrônico - Google Patents
Método de controle de tela de exibição de um dispositivo eletrônico e dispositivo eletrônico Download PDFInfo
- Publication number
- BR112015022914B1 BR112015022914B1 BR112015022914-0A BR112015022914A BR112015022914B1 BR 112015022914 B1 BR112015022914 B1 BR 112015022914B1 BR 112015022914 A BR112015022914 A BR 112015022914A BR 112015022914 B1 BR112015022914 B1 BR 112015022914B1
- Authority
- BR
- Brazil
- Prior art keywords
- electronic device
- camera
- user
- resolution
- control
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 32
- 230000008859 change Effects 0.000 claims description 21
- 238000013507 mapping Methods 0.000 claims description 8
- 230000006870 function Effects 0.000 description 21
- 238000004891 communication Methods 0.000 description 14
- 230000004044 response Effects 0.000 description 12
- 238000010586 diagram Methods 0.000 description 6
- 230000005236 sound signal Effects 0.000 description 5
- 230000003213 activating effect Effects 0.000 description 4
- 238000010295 mobile communication Methods 0.000 description 4
- 238000012545 processing Methods 0.000 description 4
- 229920001621 AMOLED Polymers 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 238000002591 computed tomography Methods 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 230000035945 sensitivity Effects 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 238000002583 angiography Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000005611 electricity Effects 0.000 description 1
- -1 electricity Substances 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000002595 magnetic resonance imaging Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
- 210000001747 pupil Anatomy 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000002604 ultrasonography Methods 0.000 description 1
- 238000005406 washing Methods 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/012—Head tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/26—Power supply means, e.g. regulation thereof
- G06F1/32—Means for saving power
- G06F1/3203—Power management, i.e. event-based initiation of a power-saving mode
- G06F1/3206—Monitoring of events, devices or parameters that trigger a change in power modality
- G06F1/3212—Monitoring battery levels, e.g. power saving mode being initiated when battery voltage goes below a certain level
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/26—Power supply means, e.g. regulation thereof
- G06F1/28—Supervision thereof, e.g. detecting power-supply failure by out of limits supervision
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/26—Power supply means, e.g. regulation thereof
- G06F1/32—Means for saving power
- G06F1/3203—Power management, i.e. event-based initiation of a power-saving mode
- G06F1/3206—Monitoring of events, devices or parameters that trigger a change in power modality
- G06F1/3231—Monitoring the presence, absence or movement of users
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/26—Power supply means, e.g. regulation thereof
- G06F1/32—Means for saving power
- G06F1/3203—Power management, i.e. event-based initiation of a power-saving mode
- G06F1/3234—Power saving characterised by the action undertaken
- G06F1/325—Power saving in peripheral device
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/013—Eye tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/0304—Detection arrangements using opto-electronic means
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Controls And Circuits For Display Device (AREA)
- User Interface Of Digital Computer (AREA)
- Telephone Function (AREA)
Abstract
método e aparelho de controle de exibição um método de controle de exibição de tela é fornecido para controlar exibição de tela de um dispositivo eletrônico de forma mais eficiente. um método de controle de exibição de tela inclui determinar uma resolução de uma câmera, reconhecer uma face de um usuário usando a câmera operando na resolução determinada, e controlar exibição de tela do dispositivo eletrônico com base na face.
Description
[001] A presente revelação refere-se a um método para controlar exibição de tela de um dispositivo eletrônico eficientemente.
[002] Com os avanços das tecnologias de informação, comunicação e semicondutores, a popularidade e o uso de dispositivos eletrônicos continuam a aumentar. Particularmente, um terminal móvel está integrando vários recursos de outros dispositivos eletrônicos além das funções de telefonia de voz e de mensagens. Por exemplo, o terminal móvel pode agora incluir várias funções avançadas, incluindo uma função de reprodução de TV (por exemplo, uma função de reprodução de difusão móvel, como Difusão de Multimídia Digital (DMB) e Difusão de Vídeo Digital (DVB)), uma função de reprodução de música (por exemplo, função de reprodução MPEG de Áudio de Camada-3 (MP3)), uma função de captura de foto, uma função de comunicação de dados, uma função de Acesso à internet, uma função de comunicação sem fio de curto alcance, etc.
[003] Além disso, o terminal móvel está equipado com vários sensores, bem como uma câmera para estender sua funcionalidade. Por exemplo, um terminal móvel equipado com câmera é capaz de reconhecer uma face de uma imagem tirada pela câmera e rastrear o olhar do usuário. No entanto, o dispositivo eletrônico da arte relacionada carece de funcionalidade em vista da eficiência de utilização de potência. Por conseguinte, existe uma necessidade de um aparelho melhorado e um método para controlar a exibição de um dispositivo eletrônico tendo em conta exigências de potência.
[004] A informação acima é apresentada como informação de fundamentos apenas para auxiliar na compreensão da presente divulgação. Nenhuma determinação foi feita, e nenhuma afirmação é feita, quanto ao fato de qualquer um do acima poder ser aplicável como a técnica anterior no que diz respeito à presente divulgação.
[005] Os aspectos da presente divulgação são para resolver pelo menos os problemas e / ou desvantagens acima mencionados e fornecer pelo menos as vantagens descritas abaixo. Por conseguinte, um aspecto da presente invenção é fornecer um método e aparelho de controle de exibição de um dispositivo eletrônico que seja capaz de controlar exibição de tela de um dispositivo eletrônico dependendo do estado de potência do dispositivo eletrônico ou a presença / ausência do usuário independentemente do estado de potência, melhorando assim eficiência de utilização de potência do dispositivo eletrônico.
[006] De acordo com um aspecto da presente revelação, é fornecido um método de controle de exibição de tela de um dispositivo eletrônico. O método de controle de exibição de tela inclui determinar uma resolução de uma câmera, reconhecer uma face de um usuário usando a câmera operando na resolução determinada, e controlar exibição de tela do dispositivo eletrônico com base na face.
[007] De acordo com outro aspecto da presente invenção, um dispositivo eletrônico é fornecido. O dispositivo eletrônico inclui uma unidade de controle configurada para determinar uma resolução, uma câmera configurada para operar na resolução determinada pela unidade de controle para reconhecer uma face de um usuário, e uma unidade de exibição configurada para exibir uma tela sob um controle da unidade de controle com base na face reconhecida.
[008] Outros aspectos, vantagens e características salientes da presente descrição serão evidentes para os peritos na arte a partir da seguinte descrição detalhada, que, tomada em conjunto com os desenhos anexos, descreve várias modalidades da presente divulgação.
[009] Os anteriores e outros aspectos, características, e vantagens de certas modalidades da presente invenção serão mais evidentes a partir da seguinte descrição tomada em conjunto com os desenhos anexos, nos quais:
[0010] A Figura 1 é um fluxograma que ilustra um método de controle de exibição de tela de acordo com uma modalidade da presente invenção;
[0011] A Figura 2 é um fluxograma que ilustra um procedimento de controle de exibição de tela de um dispositivo eletrônico equipado com uma câmera de alta resolução de acordo com uma modalidade da presente divulgação;
[0012] As Figuras 3 e 4 são fluxogramas que ilustram os procedimentos de controle de exibição de tela utilizando uma câmera de baixa resolução de acordo com uma modalidade da presente invenção;
[0013] As Figuras 5a, 5b, 5c, 5d, e 5e são diagramas que ilustram exibições de tela para explicar um método de controle de exibição de tela de acordo com uma modalidade da presente invenção;
[0014] As Figuras 6A e 6B são diagramas que ilustram uma situação de controle de exibição de tela de acordo com uma modalidade da presente invenção; e
[0015] A Figura 7 é um diagrama de blocos que ilustra uma configuração de um dispositivo eletrônico de acordo com uma modalidade da presente divulgação.
[0016] Os mesmos números de referência são usados para representar os mesmos elementos ao longo dos desenhos.
[0017] A descrição seguinte com referência aos desenhos anexos é fornecida para auxiliar na compreensão abrangente de várias modalidades da presente invenção tal como definido pelas reivindicações e seus equivalentes. Inclui vários detalhes específicos para auxiliar na compreensão, mas estes devem ser considerados como meramente exemplares. Deste modo, os vulgares peritos na arte irão reconhecer que várias alterações e modificações das várias modalidades aqui descritas podem ser feitas sem se afastar do âmbito e espírito da presente revelação. Além disso, descrições de funções e construções bem conhecidas podem ser omitidas para maior clareza e concisão.
[0018] De acordo com uma modalidade da presente invenção, o dispositivo eletrônico pode ser um dispositivo equipado com uma função de comunicação. Exemplos do dispositivo eletrônico incluem um telefone inteligente, um computador pessoal tablet (PC), um telefone móvel, um telefone de vídeo, um leitor de livro eletrônico, um PC desktop, um PC laptop, um computador netbook, um Assistente Pessoal Digital (PDA), um Reprodutor de Multimídia Portátil (PMP), Reprodutor de MP3, um aparelho médico móvel, uma câmera e um dispositivo que pode ser vestido (por exemplo, um Dispositivo montado na cabeça (HMD), como óculos eletrônicos, roupas eletrônicas, uma pulseira eletrônica, um colar eletrônico, um aplicativo de acessório eletrônico, uma tatuagem eletrônica, um relógio inteligente, etc.
[0019] De acordo com uma modalidade da presente invenção, o dispositivo eletrônico pode ser um aparelho de casa inteligente equipado com uma função de comunicação. Exemplos do aparelho de casa inteligente incluem uma televisão, um reprodutor de Disco de Vídeo Digital (DVD), um dispositivo de áudio, uma geladeira, um ar condicionado, um aspirador de pó, um forno, um forno de microondas, uma máquina de lavar roupa, um filtro de ar, uma caixa de configuração de topo, uma caixa de TV (por exemplo, Samsung HomeSyncTM, a Apple TVTM, e Google TVTM), um console de jogos, um dicionário eletrônico, uma chave eletrônica, uma câmera de vídeo, um quadro eletrônico, etc.
[0020] De acordo com uma modalidade da presente descrição, exemplos do dispositivo eletrônico incluem vários aparelhos médicos (por exemplo, angiografia por ressonância magnética (MRA), Imagem por Ressonância Magnética (MRI), câmera de tomografia computadorizada (TC), e um dispositivo de ultrassons), um dispositivo de navegação, um receptor do Sistema de Posicionamento Global (GPS), um gravador de dados de evento (EDR), um gravador de dados de voo (FDR), um dispositivo de informação e entretenimento de carro, um dispositivo eletrônico marinho (por exemplo, dispositivo de navegação marinha e bússola giroscópio), um dispositivo de avião, um dispositivo de segurança, robôs industriais e domésticos, etc.
[0021] De acordo com uma modalidade da presente descrição, exemplos do dispositivo eletrônico incluem mobiliário ou parte de edifício / construção que é equipada com uma função de comunicação, uma placa eletrônica, um dispositivo de recepção de assinatura eletrônica, um projetor, um dispositivo de medição (por exemplo, dispositivos de medição de água, eletricidade, gás e ondas elétricas). O dispositivo eletrônico de acordo com uma modalidade da presente invenção pode ser qualquer combinação de pelo menos dois dos dispositivos acima enumerados. É óbvio para os peritos na arte que o dispositivo eletrônico da presente invenção não se limita aos dispositivos acima enumerados.
[0022] A Figura 1 é um fluxograma que ilustra um método de controle de exibição de tela de acordo com uma modalidade da presente divulgação. O método de controle de exibição de tela de acordo com uma modalidade da presente invenção é executado por um dispositivo eletrônico.
[0023] Com referência à Figura 1, em operação 110, o dispositivo eletrônico pode determinar a resolução de uma câmera. A resolução indica um grau indicando quantos pixels ou pontos são utilizados para apresentar a imagem. Por exemplo, o dispositivo eletrônico pode realizar a "alta resolução" através da ativação de todos os pixels do sensor de imagem da câmera e a "baixa resolução" por ativação de uma parte dos pixels do sensor de imagem. O dispositivo eletrônico pode determinar a resolução da câmera independentemente de ou dependendo do estado de potência. Numa modalidade, o dispositivo eletrônico pode definir a resolução da câmera para alta ou baixa independentemente do estado de potência.
[0024] Numa outra modalidade, o dispositivo eletrônico pode definir a resolução da câmera para alta ou baixa dependendo do seu estado de potência. Por exemplo, se a potência do dispositivo eletrônico é igual ou superior a um limiar, o dispositivo eletrônico determina o estado atual como o estado de potência alta e define a resolução de câmera para alta. Caso contrário, se a potência do dispositivo eletrônico é menor do que o limiar, o dispositivo eletrônico determina o estado atual como o estado de potência baixa e define a resolução de câmera para baixa. Aqui, o limiar pode ser expresso como a percentagem da potência residual do dispositivo eletrônico e pode ser variavelmente definido, tal como a 30%, 40%, 50%, ou 60% da capacidade de bateria. O limiar pode ser definido como um valor padrão pelo dispositivo eletrônico ou para um determinado valor por parte do usuário. Por exemplo, se o valor de limiar é ajustado a 30% da capacidade de bateria, o dispositivo eletrônico determina o estado de potência residual de 30% como um estado de potência alta e o estado de potência residual de 29% como um estado de potência baixa.
[0025] Se o dispositivo eletrônico é conectado para um dispositivo exterior, ele determina o estado como o estado de potência alta e define a resolução de câmera para alta. Se o dispositivo eletrônico não é conectado ao dispositivo exterior e se o seu estado de potência é baixo, ele define a resolução de câmera para baixa. O dispositivo exterior é um dispositivo de fornecimento de potência para o dispositivo eletrônico, por exemplo através de um Barramento Serial Universal (USB) ou um nó como um conector PIN. Neste caso, uma vez que o dispositivo exterior fornece potência para o dispositivo eletrônico, o dispositivo eletrônico determina o seu estado de potência como o estado de potência alta, independentemente da potência residual. Caso contrário, se o dispositivo exterior com baixo consumo de potência residual não está ligado ao dispositivo exterior, ele determina que o seu estado é o estado de potência baixa.
[0026] Em operação 120, o dispositivo eletrônico ativa a câmera na resolução determinada para reconhecer a face do usuário. Como exemplo, reconhecimento de face reconhece a face ou o olhar do usuário para determinar se está de frente da face do usuário ou em um lado da face do usuário e reconhece o grau distorcido da face.
[0027] De acordo com várias modalidades, o dispositivo eletrônico pode realizar a "alta resolução" através da ativação de todos os pixels do sensor de imagem da câmera e a "baixa resolução" por ativação de uma parte dos pixels do sensor de imagem. Partindo do princípio de que o número total de pixels do sensor de imagem é 10 milhões de pixels, o dispositivo eletrônico define um limiar para 5 milhões. O dispositivo eletrônico pode determinar o número de pixels igual ou maior do que o limiar como "alta resolução" e o número de pixels menor do que o limiar como "baixa resolução".
[0028] Em operação 130, o dispositivo eletrônico pode controlar exibição de tela do dispositivo eletrônico com base na face reconhecida. De acordo com várias modalidades, o dispositivo eletrônico funciona com a câmera de alta resolução para adquirir a posição de olhar do usuário e controla a exibição de tela com base na posição de olhar. O dispositivo eletrônico pode também operar a câmera com baixa resolução para determinar a presença / ausência do usuário e, se for determinado que um usuário está presente, mudar valores de configuração da câmera para reconhecer a posição de face do usuário e controlar a exibição de tela com base na posição de face.
[0029] O dispositivo eletrônico pode controlar pelo menos uma ação associada com a tela exibida na unidade de exibição como rolagem, reprodução, pausa, ampliação, redução, permanência, e resposta com base na face reconhecida. O termo rolagem denota um controle de tela de rolagem para cima, para baixo, esquerda e direita. O termo reprodução denota um controle de tela de reprodução de música ou de imagens em movimento na tela. O termo pausa denota um controle de exibição de tela de pausar a música e imagem em movimento. O termo ampliação denota um controle de tela de aumentar a tela, e o termo redução denota um controle de tela de reduzir a tela. O termo permanência denota um controle de exibição de tela para manter a tela como ligada, e o termo resposta denota controle da tela de acordo com a resposta de usuário para uma chamada ou uma mensagem. Como um exemplo, a resposta de usuário pode ser um de receber e rejeitar a chamada de entrada, determinar se exibir uma mensagem ou não, e similares.
[0030] De acordo com uma modalidade, quando o dispositivo eletrônico é conectado a um dispositivo exterior, é possível usar a potência sem restrições e, assim, operar a câmera para a taxa máxima de quadros para melhorar a probabilidade de reconhecimento de usuário. O dispositivo eletrônico pode suportar ainda uma função de monitoramento, uma função de proteção contra o fogo, e uma função de gravação de situação de emergência.
[0031] A Figura 2 é um fluxograma que ilustra um procedimento de controle de exibição de tela de um dispositivo eletrônico equipado com uma câmera de alta resolução de acordo com uma modalidade da presente divulgação.
[0032] Com referência à Figura 2, em operação 210a, o dispositivo eletrônico adquire a posição de olhar do usuário usando a câmera de resolução alta. A câmera pode ser arranjada na parte frontal ou traseira do dispositivo eletrônico para capturar uma cena circundante, um objeto, ou uma pessoa. A informação de imagem capturada é enviada para a unidade de controle do dispositivo eletrônico e armazenada no dispositivo eletrônico. A câmera pode ser uma câmera de infravermelhos ou outro tipo de câmera. A câmera de alta resolução é uma câmera capaz de operar em um modo de alta resolução capaz de ser configurado com valores de cor de alta resolução para reconhecer a face de um usuário e rastrear a posição de olhar do usuário simultaneamente ou sequencialmente. Por exemplo, o dispositivo eletrônico é capaz de reconhecer a face de um usuário através da combinação das orientações das pupilas da face do usuário para determinar a posição de olhar.
[0033] Em operação 220a, o dispositivo eletrônico adquire informações de coordenada por mapear a posição de olhar para a unidade de exibição do dispositivo eletrônico. O dispositivo eletrônico também pode adquirir a informação de coordenada da posição de olhar na unidade de exibição que corresponde à posição de olhar. De acordo com várias modalidades, o dispositivo eletrônico pode controlar exibição de tela do dispositivo eletrônico com base apenas na informação de coordenada adquirida. No entanto, uma vez que a posição de olhar do usuário varia ao longo do tempo, o dispositivo eletrônico determina a direção de movimento ou um movimento de velocidade da informação de coordenada para controlar exibição de tela com mais precisão.
[0034] Em operação 230a, o dispositivo eletrônico determina a informação de direção ou informação de velocidade com base na alteração da informação de coordenada ao longo do tempo. O dispositivo eletrônico é capaz de determinar a informação de direção ou a informação de velocidade com base na posição de olhar inicialmente adquirida e a posição de olhar alterada se a posição de olhar muda com o tempo desde o reconhecimento inicial do olhar. De acordo com várias modalidades, o dispositivo eletrônico pode compensar a informação de direção e a informação de velocidade usando dados de sensor adquiridos por meio de um sensor.
[0035] Em operação 240a, o dispositivo eletrônico controla a exibição de tela com base na informação de direção ou velocidade. Por exemplo, se o controle de exibição de tela é "rolagem", a informação de direção ou velocidade pode afetar a direção de rolagem e / ou a velocidade de rolagem.
[0036] Numa outra modalidade, o dispositivo eletrônico é capaz de adquirir os dados de sensor utilizando um sensor em operação 220b. O sensor pode incluir pelo menos um de um sensor de movimento, um sensor de giroscópio, um sensor de aceleração, um sensor de umidade, um sensor de proximidade, sensor de infravermelho, um Sensor de iluminância, um sensor de campo magnético da Terra, um sensor De inércia, um sensor de inclinação, e um sensor de sopro (por exemplo, um sensor de exalação). O sensor pode adquirir os dados de sensor incluindo pelo menos uma ou qualquer combinação de uma alteração de ângulo, uma alteração de direção, uma alteração de posição, uma alteração de postura, uma alteração de força, e uma alteração de velocidade. O sensor detecta que um evento de movimento ocorreu pelo usuário de modo a adquirir os dados dos sensores a partir de pelo menos uma ou qualquer combinação de um zoom de aperto, um toque de lâmina de mão, e um movimento de ar. Para referência, o sensor de sopro é capaz de detectar um sopro do usuário, e o sensor de detecção de som tal como um alto-falante é capaz de detectar o som de sopro.
[0037] Em operação 230b, o dispositivo eletrônico pode atribuir a prioridade da informação de imagem e os dados de sensor. Aqui, a informação da imagem é a informação adquirida pela câmera, como uma posição de olhar. Por exemplo, se a câmera é uma câmera de alta resolução, o dispositivo eletrônico pode definir a prioridade da informação de imagem para um valor mais elevado do que o dos dados de sensor. Se a câmera é uma câmera de baixa resolução, o dispositivo eletrônico pode definir a prioridade da informação de imagem para um valor menor do que o dos dados de sensor.
[0038] Em operação 240b, o dispositivo eletrônico controla a exibição de tela utilizando a informação classificada em uma ordem decrescente de prioridade. Por exemplo, se a prioridade da informação de imagem é alta, o dispositivo eletrônico pode controlar a exibição de tela com base na informação de imagem. Caso contrário, se a prioridade dos dados de sensor é alta, o dispositivo eletrônico pode controlar a exibição de tela com base nos dados de sensor. Por exemplo, se a prioridade dos dados de sensor é mais elevada do que a da informação de imagem, o dispositivo eletrônico pode controlar exibição de tela com base nos dados de sensor. A informação de imagem pode ser refletida após o controle de exibição de tela com base em dados de sensor ou usada para compensar os dados de sensor.
[0039] As Figuras 3 e 4 são fluxogramas que ilustram procedimentos de controle de exibição de tela utilizando uma câmera de baixa resolução de acordo com uma modalidade da presente divulgação.
[0040] Fazendo referência à modalidade da Figura 3, o dispositivo eletrônico determina se o usuário está presente ou ausente usando a câmera de baixa resolução em operação 310a. A câmera de baixa resolução é uma câmera operando em um modo de baixa resolução implementado pela definição de valores de configuração para valores preto e branco de baixa resolução. O dispositivo eletrônico consome pouca potência no modo de baixa resolução em comparação com o modo de alta resolução.
[0041] Se for determinado que o usuário está presente, o dispositivo eletrônico altera o valor de configuração da câmera em operação 320a. Mais uma vez, a câmera está operando como uma câmera de baixa resolução. O valor de configuração pode ser qualquer de velocidade de câmera, ou seja, quadros por segundo (FPS) e Organização Internacional de Normalização (IOS). O dispositivo eletrônico também pode mudar pelo menos um de um diafragma de câmera, uma velocidade de obturador, um valor de exposição (EV), um balanço de branco (WB), e um tempo de exposição. O dispositivo eletrônico é capaz de aumentar a taxa de reconhecimento da câmera por alterar os valores de configuração da câmera.
[0042] Em operação 330a, o dispositivo eletrônico reconhece a posição de face do usuário usando a câmera com os valores de configuração alterados. A posição de face pode ser a posição em que a face do usuário está localizada.
[0043] Em operação 340a, o dispositivo eletrônico controla a exibição de tela do dispositivo eletrônico com base na posição de face.
[0044] Numa outra modalidade, o dispositivo eletrônico adquire os dados de sensor utilizando pelo menos um sensor em operação 340b. Uma vez que o sensor e os dados de sensor são idênticos aos descritos com referência à Figura 2, uma descrição dos mesmos será omitida aqui. Para referência, o dispositivo eletrônico pode determinar se a iluminância é suficiente para reconhecer uma face por meio da câmera com base em dados de sensor do sensor de iluminação. O dispositivo eletrônico pode determinar a realização de processamento de imagem quando a câmera está em execução no processamento de chamadas com base nos dados de sensor do sensor de proximidade. O dispositivo eletrônico também pode determinar se é possível a aquisição de informação consistentemente a partir da câmera devido à postura de cabeça para baixo ou tremor significativo do dispositivo eletrônico com base nos dados de sensor do sensor de movimento.
[0045] Em operação 350b, o dispositivo eletrônico adquire a informação de coordenada por mapear os dados de sensor e posição de face para a unidade de exibição do dispositivo eletrônico. O dispositivo eletrônico pode adquirir a informação de coordenada na posição da unidade de exibição que corresponde à posição de olhar. De acordo com várias modalidades, o dispositivo eletrônico pode controlar exibição de tela do dispositivo eletrônico com base apenas na informação de coordenada adquirida.
[0046] Em operação 360B, o dispositivo eletrônico determina a direção e a velocidade com base em uma alteração das coordenadas ao longo do tempo. Se a posição de olhar muda com o tempo uma vez que a posição de olhar foi detectada, o dispositivo eletrônico pode determinar a direção ou velocidade de movimento da posição de olhar através da posição de olhar inicial e a posição de olhar alterada. De acordo com várias modalidades, o dispositivo eletrônico pode compensar a informação de direção e / ou a informação de velocidade usando os dados de sensor adquiridos pelo sensor.
[0047] Em operação 370b, o dispositivo eletrônico pode controlar exibição de tela com base na informação de direção e / ou a informação de velocidade.
[0048] Com referência à Figura 4, o dispositivo eletrônico determina se o usuário está presente ou ausente usando a câmera de baixa resolução em operação 410a.
[0049] Se for determinado que o usuário está presente, o dispositivo eletrônico adquire os dados de sensor utilizando o sensor em operação 420a.
[0050] Em operação 430a, o dispositivo eletrônico controla exibição de tela com base nos dados de sensor. Deste modo, o dispositivo eletrônico pode controlar exibição de tela com base apenas nos dados de sensor. O dispositivo eletrônico pode controlar a exibição de tela usando a informação sobre a posição de face reconhecida usando a câmera de baixa resolução juntamente com os dados de sensor.
[0051] Numa modalidade, o dispositivo eletrônico determina se é possível adquirir uma imagem a partir da câmera com base nos dados de sensor em operação 430b. O dispositivo eletrônico analisa os dados de sensor adquiridos a partir do sensor de iluminância para determinar se a iluminação ambiente é igual a ou maior do que um limiar e, portanto, se é possível aquisição de uma imagem usando a câmera. O dispositivo eletrônico pode analisar os dados de sensor a partir do sensor de proximidade para determinar se a distância entre a posição de face do usuário está dentro de uma distância de limiar e, portanto, se é possível aquisição de uma imagem usando a câmera.
[0052] Se for determinado que a aquisição de imagens é possível, o dispositivo eletrônico altera o valor de configuração da câmera com base nos dados de sensor em operação 440b. O valor de configuração pode ser a velocidade de câmera, ou seja, FPS, ou sensibilidade de câmera.
[0053] Em operação 450b, o dispositivo eletrônico pode reconhecer a posição de face do usuário usando a câmera configurada com o valor de configuração modificado.
[0054] Em operação 460b, o dispositivo eletrônico controla exibição de tela com base na posição de face do usuário.
[0055] Caso contrário, se é determinado que a aquisição de imagem é impossível, o dispositivo eletrônico para a operação da câmera e controla a exibição de tela com base nos dados de sensor em operação 470B. Isto é, o dispositivo eletrônico pode controlar exibição de tela com base apenas nos dados de sensor.
[0056] As Figuras 5A a 5E são diagramas que ilustram exibições de tela para explicar um método de controle de exibição de tela de acordo com uma modalidade da presente divulgação.
[0057] Fazendo referência às Figuras 5a a 5e, o dispositivo eletrônico 500 pode operar a câmera em um dos modos de baixa e alta resolução de acordo com ou de forma independente do estado de potência.
[0058] A Figura 5a mostra uma situação de controlar a exibição de tela em resposta a um comando de rolagem (rolagem inteligente). Se o comando de rolagem inteligente é executado, o dispositivo eletrônico 500 invoca o aplicativo de suporte da rolagem. O dispositivo eletrônico pode rolar o conteúdo exibido na unidade de exibição para a esquerda, direita, para cima ou para baixo em correspondência com a face reconhecida pela câmera. Por exemplo, se a primeira posição de olhar 510 altera para a segunda posição de olhar 520 na unidade de exibição do dispositivo eletrônico 500, o dispositivo eletrônico 500 rola a tela de baixo para cima na unidade de exibição de modo que a parte inferior do conteúdo aparece na tela. O dispositivo eletrônico 500 é capaz de detectar uma queda da face ou uma elevação da face com base em pelo menos uma posição de olhar, posição de face, e ângulo de face para determinar a direção e / ou a velocidade de rolagem. O dispositivo eletrônico 500 pode rolar a tela de acordo com a direção e / ou velocidade de rolagem determinada.
[0059] De acordo com várias modalidades da presente invenção, o dispositivo eletrônico 500 pode compensar a direção de rolagem e / ou a velocidade de rolagem com base nos dados de sensor adquiridos a partir do sensor. Por exemplo, o dispositivo eletrônico 500 determina se a posição de olhar do usuário adquirida através da câmera corresponde à unidade de exibição usando o sensor de inclinação e, em caso afirmativo, rola a tela usando apenas os dados de sensor. O sensor de giroscópio detecta o grau inclinado do dispositivo eletrônico 500 e controla a direção de rolagem e / ou velocidade de rolagem de acordo com o grau de inclinação. Por exemplo, se o dispositivo eletrônico 500 inclina para cima duas vezes em movimento rápido, a tela pode ser rolada para cima rapidamente. Neste momento, se o dispositivo eletrônico 500 inclina para baixo uma vez, a rolagem para cima para. Além disso, se o dispositivo eletrônico inclina para baixo duas vezes, a rolagem para cima para e a rolagem para baixo começa. O usuário pode configurar manualmente pelo menos um de direção, ângulo e velocidade. Se os dados de sensor adquiridos correspondem a pelo menos uma de informação de direção, ângulo e velocidade, o dispositivo eletrônico 500 rola a tela de acordo com a pelo menos uma informação de direção, ângulo e velocidade.
[0060] De acordo com várias modalidades, se é impossível reconhecer a face do usuário usando a câmera, o dispositivo eletrônico 500 pode adquirir os dados de sensor a partir do sensor. O dispositivo eletrônico 500 determina se não é manipulado pelo usuário com base nos dados de sensor. Por exemplo, se for determinado que o dispositivo eletrônico 500 mantém uma postura deitada horizontalmente como estivesse colocado sobre a mesa sem qualquer entrada, o dispositivo eletrônico 500 determina que não está em uso. Se for determinado que o dispositivo eletrônico não está em uso, o dispositivo eletrônico pode diminuir a taxa de quadros da câmera. Se não for detectada entrada em um tempo de limiar, o dispositivo eletrônico 500 para de utilizar a câmera. Ou seja, o dispositivo eletrônico determina se está em uso com base nos dados de sensor e ajusta a taxa de quadros da câmera para desligar a câmera se for determinado que o dispositivo eletrônico 500 não está em uso.
[0061] A Figura 5b mostra uma situação de controle de exibição de tela em resposta a um comando de reprodução (reprodução inteligente). Por exemplo, o dispositivo eletrônico 530 pode exibir conteúdo de música. Se a posição olhar é na unidade de exibição exibindo o conteúdo de música, o dispositivo eletrônico 540 pode reproduzir o conteúdo de música.
[0062] A Figura 5c mostra uma situação de controle da exibição de tela em resposta a um comando de pausa (pause inteligente). Se a posição de olhar do usuário está na unidade de exibição, o dispositivo eletrônico reproduz o conteúdo de música como mostrado na tela 550. No estado de reproduzir o conteúdo de música, se a posição de olhar do usuário move para fora da unidade de exibição, o dispositivo eletrônico pausa a reprodução do conteúdo de música como mostrado na tela 560.
[0063] A Figura 5d mostra uma situação de controlar a exibição de tela em resposta a um comando de ampliação (ampliação inteligente) ou redução (redução inteligente). O dispositivo eletrônico 570 pode ampliar ou reduzir o conteúdo de acordo com a distância entre a posição de olhar do usuário e a unidade de exibição. O dispositivo eletrônico 570 pode exibir o conteúdo em uma distância de limiar (d0) entre a posição de olhar e a unidade de exibição. Se a distância entre a posição de olhar e a unidade de exibição (d1) é igual a ou maior do que a distância de limiar (d0) (d0 ^ dl) , o dispositivo eletrônico pode ampliar o conteúdo como mostrado no desenho 570a. Se a distância entre a posição de olhar e a unidade de exibição (d2) é menor do que a distância de limiar (d0) (d0 > d2), o dispositivo eletrônico pode reduzir o conteúdo como mostrado no desenho 570B.
[0064] A Figura 5e mostra uma situação de controle da exibição de tela em resposta a um comando de resposta. Se a posição de olhar é na unidade de exibição, o dispositivo eletrônico pode aceitar a chamada como mostrado no desenho 580A. Isto é, se a posição de olhar move da esquerda para a direita como mostrado no desenho 580A, o dispositivo eletrônico recebe a chamada de entrada (resposta: sim). Caso contrário, se a posição de olhar move da direita para esquerda, como mostrado no desenho 580B, o dispositivo eletrônico pode rejeitar a chamada recebida (resposta: não).
[0065] De acordo com várias modalidades, o dispositivo eletrônico pode controlar exibição de tela em resposta ao comando de permanência (permanência inteligente). O comando de permanência é para instruir para manter a tela exibida na unidade de exibição do dispositivo eletrônico como está ligada. No caso do comando da permanência, o dispositivo eletrônico requer um amplo ângulo de visão e pode usar a câmera frontal operando em modo YUV para reduzir a probabilidade de reconhecimento de face errado.
[0066] As Figuras 6a e 6b são diagramas que ilustram uma situação de controle de exibição de tela de acordo com uma modalidade da presente divulgação.
[0067] Com referência à Figura 6a, o dispositivo eletrônico 600 pode executar um aplicação de livro de modo que a unidade de exibição mostra uma página conforme mostrado no desenho 610. Se o sensor de movimento detecta que o dispositivo eletrônico ereto cai sobre sua parte traseira como é indicado pelo número de referência 600a, o dispositivo eletrônico vira a página atual para a próxima página, como mostrado no desenho 620. Se for detectado que a posição de olhar do usuário é colocada na borda direita da página atual, o dispositivo eletrônico 600 pode virar a página atual para a página seguinte na unidade de exibição.
[0068] Com referência à Figura 6b, o dispositivo eletrônico 600 pode controlar exibição de tela de um dispositivo exterior 640 a ele ligado. O dispositivo eletrônico exterior 640 pode ser qualquer de todos os tipos de dispositivos eletrônicos conectáveis a partir do exterior do dispositivo eletrônico 600, como uma televisão, um monitor de computador, uma caixa de configuração de topo, um navegador, um alto-falante, e assim por diante. Neste momento, o dispositivo eletrônico 600 pode ser ligado com o dispositivo eletrônico exterior 640 através de um dispositivo exterior 630. No caso em que o dispositivo eletrônico 600 está conectado com o dispositivo eletrônico exterior 640, é possível controlar exibição de tela do dispositivo eletrônico exterior 640 com base na face do usuário reconhecida por meio da câmera. Por exemplo, se a posição de face do usuário reconhecido é no dispositivo eletrônico exterior 640, o dispositivo eletrônico 600 pode continuar a fornecer os dados de tela para o dispositivo eletrônico exterior 640. Se posição de face do usuário reconhecido é saída da unidade de exibição e o dispositivo eletrônico exterior 640, o dispositivo eletrônico 600 pode interromper a reprodução do conteúdo no dispositivo eletrônico exterior 640. Se a posição de face está fora da unidade de exibição e o dispositivo eletrônico exterior 640 ao longo de um tempo de limiar, o dispositivo eletrônico 600 pode desligar o dispositivo eletrônico exterior 640 ou controlar o dispositivo eletrônico exterior 640 para entrar no modo de economia de potência.
[0069] De acordo com várias modalidades, se o dispositivo eletrônico exterior 640 é um alto-falante, o dispositivo eletrônico 600 pode emitir a voz de um usuário de contrapartida de uma chamada através do alto-falante no modo de telefonia. Se o dispositivo eletrônico exterior 640 é um dispositivo de navegação ou um dispositivo de carro embutido, o dispositivo eletrônico 600 pode detectar uma situação de emergência com base na face e movimento do usuário. Por exemplo, a situação de emergência pode ser um de cochilar, desviar atenção da estrada, ou encontrar um obstáculo na estrada. Se for determinado que o usuário está cochilando, o dispositivo eletrônico 600 pode emitir um som de alarme ou anúncio ou notificação da situação na estrada.
[0070] A Figura 7 é um diagrama de blocos que ilustra uma configuração de um dispositivo eletrônico de acordo com uma modalidade da presente divulgação.
[0071] Com referência à Figura 7, o dispositivo eletrônico 700 inclui uma unidade de controle 710, uma unidade de câmera 720, uma unidade de exibição 730, uma unidade de entrada 740, uma unidade de fornecimento de potência 750, uma unidade de sensor 760, e uma unidade de comunicação 770.
[0072] A unidade de controle 710 determina a resolução da unidade de câmera 720. De acordo com várias modalidades da presente invenção, a unidade de controle 710 pode ajustar a resolução da unidade de câmera 720 para mais ou menos independentemente do estado de potência do dispositivo eletrônico 700. A unidade de controle 710 pode determinar se o dispositivo eletrônico está no estado de potência maior ou estado de potência menor dependendo se a potência do dispositivo eletrônico 700 é igual a ou maior do que um limiar e / ou se o dispositivo eletrônico é conectado a um dispositivo exterior. Por exemplo, se a potência do dispositivo eletrônico 700 é igual a ou maior do que o limiar ou se o dispositivo eletrônico 700 é ligado ao dispositivo exterior, a unidade de controle 710 determina este como o estado de potência alta e define a resolução de unidade de câmera 720 para alta. O dispositivo exterior fornece potência para o dispositivo eletrônico 700. Se a potência do dispositivo eletrônico 700 é menor do que o limiar e se o dispositivo exterior não é conectado ao dispositivo eletrônico 700, a unidade de controle 710 determina este o presente estado de potência baixa e define a resolução de câmera para baixa. O dispositivo eletrônico é fornecido com potência através da unidade de fornecimento de potência 750. A unidade de fornecimento de potência pode ser ligada ao dispositivo exterior.
[0073] A unidade de controle 710 controla as operações globais do dispositivo eletrônico 700 e fluxos de sinal entre os componentes internos do dispositivo eletrônico 700, processa dados, e controla fornecimento de potência para os componentes. A unidade de controle 710 inclui uma unidade de processamento central (CPU) e uma unidade de processamento gráfico (GPU). Como é bem conhecido na arte, a CPU é uma unidade de controle de núcleo do sistema de computador que executa operação de dados e comparação e interpretação de comando e execução. A GPU é a unidade de controle gráfico de executar operação de dados gráficos e comparação e interpretação de comando e execução. Cada da CPU e GPU pode ser integrada em um pacote de um único circuito integrado que inclui dois ou mais núcleos independentes (por exemplo, quatro núcleos). A CPU e GPU também podem ser integradas em um chip sob a forma de um Sistema em Chip (SoC). A CPU e GPU também podem ser implementadas sob a forma de pacote multicamadas. A CPU e GPU embaladas podem ser referidas como Processador de Aplicativo (AP).
[0074] A câmera 710 pode operar na resolução determinada para reconhecer a face do usuário. De acordo com as várias modalidades da presente invenção, a unidade de câmera 720 funciona em uma alta resolução para adquirir a posição de olhar do usuário. A unidade de câmera 720 pode operar em uma baixa resolução para reconhecer a posição de face do usuário.
[0075] A unidade de exibição 730 pode exibir uma tela controlada com base na face. A unidade de exibição 730 exibe uma imagem na tela sob o controle da unidade de controle 710. Isto é, a unidade de controle 710 processa os dados para gerar um encaixe de imagem para a tela (por exemplo, decodificar os dados) para o buffer, e a unidade de exibição 730 converte a imagem bufferizada para sinais analógicos de tal modo que a imagem é apresentada na tela. A unidade de exibição 730 pode ser implementada com qualquer um de uma tela de cristal líquido (LCD), Diodos Emissores de Luz Orgânicos (OLED), um OLED de matriz ativa (AMOLED), e uma tela flexível. De acordo com várias modalidades da presente invenção, a unidade de exibição 730 pode ser integrada com a unidade de entrada 740.
[0076] A unidade de entrada 740 inclui uma pluralidade de teclas para receber informação alfanumérica e configurar várias funções. Exemplos das teclas incluem uma tecla de menu, uma tecla de liga / desliga tela, uma tecla de liga / desliga, uma tecla de controle de volume, etc. A unidade de entrada 740 gera configuração de usuário e sinais de tecla de controle de função dispositivo eletrônico para a unidade de controle 710. Exemplos do sinal de tecla incluem um sinal de liga / desliga, um sinal de controle de volume, um sinal de liga / desliga de tela, um sinal de obturador, etc. A unidade de controle 710 controla os componentes acima em resposta ao sinal de tecla. As teclas que constituem a unidade de entrada 740 são referidas como teclas duras e as teclas apresentadas na unidade de exibição 730 são referidas como teclas moles.
[0077] De acordo com várias modalidades, a unidade de controle 710 adquire a informação de coordenada por mapeamento da posição de olhar para a unidade de exibição 730 e controlar a exibição de tela com base na informação de coordenada adquirida. A unidade de controle 710 determina a informação de direção e velocidade com base na alteração de informação de coordenada e controla a exibição de tela com base na informação de direção e velocidade. A unidade de controle 710 também determina se o usuário está presente ou ausente utilizando a unidade de câmera 720 operando no modo de baixa resolução e, se o usuário estiver presente, altera o valor de configuração da unidade de câmera 720 para reconhecer a posição de face do usuário. O valor de configuração pode ser a velocidade de câmera, ou seja, FPS, ou sensibilidade de câmera.
[0078] O sensor 760 pode incluir pelo menos um de um sensor de movimento, um sensor de giroscópio, um sensor de aceleração, um sensor de umidade, um sensor de proximidade, sensor de infravermelho, um Sensor de iluminância, um sensor de campo magnético da Terra, um sensor de inércia, um sensor de inclinação, e um sensor de sopro. O sensor pode adquirir os dados de sensor incluindo pelo menos um ou qualquer combinação de uma alteração de ângulo, uma alteração de direção, uma alteração de posição, uma alteração de postura, uma alteração de força, e uma alteração de velocidade. O sensor detecta que um evento de movimento ocorreu pelo usuário de modo a adquirir os dados de sensor a partir de pelo menos uma ou qualquer combinação de um zoom de aperto, um toque de lâmina de mão, e um movimento de ar.
[0079] De acordo com várias modalidades, a unidade de controle 710 recebe os dados de sensor a partir do sensor 760 para adquirir a informação de coordenada com base nos dados de sensor e o mapeamento da posição de face para a unidade de exibição do dispositivo eletrônico. A unidade de controle 710 determina a informação de direção e velocidade com base na alteração da informação de coordenada ao longo do tempo. Isto é, a unidade de controle 710 adquire a informação de coordenada usando a posição de face e os dados de sensor e determina a direção e velocidade de movimento com precisão.
[0080] De acordo com várias modalidades, se for determinado que o usuário está presente, a unidade de comando 710 ativa pelo menos um sensor da unidade de sensor 760 e controla a exibição de tela com base nos dados de sensor fornecidos pela unidade de sensor 760. A unidade de controle 710 determina se é possível aquisição de imagem a partir da câmera com base em dados de sensor e, em caso afirmativo, muda os valores de configuração da câmera com base em dados de sensor para reconhecer a posição de face do usuário. Se é impossível adquirir imagem da câmera, a unidade de controle 710 para de operar a unidade de câmera 720 e controla a exibição de tela com base nos dados de sensor.
[0081] De acordo com várias modalidades, a unidade de controle 710 pode atribuir as prioridades da informação de imagem adquirida usando a unidade de câmera 720 e os dados de sensor. A unidade de controle 710 pode controlar a exibição de tela com base na informação classificada na ordem descendente. Por exemplo, se a unidade de câmera 720 opera no modo de alta resolução, a unidade de controle 710 pode atribuir uma prioridade elevada para a informação de imagem em comparação com os dados de sensor. Caso contrário, se a unidade de câmera 720 opera no modo de baixa resolução, a unidade de controle 710 pode atribuir uma prioridade baixa para a informação de imagem em comparação com os dados de sensor.
[0082] Desta forma, a unidade de controle 710 é capaz de controlar a exibição de tela da unidade de exibição 730 em associação com pelo menos um de comando de rolagem, reprodução, pausa, ampliação, redução, permanência, e resposta.
[0083] O dispositivo eletrônico 700 também pode operar como pelo menos uma de uma unidade de saída (não mostrada), uma unidade de comunicação 770, e uma memória (não mostrada).
[0084] A unidade de saída pode incluir um microfone e um alto-falante. A unidade de saída pode entrar e sair um sinal de áudio (por exemplo, dados de voz) a respeito de reconhecimento de voz, gravação de voz, gravação digital, e telefonia. A unidade de saída converte o sinal de áudio a partir da unidade de controle 710 para um sinal analógico (conversão D / A) e amplifica e emite o sinal através do alto-falante. A unidade de saída converte o sinal de áudio (primeira onda de som) recebido através do microfone para o sinal digital (conversão A / D) e transfere o sinal digital para a unidade de controle 710. O alto-falante converte o sinal de áudio (dados de som) para onda sonora. O microfone converte a onda sonora gerada por uma pessoa ou outra fonte de som para um sinal de áudio.
[0085] A unidade de comunicação 770 é responsável por comunicação de voz, vídeo, e / ou dados com um outro dispositivo eletrônico através de uma rede sob o controle da unidade de controle 710. A unidade de comunicação 770 inclui um transmissor de radiofrequência (RF) para converter acima frequência e amplificar o sinal de transmissão e um receptor de RF para amplificar baixo ruído e converter abaixo frequência do sinal recebido. A unidade de comunicação 770 pode incluir um módulo de comunicação móvel (por exemplo, módulo de comunicação móvel de 3a geração (3G), módulo de comunicação móvel 3,5G, e módulo de comunicação móvel 4G), um módulo de difusão digital (por exemplo, módulo DMB, e um módulo de comunicação de curto alcance (por exemplo, módulo WiFi, módulo Bluetooth, e módulo de Comunicação de Campo Próximo (NFC)).
[0086] A memória pode armazenar aplicativos de software relativos ao funcionamento do dispositivo eletrônico 700 e vários dados recebidos ou gerados como um resultado da operação do dispositivo eletrônico 700. A memória pode ser um certo tipo de armazenamento digital legível e gravável. A memória pode armazenar pelo menos um programa para execução das funções acima. A memória pode incluir uma unidade de memória secundária da unidade de controle 710 como o disco, memória de acesso aleatório (RAM), memória somente de leitura (ROM), e memória flash. A memória pode armazenar a informação (por exemplo, contato) gerada pelo dispositivo eletrônico 700 e os dados (por exemplo, mensagens e arquivos de imagem em movimento) recebidos do exterior através da unidade de comunicação 770. A memória pode armazenar a informação sobre a imagem (por exemplo, teclado, imagens em movimento, e mensagem), tais como informação de tamanho e informação de região de exibição.
[0087] Como descrito acima, o método e aparelho de controle de exibição da presente invenção são vantajosos na medida em que a exibição de tela do aparelho eletrônico é controlada de acordo com a presença / ausência do usuário independentemente do estado de potência do dispositivo eletrônico de modo a melhorar a eficiência de utilização de potência do dispositivo eletrônico.
[0088] Além disso, o método e aparelho de controle de exibição da presente invenção são vantajosos na medida em que o dispositivo eletrônico executa as funções que afetam o consumo de potência seletivamente dependendo do seu estado de potência de modo a melhorar a eficiência de utilização de potência.
[0089] Embora a presente divulgação tenha sido mostrada e descrita com referência a várias modalidades da mesma, será compreendido por aqueles peritos na arte que várias alterações na forma e detalhes podem ser feitas sem afastamento do espírito e do âmbito da presente invenção tal como definidos pelas reivindicações anexas e seus equivalentes.
Claims (13)
1. Método de controle de tela de exibição (550) de um dispositivo eletrônico (500), o método caracterizado pelo fato de que compreende: determinar (110), pelo dispositivo eletrônico, uma resolução de uma câmera (720) selecionado uma dentre uma alta e uma baixa resolução; reconhecer, pelo dispositivo eletrônico, uma face de um usuário utilizando a câmera operando com a resolução determinada (120); e controlar, pelo dispositivo eletrônico, exibição de tela do dispositivo eletrônico com base no reconhecimento da face (130); em que reconhecer a face do usuário compreende: ao operar a câmera na baixa resolução, reconhecer uma posição da face do usuário; e ao operar a câmera na alta resolução, adquirir uma posição do olhar do usuário; e em que determinar a resolução compreende: determinar um estado de potência do dispositivo eletrônico; e selecionar uma dentre a alta resolução ou a baixa resolução dependendo do estado de potência do dispositivo eletrônico.
2. Método, de acordo com a reivindicação 1, caracterizado pelo fato de que a determinação da resolução compreende definir a resolução de câmera (720) para a alta resolução para um estado de potência alta e para a baixa resolução para um estado de potência baixa.
3. Método, de acordo com a reivindicação 1 ou 2, caracterizado pelo fato de que o controle da tela de exibição (550) compreende: adquirir informação de coordenada por mapeamento da posição de olhar para uma exibição do dispositivo eletrônico (500), quando operando a câmera (720) na alta resolução; e controlar a tela de exibição (550) com base na informação de coordenada.
4. Método, de acordo com a reivindicação 3, caracterizado pelo fato de que o controle da tela de exibição (550) compreende: determinar pelo menos uma da informação de direção ou informação de velocidade com base na alteração da informação de coordenada ao longo do tempo; e controlar a exibição de tela com base na informação de direção ou a informação de velocidade.
5. Método, de acordo com a reivindicação 1, caracterizado pelo fato de que o reconhecimento da face compreende: determinar se um usuário está presente utilizando a câmera (720) operando na baixa resolução; alterar, quando o usuário está presente, valores de configuração da câmera.
6. Método, de acordo com a reivindicação 5, caracterizado pelo fato de que o controle da exibição de tela compreende: adquirir dados de sensor utilizando pelo menos um sensor; adquirir informação de coordenada através de mapeamento para a exibição do dispositivo eletrônico (500) com base nos dados de sensor e a posição de face; determinar pelo menos uma da informação de direção e informação de velocidade com base em uma alteração da informação de coordenada; e controlar a tela de exibição com base na pelo menos um da informação de direção e a informação de velocidade.
7. Método, de acordo com a reivindicação 1, caracterizado pelo fato de que o controle da tela de exibição (550) compreende: determinar se um usuário está presente utilizando a câmera (720) operando na baixa resolução; operar, quando o usuário está presente, pelo menos um sensor; adquirir dados de sensor a partir do pelo menos um sensor; e controlar a tela com base nos dados de sensor.
8. Método, de acordo com a reivindicação 7, caracterizado pelo fato de que o reconhecimento da face compreende: determinar se a câmera (720) é capaz de fornecer uma imagem com base nos dados de sensor; e alterar, quando a câmera é capaz de fornecer a imagem, um valor de configuração da câmera com base em dados de sensor para reconhecer uma posição de face do usuário, em que o controle da tela de exibição (550) compreende: parar, quando a câmera é incapaz de fornecer a imagem, operação da câmera; e controlar a tela de exibição com base nos dados de sensor.
9. Método, de acordo com a reivindicação 1, caracterizado pelo fato de que o controle da tela de exibição (550) compreende: adquirir dados de sensor a partir do sensor; atribuir prioridades para informação de imagem fornecida pela câmera (720) e os dados de sensor; e controlar a tela de exibição (550) usando a informação classificada em ordem decrescente das prioridades.
10. Dispositivo eletrônico (500), caracterizado pelo fato de que compreende: uma unidade de controle (710) configurada para determinar uma resolução selecionando uma dentre uma alta e uma baixa resolução; uma câmera (720) configurada para operar na resolução determinada pela unidade de controle para reconhecer uma face de um usuário; e a unidade de exibição (550) configurada para exibir uma tela sob um controle da unidade de controle com base no reconhecimento da face; em que a unidade de controle (710) é configurada para reconhecer a face operando a câmera para: quando a baixa resolução é selecionada, reconhecer uma posição da face do usuário; e quando a alta resolução é selecionada, adquirir uma posição do olhar do usuário; e em que em que a unidade de controle (710) é configurada determinar um estado de potência do dispositivo eletrônico, e para selecionar a resolução da câmera para uma dentre a alta resolução ou a baixa resolução dependendo do estado de potência do dispositivo eletrônico.
11. Dispositivo eletrônico (500), de acordo com a reivindicação 10, caracterizado pelo fato de que a unidade de controle (710) é configurada para operar a câmera (720) na alta resolução para adquirir informação de coordenada por mapear a posição de olhar para a unidade de exibição (550) do dispositivo eletrônico e controlar a tela de exibição com base na informação de coordenada.
12. Dispositivo eletrônico (500), de acordo com a reivindicação 10, caracterizado pelo fato de que a unidade de controle é configurada para operar a câmera (720) com uma resolução baixa para determinar se o usuário está presente e para mudar, quando o usuário estiver presente, um valor de configuração da câmera para reconhecer a posição de face do usuário.
13. Dispositivo eletrônico (500), de acordo com a reivindicação 12, caracterizado pelo fato de que compreende ainda pelo menos um sensor configurado para fornecer dados de sensor, em que a unidade de controle (710) é configurada para adquirir informação de coordenada através de mapeamento para a unidade de exibição do dispositivo eletrônico com base nos dados de sensor e na posição de face, para determinar pelo menos uma dentre informação de direção ou informação de velocidade com base na alteração da informação de coordenada, e para controlar a tela de exibição (550) com base na pelo menos uma dentre informação de direção ou velocidade.
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR20130027592 | 2013-03-14 | ||
KR10-2013-0027592 | 2013-03-14 | ||
KR10-2014-0025929 | 2014-03-05 | ||
KR1020140025929A KR102281233B1 (ko) | 2013-03-14 | 2014-03-05 | 화면 제어 방법 및 장치 |
PCT/KR2014/002161 WO2014142600A2 (en) | 2013-03-14 | 2014-03-14 | Display control method and apparatus |
Publications (2)
Publication Number | Publication Date |
---|---|
BR112015022914A2 BR112015022914A2 (pt) | 2017-07-18 |
BR112015022914B1 true BR112015022914B1 (pt) | 2021-12-21 |
Family
ID=51757840
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
BR112015022914-0A BR112015022914B1 (pt) | 2013-03-14 | 2014-03-14 | Método de controle de tela de exibição de um dispositivo eletrônico e dispositivo eletrônico |
Country Status (8)
Country | Link |
---|---|
US (1) | US10185391B2 (pt) |
EP (1) | EP2972681B1 (pt) |
KR (1) | KR102281233B1 (pt) |
CN (1) | CN105229570B (pt) |
AU (1) | AU2014230175B2 (pt) |
BR (1) | BR112015022914B1 (pt) |
RU (1) | RU2666246C2 (pt) |
WO (1) | WO2014142600A2 (pt) |
Families Citing this family (30)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6572886B2 (ja) * | 2014-05-22 | 2019-09-11 | ソニー株式会社 | 情報処理装置および情報処理方法 |
US10110794B2 (en) * | 2014-07-09 | 2018-10-23 | Light Labs Inc. | Camera device including multiple optical chains and related methods |
US9626564B2 (en) * | 2014-11-17 | 2017-04-18 | Intel Corporation | System for enabling eye contact in electronic images |
US9667867B2 (en) * | 2015-03-30 | 2017-05-30 | Omnivision Technologies, Inc. | Low power smart image capture |
US10387570B2 (en) * | 2015-08-27 | 2019-08-20 | Lenovo (Singapore) Pte Ltd | Enhanced e-reader experience |
US11194398B2 (en) * | 2015-09-26 | 2021-12-07 | Intel Corporation | Technologies for adaptive rendering using 3D sensors |
WO2017111811A1 (en) * | 2015-12-26 | 2017-06-29 | Intel Corporation | Interfacing with a computing device |
JP6620063B2 (ja) * | 2016-04-21 | 2019-12-11 | 株式会社ソニー・インタラクティブエンタテインメント | 画像処理装置および画像処理方法 |
US10627887B2 (en) | 2016-07-01 | 2020-04-21 | Microsoft Technology Licensing, Llc | Face detection circuit |
CN106454083B (zh) * | 2016-09-30 | 2019-12-31 | Oppo广东移动通信有限公司 | 一种移动终端的图像采集方法、装置及移动终端 |
US10580402B2 (en) | 2017-04-27 | 2020-03-03 | Microchip Technology Incorporated | Voice-based control in a media system or other voice-controllable sound generating system |
CN112105486B (zh) * | 2018-03-26 | 2024-05-10 | 伺服创立自动化解决方案有限公司 | 用于工业机器人的增强现实 |
US20190303177A1 (en) * | 2018-03-29 | 2019-10-03 | Microsoft Technology Licensing, Llc | Adaptive User Interface Based On Detection Of User Positions |
CN108595139B (zh) * | 2018-05-08 | 2022-09-23 | 歌尔科技有限公司 | 智能多媒体设备及其显示方法 |
KR102172346B1 (ko) * | 2018-09-27 | 2020-10-30 | 월리엄 로렌조 스웽크 | 시차 적응을 위한 홈 어플라이언스 |
WO2020191643A1 (en) | 2019-03-27 | 2020-10-01 | Intel Corporation | Smart display panel apparatus and related methods |
US10948986B2 (en) * | 2019-04-09 | 2021-03-16 | Fotonation Limited | System for performing eye detection and/or tracking |
US11046327B2 (en) | 2019-04-09 | 2021-06-29 | Fotonation Limited | System for performing eye detection and/or tracking |
US11379016B2 (en) | 2019-05-23 | 2022-07-05 | Intel Corporation | Methods and apparatus to operate closed-lid portable computers |
CN110312074A (zh) * | 2019-06-26 | 2019-10-08 | 上海创功通讯技术有限公司 | 图像采集方法及电子设备 |
CN114222960A (zh) * | 2019-09-09 | 2022-03-22 | 苹果公司 | 用于计算机生成现实的多模态输入 |
US11543873B2 (en) | 2019-09-27 | 2023-01-03 | Intel Corporation | Wake-on-touch display screen devices and related methods |
US11733761B2 (en) | 2019-11-11 | 2023-08-22 | Intel Corporation | Methods and apparatus to manage power and performance of computing devices based on user presence |
US11809535B2 (en) | 2019-12-23 | 2023-11-07 | Intel Corporation | Systems and methods for multi-modal user device authentication |
US11360528B2 (en) | 2019-12-27 | 2022-06-14 | Intel Corporation | Apparatus and methods for thermal management of electronic user devices based on user activity |
KR20210085256A (ko) * | 2019-12-30 | 2021-07-08 | 삼성전자주식회사 | 사용자의 위치를 제공하기 위한 전자 장치 및 방법 |
KR20210111860A (ko) * | 2020-05-22 | 2021-09-13 | 베이징 바이두 넷컴 사이언스 앤 테크놀로지 코., 엘티디. | 비디오 재생 제어 방법, 장치, 전자 설비 및 저장매체 |
CN111880640B (zh) * | 2020-07-31 | 2022-03-22 | Oppo广东移动通信有限公司 | 屏幕控制方法、装置、电子设备及存储介质 |
US11874960B2 (en) * | 2021-03-31 | 2024-01-16 | Snap Inc. | Pausing device operation based on facial movement |
KR102348321B1 (ko) * | 2021-07-07 | 2022-01-06 | 유석영 | 미러링 방법 및 디바이스 |
Family Cites Families (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7379560B2 (en) | 2003-03-05 | 2008-05-27 | Intel Corporation | Method and apparatus for monitoring human attention in dynamic power management |
US20050276481A1 (en) * | 2004-06-02 | 2005-12-15 | Fujiphoto Film Co., Ltd. | Particular-region detection method and apparatus, and program therefor |
US20100259814A1 (en) | 2006-03-31 | 2010-10-14 | Boyer Thomas R | Infrared combat identification markers and panels |
KR100984230B1 (ko) * | 2008-03-20 | 2010-09-28 | 엘지전자 주식회사 | 근접 터치 감지 기능을 갖는 휴대 단말기 및 이를 이용한화면 제어 방법 |
JP2009301166A (ja) | 2008-06-11 | 2009-12-24 | Panasonic Corp | 電子機器制御装置 |
CN101943982B (zh) | 2009-07-10 | 2012-12-12 | 北京大学 | 基于被跟踪的眼睛运动的图像操作 |
GB2460580B (en) | 2009-09-30 | 2010-07-07 | Very Pc Ltd | Improved power save method and apparatus for electrical equipment |
KR101652110B1 (ko) * | 2009-12-03 | 2016-08-29 | 엘지전자 주식회사 | 사용자의 제스쳐로 제어가능한 장치의 전력 제어 방법 |
JP2012038106A (ja) | 2010-08-06 | 2012-02-23 | Canon Inc | 情報処理装置、情報処理方法、およびプログラム |
US9274744B2 (en) * | 2010-09-10 | 2016-03-01 | Amazon Technologies, Inc. | Relative position-inclusive device interfaces |
KR101685991B1 (ko) * | 2010-09-30 | 2016-12-13 | 엘지전자 주식회사 | 이동 단말기 및 이동 단말기의 제어 방법 |
US8643680B2 (en) * | 2011-04-08 | 2014-02-04 | Amazon Technologies, Inc. | Gaze-based content display |
KR101773845B1 (ko) | 2011-05-16 | 2017-09-01 | 삼성전자주식회사 | 휴대용 단말기에서 입력 처리 방법 및 장치 |
RU118140U1 (ru) * | 2012-02-10 | 2012-07-10 | Владимир Александрович Елин | Персональный электронный коммуникатор |
RU2522848C1 (ru) | 2013-05-14 | 2014-07-20 | Федеральное государственное бюджетное учреждение "Национальный исследовательский центр "Курчатовский институт" | Способ управления устройством с помощью глазных жестов в ответ на стимулы |
-
2014
- 2014-03-05 KR KR1020140025929A patent/KR102281233B1/ko active IP Right Grant
- 2014-03-13 US US14/209,399 patent/US10185391B2/en active Active
- 2014-03-14 CN CN201480014071.5A patent/CN105229570B/zh active Active
- 2014-03-14 BR BR112015022914-0A patent/BR112015022914B1/pt active IP Right Grant
- 2014-03-14 RU RU2015138990A patent/RU2666246C2/ru active
- 2014-03-14 AU AU2014230175A patent/AU2014230175B2/en active Active
- 2014-03-14 EP EP14765158.2A patent/EP2972681B1/en active Active
- 2014-03-14 WO PCT/KR2014/002161 patent/WO2014142600A2/en active Application Filing
Also Published As
Publication number | Publication date |
---|---|
AU2014230175A1 (en) | 2015-08-06 |
RU2015138990A3 (pt) | 2018-03-12 |
KR102281233B1 (ko) | 2021-07-23 |
EP2972681A2 (en) | 2016-01-20 |
CN105229570B (zh) | 2018-06-01 |
KR20140113361A (ko) | 2014-09-24 |
BR112015022914A2 (pt) | 2017-07-18 |
WO2014142600A3 (en) | 2015-11-26 |
WO2014142600A2 (en) | 2014-09-18 |
RU2666246C2 (ru) | 2018-09-06 |
RU2015138990A (ru) | 2017-03-16 |
US20140267021A1 (en) | 2014-09-18 |
CN105229570A (zh) | 2016-01-06 |
EP2972681B1 (en) | 2018-08-01 |
US10185391B2 (en) | 2019-01-22 |
AU2014230175B2 (en) | 2019-04-04 |
EP2972681A4 (en) | 2016-11-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
BR112015022914B1 (pt) | Método de controle de tela de exibição de um dispositivo eletrônico e dispositivo eletrônico | |
EP3936992A1 (en) | Control method and electronic device | |
ES2964533T3 (es) | Método de control de voz y dispositivo electrónico | |
KR102386398B1 (ko) | 촬영 모드에 따라 이미지에 대한 표시자를 다르게 제공하는 방법 및 그 전자 장치 | |
JP7081048B2 (ja) | システムナビゲーションバー表示方法、システムナビゲーションバー制御方法、グラフィカルユーザインターフェース、および電子機器 | |
US20230419570A1 (en) | Image Processing Method and Electronic Device | |
KR102154802B1 (ko) | 전자 장치의 촬영 방법 및 그 전자 장치 | |
KR102227440B1 (ko) | 전자 장치 및 그 동작 방법 | |
CN114397982A (zh) | 一种应用显示方法及电子设备 | |
CN115297200A (zh) | 一种具有折叠屏的设备的触控方法与折叠屏设备 | |
WO2021051982A1 (zh) | 调用硬件接口的方法及电子设备 | |
KR20160061133A (ko) | 이미지 표시 방법 및 그 전자 장치 | |
CN115016869B (zh) | 帧率调整方法、终端设备及帧率调整*** | |
KR20170048137A (ko) | 미디어 컨텐츠 송신 방법, 미디어 컨텐츠 송신 장치, 미디어 컨텐츠 수신 방법, 및 미디어 컨텐츠 수신 장치 | |
CN110633043A (zh) | 一种分屏处理方法及终端设备 | |
CN112751954A (zh) | 一种操作提示的方法和电子设备 | |
WO2021000943A1 (zh) | 一种指纹开关的管理方法及装置 | |
WO2024016564A1 (zh) | 二维码识别方法、电子设备以及存储介质 | |
KR20150043894A (ko) | 복수의 영상의 프리뷰 영역을 조정하는 전자 장치 및 방법 | |
US20230004287A1 (en) | Human-computer interaction method and device | |
CN109845251B (zh) | 用于显示图像的电子设备和方法 | |
WO2021180095A1 (zh) | 获取位姿的方法及装置 | |
CN114422686A (zh) | 参数调整方法及相关装置 | |
EP4181494A1 (en) | Display method and related apparatus | |
CN114153361B (zh) | 界面显示方法、装置、终端及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
B06F | Objections, documents and/or translations needed after an examination request according [chapter 6.6 patent gazette] | ||
B06U | Preliminary requirement: requests with searches performed by other patent offices: procedure suspended [chapter 6.21 patent gazette] | ||
B09A | Decision: intention to grant [chapter 9.1 patent gazette] | ||
B16A | Patent or certificate of addition of invention granted [chapter 16.1 patent gazette] |
Free format text: PRAZO DE VALIDADE: 20 (VINTE) ANOS CONTADOS A PARTIR DE 14/03/2014, OBSERVADAS AS CONDICOES LEGAIS. |