CN115134513A - 拍摄方法及装置 - Google Patents

拍摄方法及装置 Download PDF

Info

Publication number
CN115134513A
CN115134513A CN202110335799.XA CN202110335799A CN115134513A CN 115134513 A CN115134513 A CN 115134513A CN 202110335799 A CN202110335799 A CN 202110335799A CN 115134513 A CN115134513 A CN 115134513A
Authority
CN
China
Prior art keywords
volume
sound
target
adjusting
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110335799.XA
Other languages
English (en)
Inventor
韩岫君
张海坡
贾冲
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Xiaomi Mobile Software Co Ltd
Original Assignee
Beijing Xiaomi Mobile Software Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Xiaomi Mobile Software Co Ltd filed Critical Beijing Xiaomi Mobile Software Co Ltd
Priority to CN202110335799.XA priority Critical patent/CN115134513A/zh
Priority to EP21205627.9A priority patent/EP4068077A1/en
Priority to US17/520,446 priority patent/US11632495B2/en
Publication of CN115134513A publication Critical patent/CN115134513A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/67Focus control based on electronic image sensor signals
    • H04N23/671Focus control based on electronic image sensor signals in combination with active ranging signals, e.g. using light or sound signals emitted toward objects
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/165Management of the audio stream, e.g. setting of volume, audio stream path
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H04N23/632Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H04N23/635Region indicators; Field of view indicators
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/67Focus control based on electronic image sensor signals
    • H04N23/675Focus control based on electronic image sensor signals comprising setting of focusing regions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/69Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/806Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components with processing of the sound signal

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Studio Devices (AREA)

Abstract

本公开是关于一种拍摄方法及装置,涉及音频采集处理技术,解决了图像采集过程中声音不可控而影响用户体验的问题。该方法包括:根据图像采集过程中的对焦距离,调整采集声音的声音音量,并在图像预览界面显示与所述声音音量对应的音量信息。本公开提供的技术方案适用于图像采集,实现了图像采集过程中与图像相适应的灵活的声音采集方案。

Description

拍摄方法及装置
技术领域
本公开涉及音频采集处理技术,尤其涉及一种拍摄方法及装置。
背景技术
在通过如手机、平板电脑等拍摄设备拍摄视频过程中,一般通过拍摄设备的麦克风进行收音,获得拍摄的视频文件的音频。
由于拍摄场景多样,在不同场景下拍摄视频时记录的音频文件可能包含大量的杂音,而主要拍摄目标的声音则显得不突出,不能很好的达成使用者的拍摄意图,影响了用户体验。
发明内容
为克服相关技术中存在的问题,本公开提供一种拍摄方法及装置。
根据本公开实施例的第一方面,提供一种拍摄方法,包括:
根据图像采集过程中的对焦距离,调整采集声音的声音音量;
在图像预览界面显示与所述声音音量对应的音量信息。
可选地,所述采集声音包括目标对象声音;所述根据图像采集过程中的对焦距离,调整采集声音的声音音量的步骤,包括:
检测图像采集过程中的对焦距离;
根据所述对焦距离,调整目标对象声音的所述声音音量,所述目标对象声音的发声对象位于所述对焦距离对应的图像采集范围内。
可选地,所述检测图像采集过程中的对焦距离的步骤,包括:
对所述发声对象进行追踪拍摄,调整预览画面的范围;
根据当前的所述预览画面,确定所述对焦距离。
可选地,所述检测图像采集过程中的对焦距离的步骤,包括:
检测焦距调整指令;
根据所述焦距调整指令,确定所述对焦距离。
可选地,所述根据所述对焦距离,调整目标对象声音的所述声音音量的步骤包括:
将所述对焦距离与预设的音频采集配置文件进行匹配,确定所述对焦距离下,所述目标对象声音的所述声音音量。
可选地,所述根据所述对焦距离,调整目标对象声音的所述声音音量的步骤包括:
接收音量调整指令,所述音量调整指令指示第二音量调整目标;
将所述对焦距离与预设的音频采集配置文件进行匹配,确定所述对焦距离对应的采集音量作为第一音量调整目标;
根据所述第一音量调整目标和所述第二音量调整目标,确定目标声音音量;
将所述声音音量调整为所述目标声音音量。
可选地,所述根据所述第一音量调整目标和所述第二音量调整目标,确定目标声音音量的步骤包括:
确定所述第一音量调整目标和所述第二音量调整目标的平均值为所述目标声音音量;和/或,
在所述第一调整目标和所述第二音量调整目标不一致的情况下,按照所述第二音量调整目标,确定所述目标声音音量。
可选地,所述在图像预览界面显示与所述声音音量对应的音量信息的步骤包括:
在所述图像预览界面,通过音量显示控件显示所述音量信息。
可选地,所述在图像预览界面显示与所述声音音量对应的音量信息的步骤,包括:
在所述图像预览界面中,在发声对象的预设区域内显示所述音量显示控件。
根据本公开实施例的第二方面,提供一种拍摄装置,包括:
音量管理模块,用于根据图像采集过程中的对焦距离,调整采集声音的声音音量;
音量显示模块,用于在图像预览界面显示与所述声音音量对应的音量信息。
可选地,所述采集声音包括目标对象声音;所述音量管理模块包括:
焦距检测子模块,用于检测图像采集过程中的对焦距离;
音量调整子模块,用于根据所述对焦距离,调整目标对象声音的所述声音音量,所述目标对象声音的发声对象位于所述对焦距离对应的图像采集范围内。
可选地,所述焦距检测子模块包括:
自动调整画面子模块,用于对所述发声对象进行追踪拍摄,调整预览画面的范围;
第一焦距确定子模块,用于根据当前的所述预览画面,确定所述对焦距离。
可选地,所述焦距检测子模块包括:
指令检测子模块,用于检测焦距调整指令;
第二焦距确定子模块,用于根据所述焦距调整指令,确定所述对焦距离。
可选地,所述音量调整子模块包括:
音量匹配子模块,用于将所述对焦距离与预设的音频采集配置文件进行匹配,确定所述对焦距离下,所述目标对象声音的所述声音音量。
可选地,所述音量调整子模块包括:
第二目标确定子模块,用于接收音量调整指令,所述音量调整指令指示第二音量调整目标;
第一目标确定子模块,用于第二将所述对焦距离与预设的音频采集配置文件进行匹配,确定所述对焦距离对应的采集音量作为第一音量调整目标;
音量确定子模块,用于根据所述第一音量调整目标和所述第二音量调整目标,确定目标声音音量;
调整执行子模块,用于将所述声音音量调整为所述目标声音音量。
可选地,所述音量确定子模块包括:
平均计算子模块,用于确定所述第一音量调整目标和所述第二音量调整目标的平均值为所述目标声音音量;
目标选择子模块,用于在所述第一调整目标和所述第二音量调整目标不一致的情况下,按照所述第二音量调整目标,确定所述目标声音音量。
可选地,所述音量显示模块包括:
控件显示子模块,用于在所述图像预览界面,通过音量显示控件显示所述音量信息。
可选地,所述控件显示子模块包括:
移动控件显示子模块,用于在所述图像预览界面中,在发声对象的预设区域内显示所述音量显示控件。
根据本公开实施例的第三方面,提供一种计算机装置,包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为:
根据图像采集过程中的对焦距离,调整采集声音的声音音量;
在图像预览界面显示与所述声音音量对应的音量信息。
根据本公开实施例的第四方面,提供一种非临时性计算机可读存储介质,当所述存储介质中的指令由移动终端的处理器执行时,使得移动终端能够执行一种拍摄方法,所述方法包括:
根据图像采集过程中的对焦距离,调整采集声音的声音音量;
在图像预览界面显示与所述声音音量对应的音量信息。
本公开的实施例提供的技术方案可以包括以下有益效果:根据图像采集过程中的对焦距离,调整采集声音的声音音量,并在图像预览界面显示与所述声音音量对应的音量信息。实现了图像采集过程中与图像相适应的灵活的声音采集方案,解决了图像采集过程中声音不可控而影响用户体验的问题。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本发明的实施例,并与说明书一起用于解释本发明的原理。
图1是根据一示例性实施例示出的一种拍摄方法的流程图。
图2是根据一示例性实施例示出的又一种拍摄方法的流程图。
图3是根据一示例性实施例示出的又一种拍摄方法的流程图。
图4是根据一示例性实施例示出的又一种拍摄方法的流程图。
图5是根据一示例性实施例示出的又一种拍摄方法的流程图。
图6是根据一示例性实施例示出的一种音量显示控件示意图。
图7是根据一示例性实施例示出的一种拍摄装置的框图。
图8是根据一示例性实施例示出的音量管理模块701的结构示意图。
图9是根据一示例性实施例示出的焦距检测子模块801的结构示意图。
图10是根据一示例性实施例示出的焦距检测子模块801的结构示意图。
图11是根据一示例性实施例示出的音量调整子模块802的结构示意图。
图12是根据一示例性实施例示出的音量调整子模块802的结构示意图。
图13是根据一示例性实施例示出的音量确定子模块1203的结构示意图。
图14是根据一示例性实施例示出的音量显示模块702的结构示意图。
图15是根据一示例性实施例示出的移动控件显示子模块1501的结构示意图。
图16是根据一示例性实施例示出的一种装置的框图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本发明相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本发明的一些方面相一致的装置和方法的例子。
由于手机拍摄视频的拍摄场景多样,在不同场景下拍摄视频时记录的音频文件可能包含大量的杂音,而主要拍摄目标的声音则显得不突出,不能很好的达成使用者的拍摄意图,影响了用户体验。
为了解决上述问题,本公开的实施例提供了一种拍摄方法及装置。在进行图像采集时,根据拍摄过程中的对焦距离进行对目标拍摄对象的音频采集,实现了目标突出的声音效果。
本公开的一示例性实施例提供了一种拍摄方法,使用该方法在图像采集过程中根据实际拍摄情况调整采集声音的声音音量的流程如图1所示,可以包括:
步骤101、根据图像采集过程中的对焦距离,调整采集声音的声音音量。
本步骤中,在进行视频拍摄阶段、预览拍摄阶段(如用户未执行拍摄之前的预览阶段)等图像采集操作过程中,可以根据图像预览界面的对焦距离,调整采集声音的声音音量。
可以以图像预览界面取景范围内(即图像采集范围内)的部分或全部被拍摄对象作为发声对象,以发声对象发出的声音作为采集声音。可选地,也可包括图像预览界面取景范围外的声音。
示例地,可以根据对图像预览界面中发声对象的对焦距离,调整对发声对象的采集声音的声音音量。
步骤102、在图像预览界面显示与所述声音音量对应的音量信息。
本步骤中,音量信息可以包括声音音量的音量数值,和/或,与音量数值关联的图形标识等;通过在图像预览界面显示,图像采集过程中关联于对焦距离的采集声音的音量信息,帮助用户了解音量变化,为用户提供直接的视觉感受。
可选地,该音量信息可以显示于图像预览界面的特定区域;示例地,该特定区域可以为图像预览界面上预设的用于显示音量信息的设定区域,如特定区域可以为与该图像预览界面的预设边缘相邻的区域,能够避免影响用户查看感兴趣拍摄区域;或者,示例地,该特定区域可以为图像预览界面上采集声音关联的发声对象的预设区域,如特定区域可以为该采集声音关联的发声对象的相邻区域,能够便于用户直观查看发声对象的音量变化。
可选地,可以在所述图像预览界面,通过音量显示控件显示所述音量信息。
示例地,可以在所述图像预览界面中,在发声对象的预设区域内显示所述音量显示控件。发声对象的预设区域为跟随发声对象在图像预览界面移动的一个区域,在发声对象附近显示所述音量显示控件,以更为直观的展示发声对象对应的采集声音的声音音量。
例如,以手机作为拍摄设备为例,可以在手机的拍摄应用界面(即图像预览界面)的特定区域设置一个音量显示控件,以较为直观的可视化方式显示当前采集声音的音量,以帮助用户了解音量变化。
音量显示控件还可用于接收用户操作,以输入音量调整指令。
音量显示控件的位置可相对固定,即用户设置位置后,在变更设置前固定在上一次用户设置的位置。也可动态移动,例如在追踪拍摄模式下,随目标拍摄对象移动。
本公开的一示例性实施例还提供了一种拍摄方法,根据对焦距离调整采集声音的声音音量,示例流程如图2所示,可以包括:
步骤201、检测图像采集过程中的对焦距离。
本步骤中,在图像采集过程中,实时检测对焦距离。可选地,可在对焦距离发生变化后检测。
所述对焦距离为预览画面与镜头间的距离。示例地,对焦距离可为预览画面的焦点与镜头间的距离,用户可进行拉远或推近镜头以调节对焦距离的操作(例如在手机的触摸屏幕上滑动以变化焦距)。
步骤201中,可在追踪拍摄模式下检测对焦距离,示例流程如图3所示,可以包括:
步骤301、对所述发声对象进行追踪拍摄,调整预览画面的范围。
追踪拍摄(也称为跟踪拍摄)是用镜头追踪被拍摄对象,使作为被拍摄对象的发声对象在拍摄过程中处于预览画面的同一位置或同一位置范围内。本实施例中,可自动锁定发声对象,对其进行追踪拍摄。
在追踪拍摄过程中,随着发声对象及拍摄设备的移动,会对预览画面的范围进行调整,包括对焦距离、画面范围等参数的调整。
步骤302、根据当前的所述预览画面,确定所述对焦距离。
本步骤中,根据实时变化的预览画面,确定对焦距离。
步骤201中,还可跟用户在图像采集过程中的操作检测对焦距离,示例流程如图4所示,包括:
步骤401、检测焦距调整指令。
本步骤中,检测用户发出的焦距调整指令。示例地,检测用户通过触摸屏幕发出的焦距调整指令。例如,在触摸屏幕的特定区域显示一焦距调整区,在该焦距调整区滑动操作即可调整对焦距离。向两个方向滑动就能够分别拉远或推近对焦距离。根据焦距调整指令指示的拉远或推近对焦距离,预览画面也相应的发生变化。
步骤402、根据所述焦距调整指令,确定所述对焦距离。
在确定对焦距离后,即可进入步骤202,根据对焦距离确定声音音量。
步骤202、根据所述对焦距离,调整目标对象声音的所述声音音量,所述目标对象声音的发声对象位于所述对焦距离对应的图像采集范围内。
本公开的实施例中,目标对象声音可以是图像采集范围内(亦即取景范围内)的目标对象声音。
可预置一音频采集配置文件,所述音频采集配置文件中包括至少一组对焦距离与声音音量的对应关系。
将所述对焦距离与预设的音频采集配置文件进行匹配,即可确定所述对焦距离下,所述目标对象声音的所述声音音量。
一般情况下,对焦距离越远,对应的音量越小;对焦距离越近,对应的音量越大。这样,就可以呈现目标拍摄对象的声音音量随着目标拍摄对象的远近而变化的效果。
本步骤中,还可根据用户指示进行声音音量的确定,示例流程如图5所示,包括:
步骤501、接收音量调整指令,所述音量调整指令指示第二音量调整目标。
本步骤中,接收用户输入的音量调整指令。用户可通过拍摄设备的输入装置接收所述音量调整指令,所述输入装置至少包括以下装置中的任一:触摸屏幕、键盘、按键。
可通过所述图像预览界面的音量显示控件接收所述音量调整指令。
接收用户声音调整输入以获取音量调整指令的方式可以包括:在图像预览界面上的第一触控输入,第一触控输入可以例如滑动输入、长按输入、按压输入(示例地,在按压输入中,用户可以基于按压压力调整音量大小,如:在接收到用户输入按压力变大的情况下,则按照预设比例调大声音音量,在接收到用户输入按压力变小的情况下,则按照预设比例调小声音音量)等触控输入方式中的至少一者;和/或,在音量显示控件上的第二触控输入,第二触控输入例如滑动输入、长按输入、按压输入等触控输入方式中的至少一者。
步骤502、将所述对焦距离与预设的音频采集配置文件进行匹配,确定所述对焦距离对应的采集音量作为第一音量调整目标。
在拍摄设备中可预置一音频采集配置文件,所述音频采集配置文件中包括至少一组对焦距离与音量的对应关系。
本步骤中,根据对焦距离,获取对应的采集音量,作为第一音量调整目标。
步骤503、根据所述第一音量调整目标和所述第二音量调整目标,确定目标声音音量。
本步骤中,可以按照预设的第一音量调整目标和第二音量调整目标关联的预设运算方式,根据所述第一音量调整目标和所述第二音量调整目标,确定目标声音音量。例如,预设运算方式可以为预设权重比例运算方式,预设平均运算方式,预设方差运算方式等其中一种运算方式或者多种运算方式组合。
示例地,可确定所述第一音量调整目标和所述第二音量调整目标的平均值为所述目标声音音量;和/或,
在所述第一调整目标和所述第二音量调整目标不一致的情况下,按照所述第二音量调整目标,确定所述目标声音音量。
需要说明的是,确定最终采集声音的音量的规则,可根据应用场景和设备处理能力灵活设置,并在使用过程中更新、变更,并不限于上述两种举例。
步骤504、将所述声音音量调整为所述目标声音音量。
在根据步骤202确定声音音量后,即可根据声音音量,进行实时的声音采集。这样,就得到了实时调整声音音量后的音频文件,最终形成了声音音量等参数随采集画面调整而变化的文件。
本公开的一示例性实施例还提供了一种拍摄方法,在预览画面的特定区域设置一个音量显示控件,以更为直观的显示采集音频的音量。音量显示控件可以包括控件标识和音量显示标识,如图6所示为一种显示方式的示例,最左侧为音量图标(即控件标识),右侧一排方块(音量显示标识)通过颜色变化指示音量大小。在zoom值增加时,音量显示控件中有颜色的方块数量也会随之增加,音频采集的音量调高,剩余的白色方块表示zoom值/采集声音的音量值还可以增大的空间;在zoom值减少时,音频采集的音量降低,音量显示控件中有颜色的方块数量也会随之减少。通过将对应的zoom值传给底层,底层通过算法对采集声音的声音音量进行增大或减小处理,改变该区域播放的音频大小,从而实现定向强化音频的效果。在一些可能的实施例中,为简化标识,减少标识显示对用户视觉的阻碍影响,音量显示控件可以包括音量显示标识,不包括控件标识。
可以理解地,上述方块形式的音量显示标识作为一种示例显示方式,在一些可能的实施例中,该音量显示标识可以为数字标识(例如表征音量大小数值的数字图形标识或数字图案标识),和/或,该音量显示标识可以为其他能够用于表征大小变化的图形标识或图案标识(例如滑轴图形标识等)。
以手机为拍摄设备为例进行说明。手机相机在录制的过程中,通过手动变焦或者滑杆变焦增加zoom值。将当前情景下zoom的最大值记为Nmax,最小值记为Nmin,当前的zoom值记为Ncur。通过公式1求得zoom变化的范围记为Nrange。将zoom变化范围对应到图6中所示的10个表示音量的方块上,通过公式2求得每个方块所对应的zoom值区间记为Nonepoint。通过公式3求得代表当前zoom值的方块数量记为Nreal。
Nrange=Nmax-Nmin 1
Nonepoint=Nrange/10 2
Nreal=(Ncur-Nmin)/Nonepoint 3
若Nreal不大于1,全部方块的透明度为0,即完全透明或无色。反之,通过公式4求得右侧下一个方块的透明度Nalpha,代表当前zoom值方块的颜色设置为跟随相机主题的颜色,将当前zoom值所代表的方块数量Nreal添加透明度,剩余方块为白色,并添加透明度为255,即不透明,当检测到zoom值发生变化后,对方块的状态不断进行更新,从而通过ui来展现zoom值大小的动态变化;
Nalpha=((Ncur-Nmin)%Nonepoint)/Nonepoint 4
同时,将当前的zoom值传给底层,zoom值增大时,底层的算法会对采集声音的音量进行强化;zoom值减小时,底层的算法会对采集声音的音量进行减弱,从而实现定向强化音频的效果。
本公开的一示例性实施例还提供了一种拍摄方法,应用于拍摄设备(拍摄设备可以为手机、平板电脑等电子设备),通过在预览画面的特定区域设置一个音量显示控件,以更为直观的显示采集音频的音量。在用户对音量显示控件进行调节时,可以改变对焦距离对应的位置采集声音的音量大小。
用户在录制视频的过程中,变焦到合适的zoom值时,不满足于随着zoom值自动调节得到的采集声音的音量。此时,可通过手指在如图6所示的音量显示控件向右滑动来增大当前音频音量,或者向左滑动来减小当前音频音量。
滑动操作造成的采集声音的音量值变化的步进可根据应用需求调整设备。例如在手指向左滑动的过程中,zoom值以可调节声音范围的十分之一的跨度逐渐变小;在手指向右滑动的过程中,zoom值以可调节声音范围的十分之一的跨度逐渐变大。当用户停止操作后,将当前的zoom值传给底层,通过底层算法来实现增大或者减小采集声音的音量。
本公开的一示例性实施例还提供了一种拍摄方法,应用于拍摄设备(拍摄设备可以为手机、平板电脑等电子设备),通过在预览画面的特定区域设置一个音量显示控件,以更为直观的显示采集音频的音量。当用户调节手机相机的zoom值时,将变焦后的zoom值传给底层,再次通过底层算法来实现采集声音的音量的调节。
根据用户调节zoom值的操作,获取调整后的zoom值对应的采集声音的音量作为第一音量调整目标,记为S1。
根据用户在音量显示控件的操作,获取音量调整指令,所述音量调整指令指示了第二音量调整目标S2。
然后,对S1和S2取平均值,以此作为用户变焦操作后所对应的采集声音的声音音量S3。
本公开的一示例性实施例还提供了一种拍摄方法。用户在录制的过程中,可使用追踪拍摄模式,在相机界面中选定想要跟踪的目标拍摄对象。当目标拍摄对象移动时,跟随该目标拍摄对象持续变焦,将当前对焦距离所对应的采集声音的音量大小和可调节范围通过音量显示控件展现在相机界面中。
可选地,音量显示控件的位置是可变的,示例地,音量显示控件可以为随着目标拍摄对象移动。通过音量显示控件显示音量之余,也可在音量显示控件进行滑动操作以输入音量调整指令。
本公开的一示例性实施例还提供了一种拍摄装置,其结构如图7所示例,包括:
音量管理模块701,用于根据图像采集过程中的对焦距离,调整采集声音的声音音量;
音量显示模块702,用于在图像预览界面显示与所述声音音量对应的音量信息。
可选地,所述采集声音包括目标对象声音;所述音量管理模块701的结构如图8所示,包括:
焦距检测子模块801,用于检测图像采集过程中的对焦距离;
音量调整子模块802,用于根据所述对焦距离,调整目标对象声音的所述声音音量,所述目标对象声音的发声对象位于所述对焦距离对应的图像采集范围内。
可选地,所述焦距检测子模块801的结构如图9所示例,可以包括:
自动调整画面子模块901,用于对所述发声对象进行追踪拍摄,调整预览画面的范围;
第一焦距确定子模块902,用于根据当前的所述预览画面,确定所述对焦距离。
可选地,所述焦距检测子模块801的结构如图10所示例,可以包括:
指令检测子模块1001,用于检测焦距调整指令;
第二焦距确定子模块1001,用于根据所述焦距调整指令,确定所述对焦距离。
可选地,所述音量调整子模块802的结构如图11所示例,可以包括:
音量匹配子模块1101,用于将所述对焦距离与预设的音频采集配置文件进行匹配,确定所述对焦距离下,所述目标对象声音的所述声音音量。
可选地,所述音量调整子模块802的结构如图12所示例,可以包括:
第二目标确定子模块1201,用于接收音量调整指令,所述音量调整指令指示第二音量调整目标;
第一目标确定子模块1202,用于第二将所述对焦距离与预设的音频采集配置文件进行匹配,确定所述对焦距离对应的采集音量作为第一音量调整目标;
音量确定子模块1203,用于根据所述第一音量调整目标和所述第二音量调整目标,确定目标声音音量;
调整执行子模块1204,用于将所述声音音量调整为所述目标声音音量。
可选地,所述音量确定子模块1203的结构如图13所示例,可以包括:
平均计算子模块1301,用于确定所述第一音量调整目标和所述第二音量调整目标的平均值为所述目标声音音量;
目标选择子模块1302,用于在所述第一调整目标和所述第二音量调整目标不一致的情况下,按照所述第二音量调整目标,确定所述目标声音音量。
可选地,所述音量显示模块702的结构如图14所示例,可以包括:
控件显示子模块1401,用于在所述图像预览界面,通过音量显示控件显示所述音量信息。
可选地,所述控件显示子模块1401的结构如图15所示例,可以包括:
移动控件显示子模块1501,用于在所述图像预览界面中,在发声对象的预设区域内显示所述音量显示控件。
上述装置可集成于手机、相机等拍摄设备中,由设备实现相应功能。关于上述实施例中的装置,其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。
本公开的一示例性实施例还提供了一种计算机装置,可以包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为:
根据图像采集过程中的对焦距离,调整采集声音的声音音量;
在图像预览界面显示与所述声音音量对应的音量信息。
图16是根据一示例性实施例示出的一种用于拍摄的装置1600的框图。例如,装置1600可以是移动电话,计算机,数字广播终端,消息收发设备,游戏控制台,平板设备,医疗设备,健身设备,个人数字助理等。
参照图16,装置1600可以包括以下一个或多个组件:处理组件1602,存储器1604,电力组件1606,多媒体组件1608,音频组件1610,输入/输出(I/O)的接口1612,传感器组件1614,以及通信组件1616。
处理组件1602通常控制装置1600的整体操作,诸如与显示,电话呼叫,数据通信,相机操作和记录操作相关联的操作。处理组件1602可以包括一个或多个处理器1620来执行指令,以完成上述的方法的全部或部分步骤。此外,处理组件1602可以包括一个或多个模块,便于处理组件1602和其他组件之间的交互。例如,处理组件1602可以包括多媒体模块,以方便多媒体组件1608和处理组件1602之间的交互。
存储器1604被配置为存储各种类型的数据以支持在设备1600的操作。这些数据的示例包括用于在装置1600上操作的任何应用程序或方法的指令,联系人数据,电话簿数据,消息,图片,视频等。存储器1604可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。
电力组件1606为装置1600的各种组件提供电力。电力组件1606可以包括电源管理***,一个或多个电源,及其他与为装置1600生成、管理和分配电力相关联的组件。
多媒体组件1608包括在所述装置1600和用户之间的提供一个输出接口的屏幕。在一些实施例中,屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板,屏幕可以被实现为触摸屏,以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界,而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中,多媒体组件1608包括一个前置摄像头和/或后置摄像头。当设备1600处于操作模式,如拍摄模式或视频模式时,前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜***或具有焦距和光学变焦能力。
音频组件1610被配置为输出和/或输入音频信号。例如,音频组件1610包括一个麦克风(MIC),当装置1600处于操作模式,如呼叫模式、记录模式和语音识别模式时,麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器1604或经由通信组件1616发送。在一些实施例中,音频组件1610还包括一个扬声器,用于输出音频信号。
I/O接口1612为处理组件1602和***接口模块之间提供接口,上述***接口模块可以是键盘,点击轮,按钮等。这些按钮可包括但不限于:主页按钮、音量按钮、启动按钮和锁定按钮。
传感器组件1614包括一个或多个传感器,用于为装置1600提供各个方面的状态评估。例如,传感器组件1614可以检测到设备1600的打开/关闭状态,组件的相对定位,例如所述组件为装置1600的显示器和小键盘,传感器组件1614还可以检测装置1600或装置1600一个组件的位置改变,用户与装置1600接触的存在或不存在,装置1600方位或加速/减速和装置1600的温度变化。传感器组件1614可以包括接近传感器,被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件1614还可以包括光传感器,如CMOS或CCD图像传感器,用于在成像应用中使用。在一些实施例中,该传感器组件1614还可以包括加速度传感器,陀螺仪传感器,磁传感器,压力传感器或温度传感器。
通信组件1616被配置为便于装置1600和其他设备之间有线或无线方式的通信。装置1600可以接入基于通信标准的无线网络,如WiFi,2G或3G,或它们的组合。在一个示例性实施例中,通信组件1616经由广播信道接收来自外部广播管理***的广播信号或广播相关信息。在一个示例性实施例中,所述通信组件1616还包括近场通信(NFC)模块,以促进短程通信。例如,在NFC模块可基于射频识别(RFID)技术,红外数据协会(IrDA)技术,超宽带(UWB)技术,蓝牙(BT)技术和其他技术来实现。
在示例性实施例中,装置1600可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现,用于执行上述方法。
在示例性实施例中,还提供了一种包括指令的非临时性计算机可读存储介质,例如包括指令的存储器1604,上述指令可由装置1600的处理器1620执行以完成上述方法。例如,所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
一种非临时性计算机可读存储介质,当所述存储介质中的指令由移动终端的处理器执行时,使得移动终端能够执行一种拍摄方法,所述方法可以包括:
根据图像采集过程中的对焦距离,调整采集声音的声音音量;
在图像预览界面显示与所述声音音量对应的音量信息。
本公开的实施例提供的拍摄方法及装置,根据图像采集过程中的对焦距离,调整采集声音的声音音量,并在图像预览界面显示与所述声音音量对应的音量信息。实现了图像采集过程中与图像相适应的灵活的声音采集方案,解决了图像采集过程中声音不可控而影响用户体验的问题。
采集得到的视频等图像文件在播放时,声音音量随着对焦距离的推近而增大,随着对焦距离的拉远而减小,使视频的实境感更强,大幅提升了用户的使用体验。
对采集声音的声音音量,可采取自动根据对焦距离调整的方案,也可采取人工调整与自动调整相结合的方案,更好的适应了拍摄需求。可视化的显示和操作区域,使图像采集过程中的声音特征更直观,便于使用者了解拍摄信息,提升拍摄作品质量。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本发明的其它实施方案。本申请旨在涵盖本发明的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本发明的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本发明的真正范围和精神由下面的权利要求指出。
应当理解的是,本发明并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本发明的范围仅由所附的权利要求来限制。

Claims (20)

1.一种拍摄方法,其特征在于,包括:
根据图像采集过程中的对焦距离,调整采集声音的声音音量;
在图像预览界面显示与所述声音音量对应的音量信息。
2.根据权利要求1所述的拍摄方法,其特征在于,所述采集声音包括目标对象声音;所述根据图像采集过程中的对焦距离,调整采集声音的声音音量的步骤,包括:
检测图像采集过程中的对焦距离;
根据所述对焦距离,调整目标对象声音的所述声音音量,所述目标对象声音的发声对象位于所述对焦距离对应的图像采集范围内。
3.根据权利要求2所述的拍摄方法,其特征在于,所述检测图像采集过程中的对焦距离的步骤,包括:
对所述发声对象进行追踪拍摄,调整预览画面的范围;
根据当前的所述预览画面,确定所述对焦距离。
4.根据权利要求2所述的拍摄方法,其特征在于,所述检测图像采集过程中的对焦距离的步骤,包括:
检测焦距调整指令;
根据所述焦距调整指令,确定所述对焦距离。
5.根据权利要求2所述的拍摄方法,其特征在于,所述根据所述对焦距离,调整目标对象声音的所述声音音量的步骤包括:
将所述对焦距离与预设的音频采集配置文件进行匹配,确定所述对焦距离下,所述目标对象声音的所述声音音量。
6.根据权利要求2所述的拍摄方法,其特征在于,所述根据所述对焦距离,调整目标对象声音的所述声音音量的步骤包括:
接收音量调整指令,所述音量调整指令指示第二音量调整目标;
将所述对焦距离与预设的音频采集配置文件进行匹配,确定所述对焦距离对应的采集音量作为第一音量调整目标;
根据所述第一音量调整目标和所述第二音量调整目标,确定目标声音音量;
将所述声音音量调整为所述目标声音音量。
7.根据权利要求6所述的拍摄方法,其特征在于,所述根据所述第一音量调整目标和所述第二音量调整目标,确定目标声音音量的步骤包括:
确定所述第一音量调整目标和所述第二音量调整目标的平均值为所述目标声音音量;和/或,
在所述第一调整目标和所述第二音量调整目标不一致的情况下,按照所述第二音量调整目标,确定所述目标声音音量。
8.根据权利要求1所述的拍摄方法,其特征在于,所述在图像预览界面显示与所述声音音量对应的音量信息的步骤包括:
在所述图像预览界面,通过音量显示控件显示所述音量信息。
9.根据权利要求8所述的拍摄方法,其特征在于,所述在图像预览界面显示与所述声音音量对应的音量信息的步骤,包括:
在所述图像预览界面中,在发声对象的预设区域内显示所述音量显示控件。
10.一种拍摄装置,其特征在于,包括:
音量管理模块,用于根据图像采集过程中的对焦距离,调整采集声音的声音音量;
音量显示模块,用于在图像预览界面显示与所述声音音量对应的音量信息。
11.根据权利要求10所述的拍摄装置,其特征在于,所述采集声音包括目标对象声音;所述音量管理模块包括:
焦距检测子模块,用于检测图像采集过程中的对焦距离;
音量调整子模块,用于根据所述对焦距离,调整目标对象声音的所述声音音量,所述目标对象声音的发声对象位于所述对焦距离对应的图像采集范围内。
12.根据权利要求11所述的拍摄装置,其特征在于,所述焦距检测子模块包括:
自动调整画面子模块,用于对所述发声对象进行追踪拍摄,调整预览画面的范围;
第一焦距确定子模块,用于根据当前的所述预览画面,确定所述对焦距离。
13.根据权利要求11所述的拍摄装置,其特征在于,所述焦距检测子模块包括:
指令检测子模块,用于检测焦距调整指令;
第二焦距确定子模块,用于根据所述焦距调整指令,确定所述对焦距离。
14.根据权利要求11所述的拍摄装置,其特征在于,所述音量调整子模块包括:
音量匹配子模块,用于将所述对焦距离与预设的音频采集配置文件进行匹配,确定所述对焦距离下,所述目标对象声音的所述声音音量。
15.根据权利要求11所述的拍摄装置,其特征在于,所述音量调整子模块包括:
第二目标确定子模块,用于接收音量调整指令,所述音量调整指令指示第二音量调整目标;
第一目标确定子模块,用于第二将所述对焦距离与预设的音频采集配置文件进行匹配,确定所述对焦距离对应的采集音量作为第一音量调整目标;
音量确定子模块,用于根据所述第一音量调整目标和所述第二音量调整目标,确定目标声音音量;
调整执行子模块,用于将所述声音音量调整为所述目标声音音量。
16.根据权利要求15所述的拍摄装置,其特征在于,所述音量确定子模块包括:
平均计算子模块,用于确定所述第一音量调整目标和所述第二音量调整目标的平均值为所述目标声音音量;
目标选择子模块,用于在所述第一调整目标和所述第二音量调整目标不一致的情况下,按照所述第二音量调整目标,确定所述目标声音音量。
17.根据权利要求10所述的拍摄装置,其特征在于,所述音量显示模块包括:
控件显示子模块,用于在所述图像预览界面,通过音量显示控件显示所述音量信息。
18.根据权利要求17所述的拍摄方法,其特征在于,所述控件显示子模块包括:
移动控件显示子模块,用于在所述图像预览界面中,在发声对象的预设区域内显示所述音量显示控件。
19.一种计算机装置,其特征在于,包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为:
根据图像采集过程中的对焦距离,调整采集声音的声音音量;
在图像预览界面显示与所述声音音量对应的音量信息。
20.一种非临时性计算机可读存储介质,当所述存储介质中的指令由移动终端的处理器执行时,使得移动终端能够执行一种拍摄方法,所述方法包括:
根据图像采集过程中的对焦距离,调整采集声音的声音音量;
在图像预览界面显示与所述声音音量对应的音量信息。
CN202110335799.XA 2021-03-29 2021-03-29 拍摄方法及装置 Pending CN115134513A (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN202110335799.XA CN115134513A (zh) 2021-03-29 2021-03-29 拍摄方法及装置
EP21205627.9A EP4068077A1 (en) 2021-03-29 2021-10-29 Shooting method and apparatus
US17/520,446 US11632495B2 (en) 2021-03-29 2021-11-05 Method and apparatus for adjusting sound volume in shooting process

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110335799.XA CN115134513A (zh) 2021-03-29 2021-03-29 拍摄方法及装置

Publications (1)

Publication Number Publication Date
CN115134513A true CN115134513A (zh) 2022-09-30

Family

ID=78414545

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110335799.XA Pending CN115134513A (zh) 2021-03-29 2021-03-29 拍摄方法及装置

Country Status (3)

Country Link
US (1) US11632495B2 (zh)
EP (1) EP4068077A1 (zh)
CN (1) CN115134513A (zh)

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09168139A (ja) * 1995-10-13 1997-06-24 Ricoh Co Ltd 音量制御装置
US20050099511A1 (en) * 2003-11-08 2005-05-12 Cazier Robert P. Volume control linked with zoom control
US20100302401A1 (en) * 2009-05-28 2010-12-02 Sanyo Electric Co., Ltd. Image Audio Processing Apparatus And Image Sensing Apparatus
US20110317023A1 (en) * 2010-06-29 2011-12-29 Sanyo Electric Co., Ltd. Electronic device
US20140063327A1 (en) * 2012-09-05 2014-03-06 Samsung Electronics Co., Ltd. Photographing apparatus and method of photographing image thereof
EP3073747A1 (en) * 2015-03-26 2016-09-28 Thomson Licensing Method and device for adapting an audio level of a video
CN107105183A (zh) * 2017-04-28 2017-08-29 宇龙计算机通信科技(深圳)有限公司 录音音量调节方法及装置
CN108933911A (zh) * 2018-07-27 2018-12-04 深圳市广和通无线股份有限公司 音量调节方法、装置、设备及存储介质

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100628569B1 (ko) * 2002-02-09 2006-09-26 삼성전자주식회사 복수의 음향취득장치가 결합 가능한 캠코더
KR100689384B1 (ko) * 2005-03-21 2007-03-02 삼성전자주식회사 카메라 기능을 가진 이동 통신 단말기 및 그 방법
EP2680615B1 (en) * 2012-06-25 2018-08-08 LG Electronics Inc. Mobile terminal and audio zooming method thereof
US9264824B2 (en) * 2013-07-31 2016-02-16 Starkey Laboratories, Inc. Integration of hearing aids with smart glasses to improve intelligibility in noise
US10592199B2 (en) * 2017-01-24 2020-03-17 International Business Machines Corporation Perspective-based dynamic audio volume adjustment

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09168139A (ja) * 1995-10-13 1997-06-24 Ricoh Co Ltd 音量制御装置
US20050099511A1 (en) * 2003-11-08 2005-05-12 Cazier Robert P. Volume control linked with zoom control
US20100302401A1 (en) * 2009-05-28 2010-12-02 Sanyo Electric Co., Ltd. Image Audio Processing Apparatus And Image Sensing Apparatus
US20110317023A1 (en) * 2010-06-29 2011-12-29 Sanyo Electric Co., Ltd. Electronic device
US20140063327A1 (en) * 2012-09-05 2014-03-06 Samsung Electronics Co., Ltd. Photographing apparatus and method of photographing image thereof
EP3073747A1 (en) * 2015-03-26 2016-09-28 Thomson Licensing Method and device for adapting an audio level of a video
CN107105183A (zh) * 2017-04-28 2017-08-29 宇龙计算机通信科技(深圳)有限公司 录音音量调节方法及装置
CN108933911A (zh) * 2018-07-27 2018-12-04 深圳市广和通无线股份有限公司 音量调节方法、装置、设备及存储介质

Also Published As

Publication number Publication date
EP4068077A1 (en) 2022-10-05
US11632495B2 (en) 2023-04-18
US20220311942A1 (en) 2022-09-29

Similar Documents

Publication Publication Date Title
CN108419016B (zh) 拍摄方法、装置及终端
CN110557547B (zh) 镜头位置调整方法及装置
CN105282441B (zh) 拍照方法及装置
CN108462833B (zh) 拍摄方法、装置及计算机可读存储介质
US11310443B2 (en) Video processing method, apparatus and storage medium
US11770497B2 (en) Method and device for processing video, and storage medium
CN113364965A (zh) 基于多摄像头的拍摄方法、装置及电子设备
KR101701814B1 (ko) 프레이밍 정보를 디스플레이하기 위한 방법 및 장치
CN115134505B (zh) 预览画面生成方法及装置、电子设备、存储介质
CN108629814B (zh) 相机调整方法及装置
CN111461950B (zh) 图像处理方法及装置
CN107241535B (zh) 闪光灯调节装置及终端设备
CN114339022B (zh) 摄像头拍摄参数确定方法、神经网络模型的训练方法
CN115134513A (zh) 拍摄方法及装置
KR20210157289A (ko) 촬영 프리뷰 이미지를 표시하는 방법, 장치 및 매체
CN114979455A (zh) 拍摄方法、装置以及存储介质
CN114390189A (zh) 图像处理方法、装置、存储介质及移动终端
CN112346606A (zh) 一种图片处理方法、装置及存储介质
US11838655B2 (en) Image acquiring method and apparatus, electronic device, and storage medium
CN114268731B (zh) 摄像头切换方法、摄像头切换装置及存储介质
CN114339018B (zh) 镜头切换的方法、装置及存储介质
CN109447929B (zh) 图像合成方法及装置
WO2023231009A1 (zh) 一种对焦方法、装置及存储介质
CN113852752B (zh) 照片拍摄方法、照片拍摄装置及存储介质
CN106713748B (zh) 发送图片的方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination