JP6340829B2 - Vehicle operation proposing device - Google Patents

Vehicle operation proposing device Download PDF

Info

Publication number
JP6340829B2
JP6340829B2 JP2014037049A JP2014037049A JP6340829B2 JP 6340829 B2 JP6340829 B2 JP 6340829B2 JP 2014037049 A JP2014037049 A JP 2014037049A JP 2014037049 A JP2014037049 A JP 2014037049A JP 6340829 B2 JP6340829 B2 JP 6340829B2
Authority
JP
Japan
Prior art keywords
primary
unit
proposal
output
message
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2014037049A
Other languages
Japanese (ja)
Other versions
JP2015160522A (en
Inventor
裕子 中村
裕子 中村
加藤 香平
香平 加藤
松井 一博
一博 松井
鈴木 孝光
孝光 鈴木
健史 山元
健史 山元
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Denso Corp
Original Assignee
Denso Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Denso Corp filed Critical Denso Corp
Priority to JP2014037049A priority Critical patent/JP6340829B2/en
Priority to PCT/JP2015/000494 priority patent/WO2015129164A1/en
Publication of JP2015160522A publication Critical patent/JP2015160522A/en
Application granted granted Critical
Publication of JP6340829B2 publication Critical patent/JP6340829B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60HARRANGEMENTS OF HEATING, COOLING, VENTILATING OR OTHER AIR-TREATING DEVICES SPECIALLY ADAPTED FOR PASSENGER OR GOODS SPACES OF VEHICLES
    • B60H1/00Heating, cooling or ventilating [HVAC] devices
    • B60H1/00642Control systems or circuits; Control members or indication devices for heating, cooling or ventilating devices
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • B60R16/037Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for occupant comfort, e.g. for automatic adjustment of appliances according to personal settings, e.g. seats, mirrors, steering wheel
    • EFIXED CONSTRUCTIONS
    • E05LOCKS; KEYS; WINDOW OR DOOR FITTINGS; SAFES
    • E05FDEVICES FOR MOVING WINGS INTO OPEN OR CLOSED POSITION; CHECKS FOR WINGS; WING FITTINGS NOT OTHERWISE PROVIDED FOR, CONCERNED WITH THE FUNCTIONING OF THE WING
    • E05F15/00Power-operated mechanisms for wings
    • E05F15/60Power-operated mechanisms for wings using electrical actuators
    • E05F15/603Power-operated mechanisms for wings using electrical actuators using rotary electromotors
    • E05F15/665Power-operated mechanisms for wings using electrical actuators using rotary electromotors for vertically-sliding wings
    • E05F15/689Power-operated mechanisms for wings using electrical actuators using rotary electromotors for vertically-sliding wings specially adapted for vehicle windows
    • E05F15/695Control circuits therefor
    • EFIXED CONSTRUCTIONS
    • E05LOCKS; KEYS; WINDOW OR DOOR FITTINGS; SAFES
    • E05FDEVICES FOR MOVING WINGS INTO OPEN OR CLOSED POSITION; CHECKS FOR WINGS; WING FITTINGS NOT OTHERWISE PROVIDED FOR, CONCERNED WITH THE FUNCTIONING OF THE WING
    • E05F15/00Power-operated mechanisms for wings
    • E05F15/70Power-operated mechanisms for wings with automatic actuation
    • E05F15/71Power-operated mechanisms for wings with automatic actuation responsive to temperature changes, rain, wind or noise

Landscapes

  • Physics & Mathematics (AREA)
  • Thermal Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Navigation (AREA)

Description

本発明は、車両で用いられ、ドライバに機器の操作を提案する車両用操作提案装置に関する。   The present invention relates to a vehicle operation proposal device that is used in a vehicle and proposes an operation of a device to a driver.

雨等の車室内や乗員に対して不都合を生じさせる天気を予測し、予め窓などを自動的に閉じる装置が知られている(たとえば特許文献1)。   There is known a device that predicts weather that causes inconvenience to the passenger compartment and passengers such as rain and automatically closes windows and the like in advance (for example, Patent Document 1).

特開2007−237789号公報JP 2007-237789 A

窓を閉めることが好きではないドライバがいるなど、個々のドライバにより好みが異なる。そのため、窓を閉めるなどの制御を自動的に行なってしまうと、ドライバに不快感を与えてしまう恐れがある。   There are some drivers who do not like closing windows, and their preferences vary from driver to driver. Therefore, if the control such as closing the window is automatically performed, the driver may be uncomfortable.

そこで、窓を閉めるなどの制御を自動的に行うのではなく、窓を閉めるなどの操作を提案するまでに留めることが考えられる。この提案に従って窓を閉めたことにより、車室内が暑くなったり、窓が曇ったりすることもある。   Therefore, it is conceivable that the control such as closing the window is not automatically performed but the operation such as closing the window is proposed. Closing the windows according to this proposal may cause the cabin to become hot or the windows to be fogged.

車室内が暑くなったり、窓が曇ったりすることを避けるため、エアコンを起動させることが考えられる。しかし、エアコンを起動させることがあまり好きではないドライバは、車室内が暑くなると、エアコンを起動させるのではなく、再び窓を開けることも考えられる。この場合、窓を閉めなければよかったと考えてしまう恐れがある。   It is conceivable to activate the air conditioner in order to prevent the passenger compartment from becoming hot and the windows from becoming cloudy. However, a driver who does not like to activate the air conditioner may open the window again instead of starting the air conditioner when the passenger compartment gets hot. In this case, there is a risk of thinking that it should have been closed.

また、窓が曇ってしまった場合には、エアコンを起動しても即座には窓の曇りは解消せずに慌ててしまうことも想定される。この場合にも、窓を閉めない方がよかったと考えてしまう可能性がある。また、早めにエアコンを起動しておけばよかったと考える可能性もある。   In addition, when the window is fogged, it may be assumed that even if the air conditioner is activated, the window is immediately clouded without being removed. Even in this case, there is a possibility that it would be better not to close the window. There is also a possibility that the air conditioner should have been activated early.

車両の窓の操作とエアコンの起動は一例であり、ある一次操作をしたときには、その一次操作により行う必要が生じる二次操作も考慮して、一次操作を行うかを判断できることが好ましい。   The operation of the window of the vehicle and the activation of the air conditioner are examples, and it is preferable that when a certain primary operation is performed, it is possible to determine whether the primary operation is performed in consideration of a secondary operation that needs to be performed by the primary operation.

しかし、ドライバが車を運転しているときは、運転操作を行うことに高い意識があるため、ある一次操作をしたときに、その一次操作を行ったことにより、どのような二次操作を行う必要が生じるかをドライバ自身が想定することは困難な場合も多い。   However, when a driver is driving a car, he / she is highly conscious of performing the driving operation. Therefore, when a certain primary operation is performed, what secondary operation is performed by performing the primary operation. In many cases, it is difficult for the driver itself to assume whether the necessity arises.

本発明は、この事情に基づいて成されたものであり、その目的とするところは、一次操作を行うことにより、行う必要がある二次操作も考慮して、ドライバが、一次操作、二次操作を実行するかどうかを判断することができる車両用操作提案装置を提供する。   The present invention has been made based on this circumstance, and the purpose of the present invention is to consider the secondary operation that needs to be performed by performing the primary operation, so that the driver can perform the primary operation, the secondary operation, and the like. A vehicle operation proposal device capable of determining whether or not to execute an operation is provided.

上記目的は独立請求項に記載の特徴の組み合わせにより達成され、また、下位請求項は、発明の更なる有利な具体例を規定する。また、特許請求の範囲に記載した括弧内の符号は、一つの態様として後述する実施形態に記載の具体的手段との対応関係を示すものであって、本発明の技術的範囲を限定するものではない。   The above object is achieved by a combination of the features described in the independent claims, and the subclaims define further advantageous embodiments of the invention. Further, the reference numerals in parentheses described in the claims indicate the correspondence with the specific means described in the embodiments described later as one aspect, and limit the technical scope of the present invention. is not.

上記目的を達成するための本発明は、車両で用いられ、予め設定された種類の操作をドライバに提案すべきかどうかを判断するために必要な状態項目の今後の状態を予測する一次予測部(S2、S4)と、一次予測部が予測した状態項目の今後の状態に基づいて、ドライバに提案すべき一次操作を決定する一次提案決定部(S6)と、一次提案決定部が決定した一次操作を行った後の状態項目の状態である一次操作後状態を予測する二次予測部(S8、S10)と、二次予測部が予測した一次操作後状態に基づいて、ドライバに提案すべき二次操作を決定する二次提案決定部(S12)と、一次提案決定部が決定した一次操作とともに、二次提案決定部が決定した二次操作を所定の出力部から出力する提案出力処理部(S14、S15、S16、S18)と、を備えることを特徴とする車両用操作提案装置である。   The present invention for achieving the above object is a primary prediction unit that is used in a vehicle and predicts a future state of a state item necessary for determining whether or not a preset type of operation should be proposed to a driver ( S1 and S4), a primary proposal determination unit (S6) for determining a primary operation to be proposed to the driver based on the future state of the state item predicted by the primary prediction unit, and a primary operation determined by the primary proposal determination unit The secondary prediction unit (S8, S10) that predicts the state after the primary operation, which is the state of the state item after performing the operation, and the second post-primary operation state predicted by the secondary prediction unit are proposed to the driver. A secondary proposal determination unit (S12) that determines the next operation, and a proposal output processing unit that outputs the secondary operation determined by the secondary proposal determination unit from a predetermined output unit together with the primary operation determined by the primary proposal determination unit ( S14, S15, S1 A vehicle operating proposed device, characterized in that it comprises a S18), the.

本発明によれば、一次操作とともに、二次操作が出力部から出力されるので、ドライバは、二次操作を行う必要が生じる可能性も考慮して一次操作、二次操作を行うかどうかを判断することができる。   According to the present invention, since the secondary operation is output from the output unit together with the primary operation, the driver determines whether or not to perform the primary operation and the secondary operation in consideration of the possibility of performing the secondary operation. Judgment can be made.

本発明の第1実施形態となる車両用操作提案装置1の構成を示すブロック図である。It is a block diagram which shows the structure of the operation proposal apparatus 1 for vehicles used as 1st Embodiment of this invention. 図1のECU70が実行する処理を示すフローチャートである。It is a flowchart which shows the process which ECU70 of FIG. 1 performs. 図2のステップS18で表示部40に表示する第1の表示例である。It is the 1st example of a display displayed on the display part 40 by step S18 of FIG. 図2のステップS18で表示部40に表示する第2の表示例である。It is the 2nd example of a display displayed on the display part 40 by FIG.2 S18. 図2のステップS18で表示部40に表示する第3の表示例である。It is a 3rd example of a display displayed on the display part 40 by FIG.2 S18. 第2実施形態で、図7のフローチャートに続いて、ECU70が実行する処理を示すフローチャートである。FIG. 8 is a flowchart showing processing executed by the ECU 70 following the flowchart of FIG. 7 in the second embodiment. 図2のフローチャートに代えて、第2実施形態のECU70が実行する処理を示すフローチャートである。It is a flowchart which replaces with the flowchart of FIG. 2, and shows the process which ECU70 of 2nd Embodiment performs. 一次操作、二次操作の別例を示す図である。It is a figure which shows another example of primary operation and secondary operation.

<第1実施形態>
以下、本発明の実施形態を図面に基づいて説明する。図1に示すように、第1実施形態の車両用操作提案装置1は、近距離通信部10、広域通信部20、位置検出部30、表示部40、スピーカ50、タッチパネル60、ECU70を備えている。この車両用操作提案装置1は車両に搭載される。以下、この車両用操作提案装置1が搭載されている車両を自車両という。
<First Embodiment>
Hereinafter, embodiments of the present invention will be described with reference to the drawings. As shown in FIG. 1, the vehicle operation proposing device 1 of the first embodiment includes a short-range communication unit 10, a wide-area communication unit 20, a position detection unit 30, a display unit 40, a speaker 50, a touch panel 60, and an ECU 70. Yes. This vehicle operation proposing device 1 is mounted on a vehicle. Hereinafter, a vehicle in which the vehicle operation proposal device 1 is mounted is referred to as a host vehicle.

近距離通信部10は、たとえば、5.8GHz帯、700MHz帯などの所定の周波数帯の電波を用いて、他車両が備えている近距離通信部との間で車車間通信を行い、また、路側に設定されている路側機が備える近距離通信部との間で路車間通信を行う。これら車車間通信、路車間通信により、近距離通信部10は自車両の周辺の交通情報等の種々の情報を受信する。   The short-range communication unit 10 performs vehicle-to-vehicle communication with a short-range communication unit provided in another vehicle using radio waves in a predetermined frequency band such as 5.8 GHz band and 700 MHz band, Road-to-vehicle communication is performed with a short-range communication unit included in a roadside device set on the roadside. Through these vehicle-to-vehicle communication and road-to-vehicle communication, the short-range communication unit 10 receives various information such as traffic information around the host vehicle.

広域通信部20は、公衆通信回線網を利用して、自車両の外部に設置されているサーバが備える通信部などと通信を行う。この広域通信部20は、サーバ等から、自車両周辺の交通情報、天気情報などを受信する。なお、近距離通信部10が路側機を介してサーバと通信を行ってもよい。   The wide area communication unit 20 communicates with a communication unit provided in a server installed outside the host vehicle using a public communication line network. The wide area communication unit 20 receives traffic information, weather information, and the like around the host vehicle from a server or the like. Note that the short-range communication unit 10 may communicate with the server via a roadside device.

これら近距離通信部10、広域通信部20を介して受信する情報は、後述する一次予測、二次予測を行うために必要な状態項目の状態である。一次予測、二次予測を行うために必要な状態項目を例示すると、天気、交通情報などがある。その状態項目の状態は、たとえば、状態項目が天気であれば、晴れ、雨等になる。状態項目が交通情報であれば、状態項目の状態は渋滞およびその渋滞が生じえいる地域などである。   The information received via the short-range communication unit 10 and the wide-area communication unit 20 is a state item necessary for performing primary prediction and secondary prediction described later. Examples of state items necessary for performing primary prediction and secondary prediction include weather and traffic information. For example, if the state item is weather, the state of the state item is clear or rainy. If the state item is traffic information, the state item state includes a traffic jam and an area where the traffic jam may occur.

どのような具体的状態項目が一次予測、二次予測を行うために必要であるかは予め設定されている。これらの予測に必要な状態項目が得られれば、近距離通信部10、広域通信部20のいずれか一方のみを備えていてもよい。   What specific state items are necessary for performing primary prediction and secondary prediction is set in advance. If the state items necessary for these predictions are obtained, only one of the short-range communication unit 10 and the wide-area communication unit 20 may be provided.

位置検出部30は、自車両の現在位置を逐次検出する。たとえば、位置検出部30は、衛星からの電波に基づいて自装置の位置を検出するGNSS(Global Navigation Satellite System)で用いられるGNSS受信機を備えている。そして、このGNSS受信機が受信した信号に基づいて現在位置を検出する。   The position detection unit 30 sequentially detects the current position of the host vehicle. For example, the position detection unit 30 includes a GNSS receiver used in a GNSS (Global Navigation Satellite System) that detects the position of its own device based on radio waves from a satellite. And the present position is detected based on the signal which this GNSS receiver received.

表示部40は、出力部に相当するものであり、表示画面を備えている。後に詳しく説明するが、この表示画面に、図3に例示しているような、一次操作メッセージ41、二次操作メッセージ42、操作指示ボタン46、複合操作指示ボタン47、キャンセルボタン48などが表示される。   The display unit 40 corresponds to an output unit and includes a display screen. As will be described in detail later, a primary operation message 41, a secondary operation message 42, an operation instruction button 46, a composite operation instruction button 47, a cancel button 48, etc. are displayed on the display screen as illustrated in FIG. The

スピーカ50は、表示部40に、上述の一次操作、二次操作などが表示されたことをドライバに知らせるための報知音が出力される。また、上記表示部40に代えて、あるいは、表示部40に加えて、このスピーカ50を出力部として用い、一次操作、二次操作を音により出力してもよい。   The speaker 50 outputs a notification sound for informing the driver that the above-described primary operation, secondary operation, etc. are displayed on the display unit 40. Further, instead of the display unit 40 or in addition to the display unit 40, the speaker 50 may be used as an output unit, and primary operation and secondary operation may be output by sound.

タッチパネル60は、入力部として備えているものであり、表示部40の表示画面の上に配置される。表示画面に一次操作指示ボタン46、複合操作指示ボタン47、キャンセルボタン48が表示されている状態で、タッチパネル60におけるそれらのボタンの上部部分に入力操作を行うと、ECU70は、入力操作がされた部分に対応するボタンが操作されたと判断する。   The touch panel 60 is provided as an input unit, and is disposed on the display screen of the display unit 40. When the primary operation instruction button 46, the composite operation instruction button 47, and the cancel button 48 are displayed on the display screen, when an input operation is performed on the upper part of those buttons on the touch panel 60, the ECU 70 performs the input operation. It is determined that the button corresponding to the part has been operated.

ECU70は、CPU、ROM、RAM等を備えたコンピュータであり、CPUが、RAMの一時記憶機能を利用しつつROMに記憶されているプログラムを実行することで、ECU70は、図2に示す処理を実行する。なお、ECU70が実行する機能の一部または全部を、一つあるいは複数のIC等によりハードウェア的に構成してもよい。   The ECU 70 is a computer including a CPU, a ROM, a RAM, and the like, and the ECU 70 executes the program stored in the ROM while using the temporary storage function of the RAM, so that the ECU 70 performs the processing shown in FIG. Run. Note that some or all of the functions executed by the ECU 70 may be configured in hardware by one or a plurality of ICs.

このECU70は、車内LAN110を介して、ボディECU120、エアコンECU140など、自車両に備えられている他のECUとの間で通信が可能になっている。また、この車内LAN110を介して、車速センサが検出した車速信号など種々のセンサ信号も取得できる。   The ECU 70 can communicate with other ECUs provided in the host vehicle such as the body ECU 120 and the air conditioner ECU 140 via the in-vehicle LAN 110. Various sensor signals such as a vehicle speed signal detected by the vehicle speed sensor can also be acquired via the in-vehicle LAN 110.

ボディECU120は、ウィンドウ駆動部130と接続されており、このウィンドウ駆動部130の制御を行う。また、ボディECU120は、ウィンドウ駆動部130の駆動量から、車両窓の上下方向の位置を判断することもできる。なお、この上下方向の位置を検出する窓位置センサが設けられている場合には、その窓位置センサの検出値から、車両窓の上下方向の位置を判断してもよい。ウィンドウ駆動部130は、自車両の窓を上下させるアクチュエータである。なお、ボディECU120は、ドアロック機構など図示していない他の装置の制御も行う。   The body ECU 120 is connected to the window driving unit 130 and controls the window driving unit 130. The body ECU 120 can also determine the vertical position of the vehicle window from the driving amount of the window driving unit 130. In addition, when the window position sensor which detects this position of an up-down direction is provided, you may judge the position of the up-down direction of a vehicle window from the detection value of the window position sensor. The window drive unit 130 is an actuator that moves the window of the host vehicle up and down. The body ECU 120 also controls other devices not shown such as a door lock mechanism.

エアコンECU140は、エアコン駆動部150と接続されている。このエアコン駆動部150は、コンプレッサーやインバータ等、車室内の温度を調整するための装置である。   The air conditioner ECU 140 is connected to the air conditioner driving unit 150. The air conditioner driving unit 150 is a device for adjusting the temperature in the passenger compartment, such as a compressor or an inverter.

次に図2に示す処理を説明する。図2に示す処理は、車両の電源がONになっている状態で、予め設定されている一定周期ごとに実行する。   Next, the process shown in FIG. 2 will be described. The process shown in FIG. 2 is executed at predetermined intervals in a state where the vehicle is powered on.

ステップS2、ステップS4は一次予測部に相当する処理である。ステップS2では、予め設定された複数の操作をドライバに提案すべきかどうかを、操作ごとに判断するために必要な状態項目の現在または将来の状態を取得する。なお、ドライバに提案すべきかどうかを判断する操作を、以下では提案候補操作という。   Steps S2 and S4 are processes corresponding to the primary prediction unit. In step S2, the current or future state of a state item necessary for determining for each operation whether or not a plurality of preset operations should be proposed to the driver is acquired. The operation for determining whether or not to propose to the driver is hereinafter referred to as a proposal candidate operation.

この提案候補操作を提案すべきかどうかを判断するために必要な状態項目には、車両外部の状態に関する状態項目である外部状態項目と、車両内の状態に関する状態項目である車両内状態項目がある。   State items necessary for determining whether or not to propose this proposal candidate operation include an external state item that is a state item related to a state outside the vehicle and an in-vehicle state item that is a state item related to the state inside the vehicle. .

外部状態項目には、たとえば、天気、外気温、外気の湿度、渋滞、交通規制などがある。これら外部状態項目については、取得可能なものについては、現在および将来の状態を取得する。これら外部状態項目の状態は、近距離通信部10、広域通信部20を用いて外部と通信することで取得する。また、外部状態項目の状態は地域により異なる。状態を取得する地域は位置検出部30が検出した現在位置に基づいて決定する。たとえば、現在位置を中心とする半径所定距離の円内について、外部状態項目の状態を取得する。状態を取得する地域の他の例としては、現在位置を中心とする半径所定距離の円のうち、進行方向前方の半円内がある。また、この半径を車速により変化させてもよい。   The external state items include, for example, weather, outside temperature, outside air humidity, traffic jam, traffic regulation, and the like. For these external status items, the current and future status are acquired for those that can be acquired. The state of these external state items is acquired by communicating with the outside using the short-range communication unit 10 and the wide-area communication unit 20. The state of the external state item varies depending on the region. The area from which the state is acquired is determined based on the current position detected by the position detection unit 30. For example, the state of the external state item is acquired within a circle having a predetermined radius from the current position. As another example of the area from which the state is acquired, there is a semicircle within a forward circle in the traveling direction among circles having a predetermined radius around the current position. Further, this radius may be changed depending on the vehicle speed.

車両内状態項目の状態は、車内LAN110を介して取得する。車両内状態項目には、たとえば、窓の開閉状態、エアコンのON/OFF状態、その他各種スイッチのON/OFF状態などがある。これら車両内状態項目については、現在の状態を取得する。   The state of the in-vehicle state item is acquired via the in-vehicle LAN 110. The in-vehicle state items include, for example, an open / close state of a window, an ON / OFF state of an air conditioner, and ON / OFF states of other various switches. For these in-vehicle state items, the current state is acquired.

ステップS4では、一次予測を行う。一次予測は、ステップS2で取得した状態項目の現在の状態と、自車両の現在位置、進行方向、車速に基づいて、提案候補操作を提案すべきかどうかを判断するために必要な状態項目の今後の状態を予測する。   In step S4, primary prediction is performed. The primary prediction is based on the current state of the state item acquired in step S2, the current position of the host vehicle, the traveling direction, and the vehicle speed. Predict the state of

たとえば、提案候補操作が窓を閉める操作であれば、一次予測において今後の状態を予測する状態項目は天気である。どのぐらいの期間を今後とするかは種々に設定可能であるが、たとえば1時間とする。そして、自車両の現在位置、進行方向、走行予定の各道路を走行する際の平均的な速度から、1時間内に到達する範囲を決定する。この決定した範囲の1時間以内の天気が、窓を閉める操作という提案候補操作に対してこの一次予測において予測する今後の状態である。   For example, if the proposal candidate operation is an operation for closing a window, the state item for predicting a future state in the primary prediction is weather. It is possible to set various periods for the future, for example, 1 hour. Then, a range to be reached within one hour is determined from the current position of the host vehicle, the traveling direction, and the average speed when traveling on each planned road. The weather within one hour in the determined range is a future state predicted in this primary prediction for the proposed candidate operation of closing the window.

続くステップS6は一次提案決定部に相当しており、一次提案決定処理を行う。この一次提案決定処理は、ステップS4で予測した状態項目の今後の状態に基づいて、ドライバに提案すべき1つまたは複数の一次操作を、提案候補操作の中から決定する処理である。たとえば、進行方向前方で雨が降っており、自車両の窓が開いている場合には、窓を閉めるという一次操作を決定する。なお、ステップS4で予測した状態項目の今後の状態によっては、提案すべき一次操作がないと決定することもある。   The subsequent step S6 corresponds to a primary proposal determination unit, and performs a primary proposal determination process. This primary proposal determination process is a process of determining one or more primary operations to be proposed to the driver from the proposal candidate operations based on the future state of the state item predicted in step S4. For example, when it is raining in front of the traveling direction and the window of the host vehicle is open, the primary operation of closing the window is determined. Depending on the future state of the state item predicted in step S4, it may be determined that there is no primary operation to be proposed.

続くステップS8、S10は二次予測部に相当している。ステップS8では、ドライバに提案すべき一次操作を決定したか、すなわち、ステップS6で少なくとも一つの一次操作を決定したか否かを判断する。この判断がNOであれば、ステップS10、S12を実行せずにステップS14へ進む。一方、ステップS8の判断がYESであればステップS10に進む。   Subsequent steps S8 and S10 correspond to a secondary prediction unit. In step S8, it is determined whether a primary operation to be proposed to the driver has been determined, that is, whether at least one primary operation has been determined in step S6. If this judgment is NO, it will progress to Step S14, without performing Steps S10 and S12. On the other hand, if determination of step S8 is YES, it will progress to step S10.

ステップS10では、二次予測を行う。この二次予測では、ステップS6の一次提案決定処理で決定した一次操作を行ったとして、その一次操作を行った後の状態項目の状態である一次操作後状態を予測する。   In step S10, secondary prediction is performed. In this secondary prediction, assuming that the primary operation determined in the primary proposal determination process in step S6 is performed, the state after the primary operation that is the state of the state item after the primary operation is performed is predicted.

たとえば、一次操作として窓を閉めるという操作を決定した場合には、窓が閉められたと仮定して、窓が閉められた後の状態項目の状態を予測する。この予測した状態が一次操作後状態である。一次操作後状態として予測する状態項目としては、たとえば、車室内の気温、外気の湿度、車室内の湿度、車両窓の内表面の温度などがある。   For example, when the operation of closing the window is determined as the primary operation, the state of the state item after the window is closed is predicted on the assumption that the window is closed. This predicted state is the state after the primary operation. The state items predicted as the state after the primary operation include, for example, the temperature in the vehicle interior, the humidity of the outside air, the humidity in the vehicle interior, and the temperature of the inner surface of the vehicle window.

車室内の気温を予測するためには、外気温と天気を用いる。また天気に代えて日射量を用いてもよい。外気の湿度は、外部との通信により、車両外で予測された予測値を取得する。車室内の湿度は、外気の湿度と、窓の開閉状態、内外気切り替えモードが外気導入モードとなっているか内気循環モードとなっているか、から予測する。車両窓の内表面の温度は、外気の温度に近くなるので、外気温から予測する。外気温は、外部との通信により、車両外で予測された予測値を取得する。   In order to predict the temperature in the passenger compartment, the outside temperature and the weather are used. In addition, the amount of solar radiation may be used instead of the weather. For the humidity of the outside air, a predicted value predicted outside the vehicle is acquired by communication with the outside. The humidity in the passenger compartment is predicted from the humidity of the outside air, whether the window is opened or closed, and whether the inside / outside air switching mode is the outside air introduction mode or the inside air circulation mode. Since the temperature of the inner surface of the vehicle window is close to the temperature of the outside air, it is predicted from the outside air temperature. As the outside air temperature, a predicted value predicted outside the vehicle is acquired by communication with the outside.

一次操作後状態を予測する期間は種々に設定可能である。たとえば、一次予測と同じ期間とする。   Various periods can be set for predicting the state after the primary operation. For example, the period is the same as the primary prediction.

ステップS12は二次提案決定部に相当しており、二次提案決定処理を行う。この二次提案決定処理では、ステップS10で決定した一次操作後状態に基づいて、ドライバに提案すべき1つまたは複数の二次操作を、提案候補操作の中から決定する。たとえば、一次操作後状態で決定した車室内の気温が、予め設定されているエアコン推奨温度範囲に入る場合、エアコンONを二次操作として決定する。また、一次操作後状態で決定した車室内の湿度と、車両窓の内表面の温度から、車両窓の内表面に結露が生じる、すなわち、車両窓の内表面が曇ると判断できる場合にも、エアコンONを二次操作として決定する。なお、ステップS10で予測した一次操作後状態によっては、提案すべき二次操作がないと決定することもある。   Step S12 corresponds to a secondary proposal determination unit, and performs a secondary proposal determination process. In this secondary proposal determination process, one or more secondary operations to be proposed to the driver are determined from the proposed candidate operations based on the post-primary operation state determined in step S10. For example, when the air temperature in the passenger compartment determined in the state after the primary operation falls within a preset recommended air conditioner temperature range, the air conditioner ON is determined as the secondary operation. In addition, from the humidity in the vehicle interior determined in the state after the primary operation and the temperature of the inner surface of the vehicle window, dew condensation occurs on the inner surface of the vehicle window, that is, it can be determined that the inner surface of the vehicle window is cloudy. Air conditioner ON is determined as the secondary operation. Depending on the state after the primary operation predicted in step S10, it may be determined that there is no secondary operation to be proposed.

続くステップS14〜S18は提案出力処理部に相当する。ステップS14では、提案操作があるかどうかを判断する。提案操作とは、一次操作または、一次操作および二次操作のことである。提案操作がなければ、S14の判断がNOとなる。この場合には、図2の処理を終了する。提案操作があれば、S14の判断がYESとなる。この場合にはステップS16へ進む。   Subsequent steps S14 to S18 correspond to a proposal output processing unit. In step S14, it is determined whether there is a proposal operation. The suggested operation is a primary operation or a primary operation and a secondary operation. If there is no suggestion operation, the determination in S14 is NO. In this case, the process in FIG. If there is a suggestion operation, the determination in S14 is YES. In this case, the process proceeds to step S16.

ステップS16では、一次操作、二次操作を行うかどうかについてドライバの指示を受けるために、表示部40に表示する操作指示ボタンを決定する。この操作指示ボタンには、一次操作のみの実行をドライバが指示するための一次操作指示ボタン46と、一次操作と二次操作の実行を同時にドライバが指示するための複合操作指示ボタン47と、いずれの操作も不要であることをドライバが指示するためのキャンセルボタン48がある。   In step S16, an operation instruction button to be displayed on the display unit 40 is determined in order to receive an instruction from the driver regarding whether or not to perform the primary operation and the secondary operation. The operation instruction buttons include a primary operation instruction button 46 for the driver to instruct execution of only the primary operation, and a composite operation instruction button 47 for the driver to instruct execution of the primary operation and the secondary operation at the same time. There is a cancel button 48 for the driver to instruct that no operation is required.

ある提案候補操作を一次操作として決定したが、二次操作はなしと決定した場合、このステップS16では、表示部40に表示する操作指示ボタンを、一次操作指示ボタン46とキャンセルボタン48の2つとする。また、ある提案候補操作を一次操作として決定し、二次操作にもある提案候補操作を決定した場合には、表示部40に表示する操作指示ボタンを、一次操作指示ボタン46、キャンセルボタン48、複合操作指示ボタン47の3つとする。一次操作も二次操作もなしと決定した場合には、表示部40に表示する操作指示ボタンはなしとする。   If a proposal candidate operation is determined as a primary operation, but it is determined that there is no secondary operation, in this step S16, two operation instruction buttons to be displayed on the display unit 40 are a primary operation instruction button 46 and a cancel button 48. . When a proposal candidate operation is determined as a primary operation and a proposal candidate operation that is also a secondary operation is determined, the operation instruction buttons displayed on the display unit 40 are the primary operation instruction button 46, the cancel button 48, There are three composite operation instruction buttons 47. When it is determined that neither primary operation nor secondary operation is performed, there is no operation instruction button displayed on the display unit 40.

ステップS18では、提案操作を示すメッセージと、ステップS16で決定した操作指示ボタンを表示部40に表示する。なお、メッセージは、文字、文字以外の記号、記号以外の図形の少なくとも1つを用いて構成される。   In step S18, a message indicating the suggested operation and the operation instruction button determined in step S16 are displayed on the display unit 40. The message is configured using at least one of a character, a symbol other than a character, and a graphic other than a symbol.

図3の表示例は、一次操作として窓を閉めるという操作を決定し、二次操作としてエアコンONという操作を決定した場合を例とした表示例である。この図3の表示例には、一次操作を示す一次操作メッセージ41である「窓CLOSE」、二次操作を示す二次操作メッセージ42である「+エアコンON」が含まれている。また、それらのメッセージ41、42に加えて、各メッセージの上に、一次操作、二次操作を提案している理由を示す一次操作理由メッセージ43、二次操作理由メッセージ44も表されている。二次操作理由メッセージ44は、一次操作後状態を示していることにもなる。   The display example of FIG. 3 is a display example in which the operation of closing the window is determined as the primary operation and the operation of turning on the air conditioner is determined as the secondary operation. The display example of FIG. 3 includes “window CLOSE” which is a primary operation message 41 indicating a primary operation and “+ air conditioner ON” which is a secondary operation message 42 indicating a secondary operation. In addition to these messages 41 and 42, a primary operation reason message 43 and a secondary operation reason message 44 indicating the reason for proposing the primary operation and the secondary operation are also displayed above each message. The secondary operation reason message 44 also indicates a state after the primary operation.

これらのメッセージ41〜44の横には、提案であることを表すための提案図形45が表されている。この提案図形45は、図3の例では点灯している状態の電球である。提案図形45として、他の図形を用いてもよい。   Next to these messages 41 to 44, a proposal graphic 45 for indicating a proposal is displayed. The proposed figure 45 is a light bulb that is lit in the example of FIG. Other figures may be used as the suggested figure 45.

また、メッセージ41〜44の下方には、一次操作指示ボタン46、複合操作指示ボタン47、キャンセルボタン48が表されている。図3に例示した一次操作指示ボタン46は、横長の楕円形状であり、楕円内に一次操作の内容が文字で表されている。複合操作指示ボタン47も、一次操作指示ボタン46と同様、横長の楕円形である。ただし、大きさは複合操作指示ボタン47のほうが大きい。複合操作指示ボタン47の大きさおよび位置は、一次操作指示ボタン46を完全に包含する大きさ、位置になっている。そして、複合操作指示ボタン47の一次操作指示ボタン46が重畳していない部分には、一次操作と二次操作の内容をそれぞれ示す文字が表示されている。このように、複合操作指示ボタン47にこの文字が表示されていること、および、複合操作指示ボタン47が一次操作指示ボタン46を包含していることで、複合操作指示ボタン47が、一次操作と二次操作を同時に指示することができるボタンであることが分かりやすくなっている。   A primary operation instruction button 46, a composite operation instruction button 47, and a cancel button 48 are displayed below the messages 41 to 44. The primary operation instruction button 46 illustrated in FIG. 3 has a horizontally long elliptical shape, and the contents of the primary operation are represented by characters in the ellipse. Similarly to the primary operation instruction button 46, the composite operation instruction button 47 is also a horizontally long ellipse. However, the size of the composite operation instruction button 47 is larger. The size and position of the composite operation instruction button 47 is the size and position that completely includes the primary operation instruction button 46. Then, in the portion where the primary operation instruction button 46 is not superimposed, characters indicating the contents of the primary operation and the secondary operation are displayed. As described above, since this character is displayed on the composite operation instruction button 47 and the composite operation instruction button 47 includes the primary operation instruction button 46, the composite operation instruction button 47 is changed to the primary operation. It is easy to understand that the buttons can instruct secondary operations at the same time.

図4は、図3とは別の表示例であり、一次操作は図3と同じであるが、二次操作はなしと決定した場合の表示例である。この図4の例では、一次操作メッセージ41、操作理由メッセージ43、提案図形45、一次操作指示ボタン46、キャンセルボタン48が表示されている。しかし、二次操作なしと決定しているので、図3に示している複合操作指示ボタン47は、図4の表示例には表示されていない。代わりに、提案すべき二次操作はないことを示している操作不要メッセージ49が表されている。図4における操作不要メッセージ49は、一次操作に関連してよく提案している二次操作を示して、その二次操作が不要であることを意味するメッセージになっている。もちろん、この例に限らず、具体的な二次操作を示さずに、提案すべき二次操作がないことを示すメッセージの操作不要メッセージを表示してもよい。   FIG. 4 is a display example different from FIG. 3, and is a display example when the primary operation is the same as FIG. 3, but it is determined that there is no secondary operation. In the example of FIG. 4, a primary operation message 41, an operation reason message 43, a suggested graphic 45, a primary operation instruction button 46, and a cancel button 48 are displayed. However, since it is determined that there is no secondary operation, the composite operation instruction button 47 shown in FIG. 3 is not displayed in the display example of FIG. Instead, an operation unnecessary message 49 is shown indicating that there is no secondary operation to be proposed. The operation unnecessary message 49 in FIG. 4 indicates a secondary operation that is often proposed in relation to the primary operation, and is a message that means that the secondary operation is unnecessary. Of course, the present invention is not limited to this example, and an operation unnecessary message of a message indicating that there is no secondary operation to be proposed may be displayed without showing a specific secondary operation.

図5は、図3、4とは別の表示例であり、一次操作は図3と同じであるが、二次操作として、デフロスタをONにする操作を決定した場合の表示例である。デフロスタをONにする操作を二次操作として決定するのは、車両窓の内表面が曇ると予測した場合である。   FIG. 5 is a display example different from FIGS. 3 and 4, and the primary operation is the same as FIG. 3, but is a display example when the operation to turn on the defroster is determined as the secondary operation. The operation to turn on the defroster is determined as the secondary operation when it is predicted that the inner surface of the vehicle window will be clouded.

前述の例では、車両窓の内表面が曇ると予測した場合にはエアコンONを二次操作として決定する例を示していたが、このように、デフロスタをONにする操作を決定してもよい。ただし、デフロスタは、窓が曇り始めた後に起動させる装置であるので、図5の二次操作メッセージ42aは、その操作を行う条件「曇り始めたら」を付したメッセージとなっている。加えて、図5に示している二次操作メッセージ42aは、デフロスタスイッチの形状の操作スイッチ図形42a1を含んでいる。すなわち、二次操作メッセージ42aは、デフロスタという操作対象機器の操作状態をONにするとうい提案を示していることに加えて、デフロスタの操作方法も示している。   In the above-described example, the example in which the air conditioner ON is determined as the secondary operation when it is predicted that the inner surface of the vehicle window is fogged is shown. However, the operation for turning on the defroster may be determined in this way. . However, since the defroster is a device that is activated after the window starts to become cloudy, the secondary operation message 42a in FIG. 5 is a message with a condition “when it starts to cloud” for performing the operation. In addition, the secondary operation message 42a shown in FIG. 5 includes an operation switch graphic 42a1 in the shape of a defroster switch. That is, the secondary operation message 42a indicates a proposal to turn on the operation state of the operation target device called the defroster, and also indicates an operation method of the defroster.

ステップS20では、操作指示ボタンが押されたか否かを判断する。ここでの操作指示ボタンは、一次操作指示ボタン46、複合操作指示ボタン47、キャンセルボタン48のうち、表示部40に表示されているボタンを意味する。この判断がNOであれば、再度、ステップS20の判断を繰り返す。   In step S20, it is determined whether or not the operation instruction button has been pressed. Here, the operation instruction button means a button displayed on the display unit 40 among the primary operation instruction button 46, the composite operation instruction button 47, and the cancel button 48. If this determination is NO, the determination in step S20 is repeated again.

ステップS20の判断がYESになった場合、ステップS22に進む。ステップS22では、押された操作指示ボタンに応じた制御を実行する。たとえば、複合操作指示ボタン47が押された場合には、一次操作により定まる制御と、二次操作により定まる制御を両方とも実行する。たとえば、一次操作が窓を閉めるという操作であり、二次操作がエアコンONという操作であれば、窓を閉めるために、ボディECU120に、操作対象機器である窓が閉まるようにウィンドウ駆動部130を制御することを指示する。加えて、エアコンECU140に、エアコンをONにするように指示する。   If the determination in step S20 is yes, the process proceeds to step S22. In step S22, control corresponding to the pressed operation instruction button is executed. For example, when the composite operation instruction button 47 is pressed, both the control determined by the primary operation and the control determined by the secondary operation are executed. For example, if the primary operation is an operation of closing the window and the secondary operation is an operation of turning on the air conditioner, in order to close the window, the body ECU 120 is provided with the window drive unit 130 so that the window as the operation target device is closed. Instruct to control. In addition, it instructs the air conditioner ECU 140 to turn on the air conditioner.

以上、説明した第1実施形態の車両用操作提案装置1は、一次操作ありと決定し、さらに、二次操作ありと決定した場合、表示部40の表示画面に、一次操作を示す一次操作メッセージ41とともに、二次操作を示す二次操作メッセージ42を表示する(S18)。この表示画面を見ることにより、ドライバは、二次操作を行う必要が生じる可能性も考慮して一次操作、二次操作を行うかどうかを判断することができる。   As described above, the vehicle operation proposing device 1 according to the first embodiment described above determines that there is a primary operation, and further determines that there is a secondary operation, and then displays the primary operation message indicating the primary operation on the display screen of the display unit 40. A secondary operation message 42 indicating the secondary operation is displayed together with 41 (S18). By viewing this display screen, the driver can determine whether or not to perform the primary operation and the secondary operation in consideration of the possibility that the secondary operation needs to be performed.

また、これら一次操作メッセージ41、二次操作メッセージ42に加えて、一次操作後状態を示している二次操作理由メッセージ44も、表示画面に表示する。そのため、一次操作を行ったら、どういう状態になるかも考慮して、ドライバは、一次操作、二次操作を行うかどうかを判断することができる。   In addition to the primary operation message 41 and the secondary operation message 42, a secondary operation reason message 44 indicating the state after the primary operation is also displayed on the display screen. Therefore, the driver can determine whether or not to perform the primary operation and the secondary operation in consideration of the state of the primary operation.

一方、一次操作ありと決定したが、提案すべき二次操作はないと決定した場合、一次操作メッセージ41を表示するだけでなく、提案すべき二次操作がないことを示す操作不要メッセージ49も表示する。ドライバは、この操作不要メッセージ49を見ることにより、二次操作が不要であることを明確に認識することができる。よって、ドライバは、二次操作を行う必要がないとして一次操作を行うかどうかを判断することができる。   On the other hand, when it is determined that there is a primary operation but it is determined that there is no secondary operation to be proposed, not only the primary operation message 41 is displayed, but also an operation unnecessary message 49 indicating that there is no secondary operation to be proposed. indicate. The driver can clearly recognize that the secondary operation is unnecessary by viewing the operation unnecessary message 49. Therefore, the driver can determine whether or not to perform the primary operation on the assumption that there is no need to perform the secondary operation.

また、図5に示すように、操作対象機器であるデフロスタの操作方法を示している操作スイッチ図形42a1を含んでいる二次操作メッセージ42aが表示されると、その操作対象器の操作方法を知らないドライバであっても、操作方法に迷わないで済む。   Further, as shown in FIG. 5, when the secondary operation message 42a including the operation switch graphic 42a1 indicating the operation method of the defroster which is the operation target device is displayed, the operation method of the operation target device is known. Even if you don't have a driver, you don't have to worry about how to operate it.

また、本実施形態の車両用操作提案装置1は、一次操作ありと決定し、さらに、二次操作ありと決定した場合には、表示画面に、一次操作指示ボタン46、キャンセルボタン48に加えて、複合操作指示ボタン47を表示する。そして、複合操作指示ボタン47が押された場合には、一次操作と二次操作をともに実行する。そのため、ドライバは、複合操作指示ボタン47を押すだけで、2つの操作を行うことができる。   Further, the vehicle operation proposing device 1 of the present embodiment determines that there is a primary operation, and if it is determined that there is a secondary operation, in addition to the primary operation instruction button 46 and the cancel button 48 on the display screen. The composite operation instruction button 47 is displayed. When the composite operation instruction button 47 is pressed, both the primary operation and the secondary operation are executed. Therefore, the driver can perform two operations simply by pressing the composite operation instruction button 47.

また、複合操作指示ボタン47は、一次操作指示ボタン46を包含している形状であるので、ドライバは、複合操作指示ボタン47が、一次操作と二次操作を同時に指示することができるボタンであることを容易に理解することができる。   Further, since the composite operation instruction button 47 has a shape including the primary operation instruction button 46, the driver is a button that allows the composite operation instruction button 47 to instruct the primary operation and the secondary operation at the same time. Can be easily understood.

<第2実施形態>
次に、第2実施形態を説明する。この第2実施形態以下の説明において、それまでに使用した符号と同一番号の符号を有する要素は、特に言及する場合を除き、それ以前の実施形態における同一符号の要素と同一である。また、構成の一部のみを説明している場合、構成の他の部分については先に説明した実施形態を適用することができる。
Second Embodiment
Next, a second embodiment will be described. In the following description of the second embodiment, elements having the same reference numerals as those used so far are the same as elements having the same reference numerals in the previous embodiments unless otherwise specified. In addition, when only a part of the configuration is described, the embodiment described above can be applied to other parts of the configuration.

第2実施形態では、図2のステップS22を実行した後、図6に示すステップS24、S26を実行する。   In 2nd Embodiment, after performing step S22 of FIG. 2, step S24, S26 shown in FIG. 6 is performed.

ステップS24は請求項の一次操作嗜好学習部に相当している。このステップS24では、ドライバの一次操作に対する嗜好を学習する。ドライバの一次操作に対する嗜好は、具体的には、一次操作を提案した場合に、ドライバが一次操作を実行したか否かを表す過去のドライバの操作結果であり、所定の記憶部にこの操作結果を記憶する。この学習は、一次操作のみを提案した場合と、一次操作とともに二次操作を提案した場合とに分けて行う。ドライバが一次操作を行ったかどうかは、一次操作指示ボタン46、または複合操作指示ボタン47が押されたか否かで決定する。   Step S24 corresponds to a primary operation preference learning unit. In step S24, the driver's preference for the primary operation is learned. Specifically, the preference for the primary operation of the driver is a past driver operation result indicating whether or not the driver has performed the primary operation when the primary operation is proposed, and the operation result is stored in a predetermined storage unit. Remember. This learning is performed separately for the case where only the primary operation is proposed and the case where the secondary operation is proposed together with the primary operation. Whether or not the driver has performed the primary operation is determined by whether or not the primary operation instruction button 46 or the composite operation instruction button 47 has been pressed.

続くステップS26は請求項の二次操作嗜好学習部に相当している。このステップS26では、ドライバの二次操作に対する嗜好を学習する。ドライバの二次操作に対する嗜好は、具体的には、二次操作を提案した場合に、ドライバが二次操作を実行したか否かを表す過去のドライバの操作結果であり、所定の記憶部にこの操作結果を記憶する。この学習は、一次操作と二次操作の組み合わせ別に行う。ドライバが二次操作を行ったかどうかは、複合操作指示ボタン47が押されたか否かで決定する。なお、これらステップS24、S26は、ドライバを識別して、ドライバ別に実行してもよい。ドライバの識別は、IDの入力等、公知の種々の手法を用いる。   The subsequent step S26 corresponds to a secondary operation preference learning unit in claims. In step S26, the preference for the secondary operation of the driver is learned. Specifically, the driver's preference for the secondary operation is a past driver operation result indicating whether or not the driver has executed the secondary operation when the secondary operation is proposed, and is stored in a predetermined storage unit. The operation result is stored. This learning is performed for each combination of primary operation and secondary operation. Whether or not the driver has performed a secondary operation is determined by whether or not the composite operation instruction button 47 has been pressed. Note that these steps S24 and S26 may be executed for each driver by identifying the driver. For identification of the driver, various known methods such as ID input are used.

次に、図7を説明する。図7は、第2実施形態においてECU70が実行する処理を示すフローチャートの一部であり、省略している部分は、図2と同じである。   Next, FIG. 7 will be described. FIG. 7 is a part of a flowchart showing the processing executed by the ECU 70 in the second embodiment, and the omitted parts are the same as those in FIG.

ステップS15Aでは、ステップS6、S12で決定した提案操作に対するドライバの嗜好を学習済みであるか否かを判断する。学習済みの操作とは、記憶部に、操作の実行が指示されたか否かが所定数以上、記憶されている操作であることをいう。この判断がNOである場合には、ステップS15Bに進む。   In step S15A, it is determined whether or not the driver's preference for the proposal operation determined in steps S6 and S12 has been learned. The learned operation means that a predetermined number or more of whether or not the execution of the operation is instructed in the storage unit is stored. If this determination is NO, the process proceeds to step S15B.

ステップS15Bでは、提案処理で決定した操作、すなわちステップS6、S12で決定した操作を提案すると決定する。   In step S15B, it is determined to propose the operation determined in the proposal process, that is, the operation determined in steps S6 and S12.

ステップS15Aの判断がYESである場合には、ステップS15Cに進む。ステップS15Cでは、学習した嗜好に基づいて、ドライバが、一次提案決定処理(S6)で決定した一次操作を実行するかどうかを判断する。   If the determination in step S15A is yes, the process proceeds to step S15C. In step S15C, based on the learned preference, the driver determines whether or not to execute the primary operation determined in the primary proposal determination process (S6).

この判断においては、ステップS6、S12で一次操作と二次操作をともに提案すると決定している場合には、ステップS6、S12で決定している一次操作と二次操作の組み合わせに対して学習した一次操作の嗜好を参照する。参照した結果、一次操作をドライバが実行している比率が所定比率以上である場合には、ドライバが、一次提案決定処理(S6)で決定した一次操作を実行すると判断する(S15C:YES)。反対に、一次操作をドライバが実行している比率が所定比率より小さい場合には、ドライバは、一次提案決定処理(S6)で決定した一次操作を実行しないと判断する(S15C:NO)。   In this determination, when it is determined in steps S6 and S12 that both the primary operation and the secondary operation are proposed, the combination of the primary operation and the secondary operation determined in steps S6 and S12 is learned. Refers to the preference of the primary operation. As a result of the reference, if the ratio at which the driver is executing the primary operation is equal to or greater than the predetermined ratio, it is determined that the driver executes the primary operation determined in the primary proposal determination process (S6) (S15C: YES). On the contrary, if the ratio at which the driver is executing the primary operation is smaller than the predetermined ratio, the driver determines that the primary operation determined in the primary proposal determination process (S6) is not executed (S15C: NO).

ステップS15Cの判断がNOであれば、ドライバが実行しない一次操作を提案しても意味がないため、図7の処理を終了する。   If the determination in step S15C is NO, it is meaningless to propose a primary operation that is not executed by the driver, and thus the process of FIG. 7 ends.

ステップS15Cの判断がYESの場合、ステップS15Dに進む。ステップS15Dでは、二次操作があるかどうかを判断する。この判断がNOである場合には、ステップS15Eに進む。ステップS15Eでは、一次操作のみを提案することに決定する。   If the determination in step S15C is yes, the process proceeds to step S15D. In step S15D, it is determined whether there is a secondary operation. If this determination is NO, the process proceeds to step S15E. In step S15E, it is decided to propose only the primary operation.

ステップS15Dの判断がYESであれば、ステップS15Fに進む。ステップS15Fでは、学習した嗜好に基づいて、ドライバが、二次操作を実行するかどうかを判断する。この判断においては、学習した二次操作の嗜好のうち、ステップS6、S12で決定している一次操作と二次操作の組み合わせを参照する。参照した結果、二次操作をドライバが実行している比率が所定比率以上である場合には、ドライバが、二次操作を実行すると判断する(S15F:YES)。反対に、二次操作をドライバが実行している比率が所定比率より小さい場合には、ドライバは、一次操作を実行しないと判断する(S15F:NO)。   If the determination in step S15D is yes, the process proceeds to step S15F. In step S15F, the driver determines whether to perform the secondary operation based on the learned preference. In this determination, the combination of the primary operation and the secondary operation determined in steps S6 and S12 is referred to among the learned secondary operation preferences. As a result of the reference, when the ratio at which the driver performs the secondary operation is equal to or greater than the predetermined ratio, the driver determines to execute the secondary operation (S15F: YES). On the other hand, when the ratio at which the driver performs the secondary operation is smaller than the predetermined ratio, the driver determines that the primary operation is not performed (S15F: NO).

ステップS15Fの判断がNOであれば、前述のステップS15Eに進む。よって、一次操作のみを提案することになる。一方、ステップS15Fの判断がYESであれば、ステップS15Gに進む。ステップS15Gでは、一次操作、二次操作を提案することに決定する。   If judgment of step S15F is NO, it will progress to above-mentioned step S15E. Therefore, only the primary operation is proposed. On the other hand, if determination of step S15F is YES, it will progress to step S15G. In step S15G, it is decided to propose a primary operation and a secondary operation.

ステップS15B、S15E、S15Gのいずれかを実行した場合には、ステップS16へ進む。ステップS16以降は、第1実施形態と同じである。なお、ステップS15A〜S15Gは提案出力処理部の処理である。   If any of Steps S15B, S15E, and S15G is executed, the process proceeds to Step S16. Step S16 and subsequent steps are the same as those in the first embodiment. Steps S15A to S15G are processing of the proposal output processing unit.

以上、説明した第2実施形態では、一次操作、二次操作に対するドライバの嗜好を学習している(S24、S26)。そして、学習結果を利用し、一次操作を提案した場合に、ドライバが一次操作を実行するかを判断している。そして、一次操作を提案してもドライバが一次操作を実行しないと判断した場合には(S15C:NO)、一次操作を決定していても、一次操作を提案しない。また、一次操作は実行すると判断したが(S15C:YES)、二次操作は実行しないと判断した場合には(S15F:NO)、二次操作を決定していても、二次操作を提案しない。これらにより、実行しない操作をドライバに提案してしまい、ドライバに煩わしさを感じさせてしまうことを抑制できる。   As described above, in the second embodiment described above, the preference of the driver for the primary operation and the secondary operation is learned (S24, S26). The learning result is used to determine whether the driver executes the primary operation when the primary operation is proposed. If the driver determines that the primary operation is not executed even if the primary operation is proposed (S15C: NO), the primary operation is not proposed even if the primary operation is determined. Further, although it is determined that the primary operation is executed (S15C: YES), when it is determined that the secondary operation is not executed (S15F: NO), the secondary operation is not proposed even if the secondary operation is determined. . Thus, it is possible to prevent the driver from feeling troublesome by proposing an operation not to be performed to the driver.

二次操作に対する学習、および、二次操作を実行するかどうかの判断を、一次操作と二次操作の組み合わせ別に行っている。また、一次操作に対する学習、および、一次操作を実行するかどうかの判断も、一次操作と二次操作の組み合わせ別に行っている。これにより、一次操作、二次操作を提案した場合に、ドライバがそれら一次操作、二次操作を実行するかどうかの判断精度が向上する。   The learning for the secondary operation and the determination of whether or not to execute the secondary operation are performed for each combination of the primary operation and the secondary operation. Further, learning for the primary operation and determination of whether or not to execute the primary operation are also performed for each combination of the primary operation and the secondary operation. Thereby, when the primary operation and the secondary operation are proposed, the determination accuracy of whether or not the driver executes the primary operation and the secondary operation is improved.

以上、本発明の実施形態を説明したが、本発明は上述の実施形態に限定されるものではなく、次の変形例も本発明の技術的範囲に含まれ、さらに、下記以外にも要旨を逸脱しない範囲内で種々変更して実施することができる。   As mentioned above, although embodiment of this invention was described, this invention is not limited to the above-mentioned embodiment, The following modification is also contained in the technical scope of this invention, Furthermore, the summary other than the following is also included. Various modifications can be made without departing from the scope.

<変形例1>
たとえば、一次操作、二次操作は、前述の実施形態に限られない。図8に、これまで説明した一次操作、二次操作とは別の一次操作、二次操作の例を示す。別例1では、一次予測が不快エリアを進入するという予測である。不快エリアとは、悪臭がするエリアである。一次操作は、その不快エリアを回避するートに変更するという操作である。二次予測は、目的地への到着時刻が遅くなるという予測である。二次操作は、到着が遅れることを連絡するという操作である。
<Modification 1>
For example, the primary operation and the secondary operation are not limited to the above-described embodiment. FIG. 8 shows an example of a primary operation and a secondary operation different from the primary operation and the secondary operation described so far. In another example, the primary prediction is a prediction that an uncomfortable area will be entered. An unpleasant area is an area that has a bad odor. The primary operation is an operation of changing to a route that avoids the uncomfortable area. Secondary prediction is prediction that the arrival time at the destination will be delayed. The secondary operation is an operation of notifying that the arrival is delayed.

この別例1では、ドライバは、ルート変更と、到着が遅れることを連絡することが提案されるので、到着が遅れても不快エリアを回避するか、到着が遅れることを避けるため、不快エリアに進入するかを選択することができる。すなわち、到着が遅れることを考慮して、一次操作であるルート変更をするかどうかを判断することができる。   In this alternative example 1, it is proposed that the driver communicates the route change and the arrival delay, so the driver can avoid the discomfort area even if the arrival is late, or enter the discomfort area to avoid the arrival delay. You can choose to enter. That is, it is possible to determine whether or not to change the route, which is the primary operation, in consideration of the delay in arrival.

別例2では、一次予測が事故渋滞に巻き込まれるという予測である。一次操作は、渋滞を回避するためのルート変更という操作である。二次予測は、目的地への到着時刻が遅くなるという予測である。二次操作は、到着が遅れることを連絡するという操作である。   In another example 2, the primary prediction is a prediction that an accident will be involved. The primary operation is an operation called route change for avoiding traffic jams. Secondary prediction is prediction that the arrival time at the destination will be delayed. The secondary operation is an operation of notifying that the arrival is delayed.

この別例2では、ルート変更という提案とともに、到着が遅れることを連絡するという提案もされることで、ドライバは、その連絡を行ったほうがよいかどうかを、早めに考えることができる。   In this alternative example 2, a proposal to change the route and a proposal to notify that the arrival will be delayed is also provided, so that the driver can think early whether or not the notification should be made.

<変形例2>
前述の実施形態では、予測は二次予測までしかしておらず、操作も二次操作までしか決定していなかったが、三次以上の予測を行い、三次以上の操作を決定してもよい。
<Modification 2>
In the above-described embodiment, the prediction is performed only up to the secondary prediction, and the operation is determined only up to the secondary operation. However, the third-order or higher prediction may be performed to determine the third-order or higher operation.

<変形例3、4>
前述の実施形態では、一次操作メッセージ41、二次操作メッセージ42に加えて、一次操作理由メッセージ43、二次操作理由メッセージ44も表示していたが、これら一次操作理由メッセージ43、二次操作理由メッセージ44の一方または両方を表示しなくてもよい(変形例3)。また、一次操作指示ボタン46、複合操作指示ボタン47、キャンセルボタン48を表示することも必須ではない(変形例4)。これらのボタン46、47、48を表示しなくても、ドライバは、各操作対象機器を操作するために備えられている専用の操作部を操作すればよいからである。
<Modifications 3 and 4>
In the above-described embodiment, in addition to the primary operation message 41 and the secondary operation message 42, the primary operation reason message 43 and the secondary operation reason message 44 are also displayed. These primary operation reason message 43 and secondary operation reason message are also displayed. One or both of the messages 44 may not be displayed (Modification 3). Further, it is not essential to display the primary operation instruction button 46, the composite operation instruction button 47, and the cancel button 48 (Modification 4). This is because even if these buttons 46, 47, 48 are not displayed, the driver only has to operate a dedicated operation unit provided for operating each operation target device.

1:車両用操作提案装置、 10:近距離通信部、 20:広域通信部、 30:位置検出部、 40:表示部、 41:一次操作メッセージ、 42:二次操作メッセージ、 42a:二次操作メッセージ、 42a1:操作スイッチ図形、 43:一次操作理由メッセージ、 44:二次操作理由メッセージ、 45:提案図形、 46:一次操作指示ボタン、 47:複合操作指示ボタン、 48:キャンセルボタン、 49:操作不要メッセージ、 50:スピーカ、 60:タッチパネル、 70:ECU、 110:車内LAN、 120:ボディECU、 130:ウィンドウ駆動部、 140:エアコンECU、 150:エアコン駆動部 DESCRIPTION OF SYMBOLS 1: Vehicle operation proposal apparatus, 10: Near field communication part, 20: Wide area communication part, 30: Position detection part, 40: Display part, 41: Primary operation message, 42: Secondary operation message, 42a: Secondary operation Message, 42a1: operation switch graphic, 43: primary operation reason message, 44: secondary operation reason message, 45: proposed graphic, 46: primary operation instruction button, 47: compound operation instruction button, 48: cancel button, 49: operation Unnecessary message, 50: speaker, 60: touch panel, 70: ECU, 110: in-vehicle LAN, 120: body ECU, 130: window drive unit, 140: air conditioner ECU, 150: air conditioner drive unit

Claims (9)

車両で用いられ、
予め設定された種類の操作をドライバに提案すべきかどうかを判断するために必要な状態項目の今後の状態を予測する一次予測部(S2、S4)と、
前記一次予測部が予測した前記状態項目の今後の状態に基づいて、ドライバに提案すべき一次操作を決定する一次提案決定部(S6)と、
前記一次提案決定部が決定した一次操作を行った後の前記状態項目の状態である一次操作後状態を予測する二次予測部(S8、S10)と、
前記二次予測部が予測した前記一次操作後状態に基づいて、ドライバに提案すべき二次操作を決定する二次提案決定部(S12)と、
前記一次提案決定部が決定した一次操作を示す一次操作メッセージとともに、前記二次提案決定部が決定した二次操作を示す二次操作メッセージを所定の出力部から出力する提案出力処理部(S14、S15、S16、S18)と、
を備えることを特徴とする車両用操作提案装置。
Used in vehicles,
A primary prediction unit (S2, S4) for predicting a future state of a state item necessary to determine whether or not a preset type of operation should be proposed to the driver;
Based on the future state of the state item predicted by the primary prediction unit, a primary proposal determination unit (S6) for determining a primary operation to be proposed to the driver;
A secondary prediction unit (S8, S10) for predicting the state after the primary operation, which is the state of the state item after performing the primary operation determined by the primary proposal determination unit;
Based on the state after the primary operation predicted by the secondary prediction unit, a secondary proposal determination unit (S12) that determines a secondary operation to be proposed to the driver;
A proposal output processing unit (S14) that outputs a secondary operation message indicating the secondary operation determined by the secondary proposal determination unit from a predetermined output unit together with a primary operation message indicating the primary operation determined by the primary proposal determination unit. S15, S16, S18),
A vehicle operation proposing device comprising:
請求項1において、
前記提案出力処理部は、前記一次操作メッセージ、前記二次操作メッセージとともに、前記二次予測部が予測した前記一次操作後状態を、前記出力部から出力することを特徴とする車両用操作提案装置。
In claim 1,
The proposal output processing unit outputs the post-primary operation state predicted by the secondary prediction unit together with the primary operation message and the secondary operation message from the output unit. .
請求項1または2において、
前記提案出力処理部は、前記二次提案決定部が、提案すべき前記二次操作がないと決定した場合、前記一次操作メッセージを前記出力部から出力し、前記二次操作メッセージは前記出力部から出力しないことを特徴とする車両用操作提案装置。
In claim 1 or 2,
When the secondary proposal determining unit determines that there is no secondary operation to be proposed, the proposal output processing unit outputs the primary operation message from the output unit, and the secondary operation message is output from the output unit. The vehicle operation proposing device is characterized in that it does not output from the vehicle.
請求項3において、
前記提案出力処理部は、前記二次操作メッセージを出力しない場合には、提案すべき前記二次操作がないことを、前記一次操作メッセージとともに、前記出力部から出力することを特徴とする車両用操作提案装置。
In claim 3,
The proposed output processing unit, when not outputting the secondary operation message, outputs from the output unit together with the primary operation message that there is no secondary operation to be proposed. Operation suggestion device.
請求項1または2において、
前記提案出力処理部は、前記出力部から出力する二次操作メッセージとして、前記二次操作を行う対象機器およびその対象機器の操作状態を示すメッセージに加えて、その対象機器の操作方法を出力することを特徴とする車両用操作提案装置。
In claim 1 or 2,
The proposed output processing unit outputs an operation method of the target device in addition to a target device performing the secondary operation and a message indicating an operation state of the target device as a secondary operation message output from the output unit. A vehicle operation proposing device characterized by the above.
請求項1〜5のいずれか1項において、
前記提案出力処理部が前記一次操作メッセージおよび前記二次操作メッセージを前記出力部から出力した後、前記ドライバが前記二次操作を行ったか否かに基づいて、前記ドライバの前記二次操作に対する嗜好を、前記一次操作と前記二次操作の組み合わせ別に学習する二次操作嗜好学習部(S26)を備え、
前記提案出力処理部は、前記二次操作嗜好学習部が学習した結果と、前記一次提案決定部が決定した一次操作と、前記二次提案決定部が決定した二次操作とに基づいて、前記二次提案決定部が決定した二次操作を前記ドライバが行わないと判断した場合、前記一次操作メッセージは前記出力部から出力するが、前記二次操作メッセージは、前記出力部から出力しないことを特徴とする車両用操作提案装置。
In any one of Claims 1-5,
Based on whether the driver has performed the secondary operation after the proposed output processing unit has output the primary operation message and the secondary operation message from the output unit, the driver's preference for the secondary operation A secondary operation preference learning unit (S26) that learns for each combination of the primary operation and the secondary operation,
The proposal output processing unit is based on the result learned by the secondary operation preference learning unit, the primary operation determined by the primary proposal determination unit, and the secondary operation determined by the secondary proposal determination unit. If it is determined that the driver does not perform the secondary operation determined by the secondary proposal determination unit, the primary operation message is output from the output unit, but the secondary operation message is not output from the output unit. A vehicle operation proposing device as a feature.
請求項1〜6のいずれか1項において、
前記提案出力処理部が前記一次操作メッセージおよび二次操作メッセージを前記出力部から出力した後、前記ドライバが前記一次操作を行ったか否かに基づいて、前記ドライバの前記一次操作に対する嗜好を、前記一次操作と前記二次操作の組み合わせ別に学習する一次操作嗜好学習部(S24)を備え、
前記提案出力処理部は、前記一次操作嗜好学習部が学習した結果と、前記一次提案決定部が決定した一次操作と、前記二次提案決定部が決定した二次操作とに基づいて、前記一次提案決定部が決定した一次操作と、前記二次提案決定部が決定した二次操作の組み合わせである場合、前記一次操作を前記ドライバが行わないと判断したことに基づいて、前記一次操作メッセージ、前記二次操作メッセージを、前記出力部から出力しないことを特徴とする車両用操作提案装置。
In any one of Claims 1-6,
After the proposed output processing unit outputs the primary operation message and the secondary operation message from the output unit, the driver's preference for the primary operation is determined based on whether the driver has performed the primary operation. A primary operation preference learning unit (S24) for learning for each combination of primary operation and secondary operation;
The proposal output processing unit, based on the result learned by the primary operation preference learning unit, the primary operation determined by the primary proposal determination unit, and the secondary operation determined by the secondary proposal determination unit When the primary operation determined by the proposal determination unit and the secondary operation determined by the secondary proposal determination unit are based on the determination that the driver does not perform the primary operation, the primary operation message, The vehicle operation proposing device, wherein the secondary operation message is not output from the output unit.
請求項1〜7のいずれか1項において、
前記出力部として表示部(40)を備え、
前記提案出力処理部は、前記一次操作メッセージ、前記二次操作メッセージに加えて、前記一次操作の実行を指示する一次操作指示ボタン(46)と、前記一次操作と前記二次操作の実行を指示する複合操作指示ボタン(48)とを、前記表示部に表示することを特徴とする車両用操作提案装置。
In any one of Claims 1-7,
A display unit (40) as the output unit;
In addition to the primary operation message and the secondary operation message, the proposal output processing unit instructs a primary operation instruction button (46) for instructing execution of the primary operation, and execution of the primary operation and the secondary operation. A vehicle operation proposing device that displays a composite operation instruction button (48) on the display unit.
請求項8において、
前記提案出力処理部は、前記一次操作指示ボタンを包含している形状の前記複合操作指示ボタンを表示することを特徴とする車両用操作提案装置。
In claim 8,
The proposal output processing unit displays the combined operation instruction button having a shape including the primary operation instruction button.
JP2014037049A 2014-02-27 2014-02-27 Vehicle operation proposing device Active JP6340829B2 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2014037049A JP6340829B2 (en) 2014-02-27 2014-02-27 Vehicle operation proposing device
PCT/JP2015/000494 WO2015129164A1 (en) 2014-02-27 2015-02-04 Vehicle operations suggesting device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2014037049A JP6340829B2 (en) 2014-02-27 2014-02-27 Vehicle operation proposing device

Publications (2)

Publication Number Publication Date
JP2015160522A JP2015160522A (en) 2015-09-07
JP6340829B2 true JP6340829B2 (en) 2018-06-13

Family

ID=54008502

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014037049A Active JP6340829B2 (en) 2014-02-27 2014-02-27 Vehicle operation proposing device

Country Status (2)

Country Link
JP (1) JP6340829B2 (en)
WO (1) WO2015129164A1 (en)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6638664B2 (en) * 2017-02-03 2020-01-29 トヨタ自動車株式会社 Remote air conditioning starting system, server
KR102170201B1 (en) * 2017-10-03 2020-10-27 구글 엘엘씨 Vehicle function control through sensor-based verification
JP7064805B2 (en) * 2018-02-02 2022-05-11 トヨタ自動車株式会社 Vehicle window control system and vehicle window control program
JP7009243B2 (en) * 2018-02-02 2022-01-25 トヨタ自動車株式会社 Vehicle window control system and vehicle window control program

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006001305A (en) * 2004-06-15 2006-01-05 Denso Corp On-vehicle instrument integrated control system
JP4728839B2 (en) * 2006-03-02 2011-07-20 株式会社デンソーアイティーラボラトリ In-vehicle device controller
JP2007237789A (en) * 2006-03-06 2007-09-20 Denso Corp Opening/closing control device, opening/closing control system and program
JP2008201146A (en) * 2007-02-16 2008-09-04 Denso Corp Vehicle operation guide device

Also Published As

Publication number Publication date
WO2015129164A1 (en) 2015-09-03
JP2015160522A (en) 2015-09-07

Similar Documents

Publication Publication Date Title
US11061399B2 (en) System and method for providing information indicative of autonomous availability
CN108349507B (en) Driving support device, driving support method, and moving object
EP3246892B1 (en) Travel control system
US20190004513A1 (en) Driving assistance control apparatus
JP6340829B2 (en) Vehicle operation proposing device
JP6690581B2 (en) Operation mode switching control device, method and program
US11021103B2 (en) Method for enriching a field of view of a driver of a transportation vehicle with additional information, device for use in an observer transportation vehicle, device for use in an object, and transportation vehicle
CN109649403A (en) The method and information of vehicles presentation device of information are conveyed during automatic Pilot
US9982645B2 (en) Remote engine starting system
JP2017117039A (en) Marker information display device and method
US11668582B2 (en) Navigation system and display method of a navigation map
KR20170130037A (en) Vehicle, vehicle software update system and vehicle software update method
CN114013452A (en) Automatic driving control method, system, readable storage medium and vehicle
JP4923868B2 (en) Automatic control device
JP6672722B2 (en) Voice control device for vehicles
JP6624016B2 (en) Automatic driving control device for vehicles
US11485389B2 (en) Vehicle control method
JP2024091729A (en) Display control device, display device, display control method and program
CN110239539B (en) Vehicle control device and vehicle
JP2008070128A (en) Driving history recording device and program used for the same
JP2021094970A (en) Operation support control device
JP2010030324A (en) Operation device
JP6443323B2 (en) Driving assistance device
JP4403050B2 (en) I / O management device
JP2009113602A (en) Vehicular display device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170131

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20171128

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20180417

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20180430

R151 Written notification of patent or utility model registration

Ref document number: 6340829

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250