[go: up one dir, main page]

JP5729228B2 - In-vehicle warning device, collision warning device using the device, and lane departure warning device - Google Patents

In-vehicle warning device, collision warning device using the device, and lane departure warning device Download PDF

Info

Publication number
JP5729228B2
JP5729228B2 JP2011200633A JP2011200633A JP5729228B2 JP 5729228 B2 JP5729228 B2 JP 5729228B2 JP 2011200633 A JP2011200633 A JP 2011200633A JP 2011200633 A JP2011200633 A JP 2011200633A JP 5729228 B2 JP5729228 B2 JP 5729228B2
Authority
JP
Japan
Prior art keywords
noise
vehicle
warning device
virtual wall
sound
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2011200633A
Other languages
Japanese (ja)
Other versions
JP2013060134A (en
Inventor
雄介 片山
雄介 片山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Denso Corp
Original Assignee
Denso Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Denso Corp filed Critical Denso Corp
Priority to JP2011200633A priority Critical patent/JP5729228B2/en
Publication of JP2013060134A publication Critical patent/JP2013060134A/en
Application granted granted Critical
Publication of JP5729228B2 publication Critical patent/JP5729228B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • Alarm Systems (AREA)
  • Traffic Control Systems (AREA)

Description

本発明は、例えば他車両や歩行者と自車両とが衝突する虞がある状況下で警告を行う車載警告装置に関する。   The present invention relates to an in-vehicle warning device that gives a warning in a situation where another vehicle or a pedestrian may collide with a host vehicle.

近年、車両の運転を支援する技術が種々提案されている。例えば、自車両に対し接近してくる他車両の存在を運転者に警告することで自車両に生じ得る危険を未然に防ぐ技術などがある。   In recent years, various techniques for supporting driving of vehicles have been proposed. For example, there is a technique for preventing a risk that may occur in the host vehicle by warning the driver of the presence of another vehicle approaching the host vehicle.

このような技術の中には、他車両と自車両との相対位置に基づいて移動する警告音を出力するものがある(例えば、特許文献1参照)。この技術では、警告音によって自車両に生じる危険を知らせることが出来るものの、この警告音が、車両内のオーディオや環境音を妨害してしまう虞がある。結果として、運転者が、警告音に対し、不快感を抱いたり、煩わしさを感じたりすることが懸念される。   Some of these techniques output a warning sound that moves based on the relative position between the other vehicle and the host vehicle (see, for example, Patent Document 1). Although this technology can notify the danger generated in the vehicle by the warning sound, the warning sound may interfere with the audio and environmental sound in the vehicle. As a result, there is a concern that the driver may feel uncomfortable or bothered by the warning sound.

これを解決するための手法として、オーディオ音に音響効果を付与することで警告を与える技術も提案されている(例えば、特許文献2参照)。この技術はオーディオ音に音響効果を付与する方法であるため、オーディオを聴いていながらにして、警告を行うことができる。   As a technique for solving this problem, a technique for giving a warning by giving an acoustic effect to an audio sound has been proposed (see, for example, Patent Document 2). Since this technique is a method of adding an acoustic effect to the audio sound, a warning can be given while listening to the audio.

特開2007−328603号公報JP 2007-328603 A 特開2009−286186号公報JP 2009-286186 A

しかしながら、上記特許文献2に記載される技術では、危険がある方向の音場を歪ませるとされているだけで、具体的な音場の調整方法が開示されていない点で不十分であると言わざるを得ない。結果として、運転者に対して十分な警告を行うことができない虞がある。   However, the technique described in the above-mentioned Patent Document 2 is not sufficient in that it only distorts the sound field in a dangerous direction and does not disclose a specific sound field adjustment method. I must say. As a result, there is a possibility that a sufficient warning cannot be given to the driver.

本発明は、上述した課題を解決するためになされたものであり、その目的は、運転者に不快感を抱かせたり煩わしさを感じさせたりすることなく、十分な警告を行うことが可能な車載警告装置を提供することにある。   The present invention has been made in order to solve the above-described problems, and its purpose is to provide a sufficient warning without causing the driver to feel uncomfortable or annoying. It is to provide an in-vehicle warning device.

上述した目的を達成するためになされた車載警告装置は、相対状況検出手段と、パラメータ設定手段と、警告要否判定手段と、音場形成警告手段とを備えている。 Placing made cars in order to achieve the above object warning device includes a relative condition detection means, and the parameter setting means, and warning necessity determination unit, and a sound field warning means.

相対状況検出手段は、自車両の走行に関係する車外の事象を自車両に対する相対状況として検出する。「自車両の走行に関係する車外の事象」(相対状況)とは、衝突という意味で、自車両に接触する可能性のある対象物に関する情報であることが考えられる。また、レーン逸脱という意味で、自車両と車線境界線との位置関係に関する情報であることが考えられる。   The relative situation detection means detects an event outside the vehicle related to the traveling of the host vehicle as a relative situation with respect to the host vehicle. The “event outside the vehicle related to the traveling of the host vehicle” (relative situation) means a collision and may be information on an object that may come into contact with the host vehicle. Further, in terms of lane departure, it may be information regarding the positional relationship between the host vehicle and the lane boundary.

また、相対状況に応じて、パラメータ設定手段は、仮想壁に関する仮想壁パラメータを設定する。この仮想壁パラメータの設定は、車室内に仮想壁があるものとして音場を形成するためのものである。   Further, the parameter setting means sets a virtual wall parameter related to the virtual wall according to the relative situation. This virtual wall parameter setting is for forming a sound field on the assumption that there is a virtual wall in the passenger compartment.

警告要否判定手段は、相対状況に基づき、警告の要否を判定する。警告要否判定手段にて警告が必要であると判定された場合、音場形成警告手段によって、仮想壁パラメータに基づき、仮想壁があるものとして車室内に存在する音に基づく音場が形成されることで警告が行われる。ここで「車室内に存在する音」とは、通常時に車室内に存在する音であり、例えばエアコンや走行による騒音であったり、オーディオ機器が再生するオーディオ音であったりする。   The warning necessity determination means determines whether or not a warning is necessary based on the relative situation. When it is determined that the warning is required by the warning necessity determination means, the sound field formation warning means forms a sound field based on the sound existing in the passenger compartment based on the virtual wall parameters based on the virtual wall parameters. Will be warned. Here, the “sound existing in the vehicle interior” is a sound normally present in the vehicle interior, for example, noise caused by an air conditioner or traveling, or audio sound reproduced by an audio device.

ここで特に本発明では、パラメータ設定手段が、仮想壁パラメータに含まれる仮想壁の位置を、運転者の周辺位置に設定する。
つまり、本発明では、例えば衝突の虞がある状況が発生した場合、当該状況に応じて仮想壁のパラメータを設定し、仮想壁があるものとして音場を形成して警告を行う。このとき、「車室内に存在する音」に基づく音場を形成するため、警告音を用いた場合と比べ、運転者に不快感を抱かせたり煩わしさを感じさせたりすることがない。また、仮想壁を運転者の周辺位置に設定するため、仮想壁による音場の変化が運転者にとって分かり易くなり、十分な警告を行うことができる。
Here, particularly in the present invention, the parameter setting means sets the position of the virtual wall included in the virtual wall parameter to the peripheral position of the driver.
That is, in the present invention, for example, when a situation where there is a possibility of a collision occurs, a virtual wall parameter is set according to the situation, and a sound field is formed and a warning is given assuming that there is a virtual wall. At this time, since a sound field based on “sound in the vehicle interior” is formed, the driver does not feel uncomfortable or annoyed compared to the case where a warning sound is used. Further, since the virtual wall is set at the driver's peripheral position, the change in the sound field due to the virtual wall becomes easy for the driver to understand, and a sufficient warning can be given.

なお、仮想壁による音場の変化を分かり易いものにするという観点からは、仮想壁パラメータに含まれる仮想壁の位置を、運転者の頭部周辺位置に設定することが好ましい。このようにすれば、仮想壁が運転者の耳の比較的近い位置に設定されるため、仮想壁による音場の変化を一層分かり易いものにできる。 Note that a change in the sound field from the viewpoint of understandable ones by the virtual wall, the position of the virtual wall included in the temporary Sokabe parameter, it is preferable to set the head near the driver's position. In this way, since the virtual wall is set at a position relatively close to the driver's ear, the change in the sound field due to the virtual wall can be made easier to understand.

特に、自車両の左側あるいは右側に注意喚起を促すような場合、仮想壁パラメータに含まれる仮想壁の位置を、相対状況に応じて、運転者の左耳近傍又は右耳近傍に設定するとよい。このようにすれば、仮想壁による音場の変化を分かり易いものにするという効果が際だつ。 In particular, when such prompt the alert to the left or right side of the vehicle, the position of the virtual wall included in the temporary Sokabe parameters, depending on the relative conditions may be set in the vicinity of the left ear near or right ear of the driver . In this way, the effect of making the change in the sound field caused by the virtual wall easy to understand is outstanding.

ところで、例えば衝突の虞がある対象物と自車両との距離などが比較的小さい場合と比較的大きい場合とで、音場を変化させることが望ましい。そこで、相対状況に応じて、仮想壁パラメータに含まれる仮想壁の面積、吸音率、形状、及び、厚さのうち少なくとも一つを変更することとしてもよい。例えば、対象物と自車両との距離が小さくなるほど、仮想壁の面積を大きくしたり、仮想壁の吸音率を小さくしたりするという具合である。このようにすれば、相対状況に応じて、音場を変化させることができる。 By the way, for example, it is desirable to change the sound field depending on whether the distance between an object that may cause a collision and the host vehicle is relatively small or relatively large. Therefore, depending on the relative conditions, the area of the virtual wall included in the virtual wall parameter, sound absorption coefficient, shape, and may be changed at least one of thickness. For example, the area of the virtual wall is increased or the sound absorption coefficient of the virtual wall is decreased as the distance between the object and the host vehicle is reduced. In this way, the sound field can be changed according to the relative situation.

なお、「車室内に存在する音」として騒音やオーディオ音が挙げられることは既に述べたが、当該車室内に存在する音が一種類であるとは限らない。そこで、音場形成警告手段は、音響信号を重畳することで車室内に存在する複数の音に基づく音場を形成することとしてもよい。このようにすれば、例えば騒音及びオーディオ音の両方の音に基づく音場が形成されるため、より自然に仮想壁の存在を運転者に認識させることができる。 In addition, although it has already been described that “sound existing in the vehicle interior” includes noise and audio sound, the sound present in the vehicle interior is not necessarily one type. Therefore , the sound field formation warning means may form a sound field based on a plurality of sounds existing in the passenger compartment by superimposing an acoustic signal. In this way, for example, a sound field based on both noise and audio sound is formed, so that the driver can more naturally recognize the existence of the virtual wall.

場形成警告手段が、車室内に存在する騒音(以下「車室内騒音」という)に基づく音場を形成するための疑似騒音生成手段を有していることとしてもよい。この場合、さらに、車室内騒音に関する騒音情報を取得する騒音情報取得手段を備える構成とし、疑似騒音生成手段が、騒音情報取得手段にて取得される騒音情報に基づき、車室内騒音を推定することとしてもよい。このようにすれば、比較的簡単に車室内騒音に基づく音場を形成することができる。 The sound field formation warning means may include pseudo noise generation means for forming a sound field based on noise existing in the vehicle interior (hereinafter referred to as “vehicle interior noise”). In this case, the the et, a configuration comprising a noise information acquiring means for acquiring noise information regarding interior noise, pseudo noise generating means, based on the noise information obtained by the noise information acquiring unit, estimates the interior noise It is good to do. In this way, a sound field based on vehicle interior noise can be formed relatively easily.

例えば、騒音情報取得手段は、エアコンの設定に関するエアコン設定情報を騒音情報として取得することが考えられる。具体的には、エアコンの設定情報として、エアコンの風量設定、エアコンの吹き出し口設定、及び、エアコンの内気循環/外気導入設定のうち少なくとも一つを取得することが考えられる。このようにすれば、エアコンの作動に起因する車室内騒音を推定することができる。 For example, the noise information acquiring means, it is conceivable to obtain the air conditioner setting information about the air conditioner configured as noise information. Specifically, as the setting information of the air conditioners, air conditioning airflow settings, outlet setting of the air conditioner, and it is conceivable to obtain at least one of air conditioning inside air circulation / outside air introduction set. In this way, the vehicle interior noise caused by the operation of the air conditioner can be estimated.

また例えば、騒音情報取得手段は、自車両の走行速度を示す走行速度情報を騒音情報として取得することが考えられる。このようにすれば、自車両の走行に起因する車室内騒音を推定することができる。 Also For example, the noise information acquiring means, to acquire speed information indicating the traveling speed of the vehicle as noise information is considered. In this way, it is possible to estimate vehicle interior noise resulting from the traveling of the host vehicle.

このようにして車室内騒音を推定することができるものとして、実際に疑似騒音を生成するために、さらに、車室内騒音に対応する騒音データを格納する騒音データ格納手段を備える構成とすることが考えられる。この場合、疑似騒音生成手段は、騒音データ格納手段に格納された騒音データを、車室内騒音に基づく音場の形成に利用する。このように車室内騒音に対応する騒音データを格納する構成とすれば、比較的簡単に、車室内騒音に基づく音場を形成することができる。 As being capable of estimating the in-compartment noise this way, in order to actually generate a pseudo noise, the the et, a configuration comprising a noise data storage means for storing noise data corresponding to the in-compartment noise It is possible. In this case, the pseudo noise generation means uses the noise data stored in the noise data storage means to form a sound field based on vehicle interior noise. If the noise data corresponding to the vehicle interior noise is stored as described above, a sound field based on the vehicle interior noise can be formed relatively easily.

なお、騒音情報や騒音データは、実際の騒音を利用してもよい。すなわち、さらに、車室内騒音を収音可能となっており、収音された騒音信号を、車室内騒音に対応する騒音データとして、又は、車室内騒音に関する騒音情報として利用するようにしてもよい。騒音データとして利用する場合、上記騒音データ格納手段を備える構成であれば、収音された騒音信号を騒音データ格納手段に格納しておくことが考えられる。一方、騒音情報として利用する場合、収音された騒音信号を基に、車室内騒音を推定することが考えられる。いずれにしても、収音された騒音信号を利用することによって、実際の車室内騒音に近い疑似騒音に基づく音場の形成に寄与する。 Note that noise information and noise data may use actual noise. That is, the et, it has become possible sound pickup interior noise, the picked-up noise signals, as the noise data corresponding to the interior noise, or so as to use as a noise information about compartment noise Also good. When used as noise data, if the configuration includes the noise data storage means, it is conceivable to store the collected noise signal in the noise data storage means. On the other hand, when used as noise information, it is conceivable to estimate vehicle interior noise based on the collected noise signal. In any case, by using the collected noise signal, it contributes to the formation of a sound field based on pseudo noise close to actual vehicle interior noise.

また、音場形成警告手段が、車室内に存在するオーディオ音に基づく音場を形成するための音響効果調整手段を有していることとしてもよい。
具体的には、さらに、オーディオ音に対応するオーディオデータを取得するオーディオデータ取得手段を備える構成とすることが考えられる。この場合、音響効果調整手段は、オーディオデータ取得手段にて取得されたオーディオデータを、オーディオ音に基づく音場の形成に利用する。このようにすれば、比較的簡単に、オーディオ音に基づく音場を形成することができる。
Further , the sound field formation warning means may include acoustic effect adjustment means for forming a sound field based on the audio sound existing in the passenger compartment.
More specifically, in the et, it is conceivable to adopt a configuration including an audio data acquisition unit for obtaining audio data corresponding to audio sound. In this case, the sound effect adjusting means uses the audio data acquired by the audio data acquiring means for forming a sound field based on the audio sound. In this way, a sound field based on audio sound can be formed relatively easily.

なお、相対状況が自車両に接触する可能性のある対象物に関する情報として具現化されること、また、相対状況が自車両と車線境界線との位置関係に関する情報として具現化されることは最初に述べた。これらの具現化を考えると、上記車載警告装置を用いて構成される衝突警告装置として、また、上記車載警告装置を用いて構成される逸脱警告装置として実現することもできる。 It is the first time that the relative situation is embodied as information about an object that may come into contact with the host vehicle, and the relative situation is embodied as information about the positional relationship between the host vehicle and the lane boundary line. Said. Given these implementations, the collision warning device constituted by using the above SL-vehicle warning device, may also be implemented as a departure warning device constituted by using the above SL-vehicle warning device.

車載警告装置の機能ブロック図である。It is a functional block diagram of a vehicle-mounted warning device. 警告処理を示すフローチャートである。It is a flowchart which shows a warning process. 警告処理の中のパラメータ設定処理を示すフローチャートである。It is a flowchart which shows the parameter setting process in a warning process. 仮想壁の面積の算出方法を示す説明図である。It is explanatory drawing which shows the calculation method of the area of a virtual wall. 警告処理の中の疑似騒音生成処理を示すフローチャートである。It is a flowchart which shows the pseudo noise generation process in a warning process. 警告処理の中の音響効果調整処理を示すフローチャートである。It is a flowchart which shows the acoustic effect adjustment process in a warning process. 第2実施形態のパラメータ設定処理を示すフローチャートである。It is a flowchart which shows the parameter setting process of 2nd Embodiment. (a)は第2実施形態での仮想壁の面積の算出方法を示す説明図であり、(b)は第2実施形態での吸音率の算出方法を示す説明図である。(A) is explanatory drawing which shows the calculation method of the area of the virtual wall in 2nd Embodiment, (b) is explanatory drawing which shows the calculation method of the sound absorption factor in 2nd Embodiment.

以下、本発明の実施形態を図面に基づいて説明する。
[第1実施形態]
図1は、車載警告装置1の機能ブロック図である。車載警告装置1は、衝突警告装置であり、いわゆるコンピュータを中心に構成されている。この車載警告装置1は、相対状況検出部10と、警告要否判定部20と、仮想壁パラメータ設定部30と、疑似騒音生成部40と、音響効果調整部50と、音響信号重畳部60と、音響信号出力部70とを備えている。
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
[First Embodiment]
FIG. 1 is a functional block diagram of the in-vehicle warning device 1. The in-vehicle warning device 1 is a collision warning device, and is configured around a so-called computer. This in-vehicle warning device 1 includes a relative situation detection unit 10, a warning necessity determination unit 20, a virtual wall parameter setting unit 30, a pseudo noise generation unit 40, an acoustic effect adjustment unit 50, and an acoustic signal superimposition unit 60. And an acoustic signal output unit 70.

相対状況検出部10には、レーダ部、又は、路車間/車車間通信部からの情報が入力されるようになっている。これにより、相対状況検出部10は、自車両に対する対象物の相対方向と対象物までの距離を取得する。ここで対象物には、自車両との接触が考えられる全ての物が含まれる。他車両や歩行者などが一例であるが、建造物などの固定物であってもよい。   Information from the radar unit or the road-to-vehicle / vehicle-to-vehicle communication unit is input to the relative state detection unit 10. Thereby, the relative situation detection part 10 acquires the relative direction of the target object with respect to the own vehicle and the distance to the target object. Here, the objects include all objects that can be considered to come into contact with the host vehicle. Other vehicles and pedestrians are examples, but fixed objects such as buildings may be used.

警告要否判定部20は、相対状況検出部10にて検出された対象物の相対方向及び対象物との距離に基づき、警告が必要か否かを判定する。
仮想壁パラメータ設定部30は、仮想壁パラメータを設定する。仮想壁パラメータに含まれる仮想壁の位置は、運転者の左耳又は右耳の近傍に設定される。これにより、運転者の左耳又は右耳の近傍に仮想壁があるかのように、音場が形成される。仮想壁パラメータには、仮想壁の位置の他、「形状」、「厚み」、「面積」、「吸音率」及び運転者の耳からの「距離」が含まれる。なお、全てのパラメータを動的に設定してもよいが、一部のみを動的に設定し、残りは予め定められた値を用いるのが現実的である。
The warning necessity determination unit 20 determines whether or not a warning is necessary based on the relative direction of the target object detected by the relative situation detection unit 10 and the distance to the target object.
The virtual wall parameter setting unit 30 sets virtual wall parameters. The position of the virtual wall included in the virtual wall parameter is set in the vicinity of the driver's left ear or right ear. Thereby, a sound field is formed as if there is a virtual wall in the vicinity of the driver's left or right ear. The virtual wall parameters include “shape”, “thickness”, “area”, “sound absorption rate”, and “distance” from the driver's ear, in addition to the position of the virtual wall. Although all the parameters may be set dynamically, it is practical to set only a part of the parameters dynamically and use predetermined values for the rest.

疑似騒音生成部40には、騒音情報取得部41、及び、騒音データ格納部42が接続されている。
騒音情報取得部41は、騒音情報を取得する構成である。騒音情報は、車室内騒音に関する情報である。本実施形態では、騒音情報は、エアコン設定情報及び走行速度情報となっている。エアコン設定情報は、エアコンの風量設定、エアコンの吹き出し口設定、及び、エアコンの内気循環/外気導入設定の情報である。また、走行速度情報は、自車両の走行速度を示す情報である。
A noise information acquisition unit 41 and a noise data storage unit 42 are connected to the pseudo noise generation unit 40.
The noise information acquisition unit 41 is configured to acquire noise information. The noise information is information related to vehicle interior noise. In the present embodiment, the noise information is air conditioner setting information and travel speed information. The air conditioner setting information is information on the air volume setting of the air conditioner, the outlet setting of the air conditioner, and the inside air circulation / outside air introduction setting of the air conditioner. The traveling speed information is information indicating the traveling speed of the host vehicle.

また、騒音データ格納部42には、車室内騒音に対応する騒音データが格納されている。本実施形態では、エアコンに起因する車室内騒音に対応するエアコン騒音データと、走行速度に起因する車室内騒音に対応する走行騒音データとが格納されている。エアコン騒音データには、ファンの回転音データや送風音データが含まれる。走行騒音データには、道路ノイズデータや風切音データが含まれる。   The noise data storage unit 42 stores noise data corresponding to vehicle interior noise. In the present embodiment, air conditioner noise data corresponding to vehicle interior noise caused by an air conditioner and travel noise data corresponding to vehicle interior noise caused by travel speed are stored. The air conditioner noise data includes fan rotation sound data and blower sound data. The running noise data includes road noise data and wind noise data.

疑似騒音生成部40は、騒音情報取得部41にて取得されるエアコン設定情報に基づき車室内騒音を推定した後、騒音データ格納部42から、当該推定した車室内騒音に対応するエアコン騒音データを取得する。また、騒音情報取得部41にて取得される走行速度情報に基づき車室内騒音を推定した後、騒音データ格納部42から、当該推定した車室内騒音に対応する走行騒音データを取得する。そして取得されたエアコン騒音データ及び走行騒音データを用いて、仮想壁パラメータに応じた疑似騒音を生成する。   The pseudo noise generation unit 40 estimates vehicle interior noise based on the air conditioner setting information acquired by the noise information acquisition unit 41, and then receives air conditioner noise data corresponding to the estimated vehicle interior noise from the noise data storage unit 42. get. Further, after estimating the vehicle interior noise based on the traveling speed information acquired by the noise information acquisition unit 41, the travel noise data corresponding to the estimated vehicle interior noise is acquired from the noise data storage unit 42. And the pseudo noise according to a virtual wall parameter is produced | generated using the acquired air-conditioner noise data and driving noise data.

音響効果調整部50には、オーディオデータ取得部51が接続されている。オーディオデータ取得部51は、オーディオ機器からの再生信号を取得するものである。音響効果調整部50は、オーディオデータ取得部51から再生中のオーディオデータを取得し、取得したオーディオデータを用いて、仮想壁パラメータに応じて音響効果を調整する。なお、オーディオデータには、ラジオや音楽の他、ナビの音声案内等も含まれる。   An audio data acquisition unit 51 is connected to the sound effect adjustment unit 50. The audio data acquisition unit 51 acquires a reproduction signal from an audio device. The acoustic effect adjustment unit 50 acquires the audio data being reproduced from the audio data acquisition unit 51, and adjusts the acoustic effect according to the virtual wall parameter using the acquired audio data. The audio data includes not only radio and music but also navigation voice guidance.

音響信号重畳部60は、疑似騒音生成部40からの音響信号、及び、音響効果調整部50からの音響信号を重畳し、音響信号出力部70へ出力する。
音響信号出力部70には、複数のスピーカが接続されており、音響信号出力部70によって、当該スピーカを介し音響信号が出力される。
The acoustic signal superimposing unit 60 superimposes the acoustic signal from the pseudo noise generating unit 40 and the acoustic signal from the acoustic effect adjusting unit 50 and outputs the superimposed signal to the acoustic signal output unit 70.
The acoustic signal output unit 70 is connected to a plurality of speakers, and the acoustic signal output unit 70 outputs an acoustic signal via the speakers.

次に、車載警告装置1にて実行される警告処理を説明する。図2は、警告処理を示すフローチャートである。この警告処理は、所定時間間隔で繰り返し実行されるものである。
最初のS100では、対象物との相対方向及び距離を検出する。この処理は、相対状況検出部10の機能として実現されるものであり、レーダ部又は路車間/車車間通信部からの情報に基づき、対象物との相対方向及び距離が検出される。
Next, warning processing executed by the in-vehicle warning device 1 will be described. FIG. 2 is a flowchart showing the warning process. This warning process is repeatedly executed at predetermined time intervals.
In the first S100, the relative direction and distance to the object are detected. This process is realized as a function of the relative situation detection unit 10, and the relative direction and distance to the object are detected based on information from the radar unit or the road-to-vehicle / vehicle-to-vehicle communication unit.

S110では、対象物の相対方向及び対象物との距離に基づいて、警告が必要か否かを判定する。この処理は、警告要否判定部20の機能として実現される。ここで警告が必要であると判定された場合(S110:YES)、S120へ移行する。一方、警告が必要でないと判定された場合(S110:NO)、以降の処理を実行せず、警告処理を終了する。   In S110, it is determined whether a warning is necessary based on the relative direction of the object and the distance from the object. This process is realized as a function of the warning necessity determination unit 20. If it is determined that a warning is necessary (S110: YES), the process proceeds to S120. On the other hand, if it is determined that a warning is not necessary (S110: NO), the subsequent processing is not executed and the warning processing is terminated.

S120では、パラメータ設定処理を実行する。この処理は、パラメータ設定部30の機能として実現される。具体的には、図3に示す如くである。
図3中のS121では、対象物の相対方向に基づき、対象物が自車両の左側又は右側にあるか否かを判断する。ここで左側とは、車両の左側の所定角度範囲として設定することが考えられる。右側についても同様である。ここで対象物が左側又は右側にあると判断された場合(S121:YES)、S122へ移行する。一方、対象物が左側又は右側にないと判断された場合(S121:NO)、例えば設定された所定角度範囲以外の前側や後側にある場合には、以降の処理を実行せず、パラメータ設定処理を終了する。
In S120, parameter setting processing is executed. This process is realized as a function of the parameter setting unit 30. Specifically, it is as shown in FIG.
In S121 in FIG. 3, based on the relative direction of the object, it is determined whether the object is on the left side or the right side of the host vehicle. Here, the left side may be set as a predetermined angle range on the left side of the vehicle. The same applies to the right side. If it is determined that the object is on the left side or the right side (S121: YES), the process proceeds to S122. On the other hand, if it is determined that the object is not on the left side or the right side (S121: NO), for example, if it is on the front side or the rear side outside the set predetermined angle range, the subsequent processing is not executed and the parameter setting is performed. The process ends.

S122では、対象物が左側にあるか否かを判断する。ここで対象物が左側にあると判断された場合(S122:YES)、S123にて仮想壁の中心位置を運転者の左耳近傍に設定し、その後、S125へ移行する。一方、対象物が左側にないと判断された場合(S122:NO)、すなわち対象物が右側にある場合には、S124にて仮想壁の中心位置を運転者の右耳近傍に設定し、その後、S125へ移行する。   In S122, it is determined whether or not the object is on the left side. If it is determined that the object is on the left side (S122: YES), the center position of the virtual wall is set in the vicinity of the driver's left ear in S123, and then the process proceeds to S125. On the other hand, if it is determined that the object is not on the left side (S122: NO), that is, if the object is on the right side, the center position of the virtual wall is set near the right ear of the driver in S124, and thereafter , The process proceeds to S125.

S125では、対象物までの距離に応じて、仮想壁の面積を設定する。例えば図4に示すような関数Fを採用することが考えられる。この関数Fは、対象物までの距離dに応じて仮想壁の面積Sを段階的に算出するものである。   In S125, the area of the virtual wall is set according to the distance to the object. For example, it is conceivable to employ a function F as shown in FIG. This function F calculates the area S of the virtual wall in a stepwise manner according to the distance d to the object.

図4では、対象物までの距離dが「d≦d1」であるとき仮想壁の面積SはS2となり、対象物までの距離dが「d1<d≦d2」であるとき仮想壁の面積SはS1(<S2)となり、対象物までの距離dが「d2<d」であるとき仮想壁の面積Sは「0」となる。   In FIG. 4, the area S of the virtual wall is S2 when the distance d to the object is “d ≦ d1”, and the area S of the virtual wall when the distance d to the object is “d1 <d ≦ d2”. Is S1 (<S2), and when the distance d to the object is “d2 <d”, the area S of the virtual wall is “0”.

図3に戻り、次のS126では、仮想壁の「形状」、「厚み」、「吸音率」及び「距離」を設定する。この処理は、予め定められた値を設定するものである。S126の処理終了後、パラメータ設定処理を終了する。   Returning to FIG. 3, in the next S 126, the “shape”, “thickness”, “sound absorption rate”, and “distance” of the virtual wall are set. In this process, a predetermined value is set. After the process of S126 ends, the parameter setting process ends.

図2の説明に戻り、S130では、騒音情報を取得する。この処理は、疑似騒音生成部40の機能として実現され、騒音情報取得部41から騒音情報を取得するものである。上述したように、騒音情報には、エアコン設定情報及び走行速度情報が含まれる。   Returning to FIG. 2, in S130, noise information is acquired. This process is realized as a function of the pseudo noise generation unit 40 and acquires noise information from the noise information acquisition unit 41. As described above, the noise information includes air conditioner setting information and travel speed information.

続くS140では、疑似騒音生成処理を実行する。この処理も、疑似騒音生成部40の機能として実現される。具体的には、図5に示す如くである。
図5中のS141では、S130にて取得されるエアコン設定情報に基づき、エアコン騒音データを取得する。上述したように、エアコン騒音データは、騒音データ格納部42に格納されている。
In subsequent S140, a pseudo noise generation process is executed. This process is also realized as a function of the pseudo noise generation unit 40. Specifically, it is as shown in FIG.
In S141 in FIG. 5, air conditioner noise data is acquired based on the air conditioner setting information acquired in S130. As described above, the air conditioner noise data is stored in the noise data storage unit 42.

続くS142では、仮想壁パラメータに応じて、疑似騒音を生成する。この処理は、エアコン騒音データを用いて、仮想壁があるかのように、スピーカ毎の疑似騒音を生成するものである。   In subsequent S142, pseudo noise is generated according to the virtual wall parameter. This process generates pseudo noise for each speaker using the air conditioner noise data as if there is a virtual wall.

次のS143では、S130にて取得される走行速度情報に基づき、走行騒音データを取得する。上述したように、走行騒音データは騒音データ格納部42に格納されている。
続くS144では、仮想壁パラメータに応じて、疑似騒音を生成する。この処理は、走行騒音データを用いて、仮想壁があるかのように、スピーカ毎の疑似騒音を生成するものである。
In the next S143, travel noise data is acquired based on the travel speed information acquired in S130. As described above, the running noise data is stored in the noise data storage unit 42.
In subsequent S144, pseudo noise is generated according to the virtual wall parameters. In this process, pseudo noise for each speaker is generated using traveling noise data as if there is a virtual wall.

ここで疑似騒音の生成方法について説明する。
疑似騒音の生成には、一例として、頭部伝達関数(以下「HRTF」という)を用いることが考えられる。HRTFは厳密には顔形状などによっても異なるものとなるが、ここでは標準的な顔形状などを想定し、一般的なHRTFを用いることとする。HRTFを用いる場合の手順(1)〜(4)を次に示す。
Here, a method of generating pseudo noise will be described.
For example, a head-related transfer function (hereinafter referred to as “HRTF”) may be used to generate the pseudo noise. Strictly speaking, the HRTF varies depending on the face shape and the like, but here a standard face shape is assumed and a general HRTF is used. The procedures (1) to (4) when using HRTF are as follows.

手順(1)頭部への各入射方向に対するHRTFを計測する。
手順(2)仮想壁パラメータとして設定される仮想壁が存在するものとし、例えばエアコンのファン位置などの騒音源から運転者の両耳までの音の伝達特性を求める。伝達特性は、周波数毎の音量差や時間のずれを表すものである。この伝達特性は、音線法等を用いて求めることが考えられる。
Procedure (1) HRTF is measured for each direction of incidence on the head.
Procedure (2) It is assumed that there is a virtual wall set as a virtual wall parameter, and for example, a sound transmission characteristic from a noise source such as an air conditioner fan position to both ears of the driver is obtained. The transfer characteristic represents a volume difference or a time lag for each frequency. It can be considered that this transfer characteristic is obtained by using a sound ray method or the like.

手順(3)各入射方向に対応するHRTFに音の伝達特性を掛け合わせ、騒音源から運転者の両耳までの伝達関数を算出する。
手順(4)伝達関数に対しトランスオーラル技術などを用いて、スピーカから音波を出力する場合のフィルタ係数を、スピーカ毎に算出する。
Procedure (3) Multiply the sound transfer characteristics by the HRTF corresponding to each incident direction to calculate a transfer function from the noise source to the driver's ears.
Procedure (4) A filter coefficient when a sound wave is output from a speaker is calculated for each speaker using a trans-oral technique or the like for the transfer function.

図2の説明に戻り、S150では、音響効果調整処理を実行する。この処理は、音響効果調整部50の機能として実現される。具体的には、図6に示す如くである。
図6中のS151では、オーディオデータを取得する。この処理は、オーディオデータ取得部51からオーディオ機器にて再生中のオーディオデータを取得するものである。
Returning to the description of FIG. 2, in S <b> 150, sound effect adjustment processing is executed. This process is realized as a function of the sound effect adjustment unit 50. Specifically, it is as shown in FIG.
In S151 in FIG. 6, audio data is acquired. In this process, the audio data being reproduced by the audio device is acquired from the audio data acquisition unit 51.

続くS152では、仮想壁パラメータに応じて、音響効果を調整する。この処理は、オーディオデータを用いて、仮想壁があるかのように、スピーカ毎の音響効果を調整するものである。この処理も、疑似騒音の生成と同様、スピーカから音波を出力する場合のフィルタ係数をスピーカ毎に算出するものである。なお、この場合、上記手順(2)では各スピーカから運転者の両耳までの音の伝達特性を求め、上記手順(3)では、各スピーカから運転者の両耳までの伝達関数を算出する。   In subsequent S152, the acoustic effect is adjusted according to the virtual wall parameter. In this process, the audio effect is adjusted for each speaker using audio data as if there is a virtual wall. This process also calculates the filter coefficient for each speaker in the case of outputting sound waves from the speaker, as in the generation of pseudo noise. In this case, in the procedure (2), the transfer characteristic of the sound from each speaker to the driver's both ears is obtained, and in the procedure (3), the transfer function from each speaker to the driver's both ears is calculated. .

図2の説明に戻り、S160では、音響信号を重畳する。この処理は、音響信号重畳部60の機能として実現され、騒音データの音響信号とオーディオデータの音響信号とをスピーカ毎に重畳するものである。   Returning to the description of FIG. 2, in S160, the acoustic signal is superimposed. This process is realized as a function of the acoustic signal superimposing unit 60, and superimposes the acoustic signal of the noise data and the acoustic signal of the audio data for each speaker.

続くS170では、S160で重畳された音響信号を、フィルタ係数に基づきスピーカ毎に出力する。これにより、運転者には、対象物の相対方向及び対象物との距離に応じて、右耳又は左耳の近傍にあたかも仮想壁が存在するかのように、疑似騒音及びオーディオ音が聞こえる。   In subsequent S170, the acoustic signal superimposed in S160 is output for each speaker based on the filter coefficient. Accordingly, the driver can hear the pseudo noise and the audio sound as if the virtual wall exists near the right ear or the left ear according to the relative direction of the object and the distance from the object.

なお、疑似騒音生成処理(図5参照)では、エアコン設定情報に基づいてエアコン騒音データを取得し(S141)、走行速度情報に基づいて走行騒音データを取得している(S143)。このとき、エアコンがオフになっている場合には、無音のエアコン騒音データが取得されるものとする。また、走行速度が「0」(停車中)である場合には、無音の走行騒音データが取得されるものとする。また、音響効果調整処理(図6参照)では、再生中のオーディオデータを取得している(S151)。このとき、オーディオ機器がオフになっている場合には、無音のオーディオデータが取得されるものとする。   In the pseudo noise generation process (see FIG. 5), air conditioner noise data is acquired based on the air conditioner setting information (S141), and travel noise data is acquired based on the travel speed information (S143). At this time, if the air conditioner is turned off, silent air conditioner noise data is acquired. Further, when the traveling speed is “0” (stopped), silent traveling noise data is acquired. In the sound effect adjustment process (see FIG. 6), the audio data being reproduced is acquired (S151). At this time, if the audio device is turned off, silent audio data is acquired.

したがって、疑似騒音及びオーディオ音の全てが常に聞こえるとは限らない。ただし、走行中にのみ警告を行う構成であれば、少なくとも走行騒音データに基づく疑似騒音は聞こえることになる。   Therefore, not all the pseudo noise and the audio sound are always heard. However, if the warning is given only during traveling, at least pseudo noise based on the traveling noise data can be heard.

以上詳述したように本実施形態では、相対状況検出部10が、自車両の走行に関係する車外の事象である相対状況として、自車両に接触する可能性のある対象物に関する情報を検出する(図2中のS100)。仮想壁パラメータ設定部30は、車室内に仮想壁があるものとして音場を形成するために、仮想壁に関する仮想壁パラメータを、相対状況に応じて設定する(S120)。警告要否判定部20にて警告が必要であると判定された場合(S110:YES)、疑似騒音生成部40が仮想壁パラメータを基に騒音データを用いて疑似騒音を生成し(S140)、音響効果調整部50が仮想壁パラメータを基にオーディオデータを用いてオーディオ音の音響効果を調整する(S150)。その後、音響信号重畳部60及び音響信号出力部70により、疑似騒音及びオーディオ音が重畳されて出力される(S160,S170)。このとき、仮想壁の中心位置は、運転者の左耳又は右耳の近傍に設定される(図3中のS123,S124)。   As described above in detail, in the present embodiment, the relative situation detection unit 10 detects information related to an object that may come into contact with the host vehicle as a relative situation that is an event outside the vehicle related to the traveling of the host vehicle. (S100 in FIG. 2). The virtual wall parameter setting unit 30 sets virtual wall parameters related to the virtual wall according to the relative situation in order to form a sound field assuming that the virtual wall is in the vehicle interior (S120). When the warning necessity determination unit 20 determines that a warning is necessary (S110: YES), the pseudo noise generation unit 40 generates pseudo noise using noise data based on the virtual wall parameters (S140), The sound effect adjusting unit 50 adjusts the sound effect of the audio sound using the audio data based on the virtual wall parameter (S150). Thereafter, the pseudo noise and the audio sound are superimposed and output by the acoustic signal superimposing unit 60 and the acoustic signal output unit 70 (S160, S170). At this time, the center position of the virtual wall is set in the vicinity of the driver's left ear or right ear (S123, S124 in FIG. 3).

つまり、本実施形態では、例えば衝突の虞がある状況が発生した場合、当該状況に応じて仮想壁のパラメータを設定し、仮想壁があるものとして音場を形成して警告を行う。このとき、騒音データ及びオーディオデータを用いて音場を形成するため、警告音を用いた場合と比べ、運転者に不快感を抱かせたり煩わしさを感じさせたりすることがない。また、仮想壁を運転者の周辺位置に設定するため、仮想壁による音場の変化が運転者にとって分かり易くなり、十分な警告を行うことができる。   That is, in the present embodiment, for example, when a situation where there is a possibility of a collision occurs, a virtual wall parameter is set according to the situation, and a sound field is formed as if there is a virtual wall to give a warning. At this time, since the sound field is formed using the noise data and the audio data, the driver does not feel uncomfortable or bothered compared to the case where the warning sound is used. Further, since the virtual wall is set at the driver's peripheral position, the change in the sound field due to the virtual wall becomes easy for the driver to understand, and a sufficient warning can be given.

特に本実施形態では、仮想壁を運転者の頭部周辺位置、具体的には、仮想壁の中心位置を運転者の左耳又は右耳の近傍に設定するため(図3中のS123,S124)、仮想壁による音場の変化を分かり易いものにするという効果が際だつ。   In particular, in the present embodiment, the virtual wall is set in the vicinity of the driver's head, specifically, the center position of the virtual wall in the vicinity of the driver's left ear or right ear (S123, S124 in FIG. 3). ), The effect of making the change in the sound field due to the virtual wall easy to understand.

また、本実施形態では、仮想壁パラメータの設定において、対象物までの距離に応じて仮想壁の面積を設定している(図3中のS125)。これにより、相対状況に応じて、音場を変化させることができる。   In the present embodiment, in setting the virtual wall parameters, the area of the virtual wall is set according to the distance to the object (S125 in FIG. 3). Thereby, a sound field can be changed according to a relative condition.

さらにまた、本実施形態では、音響信号重畳部60により、疑似騒音及びオーディオ音が重畳される(S160)。これにより、騒音及びオーディオ音の両方の音に基づく音場が形成されるため、より自然に仮想壁の存在を運転者に認識させることができる。   Furthermore, in this embodiment, the pseudo noise and the audio sound are superimposed by the acoustic signal superimposing unit 60 (S160). As a result, a sound field based on both noise and audio sound is formed, so that the driver can recognize the existence of the virtual wall more naturally.

また、本実施形態では、疑似騒音生成部40が、騒音情報取得部41にて取得される騒音情報に基づき、車室内騒音を推定する。これにより、比較的簡単に車室内騒音に基づく音場を形成することができる。   In the present embodiment, the pseudo noise generation unit 40 estimates vehicle interior noise based on the noise information acquired by the noise information acquisition unit 41. As a result, a sound field based on vehicle interior noise can be formed relatively easily.

具体的には、エアコン設定情報、すなわちエアコンの風量設定、エアコンの吹き出し口設定、及び、エアコンの内気循環/外気導入設定に基づき、車室内騒音を推定する(図5中のS141)。これにより、エアコンの作動に起因する車室内騒音を推定することができる。   Specifically, the vehicle interior noise is estimated based on the air conditioner setting information, that is, the air conditioner air volume setting, the air conditioner outlet setting, and the air conditioner inside air circulation / outside air introduction setting (S141 in FIG. 5). Thereby, the vehicle interior noise resulting from the operation of the air conditioner can be estimated.

また、走行速度情報に基づき、車室内騒音を推定する(図5中のS143)。これにより、自車両の走行に起因する車室内騒音を推定することができる。
さらにまた、本実施形態では、疑似騒音生成部40が、騒音データ格納部42に格納された騒音データを、車室内騒音に基づく音場の形成に利用する(図5中のS142,S144)。これにより、比較的簡単に、車室内騒音に基づく音場を形成することができる。
Further, vehicle interior noise is estimated based on the travel speed information (S143 in FIG. 5). Thereby, the vehicle interior noise resulting from the traveling of the host vehicle can be estimated.
Furthermore, in this embodiment, the pseudo noise generation unit 40 uses the noise data stored in the noise data storage unit 42 to form a sound field based on vehicle interior noise (S142 and S144 in FIG. 5). Thereby, a sound field based on vehicle interior noise can be formed relatively easily.

また、本実施形態では、音響効果調整部50が、オーディオデータ取得部51にて取得されたオーディオデータを、オーディオ音に基づく音場の形成に利用する(図6中のS152)。これにより、比較的簡単にオーディオ音に基づく音場を形成することができる。   In the present embodiment, the acoustic effect adjustment unit 50 uses the audio data acquired by the audio data acquisition unit 51 for forming a sound field based on the audio sound (S152 in FIG. 6). Thereby, the sound field based on the audio sound can be formed relatively easily.

なお、本実施形態における車載警告装置1が特許請求の範囲の「車載警告装置」及び「衝突警告装置」を構成し、相対状況検出部10が「相対状況検出手段」を構成し、警告要否判定部20が「警告要否判定手段」を構成し、仮想壁パラメータ設定部30が「パラメータ設定手段」を構成し、疑似騒音生成部40が「疑似騒音生成手段」を構成し、騒音情報取得部41が「騒音情報取得手段」を構成し、騒音データ格納部42が「騒音データ格納手段」を構成し、音響効果調整部50が「音響効果調整手段」を構成し、オーディオデータ取得部51が「オーディオデータ取得手段」を構成し、疑似騒音生成部40、音響効果調整部50、音響信号重畳部60及び音響信号出力部が「音場形成警告手段」を構成する。   Note that the in-vehicle warning device 1 in the present embodiment constitutes “in-vehicle warning device” and “collision warning device” in the claims, and the relative situation detection unit 10 constitutes “relative situation detection means”. The determination unit 20 constitutes “warning necessity determination unit”, the virtual wall parameter setting unit 30 constitutes “parameter setting unit”, the pseudo noise generation unit 40 constitutes “pseudo noise generation unit”, and obtains noise information The unit 41 constitutes “noise information acquisition unit”, the noise data storage unit 42 constitutes “noise data storage unit”, the acoustic effect adjustment unit 50 constitutes “acoustic effect adjustment unit”, and the audio data acquisition unit 51 Constitutes “audio data acquisition means”, and the pseudo noise generation unit 40, the acoustic effect adjustment unit 50, the acoustic signal superimposition unit 60, and the acoustic signal output unit constitute “sound field formation warning means”.

[第2実施形態]
上記実施形態では、相対状況検出部10が、自車両に対する対象物の相対方向と対象物までの距離を取得するものであった。これに対し、本実施形態では、相対状況検出部10に対し、レーダ部及びカメラ部のうち少なくとも一方からの情報が入力されるようになっている。これにより、相対状況検出部10は、白線などで示される車線境界線の相対位置と相対距離とを取得する。すなわち、本実施形態において、車載警告装置1は、レーン逸脱警告装置として機能する。
[Second Embodiment]
In the embodiment described above, the relative situation detection unit 10 acquires the relative direction of the object with respect to the host vehicle and the distance to the object. On the other hand, in the present embodiment, information from at least one of the radar unit and the camera unit is input to the relative situation detection unit 10. As a result, the relative situation detection unit 10 acquires the relative position and the relative distance of the lane boundary indicated by a white line or the like. That is, in this embodiment, the vehicle-mounted warning device 1 functions as a lane departure warning device.

したがって、図2中のS100の処理が上記実施形態と異なり、本実施形態では、車線境界線の相対方向及び相対距離が検出される。
また、図2中のパラメータ設定処理が、上記実施形態と異なっている。そこで、以下では、パラメータ設定処理について説明する。図7は、パラメータ設定処理を示すフローチャートである。
Therefore, the processing of S100 in FIG. 2 is different from the above embodiment, and in this embodiment, the relative direction and the relative distance of the lane boundary line are detected.
Further, the parameter setting process in FIG. 2 is different from the above embodiment. Therefore, the parameter setting process will be described below. FIG. 7 is a flowchart showing the parameter setting process.

最初のS221では、車線境界線と交わる交差予想時間Tを算出する。この処理は、車線境界線の相対位置及び相対距離に基づき、車線境界線と自車両とが交わるまでの時間を算出するものである。   In the first S221, an expected intersection time T that intersects with the lane boundary line is calculated. This process calculates the time until the lane boundary line and the host vehicle intersect based on the relative position and relative distance of the lane boundary line.

続くS222では、交差予想時間Tが閾値Tthよりも小さいか否かを判断する。ここで、T<Tthである場合(S222:YES)、S223へ移行する。一方、T≧Tthである場合(S222:NO)、以降の処理を実行せず、パラメータ設定処理を終了する。   In subsequent S222, it is determined whether or not the expected intersection time T is smaller than the threshold value Tth. Here, when T <Tth (S222: YES), the process proceeds to S223. On the other hand, if T ≧ Tth (S222: NO), the subsequent processing is not executed and the parameter setting processing is terminated.

S223では、交わると予想される車線境界線が左側であるか否かを判断する。ここで車線境界線が左側であると判断された場合(S223:YES)、S224にて仮想壁の中心位置を運転者の左耳近傍に設定し、その後、S226へ移行する。一方、車線境界線が左側でないと判断された場合(S223:NO)、すなわち交わると予想される車線境界線が右側である場合には、S225にて仮想壁の中心位置を運転者の右耳近傍に設定し、その後、S226へ移行する。   In S223, it is determined whether or not the lane boundary line expected to intersect is on the left side. If it is determined that the lane boundary line is on the left side (S223: YES), the center position of the virtual wall is set in the vicinity of the driver's left ear in S224, and then the process proceeds to S226. On the other hand, when it is determined that the lane boundary line is not on the left side (S223: NO), that is, when the lane boundary line expected to intersect is on the right side, the center position of the virtual wall is determined by the driver's right ear in S225. Set to the vicinity, and then the process proceeds to S226.

S226では、交差予想時間Tに応じて仮想壁の面積を設定する。例えば図8(a)に示すような関数Fを採用することが考えられる。この関数Fは、交差予想時間Tに応じて仮想壁の面積Sを算出するものである。   In S226, the area of the virtual wall is set according to the expected intersection time T. For example, it is conceivable to employ a function F as shown in FIG. This function F calculates the area S of the virtual wall according to the expected intersection time T.

図8(a)では、交差予想時間Tが「0<T≦T1」であるとき仮想壁の面積SはSmaxとなり、交差予想時間Tが「T1」を越えると仮想壁の面積Sは徐々に小さくなっていき、交差予想時間が「TG」になると仮想壁の面積Sは「0」となる。   In FIG. 8A, the virtual wall area S becomes Smax when the predicted intersection time T is “0 <T ≦ T1”, and when the predicted intersection time T exceeds “T1”, the virtual wall area S gradually increases. The area S of the virtual wall becomes “0” as the estimated intersection time becomes “TG” as it becomes smaller.

図7に戻り、次のS227では、交差予想時間Tに応じて仮想壁の吸音率を設定する。このときの吸音率は、例えばランダム入射での吸音率とすることが考えられ、例えば図8(b)に示すように設定する。   Returning to FIG. 7, in the next S227, the sound absorption coefficient of the virtual wall is set according to the expected intersection time T. The sound absorption coefficient at this time may be set to, for example, the sound absorption coefficient at random incidence, and is set as shown in FIG. 8B, for example.

図8(b)では、交差予想時間Tが「T>Td」であるとき仮想壁の吸音率αはα1となり、交差予想時間Tが「T≦Td」であるとき仮想壁の吸音率αはα2となる。なお、α2<α1と設定するのが現実的である。すなわち、交差予想時間がTdよりも短いときは相対的に小さな吸音率α2を採用し、交差予想時間がTdよりも長いときは相対的に大きな吸音率α1を採用する。例えば、吸音率α1は樹脂材料の壁での実測値として、吸音率α2はコンクリート材料の壁での実測値として設定することが考えられる。これにより、車線境界線により接近している状況下では、仮想壁から反射される疑似騒音又はオーディオ音がより大きく聞こえることになる。   In FIG. 8B, the sound absorption coefficient α of the virtual wall is α1 when the estimated intersection time T is “T> Td”, and the sound absorption coefficient α of the virtual wall is α1 when the estimated intersection time T is “T ≦ Td”. α2. It is realistic to set α2 <α1. That is, when the estimated intersection time is shorter than Td, a relatively small sound absorption coefficient α2 is adopted, and when the estimated intersection time is longer than Td, a relatively large sound absorption coefficient α1 is adopted. For example, it is conceivable that the sound absorption coefficient α1 is set as an actual measurement value on the wall of the resin material, and the sound absorption coefficient α2 is set as an actual measurement value on the wall of the concrete material. Thereby, under the situation where the lane boundary is closer, the pseudo noise or the audio sound reflected from the virtual wall can be heard more greatly.

図7に戻り、S228では、仮想壁の「形状」、「厚み」及び「距離」を設定する。この処理は、予め定められた値を設定するものである。S228の処理終了後、パラメータ設定処理を終了する。   Returning to FIG. 7, in S228, the “shape”, “thickness”, and “distance” of the virtual wall are set. In this process, a predetermined value is set. After the process of S228 ends, the parameter setting process ends.

以上詳述したように本実施形態の車載警告装置1は、レーン逸脱警告装置であるという点で上記実施形態と異なるが、その他の構成による効果は、上記実施形態の車載警告装置1の効果と同様となる。   As described above in detail, the in-vehicle warning device 1 of the present embodiment is different from the above-described embodiment in that it is a lane departure warning device, but the effects of the other configurations are the same as the effects of the in-vehicle warning device 1 of the above embodiment. It becomes the same.

特に、本実施形態では、車線境界線と自車両とが交差するまでの時間である交差予想時間に応じて、仮想壁の面積及び吸音率の2つのパラメータを設定している。これにより、相対状況に応じて音場を変化させるという効果が際だつ。   In particular, in the present embodiment, two parameters, the area of the virtual wall and the sound absorption rate, are set according to the expected intersection time, which is the time until the lane boundary line and the host vehicle intersect. As a result, the effect of changing the sound field according to the relative situation is prominent.

なお、本実施形態では、車載警告装置1が特許請求の範囲の「車載警告装置」及び「レーン逸脱警告装置」を構成する。他の対応関係は、上記実施形態と同様である。
以上、本発明は、上述した実施形態に何ら限定されるものではなく、その技術的範囲を逸脱しない限りにおいて、種々なる形態で実施可能である。
In this embodiment, the in-vehicle warning device 1 constitutes the “in-vehicle warning device” and the “lane departure warning device” in the claims. Other correspondences are the same as in the above embodiment.
As described above, the present invention is not limited to the embodiment described above, and can be implemented in various forms without departing from the technical scope thereof.

(イ)上記第1実施形態では、図4に示したように、対象物との距離dに応じて段階的に仮想壁の面積Sを設定した。これに対し、第1実施形態においても、仮想壁の面積を、第2実施形態と同様、連続的な関数で設定してもよい。一方で、第2実施形態において、仮想壁の面積を、第1実施形態と同様、段階的に設定してもよい。あるいは、仮想壁の面積をテーブルなどで設定することも考えられる。   (A) In the first embodiment, as shown in FIG. 4, the area S of the virtual wall is set stepwise according to the distance d to the object. On the other hand, also in the first embodiment, the area of the virtual wall may be set by a continuous function as in the second embodiment. On the other hand, in the second embodiment, the area of the virtual wall may be set stepwise as in the first embodiment. Alternatively, it may be possible to set the area of the virtual wall with a table or the like.

(ロ)上記第1実施形態では、仮想壁の面積を、対象物との距離に応じて設定していた。また、上記第2実施形態では、仮想壁の面積を、車線境界線と交わるまでの交差予想時間に応じて設定していた。これに対し、例えば対象物や車線境界線の速度、加速度、移動方向、速度ベクトルの自車方向成分など、対象物や車線境界線との相対状況に応じて設定してもよい。   (B) In the first embodiment, the area of the virtual wall is set according to the distance from the object. Moreover, in the said 2nd Embodiment, the area of the virtual wall was set according to the intersection estimation time until it cross | intersects a lane boundary line. On the other hand, for example, the speed and acceleration of the target object or the lane boundary line, the moving direction, and the vehicle direction component of the speed vector may be set according to the relative situation with the target object or the lane boundary line.

(ハ)上記第1実施形態では、仮想壁の「形状」、「厚み」、「吸音率」及び「距離」を、予め定めた値に設定していた。また、上記第2実施形態では、仮想壁の「形状」、「厚み」及び「距離」を、予め定めた値に設定していた。これに対し、これらについても「面積」等と同様に、対象物や車線境界線との相対状況に応じて設定してもよい。   (C) In the first embodiment, the “shape”, “thickness”, “sound absorption rate”, and “distance” of the virtual wall are set to predetermined values. In the second embodiment, the “shape”, “thickness”, and “distance” of the virtual wall are set to predetermined values. On the other hand, these may be set according to the relative situation with respect to the object and the lane boundary line as in the “area” and the like.

(ニ)上記実施形態では、疑似騒音の生成や音響効果の調整に、HRTFを用いていた。これに対し、HRTFに代え、波面合成法などの手法を用いてもよい。波面合成法については、「 A.J.Berkhout et.al.,"Acoustic control by wave field synthesis,"J.Acoust.Soc.Am.93(5),May 1993 」などを参照されたい。   (D) In the above embodiment, the HRTF is used for generating pseudo-noise and adjusting the acoustic effect. On the other hand, instead of HRTF, a method such as a wavefront synthesis method may be used. For the wavefront synthesis method, see "A.J. Berkhout et.al.," Acoustic control by wave field synthesis, "J.Acoust.Soc.Am.93 (5), May 1993".

また、HRTFを用いる場合、より再現精度を高めるために、実際に耳元に壁を配置した状態でHRTFを計測してもよい。
(ホ)上記実施形態では、騒音データ格納部42に、予め騒音データとしてのエアコン騒音データ及び走行騒音データが格納された構成であった。これに対し、マイク等を用いて実際の騒音を収音し、収音された騒音信号を騒音データとして利用してもよい。
Moreover, when using HRTF, in order to improve reproducibility more, you may measure HRTF in the state which has actually arrange | positioned the wall to the ear | edge.
(E) In the above embodiment, the noise data storage unit 42 stores the air conditioner noise data and the running noise data as the noise data in advance. On the other hand, actual noise may be collected using a microphone or the like, and the collected noise signal may be used as noise data.

また、上記実施形態では、エアコン設定情報及び走行速度情報を騒音情報として利用し、車室内騒音を推定していた。これに対し、マイク等を用いて実際の騒音を収音し、収音された騒音信号を騒音情報として利用してもよい。   In the above embodiment, the air conditioner setting information and the traveling speed information are used as noise information to estimate vehicle interior noise. On the other hand, actual noise may be collected using a microphone or the like, and the collected noise signal may be used as noise information.

このように収音された騒音信号を利用することによって、実際の車室内騒音に近い疑似騒音に基づく音場の形成に寄与する。
(ヘ)上記実施形態では、疑似騒音を生成しているため、実際の騒音も同時に聞こえることになる。そこで、実際の騒音については、アクティブノイズキャンセラなどを利用して消し去るようにしてもよい。
By using the noise signal collected in this way, it contributes to the formation of a sound field based on pseudo noise close to actual vehicle interior noise.
(F) In the above embodiment, since pseudo noise is generated, actual noise can be heard at the same time. Therefore, actual noise may be erased using an active noise canceller or the like.

1:車載警告装置、10:相対状況検出部、20:警告要否判定部、30:仮想壁パラメータ設定部、40:疑似騒音生成部、41:騒音情報取得部、42:騒音データ格納部、50:音響効果調整部、51:オーディオデータ取得部、60:音響信号重畳部、70:音響信号出力部   1: vehicle-mounted warning device, 10: relative situation detection unit, 20: warning necessity determination unit, 30: virtual wall parameter setting unit, 40: pseudo noise generation unit, 41: noise information acquisition unit, 42: noise data storage unit, 50: Acoustic effect adjustment unit, 51: Audio data acquisition unit, 60: Acoustic signal superimposition unit, 70: Acoustic signal output unit

Claims (15)

自車両の走行に関係する車外の事象を、自車両に対する相対状況として検出する相対状況検出手段と、
車室内に仮想壁があるものとして音場を形成するために、前記仮想壁に関する仮想壁パラメータを、前記相対状況に応じて設定するパラメータ設定手段と、
前記相対状況に基づき、警告の要否を判定する警告要否判定手段と、
前記警告要否判定手段にて警告が必要であると判定された場合、前記仮想壁パラメータに基づき、前記仮想壁があるものとして前記車室内に存在する音に基づく音場を形成することで警告を行う音場形成警告手段と、を備え、
前記パラメータ設定手段は、前記仮想壁パラメータに含まれる前記仮想壁の位置を、運転者の周辺位置に設定し、前記相対状況に応じて、前記仮想壁パラメータに含まれる前記仮想壁の面積、吸音率、形状、及び、厚さのうち少なくとも一つを変更すること
を特徴とする車載警告装置。
A relative situation detecting means for detecting an event outside the vehicle related to the traveling of the host vehicle as a relative situation with respect to the host vehicle;
Parameter setting means for setting a virtual wall parameter related to the virtual wall according to the relative situation in order to form a sound field assuming that there is a virtual wall in the vehicle interior;
Warning necessity determination means for determining whether or not a warning is necessary based on the relative situation;
When it is determined by the warning necessity determination means that a warning is necessary, a warning is generated by forming a sound field based on the sound existing in the passenger compartment based on the virtual wall parameter, assuming that the virtual wall exists. Sound field formation warning means for performing,
The parameter setting means sets the position of the virtual wall included in the virtual wall parameter to a driver's peripheral position, and according to the relative situation, the area of the virtual wall included in the virtual wall parameter, sound absorption An in-vehicle warning device characterized by changing at least one of rate, shape, and thickness .
請求項1に記載の車載警告装置において、
前記パラメータ設定手段は、前記仮想壁パラメータに含まれる前記仮想壁の位置を、運転者の頭部周辺位置に設定すること
を特徴とする車載警告装置。
The in-vehicle warning device according to claim 1,
The on-vehicle warning device characterized in that the parameter setting means sets the position of the virtual wall included in the virtual wall parameter to a position around the head of the driver.
請求項2に記載の車載警告装置において、
前記パラメータ設定手段は、前記相対状況に応じて、前記仮想壁パラメータに含まれる前記仮想壁の位置を、運転者の左耳近傍又は右耳近傍に設定すること
を特徴とする車載警告装置。
The in-vehicle warning device according to claim 2,
The on-vehicle warning device characterized in that the parameter setting means sets the position of the virtual wall included in the virtual wall parameter in the vicinity of the left ear or the right ear of the driver according to the relative situation.
請求項1〜のいずれか一項に記載の車載警告装置において、
前記音場形成警告手段は、音響信号を重畳することで車室内に存在する複数の音に基づく音場を形成すること
を特徴とする車載警告装置。
In the in-vehicle warning device according to any one of claims 1 to 3 ,
The on-vehicle warning device characterized in that the sound field formation warning means forms a sound field based on a plurality of sounds existing in the vehicle interior by superimposing an acoustic signal.
請求項1〜のいずれか一項に記載の車載警告装置において、
前記音場形成警告手段は、車室内に存在する車室内騒音に基づく音場を形成するための疑似騒音生成手段を有していること
を特徴とする車載警告装置。
In the in-vehicle warning device according to any one of claims 1 to 4 ,
The on-vehicle warning device characterized in that the sound field forming warning means includes a pseudo noise generating means for forming a sound field based on vehicle interior noise existing in the vehicle interior.
請求項に記載の車載警告装置において、
さらに、前記車室内騒音に関する騒音情報を取得する騒音情報取得手段を備え、
前記疑似騒音生成手段は、前記騒音情報取得手段にて取得される前記騒音情報に基づき、前記車室内騒音を推定すること
を特徴とする車載警告装置。
The in-vehicle warning device according to claim 5 ,
And noise information acquisition means for acquiring noise information relating to the vehicle interior noise,
The on-vehicle warning device characterized in that the pseudo noise generation means estimates the vehicle interior noise based on the noise information acquired by the noise information acquisition means.
請求項に記載の車載警告装置において、
前記騒音情報取得手段は、エアコンの設定に関するエアコン設定情報を前記騒音情報として取得すること
を特徴とする車載警告装置。
The in-vehicle warning device according to claim 6 ,
The in-vehicle warning device characterized in that the noise information acquisition means acquires air conditioner setting information related to air conditioner settings as the noise information.
請求項に記載の車載警告装置において、
前記騒音情報取得手段は、前記エアコンの設定情報として、エアコンの風量設定、エアコンの吹き出し口設定、及び、エアコンの内気循環/外気導入設定のうち少なくとも一つを取得すること
を特徴とする車載警告装置。
The in-vehicle warning device according to claim 7 ,
The noise information acquisition means acquires at least one of air conditioner air volume setting, air conditioner outlet setting, and air conditioner internal air circulation / outside air introduction setting as the air conditioner setting information. apparatus.
請求項のいずれか一項に記載の車載警告装置において、
前記騒音情報取得手段は、自車両の走行速度を示す走行速度情報を前記騒音情報として取得すること
を特徴とする車載警告装置。
In the in-vehicle warning device according to any one of claims 6 to 8 ,
The in-vehicle warning device, wherein the noise information acquisition means acquires travel speed information indicating a travel speed of the host vehicle as the noise information.
請求項のいずれか一項に記載の車載警告装置において、
さらに、前記車室内騒音に対応する騒音データを格納する騒音データ格納手段を備え、
前記疑似騒音生成手段は、前記騒音データ格納手段に格納された前記騒音データを、前記車室内騒音に基づく音場の形成に利用すること
を特徴とする車載警告装置。
The in-vehicle warning device according to any one of claims 5 to 9 ,
And noise data storage means for storing noise data corresponding to the vehicle interior noise.
The on-board warning device, wherein the pseudo noise generation means uses the noise data stored in the noise data storage means to form a sound field based on the vehicle interior noise.
請求項10のいずれか一項に記載の車載警告装置において、
さらに、前記車室内騒音を収音可能となっており、収音された騒音信号を、前記車室内騒音に対応する騒音データとして、又は、前記車室内騒音に関する騒音情報として利用すること
を特徴とする車載警告装置。
In the in-vehicle warning device according to any one of claims 5 to 10 ,
Further, the vehicle interior noise can be collected, and the collected noise signal is used as noise data corresponding to the vehicle interior noise or as noise information related to the vehicle interior noise. In-vehicle warning device.
請求項1〜11のいずれか一項に記載の車載警告装置において、
前記音場形成警告手段は、車室内に存在するオーディオ音に基づく音場を形成するための音響効果調整手段を有していること
を特徴とする車載警告装置。
In the in-vehicle warning device according to any one of claims 1 to 11 ,
The on-vehicle warning device characterized in that the sound field forming warning means includes sound effect adjusting means for forming a sound field based on an audio sound existing in a passenger compartment.
請求項12に記載の車載警告装置において、
さらに、前記オーディオ音に対応するオーディオデータを取得するオーディオデータ取得手段を備え、
前記音響効果調整手段は、前記オーディオデータ取得手段にて取得された前記オーディオデータを、前記オーディオ音に基づく音場の形成に利用すること
を特徴とする車載警告装置。
The in-vehicle warning device according to claim 12 ,
Furthermore, an audio data acquisition means for acquiring audio data corresponding to the audio sound is provided,
The in-vehicle warning device, wherein the sound effect adjusting means uses the audio data acquired by the audio data acquiring means for forming a sound field based on the audio sound.
請求項1〜13の何れか一項に記載の車載警告装置を用いて構成され、
前記相対状況検出手段は、前記相対状況として、自車両に接触する可能性のある対象物に関する情報を検出することを特徴とする衝突警告装置。
It is constructed using the vehicle warning device according to any one of claim 1 to 13
The collision warning device according to claim 1, wherein the relative situation detection means detects information relating to an object that may contact the host vehicle as the relative situation.
請求項1〜13の何れか一項に記載の車載警告装置を用いて構成され、
前記相対状況検出手段は、前記相対状況として、自車両と車線境界線との位置関係に関する情報を検出することを特徴とするレーン逸脱警告装置。
It is constructed using the vehicle warning device according to any one of claim 1 to 13
The lane departure warning device according to claim 1, wherein the relative situation detection unit detects information on a positional relationship between the host vehicle and a lane boundary line as the relative situation.
JP2011200633A 2011-09-14 2011-09-14 In-vehicle warning device, collision warning device using the device, and lane departure warning device Expired - Fee Related JP5729228B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2011200633A JP5729228B2 (en) 2011-09-14 2011-09-14 In-vehicle warning device, collision warning device using the device, and lane departure warning device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011200633A JP5729228B2 (en) 2011-09-14 2011-09-14 In-vehicle warning device, collision warning device using the device, and lane departure warning device

Publications (2)

Publication Number Publication Date
JP2013060134A JP2013060134A (en) 2013-04-04
JP5729228B2 true JP5729228B2 (en) 2015-06-03

Family

ID=48185211

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011200633A Expired - Fee Related JP5729228B2 (en) 2011-09-14 2011-09-14 In-vehicle warning device, collision warning device using the device, and lane departure warning device

Country Status (1)

Country Link
JP (1) JP5729228B2 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110324483B (en) * 2018-03-30 2020-12-25 比亚迪股份有限公司 Vehicle, and adaptive adjustment sound effect system and method based on vehicle-mounted display terminal
CN112748408B (en) * 2020-12-22 2023-08-18 南京信息工程大学 Unmanned aerial vehicle automatic stealth method based on OODA ring

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS61252800A (en) * 1985-05-01 1986-11-10 Nissan Motor Co Ltd sound equipment
JP2000020071A (en) * 1998-06-30 2000-01-21 Paramount Glass Kogyo Kk Production of sound absorbing and thermally insulating wall panel and blow-in nozzle for producing sound absorbing and thermally insulating wall panel
JP2000224700A (en) * 1999-02-02 2000-08-11 Matsushita Electric Ind Co Ltd Sound field control device
JP2003216163A (en) * 2002-01-21 2003-07-30 Denso Corp Noise controller
JP2003279373A (en) * 2002-03-27 2003-10-02 Toshiba Corp Navigation apparatus, navigation method and program
JP4547985B2 (en) * 2004-05-18 2010-09-22 日産自動車株式会社 Driver perception control device
JP2009090848A (en) * 2007-10-10 2009-04-30 Mazda Motor Corp Vehicular warning system
JP2009286328A (en) * 2008-05-30 2009-12-10 Aisin Seiki Co Ltd Obstacle recognition supporting device

Also Published As

Publication number Publication date
JP2013060134A (en) 2013-04-04

Similar Documents

Publication Publication Date Title
KR102717039B1 (en) System and method for external sound synthesis of a vehicle
US7274288B2 (en) Vehicle alarm sound outputting device and program
US7327235B2 (en) Alarm sound outputting device for vehicle and program thereof
JP2013198065A (en) Sound presentation device
JP2008273251A (en) Vehicle alarm device
JP4557054B2 (en) In-vehicle stereophonic device
US7916039B2 (en) System for conveying audio information with a spatial characteristic to a vehicle occupant
JP2002513351A (en) Vehicle collision warning system
JP4538415B2 (en) Vehicle alarm device and horn auxiliary device
CN101755294B (en) Method to provide information to an observer about an emergency vehicle in operation, and corresponding equipment
JP2010502934A (en) Alarm sound direction detection device
JP2013013042A (en) Three-dimensional sound apparatus
JP2020154795A (en) Output controller, output control method, and output control program
JPWO2020039678A1 (en) Head-up display device
KR101747818B1 (en) Intelligent alarm apparatus of vehicle and method of the same
JP5853442B2 (en) Alarm sound generator
JP5729228B2 (en) In-vehicle warning device, collision warning device using the device, and lane departure warning device
JP2006190193A (en) Vehicle alarm device
CN112477757B (en) Vehicle orientation early warning method and device, vehicle and storage medium
JP2009078628A (en) Vehicular notifying system
JP2013008308A (en) Vehicle approach notification device
JP2010272911A (en) Sound information providing apparatus and sound information providing method
JP2002127854A (en) In-vehicle alarm device
WO2014087605A1 (en) 3d audio effect device
JP2009286186A (en) On-vehicle audio system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20131021

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20140821

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140909

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20141104

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20150310

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20150323

R151 Written notification of patent or utility model registration

Ref document number: 5729228

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees