JP2007089976A

JP2007089976A - Iris recognition apparatus and personal identification system

Info

Publication number: JP2007089976A
Application number: JP2005286627A
Authority: JP
Inventors: Kazuaki Ebara; 和明江原
Original assignee: Oki Electric Industry Co Ltd
Current assignee: Oki Electric Industry Co Ltd
Priority date: 2005-09-30
Filing date: 2005-09-30
Publication date: 2007-04-12

Abstract

<P>PROBLEM TO BE SOLVED: To provide a personal identification system capable of preventing the occurrence of a collation error due to an oblique visual axis and shortening a time required for the personal identification. <P>SOLUTION: This personal identification system includes an iris recognition apparatus comprising an image acquisition section acquiring an eye image of a recognition object person, and a code generation section generating an iris code based on the eye image. This iris recognition apparatus is further provided with a visual axis analysis section analyzing the direction of the visual axis of the recognition object person based on the eye image for determining whether or not the eyes of the recognition object person face the image acquisition section, and a control part, when the visual axis analysis section determines that the eyes face it, allowing the code generation section to execute generating operation. <P>COPYRIGHT: (C)2007,JPO&INPIT

Description

本発明は、目のアイリス（虹彩）を認識するアイリス認識装置と、認識されたアイリスによって個人識別を行う個人識別システムとに関する。 The present invention relates to an iris recognition device for recognizing an iris (iris) of an eye and a personal identification system for performing personal identification using the recognized iris.

目のアイリス（虹彩）を認識して個人を識別する個人識別システムは、一般的に、アイリス認識装置及び照合装置から構成されている。アイリス認識装置は、被識別者が装置の前に出現したことを検知すると、該被識別者の目を撮影してアイリス画像を取得し、該アイリス画像に対してコード化、即ち認識処理を行って、アイリスコードを生成する。照合装置は、アイリス認識装置により生成されたアイリスコードと、予め登録されているアイリスコードとを照合することにより、個人識別を行う。 A personal identification system that identifies an individual by recognizing an iris (iris) of an eye generally includes an iris recognition device and a collation device. When the iris recognition device detects that the identified person appears in front of the device, the iris recognition device captures the eye of the identified person to obtain an iris image, and performs coding, that is, recognition processing, on the iris image. To generate an iris code. The collation device performs personal identification by collating the iris code generated by the iris recognition device and the iris code registered in advance.

このような個人識別システムは、例えば入退室管理等に用いられており、そして、照合装置により被識別者が登録者、即ち本人であると判断されると、個人識別システムは、被識別者の入室を許可する許可信号を出力する。 Such a personal identification system is used, for example, for entrance / exit management, and when the identified device is determined to be a registrant, that is, the person himself / herself, Outputs a permission signal permitting entry.

しかしながら、アイリス認識装置の前に立つ被識別者が、例えばカメラの方向ではなく斜め方向を向いていた場合、取得されたアイリス画像は変形して楕円状になってしまう。この楕円状になったアイリス画像のコード化を行うと、不正確なアイリスコードが生成されてしまい、被識別者が登録者であっても、登録されているアイリスコードとは一致しないため、照合エラーが発生してしまう問題があった。 However, when the person to be identified standing in front of the iris recognition device is facing, for example, an oblique direction rather than a camera direction, the acquired iris image is deformed and becomes elliptical. If this iris image is encoded, an incorrect iris code is generated, and even if the identified person is a registrant, it does not match the registered iris code. There was a problem that an error occurred.

照合エラーが発生した場合、個人識別システムは、被識別者の目の再撮影から始まり、アイリスコードの生成及び照合処理までの動作を、規定回数繰り返すこととなる。そして、被識別者が登録者である場合に、上記した斜めの視線による照合エラーが発生すると、個人識別システムは、該登録者の入室が許可されるまで上記した動作を繰り返すこととなる。そのため、不正確なアイリスコードの生成及び該アイリスコードに対する照合処理に無駄な時間を費やすこととなり、個人識別に要する時間が長くなってしまう。 When a collation error occurs, the personal identification system repeats a specified number of operations starting from the re-photographing of the identified person's eyes until the iris code generation and collation processing. When the identified person is a registrant and a verification error occurs due to the above-described oblique line of sight, the personal identification system repeats the above-described operation until the registrant is allowed to enter the room. For this reason, useless time is spent in generating an incorrect iris code and collating the iris code, and the time required for personal identification becomes longer.

従って、斜めの視線による照合エラーの発生を防止可能且つ個人識別に要する時間を短縮可能な個人識別システムが望まれていた。 Accordingly, there has been a demand for a personal identification system that can prevent a collation error due to an oblique line of sight and can reduce the time required for personal identification.

本発明は、以上の点を解決するために、次の構成を採用する。 The present invention adopts the following configuration in order to solve the above points.

〈構成１〉
本発明に係るアイリス認識装置は、被識別者の目画像を取得する画像取得部と、目画像に基づいてアイリスコードを生成するコード生成部とを備え、被識別者の目が画像取得部に対向しているか否かを判断するために、目画像に基づいて被識別者の目の視線方向を解析する視線解析部と、視線解析部により目が対向していると判断されると、コード生成部に生成動作を行わせる制御部とを更に備えることを特徴とする。 <Configuration 1>
An iris recognition apparatus according to the present invention includes an image acquisition unit that acquires an eye image of an identified person, and a code generation unit that generates an iris code based on the eye image, and the eyes of the identified person are included in the image acquisition unit. To determine whether the eyes are facing each other, a line-of-sight analysis unit that analyzes the line-of-sight direction of the identified person's eyes based on the eye image, and a line-of-sight analysis unit that determines that the eyes are facing each other And a control unit that causes the generation unit to perform a generation operation.

本発明に係るアイリス認識装置において、視線解析部は、画像取得部により取得された目画像における瞳孔部分の形状に基づいて視線方向を解析することができる。 In the iris recognition device according to the present invention, the line-of-sight analysis unit can analyze the line-of-sight direction based on the shape of the pupil portion in the eye image acquired by the image acquisition unit.

また、視線解析部は、画像取得部により取得された目画像における白目部分に基づいて視線方向を解析することもできる。 The line-of-sight analysis unit can also analyze the line-of-sight direction based on the white eye portion in the eye image acquired by the image acquisition unit.

この場合、画像取得部として、被識別者の目を撮影するカメラを採用することができる。そして、視線解析部は、解析された視線方向がカメラのレンズの光軸に一致するか否かにより判断動作を行う。 In this case, a camera that captures the eyes of the person to be identified can be employed as the image acquisition unit. Then, the line-of-sight analysis unit performs a determination operation based on whether or not the analyzed line-of-sight direction matches the optical axis of the camera lens.

〈構成２〉
本発明に係るアイリス認識装置は、被識別者の顔画像を取得する顔画像取得部と、被識別者の目画像を取得する目画像取得部と、顔画像における被識別者の目の位置を検出する位置検出部と、検出された目の位置に対応させて目画像取得部を調整する制御部と、目画像に基づいてアイリスコードを生成するコード生成部とを備え、被識別者の目が目画像取得部に対向しているか否かを判断するために、顔画像及び目の位置に基づいて被識別者の目の視線方向を解析する視線解析部を更に備え、視線解析部により目が対向していると判断されると、制御部は、目画像取得部に画像取得動作を行わせることを特徴とする。 <Configuration 2>
An iris recognition apparatus according to the present invention includes a face image acquisition unit that acquires a face image of an identified person, an eye image acquisition unit that acquires an eye image of the identified person, and a position of the eye of the identified person in the face image. A position detection unit for detection, a control unit for adjusting the eye image acquisition unit corresponding to the detected eye position, and a code generation unit for generating an iris code based on the eye image. In order to determine whether or not the eye image acquisition unit faces the eye image acquisition unit, the eye gaze analysis unit further analyzes a gaze direction of the eye of the identified person based on the face image and the eye position. Are determined to face each other, the control unit causes the eye image acquisition unit to perform an image acquisition operation.

本発明に係るアイリス認識装置において、位置検出部により検出された目の位置に基づいて、顔画像から目部分画像を抽出する抽出部を更に備え、視線解析部は、目部分画像における瞳孔部分の形状に基づいて視線方向を解析することができる。 In the iris recognition apparatus according to the present invention, the iris recognition device further includes an extraction unit that extracts an eye part image from the face image based on the position of the eye detected by the position detection unit, and the line-of-sight analysis unit includes a pupil part of the eye part image. The line-of-sight direction can be analyzed based on the shape.

また、本発明に係るアイリス認識装置において、位置検出部により検出された目の位置に基づいて、顔画像から目部分画像を抽出する抽出部を更に備え、視線解析部は、目部分画像における白目部分に基づいて視線方向を解析することもできる。 The iris recognition apparatus according to the present invention further includes an extraction unit that extracts an eye partial image from the face image based on the eye position detected by the position detection unit, and the line-of-sight analysis unit includes the white eye in the eye partial image. The line-of-sight direction can also be analyzed based on the portion.

この場合、顔画像取得部として、被識別者の顔を撮影する顔撮影カメラを採用することができる。また、目画像取得部として、被識別者の目を撮影する目撮影カメラを採用することができる。そして、視線解析部は、解析された視線方向が顔撮影カメラのレンズの光軸に一致するか否かにより判断動作を行い、制御部は、目撮影カメラを位置検出部により検出された目の位置に合焦させて撮影動作を行わせる。 In this case, a face photographing camera that photographs the face of the person to be identified can be employed as the face image acquisition unit. Further, an eye photographing camera that photographs the eyes of the identified person can be employed as the eye image acquisition unit. The line-of-sight analysis unit performs a determination operation based on whether or not the analyzed line-of-sight direction coincides with the optical axis of the lens of the face photographing camera, and the control unit detects the eye photographing camera detected by the position detection unit. Focus on the position and perform the shooting operation.

〈構成３〉
本発明に係る個人識別システムは、被識別者の目画像を取得する画像取得部と、目画像に基づいてアイリスコードを生成するコード生成部とを備えるアイリス認識装置を含み、アイリス認識装置は、被識別者の目が画像取得部に対向しているか否かを判断するために、目画像に基づいて被識別者の目の視線方向を解析する視線解析部と、視線解析部により目が対向していると判断されると、コード生成部に生成動作を行わせる制御部とを更に備えることを特徴とする。 <Configuration 3>
A personal identification system according to the present invention includes an iris recognition device including an image acquisition unit that acquires an eye image of a person to be identified and a code generation unit that generates an iris code based on the eye image. In order to determine whether or not the eyes of the identified person are facing the image acquisition unit, the eyes are opposed by the line-of-sight analysis unit that analyzes the line-of-sight direction of the identified person's eyes based on the eye image. And a control unit that causes the code generation unit to perform a generation operation when it is determined that the code generation unit is operating.

本発明に係る個人識別システムにおいて、視線解析部は、画像取得部により取得された目画像における瞳孔部分の形状に基づいて視線方向を解析することができる。 In the personal identification system according to the present invention, the line-of-sight analysis unit can analyze the line-of-sight direction based on the shape of the pupil portion in the eye image acquired by the image acquisition unit.

また、視線解析部は、画像取得部により取得された目画像における白目部分に基づいて視線方向を解析することができる。 The line-of-sight analysis unit can analyze the line-of-sight direction based on the white-eye portion in the eye image acquired by the image acquisition unit.

〈構成４〉
本発明に係る個人識別システムは、被識別者の顔画像を取得する顔画像取得部と、被識別者の目画像を取得する目画像取得部と、顔画像における被識別者の目の位置を検出する位置検出部と、検出された目の位置に対応させて目画像取得部を調整する制御部と、目画像に基づいてアイリスコードを生成するコード生成部とを備えるアイリス認識装置を含み、アイリス認識装置は、被識別者の目が目画像取得部に対向しているか否かを判断するために、顔画像及び目の位置に基づいて被識別者の目の視線方向を解析する視線解析部を更に備え、視線解析部により目が対向していると判断されると、制御部は、目画像取得部に画像取得動作を行わせることを特徴とする。 <Configuration 4>
A personal identification system according to the present invention includes a face image acquisition unit that acquires a face image of an identified person, an eye image acquisition unit that acquires an eye image of the identified person, and a position of the eye of the identified person in the face image. An iris recognition device comprising: a position detection unit to detect; a control unit that adjusts the eye image acquisition unit corresponding to the detected eye position; and a code generation unit that generates an iris code based on the eye image; The iris recognition device analyzes the line-of-sight direction of the identified person's eyes based on the face image and the position of the eyes in order to determine whether or not the identified person's eyes are facing the eye image acquisition unit And a control unit that causes the eye image acquisition unit to perform an image acquisition operation when it is determined by the line-of-sight analysis unit that the eyes are facing each other.

本発明に係る個人識別システムにおいて、アイリス認識装置は、位置検出部により検出された目の位置に基づいて、顔画像から目部分画像を抽出する抽出部を更に備え、視線解析部は、目部分画像における瞳孔部分の形状に基づいて視線方向を解析することができる。 In the personal identification system according to the present invention, the iris recognition device further includes an extraction unit that extracts an eye part image from the face image based on the eye position detected by the position detection unit, and the line-of-sight analysis unit includes the eye part The line-of-sight direction can be analyzed based on the shape of the pupil portion in the image.

また、本発明に係る個人識別システムにおいて、アイリス認識装置は、位置検出部により検出された目の位置に基づいて、顔画像から目部分画像を抽出する抽出部を更に備え、視線解析部は、目部分画像における白目部分に基づいて視線方向を解析することもできる。 In the personal identification system according to the present invention, the iris recognition device further includes an extraction unit that extracts an eye partial image from the face image based on the eye position detected by the position detection unit, and the line-of-sight analysis unit includes: The line-of-sight direction can also be analyzed based on the white-eye portion in the eye-part image.

本発明の個人識別システムによれば、アイリス認識装置は、取得した目の画像に基づいて視線方向を解析し、視線が画像取得部に対向している目の画像のみに対してアイリス認識処理を行うので、斜めの視線による照合エラーの発生を防止すると共に、個人識別に要する時間を短縮することができる。 According to the personal identification system of the present invention, the iris recognition device analyzes the line-of-sight direction based on the acquired eye image, and performs the iris recognition process only on the eye image whose line of sight faces the image acquisition unit. As a result, it is possible to prevent occurrence of a collation error due to an oblique line of sight and to reduce the time required for personal identification.

以下、本発明の実施形態を図を用いて詳細に説明する。 Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.

図１は、本発明に係る個人識別システムの実施例１の構成を示すブロック図である。
本発明に係る個人識別システム１０は、図１に示されているように、アイリス認識装置１１を含んでいる。この個人識別システム１０を利用して、入退室管理等を行うことができる。本実施例では、個人識別システム１０は、入退室が管理される部屋のドア横の壁に設置されているものとする。 FIG. 1 is a block diagram showing a configuration of a first embodiment of a personal identification system according to the present invention.
The personal identification system 10 according to the present invention includes an iris recognition device 11 as shown in FIG. This personal identification system 10 can be used for entrance / exit management and the like. In this embodiment, it is assumed that the personal identification system 10 is installed on the wall next to the door of a room where entry / exit is managed.

アイリス認識装置１１は、距離センサ１２、パネル部１３、音声出力部１４、カメラ１５、画像記憶部１６、品質判別部１７、視線解析部１８、コード生成部１９及びこれら各部を制御する制御部２３を備えている。 The iris recognition apparatus 11 includes a distance sensor 12, a panel unit 13, an audio output unit 14, a camera 15, an image storage unit 16, a quality determination unit 17, a line-of-sight analysis unit 18, a code generation unit 19, and a control unit 23 that controls these units. It has.

距離センサ１２は、個人識別システム１０の前に出現した被識別者を検知して、該被識別者と個人識別システム１０との間の距離を計測して、制御部２３へ出力する機能を有する。 The distance sensor 12 has a function of detecting a person to be identified who appears in front of the personal identification system 10, measuring a distance between the person to be identified and the personal identification system 10, and outputting the distance to the control unit 23. .

パネル部１３は、本実施例では個人識別システム１０の前面に配置されたパネルからなり、カメラ１５のレンズの前面位置にライトを有している。そして、パネル部１３は、被識別者の視線をカメラ１５へ向けさせるために、制御部２３の制御により、被識別者が近づくとライトを点灯させる機能を有する。 In this embodiment, the panel unit 13 is a panel disposed on the front surface of the personal identification system 10, and has a light at the front surface position of the lens of the camera 15. The panel unit 13 has a function of turning on the light when the person to be identified approaches under the control of the control unit 23 in order to direct the line of sight of the person to be identified toward the camera 15.

音声出力部１４は、被識別者を誘導するガイダンス等を音声により出力する機能を有する。 The voice output unit 14 has a function of outputting guidance or the like for guiding the identified person by voice.

カメラ１５は、被識別者の目を撮影してアイリス部分を含む画像データ、即ち目画像を取得する画像取得部である。 The camera 15 is an image acquisition unit that acquires the image data including the iris portion by photographing the eyes of the person to be identified, that is, the eye image.

画像記憶部１６は、カメラ１５により取得された目画像を一時的に記憶する一時記憶部である。 The image storage unit 16 is a temporary storage unit that temporarily stores an eye image acquired by the camera 15.

品質判別部１７は、画像記憶部１６に記憶された目画像を読み出して、該目画像の品質の良否を判別する機能を有する。本実施例では、品質判別部１７による品質の良否の判別は、目画像の合焦度、明度及び目画像に含まれるアイリス部分の大きさに基づいて行われる。 The quality determination unit 17 has a function of reading out the eye image stored in the image storage unit 16 and determining whether the quality of the eye image is good or bad. In this embodiment, the quality determination unit 17 determines whether the quality is good or not based on the degree of focus and brightness of the eye image and the size of the iris portion included in the eye image.

視線解析部１８は、被識別者の目がカメラ１５のレンズに対向しているか否かを判断するために、画像記憶部１６に記憶された目画像に基づいて被識別者の目の視線方向を解析する機能を有する。本実施例では、視線解析部１８による視線方向の解析は、目画像における瞳孔部分の形状に基づいて行われ、解析された視線方向がカメラ１５のレンズの光軸に一致するか否かにより対向しているか否かの判断が行われる。 The line-of-sight analysis unit 18 determines whether the eye of the identified person faces the lens of the camera 15 based on the eye image stored in the image storage unit 16. It has a function to analyze. In this embodiment, the analysis of the gaze direction by the gaze analysis unit 18 is performed based on the shape of the pupil part in the eye image, and it is opposed depending on whether or not the analyzed gaze direction matches the optical axis of the lens of the camera 15. A determination is made as to whether or not.

コード生成部１９は、画像記憶部１６に記憶された目画像に含まれるアイリス部分の画像から、その特徴を抽出してコード化したアイリスコードを生成する機能を有する。 The code generation unit 19 has a function of generating an iris code that is encoded by extracting the feature from the image of the iris portion included in the eye image stored in the image storage unit 16.

個人識別システム１０は、上記したアイリス認識装置１１の他に、更に、格納部２０、照合部２１及び結果出力部２２を有している。 In addition to the iris recognition device 11 described above, the personal identification system 10 further includes a storage unit 20, a collation unit 21, and a result output unit 22.

格納部２０は、登録者の正確なアイリスコード、即ち登録コードを予め記憶している。 The storage unit 20 stores in advance an accurate iris code of a registrant, that is, a registration code.

照合部２１は、コード生成部１９により生成されたアイリスコードと、格納部２０に格納された登録コードとを照合する機能を有する。 The collation unit 21 has a function of collating the iris code generated by the code generation unit 19 with the registration code stored in the storage unit 20.

結果出力部２２は、照合部２１による照合結果に応じた出力を行う機能を有する。本実施例では、照合部２１により被識別者が登録者であると照合されると、結果出力部２２は、例えば入室又は退室を許可するための許可信号を出力するものとする。そして、この許可信号を受けて、ドアの電子錠が開錠されてドアが開き、被識別者の入室又は退室が可能となる。 The result output unit 22 has a function of performing output according to the collation result by the collation unit 21. In the present embodiment, when the person to be identified is collated by the collation unit 21, the result output unit 22 outputs a permission signal for permitting entry or exit, for example. In response to this permission signal, the electronic lock of the door is unlocked and the door is opened, and the person to be identified can enter or leave the room.

制御部２３は、アイリス認識装置１１を含む個人識別システム１０の各部１２〜２２を制御する機能を有する。 The control unit 23 has a function of controlling the units 12 to 22 of the personal identification system 10 including the iris recognition device 11.

次に、個人識別システム１０を利用した個人識別の処理の流れについて、図を用いて詳しく説明する。
図２は、本発明に係る個人識別システムの実施例１における動作を示すフローチャートである。 Next, the flow of personal identification processing using the personal identification system 10 will be described in detail with reference to the drawings.
FIG. 2 is a flowchart showing the operation of the personal identification system according to the first embodiment of the present invention.

被識別者が入室又は退室するために個人識別システム１０に近づくと、距離センサ１２が該被識別者を検知して、被識別者と個人識別システム１０との間の距離を計測して制御部２３へ出力する（Ｓ１０１）。 When the identified person approaches the personal identification system 10 to enter or leave the room, the distance sensor 12 detects the identified person, measures the distance between the identified person and the personal identification system 10, and controls the controller. 23 (S101).

制御部２３は、距離センサ１２により出力された距離と所定距離とを比較して、アイリスを撮影するのに適した所定距離範囲内に入る（Ｓ１０２）と、目画像の取得のための制御を開始する。 The control unit 23 compares the distance output by the distance sensor 12 with the predetermined distance, and enters the predetermined distance range suitable for photographing the iris (S102), and performs control for acquiring the eye image. Start.

制御部２３は、まず、パネル部１３のライトを点灯させ、音声出力部１４に例えば「撮影を開始します。ライトを見て下さい」等のガイダンスを音声により出力させる（Ｓ１０３）。 First, the control unit 23 turns on the light of the panel unit 13 and causes the audio output unit 14 to output a guidance such as “Start shooting. Look at the light” by voice (S103).

つづいて、制御部２３は、カメラ１５に被識別者の目を撮影させて、目画像を取得させる（Ｓ１０４）。カメラ１５により取得された目画像は、画像記憶部１６に一時的に記憶される。 Subsequently, the control unit 23 causes the camera 15 to photograph the eyes of the person to be identified and obtains an eye image (S104). The eye image acquired by the camera 15 is temporarily stored in the image storage unit 16.

次に、制御部２３は、品質判別部１７に画像記憶部１６に記憶された目画像の品質の良否を判別させる（Ｓ１０５）。 Next, the control unit 23 causes the quality determination unit 17 to determine whether the quality of the eye image stored in the image storage unit 16 is good or bad (S105).

品質判別部１７により目画像の品質が不良であると判別されると、制御部２３は、再度目画像を取得するための制御を行い（Ｓ１０３）、カメラ１５に目画像を取得させる（Ｓ１０４）。この際、例えば、品質判別部１７が目画像におけるアイリス部分の大きさが小さく、合焦していないと判断した場合、制御部２３は、音声出力部１４に「装置に近づいて下さい」等のガイダンスを出力させても良い。 If the quality determination unit 17 determines that the quality of the eye image is poor, the control unit 23 performs control for acquiring the eye image again (S103), and causes the camera 15 to acquire the eye image (S104). . At this time, for example, when the quality discriminating unit 17 determines that the size of the iris portion in the eye image is small and not in focus, the control unit 23 notifies the audio output unit 14 such as “Please approach the device”. Guidance may be output.

目画像の品質が良好であると判別される（Ｓ１０５）と、制御部２３は、視線解析部１８に該目画像に基づいて被識別者の目の視線方向を解析させる（Ｓ１０６）。そして、被識別者の目がカメラ１５のレンズに対向しているか否かを、解析された視線方向がカメラ１５のレンズの光軸に一致するか否かにより判断する（Ｓ１０７）。 When it is determined that the quality of the eye image is good (S105), the control unit 23 causes the line-of-sight analysis unit 18 to analyze the line-of-sight direction of the identified person based on the eye image (S106). Then, whether or not the eye of the person to be identified is facing the lens of the camera 15 is determined based on whether or not the analyzed line-of-sight direction matches the optical axis of the lens of the camera 15 (S107).

ここで、視線解析部１８による視線方向の解析は、目画像における瞳孔部分の形状に基づいて行われる。即ち、瞳孔部分の形状が真円であれば、視線解析部１８は、視線方向がカメラ１５のレンズの光軸に一致する、即ち被識別者の目がカメラ１５のレンズに対向していると判断する。そして、瞳孔部分の形状が真円でなければ、視線解析部１８は、被識別者の目がカメラ１５のレンズに対向していないと判断する。 Here, the analysis of the gaze direction by the gaze analysis unit 18 is performed based on the shape of the pupil portion in the eye image. That is, if the shape of the pupil part is a perfect circle, the line-of-sight analysis unit 18 determines that the line-of-sight direction coincides with the optical axis of the lens of the camera 15, that is, the eye of the person to be identified faces the lens of the camera 15. to decide. If the shape of the pupil portion is not a perfect circle, the line-of-sight analysis unit 18 determines that the eye of the person to be identified is not facing the lens of the camera 15.

被識別者の目がカメラ１５のレンズに対向していないと判断されると、制御部２３は、再度目画像を取得するための制御を行い（Ｓ１０３）、カメラ１５に目画像を取得させる（Ｓ１０４）。この際、制御部２３は、音声出力部１４に、例えば「視線が合っていないので再度撮影を行います。ライトを見て下さい」等のガイダンスを出力させても良い。 When it is determined that the eye of the person to be identified is not facing the lens of the camera 15, the control unit 23 performs control for acquiring the eye image again (S103), and causes the camera 15 to acquire the eye image (S103). S104). At this time, the control unit 23 may cause the audio output unit 14 to output a guidance such as “Shoot again because the line of sight does not match. Look at the light”.

被識別者の目がカメラ１５のレンズに対向していると判断される（Ｓ１０７）と、制御部２３は、この目画像を用いたアイリス認識処理を実施する。即ち、コード生成部１９が、該目画像に含まれるアイリス部分の画像から、その特徴を抽出してコード化することにより、アイリスコードを生成する（Ｓ１０８）。生成されたアイリスコードは、画像記憶部１６に一時的に記憶される。 When it is determined that the eye of the person to be identified is facing the lens of the camera 15 (S107), the control unit 23 performs an iris recognition process using the eye image. That is, the code generation unit 19 generates an iris code by extracting and coding the feature from the image of the iris portion included in the eye image (S108). The generated iris code is temporarily stored in the image storage unit 16.

続いて、制御部２３は、照合部２１に、画像記憶部１６に記憶されたアイリスコードと格納部２０に格納された登録コードとの照合処理を行わせる（Ｓ１０９）。 Subsequently, the control unit 23 causes the collation unit 21 to perform collation processing between the iris code stored in the image storage unit 16 and the registration code stored in the storage unit 20 (S109).

照合処理の結果、被識別者のアイリスコードが登録コードと一致すると判断される（Ｓ１１０）と、被識別者は登録者であると判断され、制御部２３は、音声出力部１４に例えば「認証されました」等の音声を出力させると共に、結果出力部２２に許可信号を出力させて（Ｓ１１１）、個人識別システム１０は処理を終了する。なお、許可信号を受けると、ドアの電子錠が開錠されてドアが開き、被識別者は入室又は退室することができる。 If it is determined that the iris code of the identified person matches the registered code as a result of the collation process (S110), it is determined that the identified person is a registered person, and the control unit 23 sends, for example, “authentication” to the voice output unit 14. The voice of “has been done” or the like is output, and a permission signal is output to the result output unit 22 (S111), and the personal identification system 10 ends the processing. When the permission signal is received, the electronic lock of the door is unlocked, the door is opened, and the identified person can enter or leave the room.

照合部２１により被識別者のアイリスコードと一致する登録コードが存在しないと判断される（Ｓ１１０）と、制御部２３は、照合処理回数が所定回数、例えば３回未満であるか否かの判断を行う（Ｓ１１２）。そして、３回未満であると判断されれば、制御部２３は再度目画像を取得するための制御を行い（Ｓ１０３）、個人識別システム１０は、目画像取得から照合処理までの動作（Ｓ１０４〜Ｓ１１０）を行う。 When it is determined by the collation unit 21 that there is no registration code that matches the identified person's iris code (S110), the control unit 23 determines whether or not the number of collation processes is a predetermined number, for example, less than three. (S112). If it is determined that the number of times is less than three, the control unit 23 performs control for acquiring the eye image again (S103), and the personal identification system 10 operates from the eye image acquisition to the collation processing (S104- S110) is performed.

照合処理回数が３回であると判断される（Ｓ１１２）と、即ち照合部２１による照合処理を所定回数繰り返しても被識別者のアイリスコードと一致する登録コードが存在しないと判断される（Ｓ１１０）と、制御部２３は、被識別者が登録者ではないと判断する。そして、制御部２３が音声出力部１４に例えば「認証に失敗しました」等の音声を出力させて（Ｓ１１１）、個人識別システム１０は処理を終了する。 If it is determined that the number of matching processes is three (S112), that is, it is determined that there is no registered code that matches the identified person's iris code even if the matching process by the matching unit 21 is repeated a predetermined number of times (S110). ) And the control unit 23 determines that the identified person is not a registrant. Then, the control unit 23 causes the voice output unit 14 to output a voice such as “authentication failed” (S111), and the personal identification system 10 ends the processing.

なお、被識別者が登録者であっても、照明反射や、被識別者が着用しているコンタクトレンズによる影の発生等により、正確なアイリスコードが生成されず、一致する登録コードが存在しないと判断される照合エラーが発生する場合がある。 Even if the identified person is a registrant, an accurate iris code is not generated due to the reflection of illumination or the occurrence of a shadow by the contact lens worn by the identified person, and there is no matching registration code. A collation error that is determined to occur may occur.

上記のように、本実施例では、アイリス認識装置において取得された目画像に基づいて被識別者の目の視線方向を解析して、視線方向がカメラのレンズの光軸と一致していない場合、該目画像に対してアイリスコードの生成及び照合処理を行わず、再度目画像の取得を行うことにより、斜めの視線による照合エラーの発生が防止される。これにより、個人識別システムにおける照合エラーの発生率を低減させることができると共に、個人識別に要する時間を短縮することができる。 As described above, in this embodiment, when the line-of-sight direction of the identified person is analyzed based on the eye image acquired by the iris recognition apparatus, the line-of-sight direction does not match the optical axis of the camera lens. By generating the eye image again without performing the iris code generation and collation processing for the eye image, the occurrence of the collation error due to the oblique line of sight is prevented. As a result, the occurrence rate of verification errors in the personal identification system can be reduced, and the time required for personal identification can be shortened.

なお、本実施例では、視線解析部による視線方向の解析は、目画像における瞳孔部分の形状に基づいて行われたが、目画像における白目部分に基づいて行うことも可能である。白目部分に基づく視線解析については、実施例２で説明する。 In the present embodiment, the line-of-sight direction analysis by the line-of-sight analysis unit is performed based on the shape of the pupil portion in the eye image, but can also be performed based on the white eye portion in the eye image. A line-of-sight analysis based on the white-eye portion will be described in a second embodiment.

図３は、本発明に係る個人識別システムの実施例２の構成を示すブロック図である。
なお、本実施例において、実施例１と同様な構成を同一の符号で示し、これらについての説明を省略する。 FIG. 3 is a block diagram showing the configuration of Embodiment 2 of the personal identification system according to the present invention.
In the present embodiment, the same components as those in the first embodiment are denoted by the same reference numerals, and description thereof will be omitted.

本発明に係る個人識別システム３０は、図３に示されているように、アイリス認識装置３１を含んでいる。 The personal identification system 30 according to the present invention includes an iris recognition device 31 as shown in FIG.

アイリス認識装置３１は、距離センサ１２、パネル部１３、音声出力部１４、顔撮影カメラ３２、目撮影カメラ３３、画像記憶部３４、位置検出部３５、抽出部３６、視線解析部３７、品質判別部１７、コード生成部１９及びこれら各部を制御する制御部３８を備えている。 The iris recognition device 31 includes a distance sensor 12, a panel unit 13, an audio output unit 14, a face photographing camera 32, an eye photographing camera 33, an image storage unit 34, a position detection unit 35, an extraction unit 36, a line-of-sight analysis unit 37, and a quality determination. A unit 17, a code generation unit 19, and a control unit 38 that controls these units are provided.

顔撮影カメラ３２は、被識別者の顔を撮影して目部分を含む画像データ、即ち顔画像を取得する顔画像取得部である。 The face photographing camera 32 is a face image acquisition unit that captures the face of the identified person and acquires image data including an eye part, that is, a face image.

目撮影カメラ３３は、被識別者の目を撮影してアイリス部分を含む画像データ、即ち目画像を取得する目画像取得部であり、顔撮影カメラ３２の横に近接させて設けられる。 The eye photographing camera 33 is an eye image obtaining unit that obtains image data including an iris portion by photographing the eye of the identified person, that is, an eye image, and is provided close to the face photographing camera 32.

画像記憶部３４は、顔撮影カメラ３２により取得された顔画像や、目撮影カメラ３３により取得された目画像、後述する抽出部３６により抽出された目部分画像等を一時的に記憶する一時記憶部である。 The image storage unit 34 temporarily stores a face image obtained by the face photographing camera 32, an eye image obtained by the eye photographing camera 33, an eye partial image extracted by the extracting unit 36 described later, and the like. Part.

位置検出部３５は、画像記憶部３４に記憶された顔画像における被識別者の目の位置を検出する機能を有する。 The position detection unit 35 has a function of detecting the eye position of the identified person in the face image stored in the image storage unit 34.

抽出部３６は、位置検出部３５により検出された目の位置に基づいて、画像記憶部３４に記憶された顔画像から目部分の画像、即ち目部分画像を抽出する機能を有する。 The extraction unit 36 has a function of extracting an eye part image, that is, an eye part image, from the face image stored in the image storage unit 34 based on the eye position detected by the position detection unit 35.

視線解析部３７は、被識別者の目が顔撮影カメラ３２のレンズに対向しているか否かを判断するために、画像記憶部３４に記憶された目部分画像に基づいて被識別者の目の視線方向を解析する機能を有する。本実施例では、視線解析部３７による視線方向の解析は、目部分画像における白目部分に基づいて行われ、解析された視線方向が顔撮影カメラ３２のレンズの光軸に一致するか否かにより対向しているか否かの判断が行われる。 The line-of-sight analysis unit 37 determines the eyes of the identified person based on the eye partial image stored in the image storage unit 34 in order to determine whether the identified person's eyes are facing the lens of the face photographing camera 32. Has a function of analyzing the gaze direction. In this embodiment, the analysis of the gaze direction by the gaze analysis unit 37 is performed based on the white eye part in the eye part image, and depends on whether or not the analyzed gaze direction matches the optical axis of the lens of the face photographing camera 32. A determination is made as to whether or not they are facing each other.

なお、本実施例では、顔撮影カメラ３２と目撮影カメラ３３とは近接させて配置されており、視線解析部３７により被識別者の目が顔撮影カメラ３２のレンズに対向していると判断された場合、被識別者の目は目撮影カメラ３３のレンズにも対向するとみなしているが、目撮影カメラ３３の配置場所に基づいて補正を行い、被識別者の目が目撮影カメラ３２のレンズに対向するか否かを視線解析部３７に判断させるようにしても良い。 In the present embodiment, the face photographing camera 32 and the eye photographing camera 33 are arranged close to each other, and the line-of-sight analysis unit 37 determines that the eye of the identified person faces the lens of the face photographing camera 32. In this case, it is considered that the eye of the identified person also faces the lens of the eye photographing camera 33, but correction is performed based on the arrangement location of the eye photographing camera 33, and the eye of the identified person is the eye of the eye photographing camera 32. You may make it make the gaze analysis part 37 judge whether it opposes a lens.

個人識別システム３０は、上記したアイリス認識装置３１の他に、更に、格納部２０、照合部２１及び結果出力部２２を有している。 In addition to the iris recognition device 31 described above, the personal identification system 30 further includes a storage unit 20, a collation unit 21, and a result output unit 22.

制御部３８は、アイリス認識装置３１を含む個人識別システム３０の各部を制御する機能を有する。 The control unit 38 has a function of controlling each unit of the personal identification system 30 including the iris recognition device 31.

次に、個人識別システム３０を利用した個人識別の処理の流れについて、図を用いて詳しく説明する。なお、実施例１と同様な動作については、その詳細な説明を省略する。
図４は、本発明に係る個人識別システムの実施例２における動作を示すフローチャートである。 Next, the flow of personal identification processing using the personal identification system 30 will be described in detail with reference to the drawings. Note that detailed description of operations similar to those of the first embodiment is omitted.
FIG. 4 is a flowchart showing the operation of the personal identification system according to the second embodiment of the present invention.

被識別者が個人識別システム３０に近づくと、距離センサ１２が該被識別者を検知して、被識別者と個人識別システム３０との間の距離を計測して制御部３８へ出力する（Ｓ２０１）。 When the identified person approaches the personal identification system 30, the distance sensor 12 detects the identified person, measures the distance between the identified person and the personal identification system 30, and outputs it to the control unit 38 (S201). ).

制御部３８は、距離センサ１２により出力された距離と所定距離とを比較して、被識別者の顔を撮影するのに適した所定距離範囲内に入る（Ｓ２０２）と、顔画像の取得のための制御を開始する。 The control unit 38 compares the distance output by the distance sensor 12 with a predetermined distance and enters a predetermined distance range suitable for photographing the face of the person to be identified (S202). Start control for.

制御部３８は、まず、パネル部１３のライトを点灯させ、音声出力部１４に音声によるガイダンスを出力させる（Ｓ２０３）。 First, the control unit 38 turns on the light of the panel unit 13 and causes the audio output unit 14 to output voice guidance (S203).

つづいて、制御部３８は、顔撮影カメラ３２に被識別者の顔を撮影させて、顔画像を取得させる（Ｓ２０４）。顔撮影カメラ３２により取得された顔画像は、画像記憶部３４に一時的に記憶される。 Subsequently, the control unit 38 causes the face photographing camera 32 to photograph the face of the person to be identified and obtains a face image (S204). The face image acquired by the face photographing camera 32 is temporarily stored in the image storage unit 34.

次に、制御部３８は、位置検出部３５に、画像記憶部３４に記憶された顔画像における被識別者の目の位置を検出させる（Ｓ２０５）。 Next, the control unit 38 causes the position detection unit 35 to detect the position of the eye of the person to be identified in the face image stored in the image storage unit 34 (S205).

つづいて、制御部３８は、抽出部３６に、検出された目の位置に基づいて、該顔画像から目部分画像を抽出させる（Ｓ２０６）。抽出された目部分画像は、画像記憶部３４に一時的に記憶される。 Subsequently, the control unit 38 causes the extraction unit 36 to extract an eye partial image from the face image based on the detected eye position (S206). The extracted eye partial image is temporarily stored in the image storage unit 34.

そして、制御部３８は、視線解析部３７に、画像記憶部３４に記憶された目部分画像に基づいて被識別者の目の視線方向を解析させて（Ｓ２０７）、被識別者の目が顔撮影カメラ３２のレンズに対向しているか否かを、解析された視線方向が顔撮影カメラ３２のレンズの光軸に一致するか否かにより判断させる（Ｓ２０８）。 Then, the control unit 38 causes the line-of-sight analysis unit 37 to analyze the line-of-sight direction of the identified person's eyes based on the eye partial image stored in the image storage unit 34 (S207). Whether or not the lens of the photographing camera 32 faces the lens is determined based on whether or not the analyzed line-of-sight direction matches the optical axis of the lens of the face photographing camera 32 (S208).

ここで、視線解析部３７による視線方向の解析は、目部分画像における白目部分の形状に基づいて行われる。即ち、アイリスの左右における白目部分の面積の差が所定範囲内であれば、視線解析部３７は、視線方向が顔撮影カメラ３２のレンズの光軸に一致する、即ち被識別者の目が顔撮影カメラ３２のレンズに対向していると判断する。そして、左右の白目部分の面積の差が所定範囲外であれば、視線解析部３７は、被識別者の目が顔撮影カメラ３２のレンズに対向していないと判断する。 Here, the analysis of the gaze direction by the gaze analysis unit 37 is performed based on the shape of the white eye part in the eye part image. That is, if the difference between the areas of the white eyes on the left and right sides of the iris is within a predetermined range, the line-of-sight analysis unit 37 matches the optical axis of the lens of the face photographing camera 32, that is, the eye of the person to be identified is the face It is determined that the lens of the photographing camera 32 is opposed. If the difference between the areas of the left and right white-eye portions is outside the predetermined range, the line-of-sight analysis unit 37 determines that the eye of the identified person is not facing the lens of the face photographing camera 32.

被識別者の目が顔撮影カメラ３２のレンズに対向していないと判断されると、制御部３８は、再度顔画像を取得するための制御を行い（Ｓ２０３）、顔撮影カメラ３２に顔画像を取得させる（Ｓ２０４）。 If it is determined that the eye of the person to be identified is not facing the lens of the face photographing camera 32, the control unit 38 performs control for acquiring a face image again (S203), and causes the face photographing camera 32 to perform the face image. Is acquired (S204).

被識別者の目が顔撮影カメラ３２のレンズに対向していると判断される（Ｓ２０８）と、制御部３８は、目撮影カメラ３３を制御して、Ｓ２０５で検出された目の位置に合焦させて、被識別者の目を撮影させ、目画像を取得させる（Ｓ２０９）。取得された目画像は、画像記憶部３４に一時的に記憶される。 When it is determined that the eye of the identified person faces the lens of the face photographing camera 32 (S208), the control unit 38 controls the eye photographing camera 33 to match the eye position detected in S205. The eyes of the person to be identified are photographed and an eye image is acquired (S209). The acquired eye image is temporarily stored in the image storage unit 34.

次に、制御部３８は、品質判別部１７に画像記憶部３４に記憶された目画像の品質の良否を判別させる（Ｓ２１０）。 Next, the control unit 38 causes the quality discrimination unit 17 to discriminate the quality of the eye image stored in the image storage unit 34 (S210).

品質判別部１７により目画像の品質が不良であると判別されると、制御部３８は、再度顔画像を取得するための制御を行い（Ｓ２０３）、顔撮影カメラ３２に顔画像を取得させる（Ｓ２０４）。 If the quality discriminating unit 17 discriminates that the quality of the eye image is poor, the control unit 38 performs control for acquiring the face image again (S203), and causes the face photographing camera 32 to acquire the face image (S203). S204).

目画像の品質が良好であると判別される（Ｓ２１０）と、制御部３８は、この目画像を用いたアイリス認識処理を実施する。即ち、コード生成部１９が、該目画像に含まれるアイリス部分の画像から、その特徴を抽出してコード化することにより、アイリスコードを生成する（Ｓ２１１）。生成されたアイリスコードは、画像記憶部３４に一時的に記憶される。 When it is determined that the quality of the eye image is good (S210), the control unit 38 performs an iris recognition process using the eye image. That is, the code generation unit 19 generates an iris code by extracting and coding the feature from the image of the iris portion included in the eye image (S211). The generated iris code is temporarily stored in the image storage unit 34.

続いて、制御部３８は、照合部２１に、画像記憶部３４に記憶されたアイリスコードと格納部２０に格納された登録コードとの照合処理を行わせる（Ｓ２１２）。 Subsequently, the control unit 38 causes the collation unit 21 to perform collation processing between the iris code stored in the image storage unit 34 and the registration code stored in the storage unit 20 (S212).

照合処理の結果、アイリスコードが登録コードと一致すると判断される（Ｓ２１３）と、被識別者は登録者であると判断され、制御部３８は、結果出力部２２に許可信号を出力させて（Ｓ２１４）、個人識別システム３０は処理を終了する。 As a result of the collation processing, when it is determined that the iris code matches the registration code (S213), it is determined that the identified person is a registrant, and the control unit 38 causes the result output unit 22 to output a permission signal ( (S214), the personal identification system 30 ends the process.

照合部２１により被識別者のアイリスコードと一致する登録コードが存在しないと判断される（Ｓ２１３）と、制御部３８は、照合処理回数が所定回数未満であるか否かの判断を行う（Ｓ２１５）。所定回数未満であると判断されれば、制御部３８は、再度顔画像を取得するための動作を行い（Ｓ２０３）、個人識別システム３０は、顔画像取得から照合処理までの動作（Ｓ２０４〜Ｓ２１３）と行う。 If the collation unit 21 determines that there is no registration code that matches the identified person's iris code (S213), the control unit 38 determines whether the number of collation processes is less than a predetermined number (S215). ). If it is determined that the number is less than the predetermined number of times, the control unit 38 performs an operation for acquiring the face image again (S203), and the personal identification system 30 operates from the face image acquisition to the collation process (S204 to S213). ) And do.

照合部２１による照合処理を所定回数繰り返しても、被識別者のアイリスコードと一致する登録コードが存在しないと判断される（Ｓ２１３）と、制御部３８は、被識別者が登録者ではないと判断して、結果の出力を行い（Ｓ２１４）、個人識別システム３０は処理を終了する。 If it is determined that there is no registration code that matches the identified person's iris code even after the verification process by the verification unit 21 is repeated a predetermined number of times (S213), the control unit 38 determines that the identified person is not a registered person. Determination is made and the result is output (S214), and the personal identification system 30 ends the process.

上記のように、本実施例では、アイリス認識装置は、まず顔画像を取得して、該顔画像から抽出した目部分画像に基づいて被識別者の目の視線方向を解析し、該視線方向がカメラのレンズの光軸と一致した場合にのみ、被識別者の目画像を取得するので、斜めの視線の目画像が取得されることを防止でき、個人識別システムにおける照合エラーの発生率が低減される。 As described above, in the present embodiment, the iris recognition apparatus first acquires a face image, analyzes the line-of-sight direction of the identified person based on the eye partial image extracted from the face image, and the line-of-sight direction Since the eye image of the person to be identified is acquired only when the optical axis of the camera lens coincides with the optical axis of the camera lens, it is possible to prevent the eye image of the oblique line of sight from being acquired, and the rate of occurrence of verification errors in the personal identification system Reduced.

なお、実施例１及び２では、被識別者の目の視線方向とカメラのレンズの光軸とが一致する場合にのみ、被識別者の目がカメラに対向していると判断されているが、視線方向と光軸との間の偏角が所定許容範囲内である場合に、被識別者の目がカメラに対向していると判断することも可能である。 In Examples 1 and 2, it is determined that the eyes of the identified person are facing the camera only when the line-of-sight direction of the identified person's eyes matches the optical axis of the camera lens. When the deviation angle between the line-of-sight direction and the optical axis is within a predetermined allowable range, it can be determined that the eye of the person to be identified faces the camera.

実施例１及び２では、本発明に係るアイリス認識装置及び個人識別システムを入退室管理に応用した場合について説明したが、ＡＴＭシステムや出入国審査システムに応用することも可能である。 In the first and second embodiments, the case where the iris recognition device and the personal identification system according to the present invention are applied to entrance / exit management has been described. However, the present invention can also be applied to an ATM system or an immigration system.

本発明に係る個人識別システムの実施例１の構成を示すブロック図である。It is a block diagram which shows the structure of Example 1 of the personal identification system which concerns on this invention. 本発明に係る個人識別システムの実施例１における動作を示すフローチャートである。It is a flowchart which shows the operation | movement in Example 1 of the personal identification system which concerns on this invention. 本発明に係る個人識別システムの実施例２の構成を示すブロック図である。It is a block diagram which shows the structure of Example 2 of the personal identification system which concerns on this invention. 本発明に係る個人識別システムの実施例２における動作を示すフローチャートである。It is a flowchart which shows the operation | movement in Example 2 of the personal identification system which concerns on this invention.

Explanation of symbols

１０個人識別システム
１１アイリス認識装置
１５カメラ
１８視線解析部
１９コード生成部
２１照合部
DESCRIPTION OF SYMBOLS 10 Personal identification system 11 Iris recognition apparatus 15 Camera 18 Eye-gaze analysis part 19 Code generation part 21 Verification part

Claims

In an iris recognition apparatus comprising: an image acquisition unit that acquires an eye image of a person to be identified; and a code generation unit that generates an iris code based on the eye image.
A line-of-sight analysis unit that analyzes the line-of-sight direction of the identified person's eyes based on the eye image in order to determine whether or not the eyes of the identified person are facing the image acquisition unit;
An iris recognition apparatus, further comprising: a control unit that causes the code generation unit to perform a generation operation when it is determined by the line-of-sight analysis unit that the eyes are facing each other.

The iris recognition apparatus according to claim 1, wherein the line-of-sight analysis unit analyzes the line-of-sight direction based on a shape of a pupil portion in the eye image acquired by the image acquisition unit.

The iris recognition apparatus according to claim 1, wherein the line-of-sight analysis unit analyzes the line-of-sight direction based on a white-eye portion in the eye image acquired by the image acquisition unit.

The image acquisition unit includes a camera that photographs the eyes of the identified person, and the line-of-sight analysis unit performs a determination operation based on whether or not the analyzed line-of-sight direction matches the optical axis of the lens of the camera. The iris recognition apparatus according to claim 2 or 3, wherein

A face image acquisition unit that acquires a face image of the identified person, an eye image acquisition unit that acquires the eye image of the identified person, and a position detection unit that detects a position of the eye of the identified person in the face image; In an iris recognition device comprising: a control unit that adjusts the eye image acquisition unit in correspondence with the detected eye position; and a code generation unit that generates an iris code based on the eye image.
A line-of-sight analysis that analyzes the line-of-sight direction of the identified person's eyes based on the face image and the position of the eyes to determine whether or not the eyes of the identified person are facing the eye image acquisition unit Further comprising
The iris recognition apparatus, wherein when the eye analysis unit determines that the eyes are facing each other, the control unit causes the eye image acquisition unit to perform the image acquisition operation.

Based on the position of the eyes detected by the position detection unit, the image processing apparatus further includes an extraction unit that extracts an eye part image from the face image, and the line-of-sight analysis unit is based on the shape of the pupil part in the eye part image. 6. The iris recognition apparatus according to claim 5, wherein the line-of-sight direction is analyzed.

The image processing apparatus further includes an extraction unit that extracts an eye partial image from the face image based on the eye position detected by the position detection unit, and the line-of-sight analysis unit is configured to extract the line of sight based on a white eye portion in the eye partial image 6. The iris recognition apparatus according to claim 5, wherein the direction is analyzed.

The face image acquisition unit includes a face photographing camera that photographs the face of the identified person, the eye image acquisition unit includes an eye photographing camera that photographs the eyes of the identified person, and the line-of-sight analysis unit includes: The control unit performs a determination operation based on whether or not the analyzed line-of-sight direction coincides with the optical axis of the lens of the face photographing camera, and the control unit detects the eye photographing camera by the position detecting unit. The iris recognition apparatus according to claim 6 or 7, wherein a photographing operation is performed while focusing on the lens.

In a personal identification system including an iris recognition device that includes an image acquisition unit that acquires an eye image of a person to be identified and a code generation unit that generates an iris code based on the eye image.
The iris recognition device
A line-of-sight analysis unit that analyzes the line-of-sight direction of the identified person's eyes based on the eye image in order to determine whether or not the eyes of the identified person are facing the image acquisition unit;
A personal identification system, further comprising: a control unit that causes the code generation unit to perform a generation operation when the line-of-sight analysis unit determines that the eyes are facing each other.

The personal identification system according to claim 9, wherein the line-of-sight analysis unit analyzes the line-of-sight direction based on a shape of a pupil portion in the eye image acquired by the image acquisition unit.

The personal identification system according to claim 9, wherein the line-of-sight analysis unit analyzes the line-of-sight direction based on a white-eye portion in the eye image acquired by the image acquisition unit.

The image acquisition unit includes a camera that photographs the eyes of the identified person, and the line-of-sight analysis unit performs a determination operation based on whether or not the analyzed line-of-sight direction matches the optical axis of the lens of the camera. 12. The personal identification system according to claim 10 or 11, characterized in that:

A face image acquisition unit that acquires a face image of the identified person, an eye image acquisition unit that acquires the eye image of the identified person, and a position detection unit that detects a position of the eye of the identified person in the face image; In a personal identification system including an iris recognition device comprising: a control unit that adjusts the eye image acquisition unit in correspondence with the detected eye position; and a code generation unit that generates an iris code based on the eye image ,
The iris recognition device
A line-of-sight analysis that analyzes the line-of-sight direction of the identified person's eyes based on the face image and the position of the eyes to determine whether or not the eyes of the identified person are facing the eye image acquisition unit Further comprising
The personal identification system, wherein the control unit causes the eye image acquisition unit to perform the image acquisition operation when the line-of-sight analysis unit determines that the eyes are facing each other.

The iris recognition apparatus further includes an extraction unit that extracts an eye partial image from the face image based on the eye position detected by the position detection unit, and the line-of-sight analysis unit includes a pupil in the eye partial image. The personal identification system according to claim 13, wherein the line-of-sight direction is analyzed based on a shape of a part.

The iris recognition apparatus further includes an extraction unit that extracts an eye partial image from the face image based on the eye position detected by the position detection unit, and the line-of-sight analysis unit includes a white eye in the eye partial image. The personal identification system according to claim 13, wherein the line-of-sight direction is analyzed based on a portion.

The face image acquisition unit includes a face photographing camera that photographs the face of the identified person, the eye image acquisition unit includes an eye photographing camera that photographs the eyes of the identified person, and the line-of-sight analysis unit includes: The control unit performs a determination operation based on whether or not the analyzed line-of-sight direction coincides with the optical axis of the lens of the face photographing camera, and the control unit detects the eye photographing camera by the position detecting unit. 16. The personal identification system according to claim 14 or 15, wherein the photographing operation is performed while focusing on.