[go: up one dir, main page]

JP2004194111A - Home security system and method - Google Patents

Home security system and method Download PDF

Info

Publication number
JP2004194111A
JP2004194111A JP2002361285A JP2002361285A JP2004194111A JP 2004194111 A JP2004194111 A JP 2004194111A JP 2002361285 A JP2002361285 A JP 2002361285A JP 2002361285 A JP2002361285 A JP 2002361285A JP 2004194111 A JP2004194111 A JP 2004194111A
Authority
JP
Japan
Prior art keywords
server
mobile phone
home
voice
visitor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2002361285A
Other languages
Japanese (ja)
Other versions
JP4086142B2 (en
Inventor
Akira Suzuki
章 鈴木
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ricoh Co Ltd
Original Assignee
Ricoh Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ricoh Co Ltd filed Critical Ricoh Co Ltd
Priority to JP2002361285A priority Critical patent/JP4086142B2/en
Publication of JP2004194111A publication Critical patent/JP2004194111A/en
Application granted granted Critical
Publication of JP4086142B2 publication Critical patent/JP4086142B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Telephonic Communication Services (AREA)
  • Alarm Systems (AREA)
  • Interconnected Communication Systems, Intercoms, And Interphones (AREA)
  • Telephone Function (AREA)

Abstract

【課題】さまざまな来訪者に対して、外出先の携帯電話から、映像及び音声で来訪者を確認の上、適切な応答ができるホームセキュリティシステム及びその方法を提供する。
【解決手段】屋内に設けたサーバにより、屋外のカメラ付インターフォンからの映像及び音声情報を処理した後、インターネットと携帯電話網を介して外出先の家人が持っている携帯電話に映像及び音声情報を送り、外出先の家人はその情報を見て、玄関の電子ロックを解錠する等の適切な措置を取る。また、外出先の携帯電話から、屋内及ぶ屋外に設置した電子機器を制御できるようにする。
【選択図】 図1
Provided is a home security system and a method thereof capable of confirming a visitor with a video and a voice from a mobile phone at a destination and appropriately responding to the visitor to various visitors.
After a server provided indoors processes video and audio information from an outdoor camera-equipped intercom, the video and audio information is transferred to a mobile phone owned by a family member on the go via the Internet and a mobile phone network. The housekeeper on the go sees the information and takes appropriate measures such as unlocking the electronic lock at the entrance. In addition, an electronic device installed indoors or outdoors can be controlled from a mobile phone outside.
[Selection diagram] Fig. 1

Description

【0001】
【発明の属する技術分野】
本発明はブロードバンドを活用したホームセキュリティシステムに関し、特に外出先の家人の携帯電話端末から留守宅の来訪者と適切に応対することができるホームセキュリティシステム及びその方法に関する。
【0002】
【従来の技術】
従来、各家庭に備えられているインターフォンシステムは、玄関先の来訪者をテレビカメラで撮影し、それを家の中にある監視用テレビ受像機(モニター)で見て、来訪者を判別していた。したがって、来訪者の中には不信な人物がいて、応答がない場合には、鍵をこじ開けて家の中に押し入り、空き巣を働くということもあった。そこで、外出時にも自宅の来訪者と応対できるシステムがいくつか提案されている。
【0003】
例えば、インターフォンシステムにおいては、来訪者をビデオカメラで撮影して、このビデオカメラから出力されるビデオ信号を取り込んでメモリに記憶し、メモリに記憶された信号を順次読み出してファクシミリの規格に準拠した信号に変換して外出先に出力するものが提案されている(例えば、特許文献1を参照)。
【0004】
また、従来、留守管理システムとして、住宅、事業所などの留守管理システムであって、不在時に来訪者があったとき、その来訪者に応対して、来訪者から発せられる意志表示を接受し、あるいはその発せられた意志表示に対する回答を来訪者に伝達するための来訪者対応機器と、該来訪者対応機器とインターフェイスを介して接続された中央処理装置と、データやプログラムを記憶する記憶装置と、情報送受信装置とを住宅、事業所などの側に配置するとともに、外出時に携帯する携帯端末に、中央処理装置と、データやプログラムを記憶する記憶装置と、情報送受信装置を持たせておき、住宅、事業所などの側で、中央処理装置が記憶装置から読み出したプログラムにより作成した保守管理用の情報と、携帯端末の側で、中央処理装置が記憶装置から読み出したプログラムにより作成した保守管理用の情報とを住宅、事業所などの側と携帯端末の側との間で相互にお互いの送受信装置で送受信するようにした留守管理システムが提案されている(例えば、特許文献2を参照)。そして、この留守管理システムは、宅配便等を含む配達物を受け取る配達物受取装置を備え、この配達物受取装置が、配達物受取のサイン又は捺印を行う手段を備えている。
【0005】
また、屋内では公衆回線に接続された親機と無線接続してコードレス電話機として機能するとともに、屋外に持ち出されると公衆基地局と接続して携帯電話機として機能する携帯通信端末が、屋内にあるか屋外にあるかを判別し、携帯通信端末が屋内にあると、玄関先の来訪者と少なくとも音声による応対を行うための屋外インターフォン手段を屋内インターフォン手段に接続して屋内インターフォン手段を使用した応対を可能とし、携帯通信端末が屋外に持ち出されると、屋外インターフォン手段を親機に接続して、親機を介して接続される携帯通信端末を使用した応対を可能とすることにより、いちいち留守設定等を行うことなく、携帯通信端末を携帯して外出した際に、玄関先の来訪者と携帯通信端末を使用した応対を行えるようにし、利用性の良好なインターフォンシステムも提案されている(例えば、特許文献3を参照)。
【0006】
この特許文献3に記載される従来のインターフォンシステムについて図7に基づいて説明する。このインターフォンシステムにおいては、図7に示すように、屋外機構部200は、屋外インターフォンマイク201及び屋外インターフォンスピーカ202により構成され、インターフォンが押下されると、制御部104の制御の下で接続先切換部103により、屋内インターフォンマイク101と屋内インターフォンスピーカ102よりなる屋内機構部100とPHS親機301のいずれかに接続される。在宅時は屋内インターフォンシ手段100との間で通常の音声のやり取りがなされ、玄関先に設けられたCCDカメラ203からの映像も必要に応じて、ディスプレイ表示部108に出力表示される。
【0007】
不在で遠隔地にいるときは、接続先切換部103はPHS親機301を選択しており、PHS親機301は子機位置判別・モード切換部302を経て、一般公衆回線、PHS公衆回線を介して、遠隔地(屋外)にあるPHS子機303に屋外インターフォンマイク201からの音声信号を送信する。このとき来訪情報信号発生手段であるディスプレイ表示部108は、制御部104の制御下で、玄関先機構部200の不図示のインターフォンボタンが押された際に、PHS親機301を介して来訪に対する呼出である旨の来訪情報信号を送信して、PHS子機303のディスプレイにインターフォン呼出である旨の情報を表示させる。
【0008】
ここで、玄関先の来訪者を撮影するのにCCDカメラ203を用いているが、このカメラは通常のビデオカメラであってもよい。CCDカメラ203で撮影した映像データは、送信画像メモリ209にいったん記憶され、この記憶された送信画像がPHS子機303に送信され、また、指定FAX401に送信される。
【0009】
制御部104は、CPU,RAM、ROMを備え、ROM内にはインターフォンシステムとしての制御プログラムが格納されている。そして、制御部104のCPUがRAMをワークメモリとして利用し、ROM内の制御プログラムに基づいてインターフォンシステムの各部を制御し、インターフォンシステムとして機能させている。
【0010】
すなわち、来訪者があって、図示しないインターフォンボタンが押下されると、制御部104は、屋外インターフォンマイク201及び屋外インターフォンスピーカ202と、屋内インターフォンマイク101及び屋内インターフォンスピーカ102と、を接続して、屋内インターフォンマイク101による応対音声を屋外インターフォンスピーカ202から出力させ、その後、屋外インターフォンマイク201からの音声を屋内インターフォンスピーカ102から出力させて、屋外インターフォンマイク201及び屋外インターフォンスピーカ202と、屋内インターフォンマイク101及び屋内インターフォンスピーカ102によるインターフォン応対を可能とする。
【0011】
また、PHS親機301に付属している子機位置判別・モード切換部302は、PHS子機303が屋外(遠隔地を含む)にあることを検出すると、PHS親機301にPHS子機303の親機としての機能を停止させ屋外インターフォンマイク201と屋外インターフォンスピーカ202を回線を介してPHS子機303に接続する中継モードにモード切換処理を行うとともに、制御部104にPHS子機303が屋外にある旨を通知する。したがって、PHS子機303は、通常のPHSとして機能動作する。
【0012】
制御部104は、PHS子機303が屋外にあると、接続先切換部103を制御して、屋外インターフォンマイク201及び屋外インターフォンスピーカ202をPHS親機301に接続させ、屋外インターフォンマイク201及び屋外インターフォンスピーカ202とPHS子機303を使用したインターフォン機能として動作させる。
【0013】
したがって、来訪者があって、図示しないインターフォンボタンが押下されると、制御部104は、屋外インターフォンマイク201及び屋外インターフォンスピーカ202と、PHS親機301とを接続し、PHS親機301は、公衆回線及びPHS公衆基地局を介してPHS子機303を呼び出して、PHS子機303による応対音声を屋外インターフォンスピーカ202から出力させる。その後、屋外インターフォンマイク201からの音声を、PHS親機301を介してPHS子機303に送信させてPHS子機303のスピーカから出力させ、屋外インターフォンマイク201及び屋外インターフォンスピーカ202と、PHS子機303によるインターフォン応対ができるようにしている。
【0014】
また、特許文献3に記載のものでは、玄関先の来訪者に対して出力する複数種類の音声メッセージをRAM等に記憶した固定メッセージ発生部106が設けられており、この固定メッセージ発生部106に記憶されている複数種類の音声メッセージのうち、固定メッセージ選択部105で選択された1つが屋外インターフォンスピーカ202から出力される。そして、PHS子機303が屋外にある場合でも、PHS子機303から固定メッセージ発生部106の有している音声メッセージの一つを指定して、屋外インターフォンスピーカ202に出力することができるようにしている。これにより、来訪予定のなかった重要な来訪者等に対して、携帯通信端末で応対することなく、予め記憶されている音声メッセージで適切に応対することができる。また、悪徳セールスマンや新聞の集金の来訪等の来訪者の種別等に応じて音声メッセージを適宜選択して出力し、来訪者の種別に適した応対を行えるようにしている。
【0015】
また、待機時間が多く実働時間が少ないマンション管理人の業務効率を改善するために、管理人の業務を遠隔操作によって行うことで、複数のマンションの管理を同時に行うことを目的とした管理人代行システムであって、1つの建屋内に複数の住戸と、共用施設とを設けているマンションの玄関ドアを自動解錠する玄関自動解錠装置と、同マンションの玄関ホールに設けた受付端末と、同じく玄関ホールに設けた不在家人宅への宅配便による荷物を一時預かりする不在者宅配便保管装置と、マンションの所用の場所に配設した共用施設用鍵保管装置を制御用サーバに接続して、この制御用サーバを、電気通信回線を介してマンション管理会社に設けたマンション管理サーバに接続し、管理人の業務を遠隔操作により行うことができるようにした管理人代行システムも提案されている(例えば、特許文献4参照。)。
【0016】
【特許文献1】
特開平5−236189号公報
【特許文献2】
特開平7−7561号公報
【特許文献3】
特開2000−232525号公報
【特許文献4】
特開2002−207810号公報
【0017】
【発明が解決しようとする課題】
しかしながら、以上のようなインターフォンシステムあるいは留守管理システムにおいては、外出先での利便性の点で多くの問題がある。すなわち、上記特許文献1に記載されたインターフォンシステムにあっては、ビデオカメラで撮影した映像をファクシミリ送信することはできるが、外出先が時々刻々と変化する場合には、映像をファクシミリ送信する送信先を切り換えて送信することができず、不便であるという問題があった。
【0018】
また、特許文献2に記載の留守管理システムにあっては、携帯端末と来訪者対応機器との間で情報の送受信を行って、携帯端末を利用した留守管理を行うことはできるが、この携帯端末は、留守管理システム専用の携帯端末であり、汎用性及び利用性を向上させる上で改良の必要があった。また、この留守管理システムにあっては、配達物受取装置により配達物受取のサインあるいは捺印を行うことはできるが、この配達物受取装置は、宅配便等の配達物の受取専用であり、コストが高くつくとともに、汎用性を向上させる上でなお改良の必要があった。
【0019】
更に、特許文献3に記載のインターフォンシステムは、PHS子機のような携帯通信端末を使って外出先で玄関先の来訪者と話ができるが、親しい知人などの場合、外出先から玄関の鍵を開けて帰宅するまで家に入ってもらったり、顔見知りの宅配人などの場合、少しの間玄関の鍵を開けて、品物を置いておいてもらったりすることはまったく想定していないものである。また、ブラウザ機能付携帯電話により外出先から、屋外及び屋内に設置されているさまざまな照明機器、家電機器、防犯装置などを制御することまで考慮されていないものであった。
【0020】
また、特許文献4に記載の管理人代行システムは、遠隔地からマンションの玄関先に訪れる来訪者に応対して、マンション玄関の鍵を解錠することは示されているが、相手の姿を見て解錠するか解錠しないかを決めるということはできなかった。また、この管理人代行システムは、不在家人への音声メッセージの受付機能や不在家人への宅配便の受取機能など各家人へのさまざまなサービス機能を備えているものの、あくまでも管理人の代行業務を行うものであって、各個人家庭で実施するにはシステムが大掛かりなものになるという問題があった。
【0021】
【課題を解決するための手段】
本発明は上記問題点を解決するためのものであり、本発明のホームセキュリティシステムは、玄関先の来訪者との間で音声及び映像による応対を行うためのマイク、スピーカ及びカメラを備えた屋外インターフォン手段と、該屋外インターフォン手段と接続され屋内で前記来訪者と音声及び映像による応対を行うためのマイク、スピーカ及びモニター表示部を備えた屋内インターフォン手段と、屋内に設けられ且つインターネットに接続されたサーバと、該インターネットに接続された携帯電話網を介して前記サーバに接続されるブラウザ機能付携帯電話とを備えたホームセキュリティシステムであって、前記サーバは、前記カメラからの画像をWeb コンテンツ化するWeb サーバ機能部と、前記カメラからの画像を動画又は静止画フォーマットに変換する画像処理部と、屋外インターフォンマイクからの音声を電話転送しかつ携帯電話からの音声をインターフォンスピーカへ転送するとともに、来訪者が発する語句に対応して応答テーブルに予め記憶されている複数の音声メッセージの中から、来訪者の発する語句に応じた音声メッセージを適宜選択して屋外インターフォンスピーカに出力する音声処理部と、特定状況下においてメールを送信するメールサーバ機能部と、屋内又は屋外に設置されている複数の防犯機器、照明機器及び家電機器と接続され、屋外のブラウザ機能付携帯電話から前期携帯電話網及び前記インターネットを介して前記防犯機器、前記証明機器及び前記家電機器を制御する外部I/F処理部とを備えることを特徴としている。
【0022】
本発明のホームセキュリティシステムによれば、屋外インターフォン手段とブロードバンドのネットワークに接続された携帯電話から留守宅の玄関先に現れたさまざまな来訪者に対して適切な応対がとれるので、ホームセキュリティシステムとして極めて有効であるとともに、重要な来訪者に対しては礼を失することなく適切な対応が可能となる。また、外出先から留守宅にあるさまざまな防犯機器、照明機器、家電機器等が制御できるので留守宅を安全に管理することが可能である。
【0023】
また、本発明のホームセキュリティ方法は、屋外に設置されるカメラ付屋外インターフォン、屋内に設置されるモニター付屋内インターフォン、外出先に持ち出し可能なブラウザ機能付携帯電話及びこれらを制御するサーバを用いて実施するホームセキュリティ方法であって、玄関先の前記屋外インターフォンが来訪者により押下されると、前記サーバが留守モードか否かを判断し、留守モードでなければ前記屋内インターフォンにより通常応答する留守モード判断ステップと、留守モードの時には、前記サーバが自動応答モードであるか否かを判断し、自動応答モードのときは予め複数の音声メッセージが記憶されている応答テーブルを検索する自動応答モード判断ステップと、前記応答テーブルの検索結果に基づいて、適切な対応する語句があるか否かを判断し、対応する語句があれば音声メッセージとして前記屋外インターフォンにより来訪者に応答するステップと、自動応答モードでないとき及び自動応答モードであっても前記応答テーブルに対応する語句がなかったときに、外出先の携帯電話にダイアルし、外出先の携帯電話から、屋外インターフォンに応答するステップとを含むことを特徴とするホームセキュリティ方法を提供するものである。
【0024】
また、更に、本発明のホームセキュリティ方法は、上記ステップのほかに、外出先の携帯電話にダイアルしてから一定時間内に家人が応答しなかったときに、サーバ内に設けられたメール対応テーブルより適切なメールを選択し、外出先の家人に通知するステップを含むことを特徴としている。
【0025】
本発明の上記ホームセキュリティ方法によれば、外出先の携帯電話により来訪者の映像と音声を確認の上で応対することができるとともに、メールにより来訪者があったこと等を外出先の家人知らせることができるので、家人が不在である自宅にさまざまな来訪者が現れてもきめ細かく対応でき、重要な来訪者と、そうでない来訪者とのいずれにも適切な応対が可能である。
【0026】
更に、本発明のホームセキュリティ方法の不審者が侵入した場合の実施の形態として、以下のステップを備えるホームセキュリティ方法が提供される。すなわち、屋外に設置されるカメラ付屋外インターフォン、屋内に設置されるモニター付屋内インターフォン、外出先に持ち出し可能なブラウザ機能付携帯電話及びこれらを制御するサーバを用いて実施するホームセキュリティ方法であって、敷地内への侵入者がインターフォンカメラ又は各種防犯センサーによって感知されると、前記サーバが留守モードか否かを判断し、留守モードでなければ屋内の電灯を点灯させるかあるいは警報を発することにより、侵入者に家人が在宅していることを報知するステップと、留守モードの時には、前記サーバが外出先の家人の携帯電話にダイアルして、留守宅に侵入者があることを家人に通知するステップであって、留守モードの時に、家人が一定時間内に携帯電話に出たときは、前記サーバ内に設けられた非常時対応テーブルに予め記憶されている複数の自動応答項目の中から、非常事態の状況に応じて選択された応答項目を音声処理部により音声メッセージとして外出先の家人に送信するステップと、前記留守モードの時に、家人が一定時間内に携帯電話に出なかったときは、前記サーバ内に設けられた前記非常時対応テーブルに予め記憶されている複数の自動応答項目の中から、非常事態の状況に応じて選択された応答項目をメールサーバ機能部により、メールメッセージとして外出先の家人に送信するステップとを含むことを特徴とするホームセキュリティ方法が提供される。
【0027】
このホームセキュリティ方法によれば、敷地内に不審者が侵入し、玄関ドアをこじ開けたり、窓ガラスを割ったりした場合に、屋内に設けられたサーバにより外出先の家人携帯電話に自動的に通報されるので、外出先の家人は、外出先から最適な対処を取ることができ、被害を最小限に食い止めることが可能となる。
【0028】
【発明の実施の形態】
次に、本発明の実施の形態の例を図1のブロック図に基づいて説明する。1はサーバであり、サーバ全体を制御する制御部2と、カメラからの画像をWeb コンテンツ化するとともに、防犯センサー等の状態の確認、電子ロックの施解錠及びドアの開閉状況の確認等を行うWeb サーバ機能部3と、屋外インターフォンカメラからの映像を動画又は静止画フォーマットに変換して屋内インターフォンのモニター表示部に転送あるいはインターネット及び携帯電話網を介してブラウザ機能付携帯電話に転送するとともに必要な画像をサーバ内の不図示のメモリ装置に録画する機能を有する画像処理部4と、外部インターフォンマイクからの音声を電話転送し、携帯電話からの音声を屋外インターフォンのスピーカに転送するとともに、通常時応答テーブル8に予め記憶されている複数の音声メッセージから状況に応じて適宜選択したものを音声合成し、音声メッセージとして屋外インターフォンスピーカに転送する音声処理部5と、インターフェイス11を介して屋外又は屋内の各種防犯センサー、電子錠の開閉等の制御、及び火災報知器、照明機器及び各種家電機器等の制御を行う外部I/F処理部6と、来訪者の存在をサーバが外出先の家人に伝えた際に、一定時間携帯電話と接続できないときに、メール対応テーブル9に予め記憶してある複数のメールメッセージから適切なものを選択して外出先の家人の携帯電話に伝えるメールサーバ機能部7から構成されている。
【0029】
このサーバ1は、インターネット12に常時接続され、同じくこのインターネット12に接続されている携帯電話網14を介してブラウザ機能付携帯電話15に接続される。携帯電話網14はIP電話網でありこの電話網に加入しているIP電話業者13により運用されるものである。サーバ1は有線LAN又は無線LANによって屋外インターフォンシステムと接続され、屋外インターフォンカメラの撮影した映像と屋外インターフォンマイクで収音した音声がサーバ1に送られる。
【0030】
また、サーバ1は、複数の音声メッセージが蓄積されている通常時応答テーブル8、外出先の家人の携帯電話に来訪者や不審者の侵入等を知らせるための複数のメールメッセージを記憶しておくメール応答テーブル9及び不審者の侵入などの非常事態を外出先の家人に通知する音声メッセージが蓄積されている非常時応答テーブル10を備えている。
【0031】
更に、サーバ1は、外部I/F処理部6及びインターフェイス11を介して、屋内あるいは屋外に設置された各種防犯センサー17、玄関電子ロック18、火災報知器、照明装置、暖房装置及び各種家電装置等19に接続されており、これらの各種機器の状態を外出先の家人に伝えるとともに、これら各種機器を外出先の携帯電話を用いて制御するようにしている。また、サーバ1は、屋外に設置されるカメラ付屋外インターフォン16及び防犯カメラ20とは無線又は有線LANによって接続されている。
【0032】
本発明のホームセキュリティシステムにおいては、例えば、一つの防犯センサーは窓ガラスに取り付けられており、窓ガラスが破損すると、警報が外部I/F処理部6に送られるようになっている。外部I/F処理部6は制御部2の制御下でこれら各種防犯センサーからの信号を処理し、インターネット12及びIP電話業者13、携帯電話網14を経て、外出先の家人のブラウザ機能付携帯電話15に知らせる。この知らせをキャッチした外出先の家人は警察に通報することができるとともに、近所の人に電話することにより適確な対応をとることができる。
【0033】
次に、サーバ1の外部I/F処理部6は、インターフェイス11を介して玄関の電子ロック18に接続されている。そして、カメラ付屋外インターフォン16で撮影した映像が画像処理部4により静止画対応のJPEG又は動画対応のMPEG画像に変換されて、インターネット12及び携帯電話網14を経てブラウザ機能付携帯電話15に送られる。不在時の来訪者が親戚の人であったり、ごく親しい友人であったりする場合には、外出先で送られてきた画像により来訪者を確認し、携帯電話15から音声により、来訪者に対して、「鍵を開けるから中に入ってお待ちください。」「10分後に帰ります。」といったメッセージを伝え、電子ロックを解錠する。
【0034】
図3は、来訪者の発生する音声の中から適当な語句を抽出して来訪者を判別し、自動応答を行うための通常時応答テーブルの例である。例えば、新聞の勧誘などであれば、「○○新聞です。」という語句が来訪者から発せられるので、サーバ1でこの「新聞」という語句を音声認識し、自動応答項目の中から「間に合っています。」という応答項目を選択する。この選択した項目は音声処理部5において自動音声合成され、屋外インターフォンのスピーカから発生される。この場合には、サーバ1は自動応答モードとなっており、外出先の家人の携帯電話15には連絡をしない。
【0035】
また、宅配便の配達などであって、外出先の家人の携帯電話15で配達人の顔を確認した結果、いつも目にしている配達人の場合であれば、外出先の携帯電話から屋外インターフォンスピーカに「鍵をあけるから玄関に荷物を置いてください。」とのメッセージを伝え、玄関の電子ロックを解錠することもできる。
【0036】
また、サーバ1は、外部I/F処理部6、インターフェイス11を介して火災報知器、照明装置、暖房機器及び各種家電機器等19に接続されている。そして、外出先から携帯電話15により、これらの機器の状態を監視できるとともに、これら各種機器の点灯及び消灯等の制御を行うことができる。
【0037】
更に、屋外インターフォンカメラは、一定時間間隔のカメラ画像を比較してその差分を取り出す機能をもっており、例えば来訪者カメラの前に立つと、自動的に録画を始めたり、来訪者がインターフォンボタンを押下しなくても屋内インターフォンのブザーを鳴らしたりして屋内の家人が来訪者の存在を検知できるようにしている。
【0038】
そして、留守中に玄関先に現れた怪しい人物を屋外インターフォンカメラがキャッチすると、それが外出先の家人が持つ携帯電話15に送信され、例えば外出先の携帯電話15から、屋外に設けた防犯用のカメラ16を作動させ、このカメラで撮影した映像をサーバ1内の不図示の記憶装置に記憶させることができるようにしている。また、あたかも在宅しているかのように、屋内にある照明装置を点灯させたり、威嚇する意味で「どちら様ですか。」というような言葉を屋外インターフォンスピーカから発生させたりして、侵入者に対応することも可能である。
【0039】
本発明のホームセキュリティシステムは、以上説明したように、さまざまな用途に利用可能であり、図2は本発明の実施の形態の一例をフローチャートとして示したものである。
まず、インターフォンボタンが押下されると(ステップS1)、サーバ1の制御部2において、留守モードか否かが判断される(ステップS2)。サーバ1が留守モードになっていない場合、すなわち、家人が在宅している場合は、屋内インターフォンのモニターで来訪者を確認の上、屋内インターフォンマイクから屋外インターフォンスピーカに応対信号を送信する通常応答モードとなる(ステップS3)。
【0040】
判断ステップS2において、留守モードであると判断されると、次に、サーバ1内の制御部2で自動応答モードであるか否かが判断される(ステップS4)。そして自動応答モードであると判断されると、複数の音声メッセージが記憶されている通常時応答テーブル8を検索する(ステップS5)。
【0041】
次に、そのときの状況に応じて通常時応答テーブル8内に適切な対応する語句があるか否かが判断され(ステップS6)、対応する語句があれば、その語句を選択してサーバ1内の音声処理部5により録音メッセージを屋外インターフォンスピーカに送信する(ステップS7)
【0042】
判断ステップS4で、サーバ1が自動応答モードになっていないと判断されると、音声処理部5は、サーバ1を携帯電話に接続するために、IP電話網にダイアルする(ステップS8)。
そして、次に、外出先の家人が、一定時間、例えば20秒以内に電話に出たか否かが判断され(ステップS9)、外出先の家人が携帯電話口に出れば、携帯電話15と屋外インターフォンとが直接につながり、来訪者と会話することによって終了する(ステップS11)。
【0043】
判断ステップS6において、音声メッセージを記録した通常時応答テーブル8の中に対応するメッセージがないと判断された場合も、ステップS8に進み、IP電話網にダイアルし、以下、上述のような動作を行う。
【0044】
判断ステップS9において、外出先の家人が一定時間内に電話口に出ない場合には、サーバ1の中のメールサーバ機能部7が作動して、予めいくつかのメッセージが記憶されているメール対応テーブル9より、適当なメッセージを選択され、来訪者があったことを、インターネット12及び携帯電話網14を経て外出先の家人の携帯電話15にメール送信により告知する(ステップS10)。
【0045】
図4は、メール対応テーブル9に予め想定された来訪者に対応して記憶された自動応答項目の例を記載したものであり、サーバ1内のメールサーバ機能部7は、来訪者を認識して応答IDの中から適宜選択して、外出先の家人の携帯電話15にメール送信を行う。
【0046】
図5は、本発明の実施の形態の他の例、すなわち不審者が敷地内に進入した場合の本発明のホームセキュリティシステムの動作を説明するためのフローチャートである。
不審者が玄関ドアをこじ開けるか、窓を割って屋内に入る(ステップ20)と、玄関ドアあるいは窓に取り付けてある各種防犯センサー17が作動して侵入者を感知する(ステップ21)。
【0047】
侵入者を感知すると、次にサーバ1が留守モードか否かを判断する(ステップ22)。留守モードでなければ、屋内の電灯を点灯するか、警報を鳴らして、侵入者を威嚇して退散させる(ステップ23)。
【0048】
判断ステップ22で留守モードであると判断された場合は、サーバ1が自動的にIP電話網にダイヤルし、外出先の家人の携帯電話15を呼び出す(ステップ24)。次に、一定時間以内、例えば20秒以内に家人が電話に出たか否かが判断され(ステップ25)、一定時間内に電話に出た場合には、非常時対応テーブル10に記憶されている図6に示されるような自動応答項目が侵入場所等の状況に応じて適宜選択され、音声処理部5で音声合成処理された後、音声メッセージとして外出先の家人に伝えられる。例えば、不審者が窓ガラスを割って屋内に侵入した場合には、「窓がこじ開けられました。直ぐに110番して下さい。」というメッセージが発せられ、外出先の家人に伝えられる。
【0049】
また、屋敷内に不審者が徘徊している場合も、図6の非常時応対テーブルの中から、関連する応答項目、例えば「インターフォン前を不審者が徘徊しています。カメラ画像を見てください。」といったメッセージを外出先の家人の携帯電話15に送信する。
【0050】
判断ステップ25で、外出先の家人が一定時間内、例えば20秒以内に電話に出なかった場合は、メール対応テーブル9に記憶されている図4に示される応答ID5が選択され、非常時対応テーブル10にリンクされる。そして非常時対応テーブル10から状況に応じた適当なメッセージが選択され、メールサーバ機能部7の制御の下で外出先の家人の携帯電話15にメール送信される(ステップ27)。
【0051】
ここで、図1において、通常時応答テーブル8、メール対応テーブル9及び非常時対応テーブル10は別々のファイルとして記載しているが、同一ファイルの中のアドレスを分離して利用できることはいうまでもない。また、図3、図4、図6に示した通常時応答テーブル8、メール対応テーブル9及び非常時対応テーブル10の自動応答項目については、あくまでも想定されるケースを例示しただけであり、ここで記載した以外にもさまざまな応用範囲に応じた自動応答項目を含むものである。
【0052】
【発明の効果】
以上説明したように、本発明のホームセキュリティシステム及び方法によれば、屋外インターフォンカメラで撮影された画像を外出先のブラウザ機能付携帯電話に送信して、外出先から玄関先の来訪者を確認の上、適切な対応ができると共に、不審な侵入者に対しても外出先から適宜対応する事ができる。また、外出先から屋内あるいは屋外に設置された火災報知器、照明機器、防犯機器、家電機器等さまざまな機器の監視及び制御ができるので、家人は安心して家を離れることができる。
【図面の簡単な説明】
【図1】本発明のホームセキュリティシステムの実施の形態を示すブロック図である。
【図2】本発明のホームセキュリティシステムの実施の形態の一例の動作を説明するためのフローチャートである。
【図3】本発明のホームセキュリティシステムの通常時の応答テーブルの例である。
【図4】本発明のホームセキュリティシステムのメール対応テーブルの例である。
【図5】本発明の実施の形態の他の利用例の動作を説明するためのフローチャートである。
【図6】本発明のホームセキュリティシステムの非常時の対応テーブルの例である。
【図7】従来のインターフォンシステムを示すブロック図である。
【符号の説明】
1・・・サーバ
2・・・制御部
3・・・Web サーバ機能部
4・・・画像処理部
5・・・音声処理部
6・・・外部I/F処理部
7・・・メールサーバ機能部
8・・・通常時応答テーブル
9・・・メール対応テーブル
10・・・非常時対応テーブル
11・・・インターフェイス
12・・・インターネット
13・・・IP電話事業者
14・・・携帯電話網
15・・・ブラウザ機能付携帯電話
16・・・カメラ付インターフォン
17・・・各種防犯センサ
18・・・電子ロック
19・・・照明・家電機器等
20・・・防犯カメラ
[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention relates to a home security system using broadband, and more particularly, to a home security system and a method thereof capable of appropriately responding to a visitor in an absence house from a mobile phone terminal of a person who is away from home.
[0002]
[Prior art]
2. Description of the Related Art Conventionally, an intercom system provided in each home determines a visitor by photographing a visitor at a front entrance with a television camera and viewing the photograph with a monitoring television receiver (monitor) in the house. Was. Therefore, some visitors were untrustworthy, and if there was no response, they could open the key and break into the house to work a burglar. Therefore, some systems have been proposed that can respond to visitors at home even when going out.
[0003]
For example, in an intercom system, a visitor is photographed by a video camera, a video signal output from the video camera is captured and stored in a memory, and the signals stored in the memory are sequentially read to comply with the facsimile standard. A device that converts the signal into a signal and outputs the signal to a destination has been proposed (for example, see Patent Document 1).
[0004]
Conventionally, as an absence management system, an absence management system of a house, a business office, etc., when a visitor is present when he is absent, responds to the visitor, receives a will indication issued from the visitor, Or, a visitor corresponding device for transmitting a response to the issued intention display to the visitor, a central processing unit connected to the visitor corresponding device via an interface, and a storage device for storing data and programs. Place the information transmitting and receiving device on the side of a house, a business office, etc., and have a central processing unit, a storage device for storing data and programs, and an information transmitting and receiving device in a portable terminal carried when going out, On the side of a house or office, the information for maintenance management created by the program read from the storage device by the central processing unit, and on the mobile terminal side, the central processing unit An absence management system has been proposed in which information for maintenance management created by a program read from a storage device is mutually transmitted and received between a house, a business office, and the like and the portable terminal by mutual transceivers. (For example, see Patent Document 2). The absence management system includes a delivery receiving device that receives a delivery including a home delivery service, and the delivery receiving device includes a means for signing or stamping the delivery receipt.
[0005]
Also, if there is a portable communication terminal indoors that functions as a cordless telephone by connecting wirelessly with the base unit connected to the public line and that functions as a mobile phone when taken outside, by connecting to a public base station. It is determined whether the mobile communication terminal is outdoors. When the portable communication terminal is taken out, the outdoor interphone means is connected to the base unit, and the reception using the portable communication terminal connected via the base unit is enabled, so that the absence setting, etc. can be performed one by one. Without having to carry out the mobile communication terminal, and when the user goes out of the office, the visitor at the entrance can be handled using the mobile communication terminal. Have also been proposed availability of good intercom system (e.g., see Patent Document 3).
[0006]
A conventional intercom system described in Patent Document 3 will be described with reference to FIG. In this intercom system, as shown in FIG. 7, the outdoor mechanism unit 200 includes an outdoor interphone microphone 201 and an outdoor interphone speaker 202. When the intercom is pressed, the connection destination is switched under the control of the control unit 104. The unit 103 is connected to one of the indoor mechanism unit 100 including the indoor intercom microphone 101 and the indoor interphone speaker 102 and the PHS master device 301. When the user is at home, normal voice communication is performed with the indoor intercom means 100, and an image from the CCD camera 203 provided at the entrance is output and displayed on the display unit 108 as necessary.
[0007]
When the user is away from home and is in a remote place, the connection destination switching unit 103 selects the PHS master unit 301, and the PHS master unit 301 connects to the general public line and the PHS public line via the slave unit position determination / mode switching unit 302. Then, an audio signal from the outdoor intercom microphone 201 is transmitted to the PHS slave device 303 located at a remote place (outdoor). At this time, under the control of the control unit 104, the display display unit 108, which is a visit information signal generating unit, responds to the visit via the PHS master device 301 when an interphone button (not shown) of the entrance mechanism unit 200 is pressed. A visit information signal indicating a call is transmitted, and information indicating an interphone call is displayed on the display of the PHS slave device 303.
[0008]
Here, the CCD camera 203 is used to photograph a visitor at the entrance, but this camera may be a normal video camera. Video data photographed by the CCD camera 203 is temporarily stored in the transmission image memory 209, and the stored transmission image is transmitted to the PHS slave device 303 and transmitted to the designated FAX 401.
[0009]
The control unit 104 includes a CPU, a RAM, and a ROM, and a control program as an intercom system is stored in the ROM. The CPU of the control unit 104 uses the RAM as a work memory, controls each unit of the intercom system based on a control program in the ROM, and functions as the interphone system.
[0010]
That is, when there is a visitor and an interphone button (not shown) is pressed, the control unit 104 connects the outdoor interphone microphone 201 and the outdoor interphone speaker 202 with the indoor interphone microphone 101 and the indoor interphone speaker 102, The response sound from the indoor interphone microphone 101 is output from the outdoor interphone speaker 202, and then the sound from the outdoor interphone microphone 201 is output from the indoor interphone speaker 102, so that the outdoor interphone microphone 201, the outdoor interphone speaker 202, and the indoor interphone microphone 101 And an intercom response by the indoor intercom speaker 102 is enabled.
[0011]
When detecting that the PHS slave 303 is outdoors (including a remote location), the PHS master 301 sends the PHS slave 303 to the PHS slave 301. , The mode switching process is performed to the relay mode in which the outdoor interphone microphone 201 and the outdoor interphone speaker 202 are connected to the PHS slave device 303 via a line, and the PHS slave device 303 Is notified. Therefore, the PHS child device 303 operates as a normal PHS.
[0012]
When the PHS slave device 303 is outdoors, the control unit 104 controls the connection destination switching unit 103 to connect the outdoor interphone microphone 201 and the outdoor interphone speaker 202 to the PHS master device 301, and the outdoor interphone microphone 201 and the outdoor interphone An interphone function using the speaker 202 and the PHS slave device 303 is operated.
[0013]
Therefore, when there is a visitor and an interphone button (not shown) is pressed, control unit 104 connects outdoor interphone microphone 201 and outdoor interphone speaker 202 to PHS base device 301, and PHS base device 301 The PHS slave unit 303 is called via the line and the PHS public base station, and the response voice from the PHS slave unit 303 is output from the outdoor interphone speaker 202. Then, the sound from the outdoor interphone microphone 201 is transmitted to the PHS slave device 303 via the PHS master device 301 and output from the speaker of the PHS slave device 303, and the outdoor interphone microphone 201, the outdoor interphone speaker 202, and the PHS slave device are output. The intercom can be handled by 303.
[0014]
Further, in the device described in Patent Document 3, a fixed message generating unit 106 that stores a plurality of types of voice messages to be output to a visitor at the entrance in a RAM or the like is provided. One of the plurality of types of stored voice messages selected by the fixed message selection unit 105 is output from the outdoor intercom speaker 202. Then, even when the PHS slave unit 303 is outdoors, one of the voice messages of the fixed message generating unit 106 can be designated from the PHS slave unit 303 and output to the outdoor interphone speaker 202. ing. Thereby, it is possible to appropriately respond to an important visitor or the like who has not been scheduled to visit by using a voice message stored in advance without responding to the portable communication terminal. In addition, a voice message is appropriately selected and output according to the type of visitor, such as a visit to an unscrupulous salesman or a newspaper collection, so that a response suitable for the type of visitor can be performed.
[0015]
In addition, in order to improve the work efficiency of the condominium manager who has a long waiting time and little actual working time, the manager's work is performed by remote control, so that the management of multiple condominiums can be performed at the same time. A system, a plurality of dwelling units in one building, a door automatic unlocking device that automatically unlocks a front door of an apartment that has a common facility, a reception terminal provided in the entrance hall of the apartment, The absentee courier storage device, which is also provided at the entrance hall to temporarily store luggage by courier to the absentee home, and a key storage device for shared facilities located at the place where the apartment is located, are connected to the control server. By connecting the control server to an apartment management server provided in an apartment management company via a telecommunication line, the work of the manager can be performed by remote control. Also janitor agent system has been proposed (e.g., see Patent Document 4.).
[0016]
[Patent Document 1]
JP-A-5-236189
[Patent Document 2]
JP-A-7-7561
[Patent Document 3]
JP 2000-232525 A
[Patent Document 4]
JP 2002-207810 A
[0017]
[Problems to be solved by the invention]
However, the above-described intercom system or the absence management system has many problems in terms of convenience on the go. That is, in the interphone system described in Patent Document 1, although a video taken by a video camera can be transmitted by facsimile, if an outgoing destination changes every moment, transmission by facsimile transmission of the video is performed. There is a problem that it is inconvenient because transmission cannot be performed by switching the destination.
[0018]
In the absence management system described in Patent Literature 2, information can be transmitted and received between a portable terminal and a visitor-compatible device to perform absence management using the portable terminal. The terminal is a mobile terminal dedicated to the absence management system, and needs to be improved in order to improve versatility and usability. Also, in this absence management system, the delivery receiving device can sign or seal the delivery, but the delivery receiving device is only for receiving the delivery such as a courier service, and the cost is low. In addition to the high cost, there was still a need for improvement in improving versatility.
[0019]
Further, the interphone system described in Patent Document 3 can talk with a visitor at the entrance on the go using a portable communication terminal such as a PHS handset. It is not supposed that you will have to enter the house until you come home after opening the door, or if you know a courier, you will have to unlock the entrance for a short time and leave the goods behind. . Further, it has not been considered that a mobile phone with a browser function controls various lighting devices, home electric appliances, security devices, and the like installed outdoors and indoors from outside.
[0020]
In addition, although it has been shown that the agent acting system described in Patent Document 4 unlocks the key of the apartment entrance in response to a visitor who visits the entrance of the apartment from a remote place, It was not possible to determine whether to unlock or not to unlock. In addition, although this manager's agent system has various service functions for each household, such as a function for receiving voice messages to the absentee and a function for receiving courier services to the absentee, the system for the administrator However, there is a problem that the system becomes large-scale to be implemented in each individual home.
[0021]
[Means for Solving the Problems]
The present invention has been made to solve the above problems, and a home security system according to the present invention is provided with a microphone, a speaker, and a camera for responding to a visitor at a front door by voice and video. An intercom means, an indoor intercom means connected to the outdoor intercom means and provided with a microphone, a speaker, and a monitor display unit for responding to the visitor by voice and video indoors; provided indoors and connected to the Internet; A home security system including a server having a browser function and a mobile phone with a browser function connected to the server via a mobile phone network connected to the Internet, wherein the server transmits an image from the camera to a Web content. Web server function to convert images from the camera into video or still image format An image processing unit to be converted and a plurality of voices stored in a response table stored in advance in a response table corresponding to a phrase uttered by a visitor while transferring voice from an outdoor interphone microphone and transferring voice from a mobile phone to an interphone speaker. From a voice message, a voice processing unit that appropriately selects a voice message corresponding to a phrase uttered by a visitor and outputs the voice message to an outdoor interphone speaker, a mail server function unit that transmits a mail under a specific situation, and indoor or outdoor. Connected to a plurality of installed security devices, lighting devices, and home appliances, and controls the security device, the certification device, and the home appliances from an outdoor mobile phone with a browser function via the mobile phone network and the Internet. An external I / F processing unit is provided.
[0022]
ADVANTAGE OF THE INVENTION According to the home security system of this invention, since it can respond appropriately to the various visitors who appeared at the entrance of the answering machine from the outdoor intercom means and the mobile telephone connected to the broadband network, it can be used as a home security system. It is extremely effective and can respond appropriately to important visitors without losing gratitude. In addition, since various types of security devices, lighting devices, home electric appliances, and the like in the home away from home can be controlled, it is possible to safely manage the home away from home.
[0023]
In addition, the home security method of the present invention uses an outdoor intercom with a camera installed outdoors, an indoor intercom with a monitor installed indoors, a mobile phone with a browser function that can be taken out, and a server that controls these. A home security method to be implemented, wherein when the outdoor intercom at the front door is pressed by a visitor, the server determines whether or not the server is in the absence mode. A determining step; determining whether or not the server is in an automatic answering mode when in the answering mode, and searching an answering table in which a plurality of voice messages are stored in advance when in the automatic answering mode; And an appropriate corresponding word based on the search result of the response table Determining whether there is a corresponding phrase, and responding to the visitor with the outdoor interphone as a voice message if there is a corresponding phrase; and a phrase corresponding to the response table when not in the automatic response mode and even in the automatic response mode. Dialing the mobile phone when the user is away from home, and responding to the outdoor interphone from the mobile phone when the user is away from home.
[0024]
Further, in addition to the above steps, the home security method of the present invention may further include a mail correspondence table provided in the server when a family member does not respond within a predetermined time after dialing out of the mobile phone. It is characterized in that it includes a step of selecting a more appropriate mail and notifying a housekeeper on the go.
[0025]
According to the home security method of the present invention, it is possible to respond to a visitor after confirming the image and sound of the visitor using a mobile phone while away, and to notify the presence of the visitor or the like by e-mail. Therefore, even if a variety of visitors appear at home where no family member is present, it is possible to respond in a detailed manner, and it is possible to appropriately respond to both important visitors and visitors who are not.
[0026]
Further, as an embodiment of the home security method according to the present invention when a suspicious person enters, a home security method including the following steps is provided. That is, a home security method implemented using an outdoor intercom with a camera installed outdoors, an indoor intercom with a monitor installed indoors, a mobile phone with a browser function that can be taken out, and a server that controls these. When an intruder on the premises is detected by an intercom camera or various security sensors, the server determines whether or not the mode is in the absence mode, and if not in the absence mode, turns on an indoor light or issues an alarm. Notifying the intruder that a resident is at home, and in the absence mode, the server dials the mobile phone of the resident outside to notify the resident that there is an intruder in the absence home. In this step, when the family member answers the mobile phone within a certain time during the absence mode, the server is set in the server. Transmitting a response item selected according to the situation of the emergency from the plurality of automatic response items stored in advance in the emergency response table as a voice message to the family member on the go. In the absence mode, if the family member does not answer the mobile phone within a certain period of time, the emergency response table is stored in the emergency response table provided in the server. Transmitting a response item selected according to the situation of the situation as a mail message to a family member who is away from home by the mail server function unit.
[0027]
According to this home security method, when a suspicious person intrudes into the premises and opens the entrance door or breaks the window glass, a server installed indoors automatically notifies the resident mobile phone on the go. Therefore, a family member on the go can take the most appropriate action from the outside and can minimize the damage.
[0028]
BEST MODE FOR CARRYING OUT THE INVENTION
Next, an example of an embodiment of the present invention will be described with reference to the block diagram of FIG. Reference numeral 1 denotes a server, and a control unit 2 that controls the entire server, converts an image from a camera into Web content, checks the status of a security sensor, checks the status of an electronic lock, unlocks and opens and closes a door, and the like. The video from the web server function unit 3 and the outdoor intercom camera is converted into a moving image or a still image format and transferred to the monitor display unit of the indoor interphone or transferred to the mobile phone with the browser function via the Internet and the mobile phone network. Processing unit 4 having a function of recording a simple image in a memory device (not shown) in the server, transferring the sound from the external interphone microphone to the telephone, transferring the sound from the mobile phone to the speaker of the outdoor interphone, and From a plurality of voice messages stored in advance in the time response table 8 according to the situation. A voice processing unit 5 that synthesizes the selected voice and transmits the voice message as a voice message to an outdoor intercom speaker, various security sensors outdoors or indoors via an interface 11, control of opening / closing of an electronic lock, a fire alarm, and lighting. An external I / F processing unit 6 for controlling devices and various home electric appliances, and a mail correspondence table 9 when the server notifies the presence of a visitor to a family member who is out of the office that the mobile phone cannot be connected for a certain period of time. The mail server function unit 7 selects an appropriate one of a plurality of e-mail messages stored in advance and sends it to a mobile phone of a family member outside.
[0029]
The server 1 is always connected to the Internet 12, and is connected to a mobile phone 15 with a browser function via a mobile phone network 14 also connected to the Internet 12. The mobile telephone network 14 is an IP telephone network and is operated by the IP telephone company 13 subscribing to the telephone network. The server 1 is connected to the outdoor intercom system via a wired LAN or a wireless LAN, and the video captured by the outdoor intercom camera and the sound collected by the outdoor interphone microphone are sent to the server 1.
[0030]
The server 1 also stores a normal response table 8 in which a plurality of voice messages are stored, and a plurality of e-mail messages for notifying a visitor or a suspicious person of invasion of a visitor or a suspicious person to a mobile phone of a family member outside. The system includes a mail response table 9 and an emergency response table 10 in which voice messages for notifying a remote person of an emergency such as intrusion of a suspicious person are stored.
[0031]
Further, the server 1 is provided with various security sensors 17, an entrance electronic lock 18, a fire alarm, a lighting device, a heating device, and various home electric appliances installed indoors or outdoors via the external I / F processing unit 6 and the interface 11. , Etc., so that the status of these various devices can be communicated to a family member on the go, and the various devices can be controlled using a mobile phone on the go. The server 1 is connected to the outdoor intercom with camera 16 and the security camera 20 installed outdoors by wireless or wired LAN.
[0032]
In the home security system of the present invention, for example, one security sensor is attached to a window glass, and when the window glass is broken, an alarm is sent to the external I / F processing unit 6. The external I / F processing unit 6 processes signals from these various security sensors under the control of the control unit 2, passes through the Internet 12, an IP telephone company 13, and a mobile telephone network 14, and carries a mobile phone with a browser function of a family member on the go. Inform phone 15 The out-of-home resident who catches the news can notify the police and take an appropriate action by calling a neighbor.
[0033]
Next, the external I / F processing unit 6 of the server 1 is connected to the electronic lock 18 at the entrance via the interface 11. Then, the image taken by the camera-equipped outdoor interphone 16 is converted into a still image-compatible JPEG or a moving image-compatible MPEG image by the image processing unit 4 and transmitted to the mobile phone 15 with a browser function via the Internet 12 and the mobile phone network 14. Can be If the visitor in the absence is a relative or a very close friend, the visitor is confirmed by the image sent on the go, and the visitor is notified by voice from the mobile phone 15 to the visitor. Then, send a message such as "Please unlock and wait inside.""I will return in 10 minutes." And unlock the electronic lock.
[0034]
FIG. 3 shows an example of a normal response table for extracting an appropriate phrase from a voice generated by a visitor, determining the visitor, and performing an automatic response. For example, in the case of solicitation of newspapers, the phrase "XX newspaper" is issued from a visitor. Therefore, the server 1 recognizes the phrase "newspaper" by voice, and selects "in time" from the automatic response items. Reply. " The selected item is automatically synthesized by the audio processing unit 5 and generated from the speaker of the outdoor intercom. In this case, the server 1 is in the automatic answering mode, and does not contact the mobile phone 15 of the person who is away from home.
[0035]
In the case of delivery by courier service, etc., the face of the deliverer is checked using the mobile phone 15 of the housekeeper who is away from home. You can also unlock the electronic lock at the entrance by sending a message to the speaker, "Please leave your luggage at the entrance because you open the key."
[0036]
The server 1 is connected to a fire alarm, a lighting device, a heating device, various home appliances, and the like 19 via the external I / F processing unit 6 and the interface 11. Then, the state of these devices can be monitored by the mobile phone 15 from a place away from home, and the control such as turning on and off the various devices can be performed.
[0037]
Furthermore, the outdoor intercom camera has a function of comparing camera images at fixed time intervals and extracting the difference.For example, when standing in front of the visitor camera, recording starts automatically or the visitor presses the intercom button. Even without doing so, the buzzer of the indoor intercom can be sounded, so that indoor occupants can detect the presence of visitors.
[0038]
When an outdoor intercom camera catches a suspicious person who appears at the front door during an absence, it is transmitted to the mobile phone 15 of a housekeeper on the go. The camera 16 is operated so that the video taken by this camera can be stored in a storage device (not shown) in the server 1. Also, as if you are at home, you can turn on indoor lighting devices, or generate words such as "Who are you?" It is also possible to respond.
[0039]
As described above, the home security system of the present invention can be used for various applications, and FIG. 2 shows an example of the embodiment of the present invention as a flowchart.
First, when the intercom button is pressed (step S1), the control unit 2 of the server 1 determines whether or not the absence mode is set (step S2). When the server 1 is not in the absence mode, that is, when a family member is at home, the visitor is checked on the monitor of the indoor intercom, and a response signal is transmitted from the indoor intercom microphone to the outdoor interphone speaker. (Step S3).
[0040]
If it is determined in the determination step S2 that the mode is the absence mode, then the control unit 2 in the server 1 determines whether or not the mode is the automatic response mode (step S4). If it is determined that the automatic response mode is set, the normal response table 8 storing a plurality of voice messages is searched (step S5).
[0041]
Next, it is determined whether there is an appropriate corresponding phrase in the normal response table 8 according to the situation at that time (step S6). If there is a corresponding phrase, the corresponding phrase is selected and the server 1 is selected. The recorded message is transmitted to the outdoor interphone speaker by the voice processing unit 5 in the inside (step S7).
[0042]
If it is determined in the determination step S4 that the server 1 is not in the automatic response mode, the voice processing unit 5 dials the IP telephone network to connect the server 1 to a mobile phone (step S8).
Then, it is determined whether or not the householder on the go has answered the telephone within a predetermined time, for example, within 20 seconds (step S9). The interphone is directly connected and ends by talking with the visitor (step S11).
[0043]
When it is determined in the determination step S6 that there is no corresponding message in the normal response table 8 in which the voice message is recorded, the process proceeds to step S8, dials the IP telephone network, and performs the above-described operation. Do.
[0044]
In the determination step S9, if the householder who is away does not answer the telephone call within a certain period of time, the mail server function unit 7 in the server 1 is activated, and the mail handling function in which some messages are stored in advance is performed. An appropriate message is selected from the table 9, and the fact that there is a visitor is notified by e-mail transmission to the mobile phone 15 of a home worker via the Internet 12 and the mobile phone network 14 (step S10).
[0045]
FIG. 4 shows an example of an automatic response item stored in the mail correspondence table 9 corresponding to a visitor assumed in advance. The mail server function unit 7 in the server 1 recognizes the visitor. Then, the user selects an appropriate response ID from the response ID, and sends an e-mail to the mobile phone 15 of the family member who is away from home.
[0046]
FIG. 5 is a flowchart illustrating another example of the embodiment of the present invention, that is, the operation of the home security system of the present invention when a suspicious person enters the premises.
When the suspicious person pryes open the entrance door or breaks the window to enter the room (step 20), the various security sensors 17 attached to the entrance door or window operate to detect an intruder (step 21).
[0047]
When an intruder is detected, it is determined whether the server 1 is in the absence mode (step 22). If not in the absence mode, the indoor light is turned on or an alarm is sounded to intimidate and invade the intruder (step 23).
[0048]
If it is determined in the determination step 22 that the mode is the absence mode, the server 1 automatically dials the IP telephone network and calls the mobile phone 15 of the family member who is away (step 24). Next, it is determined whether or not the household member has answered the call within a predetermined time, for example, within 20 seconds (step 25). An automatic response item as shown in FIG. 6 is appropriately selected according to the situation such as the location of the intrusion, is subjected to voice synthesis processing by the voice processing unit 5, and is transmitted as a voice message to a family member outside. For example, if a suspicious person breaks the window glass and enters the room, the message “The window has been broken open. Please dial 110 immediately.” Is sent to the householder on the go.
[0049]
Also, when a suspicious person is wandering around in the house, from the emergency response table in FIG. 6, a related response item, for example, "A suspicious person is wandering in front of the interphone. Look at the camera image. . "To the mobile phone 15 of the family member on the go.
[0050]
In the decision step 25, if the householder does not answer the telephone within a certain period of time, for example, 20 seconds, the response ID 5 stored in the mail correspondence table 9 shown in FIG. Linked to Table 10. Then, an appropriate message according to the situation is selected from the emergency response table 10 and transmitted to the mobile phone 15 of the family member outside by mail under the control of the mail server function unit 7 (step 27).
[0051]
Here, in FIG. 1, the normal response table 8, the mail correspondence table 9, and the emergency correspondence table 10 are described as separate files, but it goes without saying that addresses in the same file can be used separately. Absent. The automatic response items of the normal response table 8, the mail response table 9, and the emergency response table 10 shown in FIGS. 3, 4, and 6 are only examples of possible cases. In addition to those described above, automatic response items corresponding to various application ranges are included.
[0052]
【The invention's effect】
As described above, according to the home security system and method of the present invention, an image captured by an outdoor intercom camera is transmitted to a mobile phone with a browser function on the go, and a visitor at the front door is confirmed from the go. In addition, appropriate measures can be taken, and a suspicious intruder can be appropriately dealt with from outside. In addition, since a variety of devices such as a fire alarm, a lighting device, a security device, a home appliance, and the like, which are installed indoors or outdoors, can be monitored and controlled from a place where the person is away from home, the family can leave the house with peace of mind.
[Brief description of the drawings]
FIG. 1 is a block diagram showing an embodiment of a home security system according to the present invention.
FIG. 2 is a flowchart for explaining the operation of an example of the embodiment of the home security system of the present invention.
FIG. 3 is an example of a normal response table of the home security system of the present invention.
FIG. 4 is an example of a mail correspondence table of the home security system of the present invention.
FIG. 5 is a flowchart illustrating an operation of another example of use of the embodiment of the present invention.
FIG. 6 is an example of an emergency correspondence table of the home security system of the present invention.
FIG. 7 is a block diagram showing a conventional intercom system.
[Explanation of symbols]
1 ... Server
2 ... Control unit
3 ... Web server function part
4 ... Image processing unit
5 ... Sound processing unit
6 External I / F processing unit
7 ... Mail server function part
8: Normal response table
9 ... Email correspondence table
10 Emergency response table
11 ・ ・ ・ Interface
12 Internet
13 ... IP telephone carrier
14 ・ ・ ・ Mobile phone network
15 ・ ・ ・ Mobile phone with browser function
16 ・ ・ ・ Intercom with camera
17 ・ ・ ・ Various security sensors
18 ・ ・ ・ Electronic lock
19 ... Lighting, home appliances, etc.
20 ・ ・ ・ Security camera

Claims (4)

玄関先の来訪者との間で音声及び映像による応対を行うためのマイク、スピーカ及びカメラを備えた屋外インターフォン手段と、
該屋外インターフォン手段と接続され屋内で前記来訪者と音声及び映像による応対を行うためのマイク、スピーカ及びモニター表示部を備えた屋内インターフォン手段と、
屋内に設けられ且つインターネットに接続されたサーバと、該インターネットに接続された携帯電話網を介して前記サーバに接続されるブラウザ機能付携帯電話と を備えたホームセキュリティシステムであって、
前記サーバは、
前記カメラからの画像をWeb コンテンツ化するWeb サーバ機能部と、
前記カメラからの画像を動画又は静止画フォーマットに変換する画像処理部と、 屋外インターフォンマイクからの音声を電話転送しかつ携帯電話からの音声をインターフォンスピーカへ転送するとともに、来訪者が発する語句に対応して応答テーブルに予め記憶されている複数の音声メッセージの中から、来訪者の発する語句に応じた音声メッセージを適宜選択して屋外インターフォンスピーカに出力する音声処理部と、
特定状況下においてメールを送信するメールサーバ機能部と、
屋内又は屋外に設置されている複数の防犯機器、照明機器及び家電機器と接続され、屋外のブラウザ機能付携帯電話から前期携帯電話網及び前記インターネットを介して前記防犯機器、前記証明機器及び前記家電機器を制御する外部I/F処理部と
を備えることを特徴とするホームセキュリティシステム。
An outdoor interphone means having a microphone, a speaker, and a camera for performing a voice and video response with a visitor at the entrance;
A microphone, a speaker, and an indoor intercom means provided with a monitor display unit, which are connected to the outdoor intercom means and respond to the visitor by voice and video indoors;
A home security system comprising a server provided indoors and connected to the Internet, and a mobile phone with a browser function connected to the server via a mobile phone network connected to the Internet,
The server comprises:
A web server function unit for converting images from the camera into web content,
An image processing unit for converting an image from the camera into a moving image or a still image format, and transmitting a voice from an outdoor interphone microphone to a telephone and transmitting a voice from a mobile phone to an interphone speaker, and responding to phrases uttered by visitors A voice processing unit that appropriately selects a voice message corresponding to a phrase issued by a visitor from a plurality of voice messages stored in advance in a response table and outputs the voice message to an outdoor interphone speaker;
A mail server function unit that sends mail under specific circumstances;
Connected to a plurality of security devices, lighting devices and home appliances installed indoors or outdoors, from a mobile phone with a browser function outdoors to the security device, the certification device and the home appliances via the mobile phone network and the Internet A home security system, comprising: an external I / F processing unit that controls a device.
屋外に設置されるカメラ付屋外インターフォン、屋内に設置されるモニター付屋内インターフォン、外出先に持ち出し可能なブラウザ機能付携帯電話及びこれらを制御するサーバを用いて実施するホームセキュリティ方法であって、
玄関先の前記屋外インターフォンが来訪者により押下されると、前記サーバが留守モードか否かを判断し、留守モードでなければ前記屋内インターフォンにより通常応答する留守モード判断ステップと、
留守モードの時には、前記サーバが自動応答モードであるか否かを判断し、自動応答モードのときは予め複数の音声メッセージが記憶されている応答テーブルを検索する自動応答モード判断ステップと、
前記応答テーブルの検索結果に基づいて、適切な対応する語句があるか否かを判断し、対応する語句があれば音声メッセージとして前記屋外インターフォンにより来訪者に応答するステップと、
自動応答モードでないとき及び自動応答モードであっても前記応答テーブルに対応する語句がなかったときに、外出先の携帯電話にダイアルし、外出先の携帯電話から、屋外インターフォンに応答するステップと
を含むことを特徴とするホームセキュリティ方法。
An outdoor intercom with a camera installed outdoors, an indoor intercom with a monitor installed indoors, a mobile phone with a browser function that can be taken out and a home security method implemented using a server that controls these,
When the outdoor intercom at the front door is pressed by a visitor, the server determines whether or not the server is in the absence mode, and if not in the absence mode, an answering mode determination step in which the indoor interphone normally responds;
An automatic answering mode determining step of determining whether the server is in an automatic answering mode when in the absence mode, and searching an answering table in which a plurality of voice messages are stored in advance when in the automatic answering mode;
Based on the search result of the response table, determine whether there is an appropriate corresponding phrase, and if there is a corresponding phrase, respond to the visitor by the outdoor interphone as a voice message,
Dialing a mobile phone when away from home when there is no word corresponding to the response table even in the automatic answering mode and even in the automatic answering mode, and responding to the outdoor interphone from the mobile phone while away from home. A home security method comprising:
請求項2記載のホームセキュリティ方法において、
前記外出先の携帯電話にダイアルしてから一定時間内に家人が応答しなかったときに、前記サーバ内に設けられたメール応答テーブルより適切なメールメッセージを選択し、外出先の家人に通知するステップを含むことを特徴とするホームセキュリティ方法。
The home security method according to claim 2,
When a family member does not respond within a certain period of time after dialing the mobile phone, the user selects an appropriate mail message from a mail response table provided in the server and notifies the family member of the destination. A home security method comprising the steps of:
屋外に設置されるカメラ付屋外インターフォン、屋内に設置されるモニター付屋内インターフォン、外出先に持ち出し可能なブラウザ機能付携帯電話及びこれらを制御するサーバを用いて実施するホームセキュリティ方法であって、
敷地内への侵入者がインターフォンカメラ又は各種防犯センサーによって感知されると、前記サーバが留守モードか否かを判断し、留守モードでなければ屋内の電灯を点灯させるかあるいは警報を発することにより、侵入者に家人が在宅していることを報知するステップと、
留守モードの時には、前記サーバが外出先の家人の携帯電話にダイアルして、留守宅に侵入者があることを家人に通知するステップであって、
留守モードの時に、家人が一定時間内に携帯電話に出たときは、前記サーバ内に設けられた非常時対応テーブルに予め記憶されている複数の自動応答項目の中から、非常事態の状況に応じて選択された応答項目を音声処理部により音声メッセージとして外出先の家人に送信するステップと、
前記留守モードの時に、家人が一定時間内に携帯電話に出なかったときは、前記サーバ内に設けられた前記非常時対応テーブルに予め記憶されている複数の自動応答項目の中から、非常事態の状況に応じて選択された応答項目をメールサーバ機能部により、メールメッセージとして外出先の家人に送信するステップとを
含むことを特徴とするホームセキュリティ方法。
An outdoor intercom with a camera installed outdoors, an indoor intercom with a monitor installed indoors, a mobile phone with a browser function that can be taken out and a home security method implemented using a server that controls these,
When an intruder on the premises is detected by the intercom camera or various security sensors, the server determines whether or not the absence mode is set, and if not, the indoor light is turned on or an alarm is issued if the server is not in the absence mode. Notifying the intruder that a family member is at home;
When in the absence mode, the server dials a cell phone of a housekeeper on the go, and notifies the housekeeper that there is an intruder in the house.
In the absence mode, when a household member answers a mobile phone within a certain period of time, from among a plurality of automatic response items stored in advance in an emergency response table provided in the server, an emergency situation is set. Transmitting the response item selected according to the voice processing unit as a voice message to the family member on the go;
When the family member does not answer the mobile phone within a certain period of time in the absence mode, an emergency situation is selected from a plurality of automatic response items stored in advance in the emergency response table provided in the server. Transmitting the response item selected in accordance with the situation described above to the householder as a mail message by the mail server function unit.
JP2002361285A 2002-12-12 2002-12-12 Home security system and method Expired - Fee Related JP4086142B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2002361285A JP4086142B2 (en) 2002-12-12 2002-12-12 Home security system and method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002361285A JP4086142B2 (en) 2002-12-12 2002-12-12 Home security system and method

Publications (2)

Publication Number Publication Date
JP2004194111A true JP2004194111A (en) 2004-07-08
JP4086142B2 JP4086142B2 (en) 2008-05-14

Family

ID=32760101

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002361285A Expired - Fee Related JP4086142B2 (en) 2002-12-12 2002-12-12 Home security system and method

Country Status (1)

Country Link
JP (1) JP4086142B2 (en)

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006031220A (en) * 2004-07-14 2006-02-02 Tokyu Construction Co Ltd Entrance multifunctional support device
WO2006018918A1 (en) * 2004-08-17 2006-02-23 Ginganet Corporation Video telephone interphone and video telephone terminal or mobile telephone terminal connected to the same
EP1699028A1 (en) 2005-03-01 2006-09-06 Omron Corporation Wireless alarm system with remote alarm receipt
EP1701475A1 (en) 2005-03-01 2006-09-13 Omron Corporation Home appliance control in a virtual private network environment
WO2006107058A1 (en) * 2005-03-30 2006-10-12 Matsushita Electric Industrial Co., Ltd. Intercom system having networking functionality
JP2007201658A (en) * 2006-01-25 2007-08-09 Megachips System Solutions Inc Intercom system
JP2007274177A (en) * 2006-03-30 2007-10-18 Aiphone Co Ltd Interphone system
JP2008033772A (en) * 2006-07-31 2008-02-14 Dx Antenna Co Ltd Security system
SG148038A1 (en) * 2005-11-22 2008-12-31 Cybersys Comp Ltd Cybermedia security door lock system
WO2014038199A1 (en) * 2012-09-07 2014-03-13 パナソニック株式会社 Residential security system
CN104935883A (en) * 2015-06-03 2015-09-23 维融集团有限公司 Remote monitoring method and server
JP2017069634A (en) * 2015-09-28 2017-04-06 パナソニックIpマネジメント株式会社 Intercom system, intercom master unit and communication method
JP2019116784A (en) * 2017-12-27 2019-07-18 健 坪井 Electronic lock unit, home delivery confirmation method, and home delivery confirmation assistance system
JP2021127618A (en) * 2020-02-14 2021-09-02 パナソニックIpマネジメント株式会社 Control system, information processing method, and information terminal
JP2022109677A (en) * 2021-01-15 2022-07-28 パナソニックIpマネジメント株式会社 Entrance device, communication method, program
CN115185195A (en) * 2022-08-16 2022-10-14 亿慧云智能科技(深圳)股份有限公司 Intelligent household sensing and control terminal

Cited By (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006031220A (en) * 2004-07-14 2006-02-02 Tokyu Construction Co Ltd Entrance multifunctional support device
WO2006018918A1 (en) * 2004-08-17 2006-02-23 Ginganet Corporation Video telephone interphone and video telephone terminal or mobile telephone terminal connected to the same
EP1699028A1 (en) 2005-03-01 2006-09-06 Omron Corporation Wireless alarm system with remote alarm receipt
EP1701475A1 (en) 2005-03-01 2006-09-13 Omron Corporation Home appliance control in a virtual private network environment
US7650144B2 (en) 2005-03-01 2010-01-19 Omron Corporation Monitoring control apparatus, monitoring system, monitoring method, wireless communication apparatus and wireless communication system
WO2006107058A1 (en) * 2005-03-30 2006-10-12 Matsushita Electric Industrial Co., Ltd. Intercom system having networking functionality
SG148038A1 (en) * 2005-11-22 2008-12-31 Cybersys Comp Ltd Cybermedia security door lock system
JP2007201658A (en) * 2006-01-25 2007-08-09 Megachips System Solutions Inc Intercom system
JP2007274177A (en) * 2006-03-30 2007-10-18 Aiphone Co Ltd Interphone system
JP2008033772A (en) * 2006-07-31 2008-02-14 Dx Antenna Co Ltd Security system
WO2014038199A1 (en) * 2012-09-07 2014-03-13 パナソニック株式会社 Residential security system
CN104935883A (en) * 2015-06-03 2015-09-23 维融集团有限公司 Remote monitoring method and server
JP2017069634A (en) * 2015-09-28 2017-04-06 パナソニックIpマネジメント株式会社 Intercom system, intercom master unit and communication method
JP2019116784A (en) * 2017-12-27 2019-07-18 健 坪井 Electronic lock unit, home delivery confirmation method, and home delivery confirmation assistance system
JP7084136B2 (en) 2017-12-27 2022-06-14 健 坪井 Electronic lock unit, courier confirmation method and courier confirmation support system
JP2021127618A (en) * 2020-02-14 2021-09-02 パナソニックIpマネジメント株式会社 Control system, information processing method, and information terminal
JP7496513B2 (en) 2020-02-14 2024-06-07 パナソニックIpマネジメント株式会社 Control system, information processing method, and information terminal
JP2022109677A (en) * 2021-01-15 2022-07-28 パナソニックIpマネジメント株式会社 Entrance device, communication method, program
JP7542220B2 (en) 2021-01-15 2024-08-30 パナソニックIpマネジメント株式会社 Entrance equipment
CN115185195A (en) * 2022-08-16 2022-10-14 亿慧云智能科技(深圳)股份有限公司 Intelligent household sensing and control terminal

Also Published As

Publication number Publication date
JP4086142B2 (en) 2008-05-14

Similar Documents

Publication Publication Date Title
JP4086142B2 (en) Home security system and method
JP2004128835A (en) Absent house monitoring system, monitoring terminal unit, and method for dealing with absent house visitor
JP2002354137A (en) Multiple dwelling house automatic telephone message answering interphone system
JP3794343B2 (en) Center server for monitoring and control system for housing complex
JPH098925A (en) Remote answering machine
JP2000308044A (en) Tv interphone system using communication network and video monitor system
KR101725083B1 (en) Home network system and control method thereof
JP2002330230A (en) Video monitoring system
KR101272492B1 (en) To recognize the visitor and according to situation will be able to manage in order is connected with a cellular phone the phone
JP2011155416A (en) Interphone system
KR100415018B1 (en) System for network-based internet, electronic unmanned guard and home automation service
JP4965771B2 (en) Communication system for collective housing
JP5144491B2 (en) Apartment house intercom system
JP2000299740A (en) Intercom with transfer function
JPH10283585A (en) Unit monitoring and control unit
JP2017169157A (en) Intercom system having person detection video storage function
JP2004088165A (en) Visitor notification system
JP2005294927A (en) Video doorphone system
JP2002194936A (en) Security system for apartment houses
JP2004056370A (en) Interphone system and information providing method
JP2002320040A (en) Door phone system
JP4491717B2 (en) Absence monitoring device
JP2003283677A (en) Remote monitoring system
KR200255553Y1 (en) Home control system
AU3850797A (en) Device for receiving and transmitting an alarm

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050523

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20050525

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20070423

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070626

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070824

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20080212

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20080213

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110228

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120229

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130228

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130228

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140228

Year of fee payment: 6

LAPS Cancellation because of no payment of annual fees