DE102015221181B4

DE102015221181B4 - Data glasses and methods for displaying a virtual image component and methods for maintaining, servicing, repairing or manufacturing a motor vehicle

Info

Publication number: DE102015221181B4
Application number: DE102015221181.9A
Authority: DE
Inventors: Johannes Tümler
Original assignee: Volkswagen AG
Current assignee: Volkswagen AG
Priority date: 2015-10-29
Filing date: 2015-10-29
Publication date: 2022-03-03
Anticipated expiration: 2035-10-30
Also published as: DE102015221181A1

Abstract

Datenbrille (20) mit einem transparenten Display (21) zur überlagernden Darstellung eines virtuellen Bildbestandteils (VIRT, VIRT') mit einem durch das transparente Display (21) sichtbaren realen Objekt (2), wobei das transparente Display (21) eine Mehrzahl individuell ansteuerbarer Pixel (22, 221, 222, 223) aufweist, wobei die Datenbrille (20) eine Recheneinrichtung (40) zur Erzeugung, Auswahl und/oder Positionierung des virtuellen Bildbestandteils (VIRT, VIRT') und zur individuellen Ansteuerung der Pixel (22, 221, 222, 223) des transparenten Displays (21) umfasst, wobei das transparente Display (21) fotosensitives Material (24') zur Erzeugung elektrischer Energie aus Licht für die Versorgung der Recheneinrichtung (40) über einen Puffer (30) zum Speichern elektrischer Energie umfasst, und wobei das fotosensitive Material (24') zwischen den Pixeln (22, 221, 222, 223) des transparenten Displays (21) angeordnet ist.Data glasses (20) with a transparent display (21) for the superimposed display of a virtual image component (VIRT, VIRT') with a real object (2) visible through the transparent display (21), the transparent display (21) having a plurality of individually controllable pixels (22, 221, 222, 223), the data glasses (20) having a computing device (40) for generating, selecting and/or positioning the virtual image component (VIRT, VIRT') and for individually controlling the pixels (22, 221 , 222, 223) of the transparent display (21), the transparent display (21) comprising photosensitive material (24') for generating electrical energy from light for supplying the computing device (40) via a buffer (30) for storing electrical energy comprises, and wherein the photosensitive material (24 ') between the pixels (22, 221, 222, 223) of the transparent display (21) is arranged.

Description

Die Erfindung betrifft eine Datenbrille (z. B. für Augmented-Reality-Anwendungen) mit einem transparenten Display, insbesondere zur überlagernden Darstellung eines virtuellen Bildbestandteils mit einem durch das transparente Display sichtbaren realen Objekt.The invention relates to data glasses (e.g. for augmented reality applications) with a transparent display, in particular for the superimposed display of a virtual image component with a real object visible through the transparent display.

Gemäß der WO 01/96829 A1 ist der Begriff Augmented-Reality als Überlagerung einer realen Umgebung mit einer rechnergenerierten Umgebung, d. h. einer virtuellen Welt, definiert. Augmented-Reality ist somit eine Art Mensch-Technik-Interaktion, die dem Anwender Informationen in sein Sichtfeld einblendet und so seine Wahrnehmung erweitert.According to the WO 01/96829 A1 the term augmented reality is defined as the superimposition of a real environment with a computer-generated environment, ie a virtual world. Augmented reality is a kind of human-technology interaction that displays information in the user's field of vision and thus expands his perception.

Die US 2014/0267208 A1 beschreibt eine Bildanzeigevorrichtung, die am Kopf oder im Gesicht eines Benutzers angebracht und verwendet wird, und insbesondere auf eine am Kopf oder im Gesicht angebrachte Bildanzeigevorrichtung mit einer Stromerzeugungsfunktion und ein Bildanzeigeverfahren.the U.S. 2014/0267208 A1 describes an image display device to be mounted and used on a user's head or face, and more particularly to a head or face-mounted image display device having a power generation function and an image display method.

Gemäß der US 2015/0108508 A1 wird eine Anzeigetafel bereitgestellt, die ein Substrat, ein netzartiges Abschirmungsmuster, eine Vielzahl von Licht emittierenden Vorrichtungen und eine Solarzelle umfasst. Das Substrat weist eine erste Oberfläche und eine zweite Oberfläche gegenüber der ersten Oberfläche auf, das Substrat umfasst eine erste Schaltungsschicht, die über der ersten Oberfläche angeordnet ist, und eine zweite Schaltungsschicht, die über der zweiten Oberfläche angeordnet ist. Das netzartige Abschirmungsmuster ist auf der ersten Oberfläche des Substrats angeordnet, um eine Vielzahl von Pixelbereichen über dem Substrat zu definieren. Die lichtemittierenden Vorrichtungen sind auf der ersten Oberfläche des Substrats angeordnet und elektrisch mit der ersten Schaltungsschicht verbunden, und mindestens eine der lichtemittierenden Vorrichtungen ist in einem der Pixelbereiche angeordnet. Die Solarzelle ist auf der zweiten Oberfläche des Substrats angeordnet und elektrisch mit der zweiten Schaltungsschicht verbunden.According to the U.S. 2015/0108508 A1 provides a display panel that includes a substrate, a meshed shielding pattern, a plurality of light-emitting devices, and a solar cell. The substrate has a first surface and a second surface opposite the first surface, the substrate includes a first circuit layer disposed over the first surface and a second circuit layer disposed over the second surface. The meshed shielding pattern is disposed on the first surface of the substrate to define a plurality of pixel areas across the substrate. The light emitting devices are arranged on the first surface of the substrate and electrically connected to the first circuit layer, and at least one of the light emitting devices is arranged in one of the pixel regions. The solar cell is disposed on the second surface of the substrate and is electrically connected to the second circuit layer.

Die in der WO 2015/081327 A1 beschriebene Erfindung bezieht sich auf lichtemittierende Festkörperdioden (LEDs), Photodetektor/Photovoltaik-Vorrichtungen, Anzeigen, Anwendungen und Verfahren zu deren Herstellung. Wie experimentell gezeigt wurde, haben die hierin offenbarten LEDs, eine hohe Lichtemissionseffizienz, einen hohen Kontrast, eine hohe Helligkeit, eine geringe Umgebungslichtreflexion, eine geringe Lichtblendung und einen einstellbaren Anzeigewinkel. Dieselbe hier offenbarte LED kann als hocheffiziente Anzeige und hocheffiziente photovoltaische Vorrichtung oder Fotodetektor verwendet werden. Dies bedeutet, dass das gleiche Gerät, wenn es in Array-Form verwendet wird, als Display (LED-Betriebsmodus) und Stromversorgung (Photovoltaik-Gerätemodus) und Kamera (Fotodetektor- und Bildgebungsmodus) verwendet werden kann.The one in the WO 2015/081327 A1 The invention described relates to solid state light emitting diodes (LEDs), photodetector/photovoltaic devices, displays, applications and methods of their manufacture. As shown experimentally, the LEDs disclosed herein have high light emission efficiency, high contrast, high brightness, low ambient light reflectance, low light glare, and adjustable viewing angle. The same LED disclosed herein can be used as a high efficiency display and a high efficiency photovoltaic device or photodetector. This means that when used in array form, the same device can be used as a display (LED mode of operation) and power supply (photovoltaic device mode) and camera (photodetector and imaging modes).

Den Einsatz von Datenbrillen in Verbindung mit Fahrerassistenzsystemen offenbart zum Beispiel die Internetseite www.ingenieur.de/Themen/IT-Hardware/BMW-Tochter-Mini-zeigt-Datenbrille-fuer-Autofahrer.The website www.ingenieur.de/Themen/IT-Hardware/BMW-Tochter-Mini-shows-data-glasses-for-autodrivers, for example, reveals the use of data glasses in connection with driver assistance systems.

Für den mobilen Einsatz von Datenbrillen können Batteriesysteme, die aus mehreren Batteriezellen und einer Ladeelektronik bestehen, eingesetzt werden, um die Datenbrillen mit elektrischer Energie zu versorgen. Dazu können zum Beispiel Lithium-Ionen-Zellen verwendet werden. Die Batteriezellen haben typischerweise die Bauform von Rundzellen des Typs 18650. Durch diese Art der Stromversorgung erhöht sich u. a. das Gewicht der Brille. Zudem ist die Einsatzdauer derartiger Datenbrillen begrenzt.For the mobile use of data glasses, battery systems consisting of several battery cells and charging electronics can be used to supply the data glasses with electrical energy. Lithium-ion cells, for example, can be used for this. The battery cells typically have the shape of round cells of type 18650. This type of power supply increases u. the weight of the glasses. In addition, the period of use of such data glasses is limited.

Es ist Aufgabe der Erfindung, vorgenannte Nachteile zu vermeiden.It is the object of the invention to avoid the aforementioned disadvantages.

Vorgenannte Aufgabe wird durch eine Datenbrille mit einem transparenten Display, insbesondere zur überlagernden Darstellung eines virtuellen Bildbestandteils (VIRT) mit einem durch das transparente Display sichtbaren realen Objekt, wobei das transparente Display eine Mehrzahl individuell ansteuerbarer Pixel aufweist, wobei die Datenbrille eine Recheneinrichtung zur Erzeugung, Auswahl und/oder Positionierung des virtuellen Bildbestandteils und zur individuellen Ansteuerung der Pixel des transparenten Displays umfasst, und wobei das transparente Display fotosensitives Material zur Erzeugung elektrischer Energie aus Licht für die Versorgung der Recheneinrichtung und/oder der Pixel des transparenten Displays (mit elektrischer Energie) umfasst, und wobei das fotosensitive Material zwischen den Pixeln des transparenten Displays angeordnet ist.The aforementioned object is achieved by data glasses with a transparent display, in particular for the superimposed representation of a virtual image component (VIRT) with a real object visible through the transparent display, the transparent display having a plurality of individually controllable pixels, the data glasses having a computing device for generating Selection and/or positioning of the virtual image component and for individually controlling the pixels of the transparent display, and the transparent display includes photosensitive material for generating electrical energy from light for supplying the computing device and/or the pixels of the transparent display (with electrical energy) comprises, and wherein the photosensitive material is arranged between the pixels of the transparent display.

Ein transparentes Display im Sinne der Erfindung kann zum Beispiel einen Monitor sowie einen semitransparenten Spiegel umfassen, wobei ein von dem Monitor erzeugtes Bild mittels des semitransparenten Spiegels auf das Auge eines Benutzers gelenkt wird. Es kann jedoch auch vorgesehen sein, dass die Pixel des Displays in einen transparenten Träger eingebettet oder auf einen transparenten Träger aufgebracht sind.A transparent display within the meaning of the invention can, for example, comprise a monitor and a semi-transparent mirror, with an image generated by the monitor being directed to the user's eye by means of the semi-transparent mirror. However, it can also be provided that the pixels of the display are embedded in a transparent carrier or applied to a transparent carrier.

In weiterhin vorteilhafter Ausgestaltung der Erfindung ist das fotosensitive Material in Form fotosensitiver Pixel, insbesondere zwischen den Pixeln des transparenten Displays, angeordnet.In a further advantageous embodiment of the invention, the photosensitive material is arranged in the form of photosensitive pixels, in particular between the pixels of the transparent display.

In weiterhin vorteilhafter Ausgestaltung der Erfindung sind die fotosensitiven Pixel (zumindest zum Teil) Teil einer Kamera. Dabei ist vorgesehen, dass die fotosensitiven Pixel sowohl zur Bildgebung (Bildgewinnung, Bilderzeugung) als auch zur Energieversorgung eingesetzt werden. Es ist insbesondere vorgesehen, dass fotosensitive Pixel zur Gewinnung elektrischer Energie eingesetzt werden, wenn elektrische Energie benötigt wird, und nur dann zur Bildgebung, wenn keine elektrische Energie benötigt wird (zum Beispiel weil ein Energie-Zwischenspeicher bzw. Energie-Puffer ausreichend voll ist). In weiterhin vorteilhafter Ausgestaltung der Erfindung umfasst die Datenbrille einen Puffer zur Zwischenspeicherung von elektrischer Energie. Ein solcher Puffer kann zum Beispiel ein Kondensator sein.In a further advantageous embodiment of the invention, the photosensitive pixels are (at least in part) part of a camera. It is provided that the photosensitive pixels are used both for imaging (image acquisition, image generation) and for energy supply. In particular, it is envisaged that photosensitive pixels will be used to generate electrical energy when electrical energy is required and only for imaging if no electrical energy is required (e.g. because an intermediate energy store or energy buffer is sufficiently full). . In a further advantageous embodiment of the invention, the data glasses include a buffer for temporarily storing electrical energy. Such a buffer can be a capacitor, for example.

In weiterhin vorteilhafter Ausgestaltung der Erfindung umfasst die Datenbrille oder die Recheneinrichtung ein Trackingmodul zur Auswertung individueller Ausgangssignale der fotosensitiven Pixel oder ein Modul zur Auswertung individueller Ausgangssignale der fotosensitiven Pixel. In weiterhin vorteilhafter Ausgestaltung der Erfindung umfasst die Datenbrille oder die Recheneinrichtung ein Trackingmodul zur Erzeugung eines realen Bildes durch Auswertung individueller Ausgangssignale der fotosensitiven Pixel oder ein Modul zur Erzeugung eines realen Bildes durch Auswertung individueller Ausgangssignale der fotosensitiven Pixel. Das Tracking erfolgt insbesondere markerlos. Geeignete markerlose Trackingverfahren können zum Beispiel der DE 10 2012 014 995 A1 entnommen werden (Verwendbare Algorithmen sind zum Beispiel SLAM und PTAM (vgl. z. B. den Artikel Georg Klein, David Murrayt: „Parallel Tracking and Mapping for Small AR Workspaces“, ISMAR 2007).). In weiterhin vorteilhafter Ausgestaltung der Erfindung erfolgt das Tracking in Abhängigkeit eines aus dem realen Bild generierten Kantenbildes.In a further advantageous embodiment of the invention, the data glasses or the computing device includes a tracking module for evaluating individual output signals from the photosensitive pixels or a module for evaluating individual output signals from the photosensitive pixels. In a further advantageous embodiment of the invention, the data glasses or the computing device includes a tracking module for generating a real image by evaluating individual output signals from the photosensitive pixels or a module for generating a real image by evaluating individual output signals from the photosensitive pixels. The tracking takes place in particular without markers. Suitable markerless tracking methods can, for example, DE 10 2012 014 995 A1 (Algorithms that can be used are, for example, SLAM and PTAM (cf. e.g. the article Georg Klein, David Murrayt: "Parallel Tracking and Mapping for Small AR Workspaces", ISMAR 2007).). In a further advantageous embodiment of the invention, the tracking takes place as a function of an edge image generated from the real image.

In weiterhin vorteilhafter Ausgestaltung der Erfindung umfasst die Datenbrille oder die Recheneinrichtung eine Schnittstelle zur drahtlosen Kommunikation mit einem Kraftfahrzeug.In a further advantageous embodiment of the invention, the data glasses or the computing device includes an interface for wireless communication with a motor vehicle.

Es ist eine weitere Aufgabe der Erfindung, den Einsatz von Augmented-Reality in mobilen Systemen zu verbessern.Another object of the invention is to improve the use of augmented reality in mobile systems.

Vorgenannte Aufgabe wird zudem durch ein Verfahren zur Darstellung eines virtuellen Bildbestandteils auf einem transparenten Display einer Datenbrille mit einem oder mehreren der vorgenannten Merkmale gelöst, wobei die Recheneinrichtung über einen Puffer zum Speichern elektrischer Energie mittels fotosensitiven Materials, das zwischen den Pixeln des transparenten Displays angeordnet ist, mit elektrischer Energie versorgt wird, (mittels der Recheneinrichtung oder des Trackingmoduls) die Position des virtuellen Bildbestandteils in Abhängigkeit der Position eines mittels des virtuellen Bildbestandteils zu überlagernden realen Objektes in Bezug auf das transparente Display bestimmt und der virtuelle Bildbestandteil mittels des transparenten Displays entsprechend positioniert dargestellt wird.The aforementioned object is also achieved by a method for representing a virtual image component on a transparent display of data glasses with one or more of the aforementioned features, the computing device having a buffer for storing electrical energy using photosensitive material that is arranged between the pixels of the transparent display , is supplied with electrical energy, the position of the virtual image component is determined (by means of the computing device or the tracking module) as a function of the position of a real object to be superimposed by means of the virtual image component in relation to the transparent display and the virtual image component is positioned accordingly using the transparent display is pictured.

Es ist eine weitere Aufgabe der Erfindung, Wartung, Instandhaltung, Reparaturen und/oder Herstellung von Kraftfahrzeugen effektiver vorzunehmen.It is a further object of the invention to carry out maintenance, servicing, repairs and/or manufacture of motor vehicles more effectively.

Vorgenannte Aufgabe wird zudem durch ein Verfahren zur Wartung, Instandhaltung, Reparatur oder Herstellung eines Kraftfahrzeugs, gelöst, wobei auf einem transparenten Display ein virtueller Bildbestandteil gemäß dem vorgenannten Verfahren dargestellt wird, und wobei eine Maßnahme zur Wartung, Instandhaltung, Reparatur oder Herstellung eines Kraftfahrzeugs entsprechend der Vorgabe des virtuellen Bildbestandteils erfolgt.The aforementioned object is also achieved by a method for servicing, maintaining, repairing or manufacturing a motor vehicle, with a virtual image component being shown on a transparent display according to the aforementioned method, and with a corresponding measure for servicing, servicing, repairing or manufacturing a motor vehicle the specification of the virtual image component takes place.

Vorgenannte Aufgabe wird zudem durch ein Verfahren zur Wartung, Instandhaltung, Reparatur oder Herstellung eines Kraftfahrzeugs, gelöst, wobei auf dem transparenten Display einer Datenbrille mit einem oder mehreren der vorgenannten Merkmale ein virtueller Bildbestandteil dargestellt wird, und wobei eine Maßnahme zur Wartung, Instandhaltung, Reparatur oder Herstellung eines Kraftfahrzeugs entsprechend der Vorgabe des virtuellen Bildbestandteils erfolgt.The aforementioned object is also achieved by a method for servicing, maintaining, repairing or manufacturing a motor vehicle, with a virtual image component being shown on the transparent display of data glasses with one or more of the aforementioned features, and with a measure for servicing, servicing, repair or a motor vehicle is produced in accordance with the specification of the virtual image component.

Kraftfahrzeug im Sinne der Erfindung ist insbesondere ein individuell im Straßenverkehr benutzbares Landfahrzeug. Kraftfahrzeuge im Sinne der Erfindung sind insbesondere nicht auf Landfahrzeuge mit Verbrennungsmotor beschränkt.Motor vehicle within the meaning of the invention is in particular a land vehicle that can be used individually in road traffic. Motor vehicles within the meaning of the invention are in particular not limited to land vehicles with internal combustion engines.

Weitere Vorteile und Einzelheiten ergeben sich aus der nachfolgenden Beschreibung von Ausführungsbeispielen. Dabei zeigen:

1 ein Ausführungsbeispiel für eine erfindungsgemäße Datenbrille,
2 die Datenbrille gemäß 1 in einer Prinzipdarstellung,
3 eine Verkehrssituation zur Erläuterung der Verwendung virtueller Bildbestandteile,
4 die Verkehrssituation gemäß 3, ergänzt um einen virtuellen Bildbestandteil,
5 ein Ausführungsbeispiel für die Anordnung von fotosensitiven Pixeln und individuell ansteuerbaren Pixeln,
6 ein Ausführungsbeispiel für die Anordnung von individuell ansteuerbaren Pixeln in Verbindung mit fotosensitivem Material,
7 ein weiteres Ausführungsbeispiel für die Verwendung der Datenbrille gemäß 1,
8 ein Ausführungsbeispiel eines Verfahrens zum Herstellen, Warten, Instandsetzen oder Reparieren eines Kraftfahrzeuges oder einer Kraftfahrzeugkomponente,
9 ein weiteres Ausführungsbeispiel eines Verfahrens zum Herstellen, Warten, Instandsetzen oder Reparieren eines Kraftfahrzeuges oder einer Kraftfahrzeugkomponente und
10 ein weiteres Ausführungsbeispiel eines Verfahrens zum Herstellen, Warten, Instandsetzen oder Reparieren eines Kraftfahrzeuges oder einer Kraftfahrzeugkomponente.

Further advantages and details result from the following description of exemplary embodiments. show:

1 an embodiment of data glasses according to the invention,
2 according to the data glasses 1 in a principle representation,
3 a traffic situation to explain the use of virtual image components,
4 according to the traffic situation 3 , supplemented by a virtual image component,
5 an embodiment for the arrangement of photosensitive pixels and individually controllable pixels,
6 an embodiment for the arrangement of individually controllable pixels in connection with photosensitive material,
7 a further exemplary embodiment for the use of the data glasses according to FIG 1 ,
8th an embodiment of a method for manufacturing, maintaining, repairing or repairing a motor vehicle or a motor vehicle component,
9 a further exemplary embodiment of a method for producing, servicing, maintaining or repairing a motor vehicle or a motor vehicle component and
10 a further exemplary embodiment of a method for producing, maintaining, overhauling or repairing a motor vehicle or a motor vehicle component.

1 zeigt einen Benutzer 1 mit einer beispielhaft ausgestalteten Datenbrille 20. Die Datenbrille 20 weist ein semitransparentes Display 21 auf, das einen Monitor 210 und einen semitransparenten Spiegel 211 umfasst, wobei eine mittels des Monitors erzeugte virtuelle Information VIRT' mittels des semitransparenten Spiegels 211 in das Auge des Betrachters 1 gestrahlt wird. Aus der Sicht des Betrachters 1 scheint die virtuelle Information VIRT' in einer virtuellen Bildebene und überlagert ggf. ein Objekt 2. 2 zeigt die Datenbrille 20 in einer Prinzipdarstellung. Dabei umfasst das semitransparente Display 21 eine Mehrzahl individuell ansteuerbarer Pixel 22 zur Darstellung der virtuellen Information bzw. zur Darstellung virtueller Bildbestandteile VIRT'. 1 shows a user 1 with an exemplary designed data glasses 20. The data glasses 20 has a semi-transparent display 21, which includes a monitor 210 and a semi-transparent mirror 211, with virtual information generated by the monitor VIRT 'by means of the semi-transparent mirror 211 in the eye of the viewer 1 is radiated. From the point of view of the viewer 1, the virtual information VIRT' appears in a virtual image plane and possibly superimposes an object 2. 2 shows the data glasses 20 in a schematic representation. In this case, the semi-transparent display 21 comprises a plurality of individually controllable pixels 22 for displaying the virtual information or for displaying virtual image components VIRT'.

Ein Beispiel der Verwendung virtueller Bildbestandteile VIRT' im Zusammenhang mit Kraftfahrzeugen zeigen 3 und 4, wobei Bezugszeichen 100 einen Fahrer des Kraftfahrzeugs 101 bezeichnet, der die Datenbrille 20 trägt. In der in 3 dargestellten Situation fährt das Kraftfahrzeug 101 auf eine Ausfahrt einer für die Einfahrt gesperrten Straße 50 zu. Daher generiert eine Recheneinheit 40 der Datenbrille 20 in dem Display 21 einen virtuellen Felsblock 51, der aus der Sicht des Fahrers 100 aufgrund des Tragens der Datenbrille 20 die Ausfahrt der für die Einfahrt gesperrten Straße 50 (optisch, virtuell) versperrt.Show an example of the use of virtual image components VIRT' in the context of motor vehicles 3 and 4 , wherein reference number 100 designates a driver of motor vehicle 101 who wears data glasses 20 . in the in 3 In the situation shown, motor vehicle 101 is driving toward an exit of a road 50 that is closed to entry. Therefore, a computing unit 40 of the data glasses 20 generates a virtual boulder 51 in the display 21, which from the perspective of the driver 100 due to the wearing of the data glasses 20 blocks the exit of the road 50 that is closed to entry (optically, virtually).

Das semitransparente Display 21 umfasst zudem fotosensitive Pixel 24. Diese können zum Beispiel mit den Pixeln 22 in einer gemeinsamen Matrix angeordnet sein. Die fotosensitiven Pixel 24 können jedoch auch, wie in 5 dargestellt, zwischen einer Matrix der individuell ansteuerbaren Pixel 22 liegen. Dabei bezeichnet in 5 Bezugszeichen 221 Pixel zum Emittieren von blauem Licht, Bezugszeichen 222 Pixel zum Emittieren von gelbem Licht und Bezugszeichen 223 Pixel zum Emittieren von rotem Licht. Es kann auch vorgesehen sein, dass die Pixel 221, 222 und 223, wie in 6 dargestellt, von fotosensitivem Material 24' umgeben sind.The semi-transparent display 21 also includes photosensitive pixels 24. These can be arranged, for example, with the pixels 22 in a common matrix. However, the photosensitive pixels 24 can also, as in 5 shown, lie between a matrix of individually controllable pixels 22 . Thereby marked in 5 Numeral 221 pixels for emitting blue light, numeral 222 pixels for emitting yellow light, and numeral 223 pixels for emitting red light. It can also be provided that the pixels 221, 222 and 223, as in 6 shown, are surrounded by photosensitive material 24'.

Eine geeignete Schaltung für die fotosensitiven Pixel 24 zeigt 5 des Artikels Shree K. Nayar Daniel C. Sims Mikhail Fridberg: „Towards Self-Powered Cameras“, Department of Computer Science, Columbia University, New York, NY 10027, USA, www1.cs.columbia.edu/CAVE/publications/pdfs/Nayar_ICCP15.pdf; wobei Bezugszeichen 23 in 2 dem Energy Harvester in 5 des Artikels Shree K. Nayar Daniel C. Sims Mikhail Fridberg: „Towards Self-Powered Cameras“, Department of Computer Science, Columbia University, New York, NY 10027, USA, www1.cs.columbia.edu/CAVE/publications/pdfs/Nayar_ICCP15.pdf entspricht. Der Harvester 23 liefert eine Ausgangsspannung VOUT, mittels der ein Kondensator 30 geladen wird. Der Kondensator 30 stellt eine Versorgungsspannung VIN für das transparente Display 21 und für eine Recheneinrichtung 40 der Datenbrille 20 zur Verfügung. Dabei ist vorgesehen, dass die Pixel 24 gesteuert durch den Harvester 23 zur Erzeugung elektrischer Energie eingesetzt werden, wenn der Kondensator 30 unzureichend geladen ist. Ist der Kondensator 30 ausreichend geladen, können die Pixel 24 zur Bildgebung, das heißt zur Erzeugung eines realen Bildes RB, verwendet werden.A suitable circuit for the photosensitive pixels 24 is shown 5 of the article Shree K. Nayar Daniel C. Sims Mikhail Fridberg: "Towards Self-Powered Cameras", Department of Computer Science, Columbia University, New York, NY 10027, USA, www1.cs.columbia.edu/CAVE/publications/pdfs /Nayar_ICCP15.pdf; where reference numeral 23 in 2 the energy harvester in 5 of the article Shree K. Nayar Daniel C. Sims Mikhail Fridberg: "Towards Self-Powered Cameras", Department of Computer Science, Columbia University, New York, NY 10027, USA, www1.cs.columbia.edu/CAVE/publications/pdfs /Nayar_ICCP15.pdf. The harvester 23 supplies an output voltage VOUT, by means of which a capacitor 30 is charged. The capacitor 30 provides a supply voltage VIN for the transparent display 21 and for a computing device 40 of the data glasses 20 . It is provided that the pixels 24 are used controlled by the harvester 23 to generate electrical energy when the capacitor 30 is insufficiently charged. If the capacitor 30 is sufficiently charged, the pixels 24 can be used for imaging, ie for generating a real image RB.

Die Recheneinrichtung 40 umfasst ein Trackingmodul 41, mittels dessen in Abhängigkeit des realen Bildes RB markerloses Tracking erfolgt, und eine Soll-Position POS für einen virtuellen Bildbestandteil VIRT auf dem transparenten Display 21 ermittelt wird. Bezugszeichen 31 bezeichnet einen Datenbestand virtueller Bilder VIRT. Dieser kann zum Beispiel über eine Schnittstelle von einem Kraftfahrzeug bereitgestellt werden. Es kann jedoch auch eine Datenbasis der Datenbrille 20 bzw. eine Datenbasis sein, die in die Recheneinrichtung 40 integriert ist. In Abhängigkeit der Soll-Position POS des virtuellen Bildbestandteils VIRT steuert ein Ausrichtmodul 42 die individuell ansteuerbaren Pixel 22 derart an, dass ein virtueller Bildbestandteil VIRT' an der gewünschten Position des transparenten Displays 21 dargestellt wird.The arithmetic unit 40 includes a tracking module 41, by means of which markerless tracking takes place as a function of the real image RB, and a target position POS for a virtual image component VIRT on the transparent display 21 is determined. Numeral 31 denotes a virtual image data stock VIRT. This can be provided by a motor vehicle via an interface, for example. However, it can also be a database of the data glasses 20 or a database that is integrated into the computing device 40 . Depending on the target position POS of the virtual image component VIRT, an alignment module 42 controls the individually controllable pixels 22 in such a way that a virtual image component VIRT′ is displayed at the desired position on the transparent display 21 .

Die Energieversorgung für die Recheneinrichtung 40 erfolgt über den Kondensator 30 (Versorgungsspannung VIN). In dem dargestellten Ausführungsbeispiel einer Datenbrille 20 ist vorgesehen, dass diese zum Starten des Betriebs der Datenbrille 20 die Möglichkeit einer zusätzlichen Versorgungsspannung VINEXT bietet. Diese zusätzliche Versorgungsspannung VINEXT wird solange angelegt, bis der Kondensator 30 hinreichend geladen ist, um einen Betrieb der Datenbrille 20, wie beschrieben, zu ermöglichen bzw. zu starten. Zur Erzeugung der zusätzlichen Versorgungsspannung VINEXT kann die Datenbrille 20 zum Beispiel einen Piezogenerator (Druckknopf) umfassen.The computing device 40 is supplied with energy via the capacitor 30 (supply voltage VIN). In the exemplary embodiment of data glasses 20 shown, it is provided that these offer the possibility of an additional supply voltage VINEXT for starting the operation of data glasses 20 . This additional supply voltage VINEXT is applied until the capacitor 30 is sufficiently charged to enable or start the operation of the data glasses 20 as described. To generate the additional supply voltage VINEXT, the data glasses 20 can include a piezoelectric generator (push button), for example.

Die in 5 des Artikels Shree K. Nayar Daniel C. Sims Mikhail Fridberg: „Towards Self-Powered Cameras“, Department of Computer Science, Columbia University, New York, NY 10027, USA, www1.cs.columbia.edu/CAVE/publications/pdfs/Nayar_ICCP15.pdf vorgesehenen Befehlssignale DISCHARGE, HARVEST und RESET werden von der Recheneinrichtung 40 erzeugt, und an das transparente Display 20 übertragen. In einer vereinfachten alternativen Ausgestaltung der Datenbrille 20 kann das Trackingmodul 41 nicht vorgesehen sein. Zudem entfällt die Erzeugung eines realen Bildes RB.In the 5 of the article Shree K. Nayar Daniel C. Sims Mikhail Fridberg: "Towards Self-Powered Cameras", Department of Computer Science, Columbia University, New York, NY 10027, USA, www1.cs.columbia.edu/CAVE/publications/pdfs /Nayar_ICCP15.pdf provided command signals DISCHARGE, HARVEST and RESET are generated by the computing device 40 and transmitted to the transparent display 20. In a simplified alternative embodiment of the data glasses 20, the tracking module 41 cannot be provided. In addition, there is no need to generate a real image RB.

7 zeigt ein weiteres Ausführungsbeispiel der Verwendung der erfindungsgemäßen Datenbrille 20, wobei mittels des transparenten Displays 21 ein virtueller Bildbestandteil VIRT' zur Erläuterung einer Wartungsmaßnahme, einer Instandhaltungsmaßnahme, einer Reparaturmaßnahme oder einer Herstellungsmaßnahme in Bezug auf das mit Bezugszeichen 103 bezeichnete Kraftfahrzeug beschrieben wird. 7 shows a further exemplary embodiment of the use of the data glasses 20 according to the invention, a virtual image component VIRT' being described by means of the transparent display 21 to explain a maintenance measure, a maintenance measure, a repair measure or a production measure in relation to the motor vehicle designated by reference number 103.

8 zeigt ein Ausführungsbeispiel eines Verfahrens zum Herstellen, Warten, Instandsetzen oder Reparieren eines Kraftfahrzeuges oder einer Kraftfahrzeugkomponente, wobei in einem Schritt 71 ein zu montierendes Bauteil mittels des virtuellen Bildbestandteils gemäß dem vorgehend beschriebenen Verfahren markiert oder gekennzeichnet wird, und wobei in einem Schritt 72 das zu montierende Bauteil in der technischen Komponente, in dem Kraftfahrzeug oder in der Kraftfahrzeugkomponente montiert wird. 8th shows an exemplary embodiment of a method for manufacturing, maintaining, maintaining or repairing a motor vehicle or a motor vehicle component, wherein in a step 71 a component to be assembled is marked or identified using the virtual image component according to the method described above, and wherein in a step 72 the assembly component is assembled in the technical component in the motor vehicle or in the motor vehicle component.

9 zeigt ein Ausführungsbeispiel eines Verfahrens zum Herstellen, Warten, Instandsetzen oder Reparieren eines Kraftfahrzeuges oder einer Kraftfahrzeugkomponente, wobei in einem Schritt 81 der Montageort eines zu montierenden Bauteils mittels des virtuellen Bildbestandteils gemäß dem vorgehend beschriebenen Verfahren markiert oder gekennzeichnet wird, und wobei in einem Schritt 82 das zu montierende Bauteil in der technischen Komponente, in dem Kraftfahrzeug oder in der Kraftfahrzeugkomponente am Montageort montiert wird. 9 shows an embodiment of a method for manufacturing, maintaining, maintaining or repairing a motor vehicle or a motor vehicle component, wherein in a step 81 the assembly location of a component to be assembled is marked or identified using the virtual image component according to the method described above, and wherein in a step 82 the component to be assembled is assembled in the technical component, in the motor vehicle or in the motor vehicle component at the assembly site.

10 zeigt ein Ausführungsbeispiel eines Verfahrens zum Herstellen, Warten, Instandsetzen oder Reparieren eines Kraftfahrzeuges oder einer Kraftfahrzeugkomponente, wobei in einem Schritt 91 ein Montageablauf zum Montieren eines zu montierenden Bauteils mittels des virtuellen Bildbestandteils gemäß dem vorgehend beschriebenen Verfahren ermittelt oder verifiziert wird, und wobei in einem Schritt 92 das zu montierende Bauteil in der technischen Komponente, in dem Kraftfahrzeug oder in der Kraftfahrzeugkomponente dem Montageablauf entsprechend montiert wird. 10 shows an exemplary embodiment of a method for manufacturing, maintaining, maintaining or repairing a motor vehicle or a motor vehicle component, wherein in a step 91 an assembly process for assembling a component to be assembled is determined or verified using the virtual image component according to the method described above, and wherein in a Step 92 the component to be assembled is assembled in the technical component, in the motor vehicle or in the motor vehicle component according to the assembly process.

Claims

Data glasses (20) with a transparent display (21) for the superimposed display of a virtual image component (VIRT, VIRT') with a real object (2) visible through the transparent display (21), the transparent display (21) having a plurality of individually controllable pixels (22, 221, 222, 223), the data glasses (20) having a computing device (40) for generating, selecting and/or positioning the virtual image component (VIRT, VIRT') and for individually controlling the pixels (22, 221 , 222, 223) of the transparent display (21), the transparent display (21) comprising photosensitive material (24') for generating electrical energy from light for supplying the computing device (40) via a buffer (30) for storing electrical energy comprises, and wherein the photosensitive material (24 ') between the pixels (22, 221, 222, 223) of the transparent display (21) is arranged.

Smart glasses (20) after claim 1 , characterized in that the photosensitive material (24') is arranged in the form of photosensitive pixels (24) between the pixels (22, 221, 222, 223) of the transparent display (21).

Smart glasses (20) after claim 2 , characterized in that the photosensitive pixels (24) are part of a camera.

Smart glasses (20) after claim 2 , characterized in that the photosensitive pixels (24) are at least in part part of a camera.

Smart glasses (20) after claim 2 , 3 or 4 , characterized in that it or the computing device (40) comprises a tracking module (41) for evaluating individual output signals from the photosensitive pixels (24) or a module for evaluating individual output signals from the photosensitive pixels (24).

Smart glasses (20) after claim 2 , 3 or 4 , characterized in that it or the computing device (40) a tracking module (41) for generating a real image (RB) by evaluating individual output signals of the photosensitive pixels (24) or a module for generating a real image (RB) by evaluating individual output signals of the photosensitive pixels (24).

Data glasses (20) according to one of the preceding claims, characterized in that they or the computing device (40) comprises an interface for wireless communication with a motor vehicle.

Method for representing a virtual image component (VIRT, VIRT') on a transparent display (21) of data glasses (20) according to one of the preceding claims, characterized in that the computing device (40) has a buffer (30) for storing electrical energy by means of the photosensitive material (24'), which is arranged between the pixels (22, 221, 222, 223) of the transparent display (21), is supplied with electrical energy, the position (POS) of the virtual Image component (VIRT, VIRT') as a function of the position of a real object (2) to be superimposed by means of the virtual image component (VIRT, VIRT') in relation to the transparent display (21) and the virtual image component (VIRT, VIRT') by means of of the transparent display (21) is shown positioned accordingly.

A method for servicing, maintaining, repairing or manufacturing a motor vehicle, characterized in that on a transparent display (21) a virtual image component (VIRT, VIRT ') according to a method claim 8 is shown, and that a measure for the maintenance, servicing, repair or production of a motor vehicle is carried out in accordance with the specification of the virtual image component (VIRT, VIRT').

Method for servicing, maintaining, repairing or manufacturing a motor vehicle, characterized in that on the transparent display (21) of data glasses (20) according to one of Claims 1 until 7 a virtual image component (VIRT, VIRT') is displayed, and that a measure for servicing, maintaining, repairing or producing a motor vehicle is carried out in accordance with the specification of the virtual image component (VIRT, VIRT').