KI-gestütztes Multi-Kamera-Tracking

Verfolgen und identifizieren Sie Objekte mit mehreren Kameras anonym in Städten, Lagern, Fabriken und im Einzelhandel.

Workloads

Computer Vision / Videoanalyse
Edge-Computing
Robotik

Branchen

Smart Cities/Spaces,
Fertigung,
öffentlicher Sektor,
Einzelhandel/Konsumgüter,
Gesundheitswesen und Biowissenschaften

Geschäftsziel

Return on Investment
Risikominderung

Warum [Anwendungsfall]

Warum benötigen große Lagerhäuser und Einrichtungen KI-gestütztes Multi-Kamera-Tracking?

Stellen Sie sich eine Welt vor mit hochsicheren, effizienten Fabriken, Einzelhandelsflächen, die für ein perfektes Einkaufserlebnis optimiert sind, und noch sicheren, optimierten öffentlichen Räume, wie Krankenhäuser, Flughäfen und Campus. Diese Räume sind zu groß, um sie von einer einzigen Kamera abzudecken, daher werden sie in der Regel von Hunderten überlappenden Kameras überwacht. Die genaue Überwaachung von Objekten und die Erfassung von Aktivitäten mit mehreren Kameras und in verschiedenen Räumen wird als Multi-Kamera-Tracking bezeichnet und ermöglicht eine noch effektivere Überwachung und Kontrolle von Umgebungen. 

Multi-Kamera-Tracking ist wichtig, weil es aus einer Sammlung isolierter Kamera-Feeds ein einheitliches, intelligentes Erfassungssystem macht. Durch die Verknüpfung von Beobachtungen aus verschiedenen Ansichten werden tote Winkel reduziert, die Erkennung von Vorfällen verbessert und ausführlichere Analysen wie Crowd-Flow, Verweilzeit und zonenübergreifendes Verhalten ermöglicht. Dies ist von einem einzigen Sichtwinkel aus nicht zuverlässig möglich. In der Praxis bedeutet das bessere Sicherheitsreaktionen, intelligentere Entscheidungen hinsichtlich Personalbesetzung und Raumaufteilung im Einzelhandel sowie einen effizienteren Betrieb in großen Einrichtungen.

Vorteile von Multi-Kamera-Tracking:

  • Überblick über alle Bereiche aus einheitlicher Perspektive
  • Schnellere Reaktion auf Sicherheitsprobleme
  • Nutzung von Bewegungsmustern zur Verbesserung von Raumaufteilung und Betriebsabläufen
  • Kostensenkung durch die Automatisierung der routinemäßigen Überwachung bei gleichzeitiger Abdeckung größerer Flächen

In diesem Beispiel für ein Lager mit mehreren Kameras verfolgen Overhead- und Seitenkameras Mitarbeiter, Gabelstapler und AMRs in der gesamten Anlage – und bieten so ein Echtzeit-Situationsbewusstsein für jeden Gang mithilfe von NVIDIA DeepStream.

Welche Branchen nutzen KI-Multi-Camera-Tracking – und wie?

Fertigungs- und Lagerautomatisierung: Verbessern Sie Ihre Fertigungsabläufe durch eine optimierte Streckenführung für autonome Roboter, Geräte und Mitarbeiter. KI-gestützte Analysen helfen dabei, Engpässe und Risiken zu identifizieren und ermöglichen datengestützte Entscheidungen zu treffen, die die Produktivität, die Sicherheit der Mitarbeiter und die Sicherheit von Robotern verbessern. 

Optimierte Raumaufteilung im Einzelhandel:  Durch die Analyse der Kundenbewegungen im Geschäft lassen sich zur Maximierung von Verkauf und Umsatz die Gänge und die Produktplatzierung neu gestalten. Multi-Kamera-Tracking hilft dabei, Engpässe zu identifizieren, das Kundenverhalten zu verfolgen und Layout-Szenarien zu simulieren, um Auswirkungen auf die Verkäufe und die Kundenerfahrung vorherzusagen.

Smart Cities: Mithilfe von Multi-Kamera-Tracking lassen sich der Verkehrsfluss und die Fußgängerbewegung an Kreuzungen, Verkehrsknotenpunkten und öffentlichen Plätzen überwachen. Dies unterstützt die Stadtverwaltung bei der Staureduzierung, bei der Verbesserung der öffentlichen Sicherheit und bei optimierten Entscheidungen in der Stadtplanung. 

In-Krankenhaus-Patientenversorgung: Nutzen Sie die kontinuierliche Überwachung von Patienten in Krankenhäusern für zusätzliche Sicherheit und Schutz. Die Lösung ermöglicht Echtzeit-Warnungen und -Benachrichtigungen und gewährleistet sofortige Aufmerksamkeit und Promptheit, wenn sie benötigt wird.

Referenz-Workflow für Multi-Kamera-Tracking

Entdecken Sie Beispielanwendungen zum Multi-Kamera-Tracking für Multi-View-3D-Tracking (MV3DT) mit NVIDIA DeepStream SDK.

Was ist Multi-Kamera-Tracking?

Stellen Sie sich eine Welt vor, in der Fabriken automatisch mit Sicherheit und Effizienz arbeiten, Einzelhandelsflächen für das Käufererlebnis optimiert sind und öffentliche Räume wie Krankenhäuser, Flughäfen und Campus sicherer und optimierter sind. Diese Räume sind zu groß, um sie von einer einzigen Kamera abzudecken, daher werden sie in der Regel von Hunderten überlappenden Kameras überwacht. Das genaue Verfolgen von Objekten und Messen von Aktivitäten über Kameras und Räume hinweg wird als Multi-Kamera-Tracking bezeichnet, sodass Sie Ihre Räume effektiver überwachen und verwalten können.

KI-gestützte Multi-Kamera-Anwendungsentwicklung

Der anpassbare Multi-Kamera-Tracking-Workflow von NVIDIA bietet Ihnen einen Ausgangspunkt, um Ihre Entwicklung in Gang zu bringen, ohne von Grund auf neu anfangen zu müssen, und eliminiert monatelange Entwicklungszeit. Der Workflow bietet auch einen validierten Weg in die Produktion.

Die Lösung umfasst hochmoderne KI-Modelle, die auf realen und synthetischen Datensätzen vortrainiert wurden und die Sie an Ihren Anwendungsfall anpassen können. Es deckt den gesamten Lebenszyklus ab – von der Simulation bis hin zur Analyse – und integriert die innovativen Tools von NVIDIA, einschließlich Isaac SIM™, Omniverse™, TAO und DeepStream. Dieser Workflow verfügt über Echtzeit-Video-Streaming-Module und basiert auf einer skalierbaren, Cloud-nativen Microservices-Architektur. Keine zusätzlichen Kosten, nur Infrastruktur- und Tool-Lizenzen. Darüber hinaus erhalten Sie mit NVIDIA AI Enterprise fachkundigen Support und die neuesten Produktupdates, um Ihr Vision-KI-Projekt zu beschleunigen.

Wie können Sie Multi-Kamera-Tracking verwenden?

Fertigungs- und Lagerautomatisierung: Verbessern Sie Ihren Fertigungsbetrieb durch die Optimierung von Routen für autonome Roboter, Ausrüstung und Mitarbeiter. KI-gestützte Analysen helfen dabei, Überlastungen, Engpässe und Risiken zu identifizieren und ermöglichen datengestützte Entscheidungen, die die Produktivität und Sicherheit der Mitarbeiter verbessern. 

Optimierung des Layouts im Einzelhandel:  Durch die Analyse der Kundennavigation in Ihrem Geschäft können Sie Gänge und die Produktplatzierung neu konfigurieren, um den Verkauf und den Umsatz zu maximieren. Multi-Kamera-Tracking hilft dabei, Engpässe zu identifizieren, das Kundenverhalten zu verfolgen und Layout-Szenarien zu simulieren, um Auswirkungen auf die Verkäufe und die Kundenerfahrung vorherzusagen.

In-Krankenhaus-Patientenversorgung: Nutzen Sie die kontinuierliche Überwachung von Patienten in Krankenhäusern für zusätzliche Sicherheit und Schutz. Die Lösung ermöglicht Echtzeit-Warnungen und -Benachrichtigungen und gewährleistet sofortige Aufmerksamkeit und Promptheit, wenn sie benötigt wird.

Technische Umsetzung

Entwickeln Sie Anwendungen für das Multi-Kamera-Tracking mit Agenten-Fähigkeiten

NVIDIA DeepStream 9.1 vereinfacht die Entwicklung von Multi-Kamera-Tracking-Anwendungen mit Agenten-Fähigkeiten, die Coding-Agenten dabei helfen, Echtzeit-Videopipelines zu entwickeln und anzupassen. Die Agenten-Fähigkeit Multi-View 3D Tracking (MV3DT) ermöglicht ein genaues, durchgängiges Objekttracking über mehrere Kameraansichten hinweg, während AutoMagicCalib (AMC) die Kamerakalibrierung automatisiert, um die Bereitstellung zu beschleunigen und die Trackinggenauigkeit zu verbessern.

Mit dem NVIDIA Metropolis Blueprint für Videosuche und Zusammenfassung (VSS) können Entwickler KI-Agenten für die Videoanalyse entwickeln, die visuelle Inhalte verstehen und fortschrittliches Multi-Kamera-Tracking unterstützen. Diese Agenten werden von DeepStream unterstützt und halten eine konsistente Identität aufrecht, wenn sich ein Objekt über Kameraansichten bewegt, und ermöglichen kameraübergreifende Erkenntnisse wie End-to-End-Pfade, Verweilzeiten und eindeutige Zählungen. Der vorgefertigte MV3DT-Microservice kann auch mit NVIDIA VSS Blueprint- und Agenten-Fähigkeiten verwendet werden, um die Pipeline mit zusätzlichen Microservices, Datenbanken und Agenten zu integrieren.

 

FAQs

Mithilfe des Multi-Kamera-Trackings von DeepStream lassen sich Daten von mehreren Standard-IP-Kameras zu einer einzigen Ansicht über die gesamte Einrichtung zusammenführen. Dieses System koordiniert überlappende Blickwinkel und gibt einheitliche 3D-Positionsdaten aus. Es ermöglicht eine konsistente Identifizierung jeder Person oder jedes Objekts, während diese sich zwischen den Kameras bewegen. Es lässt sich problemlos auf Hardware von NVIDIA von Edge-Geräten bis hin zu Rechenzentrums-GPUs skalieren.

Ja, das visionbasierte Tracking bietet eine taglose Alternative zu herkömmlichen RTLS-Technologien wie Wi-Fi, Bluetooth-Beacons, UWB oder RFID. Menschen oder Objekte müssen keine Vorrichtungen mehr mitführen. Stattdessen verfolgen kamerabasierte Systeme Objekte direkt mithilfe von Computer Vision. Das Multi-Kamera-Tracking von NVIDIA DeepStream liefert 3D-Koordinaten in Echtzeit in einem globalen Referenzrahmen und Standortdaten, die mit Tag-basierten Systemen vergleichbar sind, ohne dass Hardwarekosten für jedes überwachte Objekt entstehen, Batteriewartung oder das Mitführen von Tags erforderlich sind.

Das Multi-View-3D-Tracking von DeepStream ermöglicht konsistente Objekt-IDs mithilfe eines verteilten Protokolls. Kameras mit überlappenden Blickwinkeln handeln hier globale IDs mithilfe von einfachem MQTT-Messaging automatisch aus und geben sie weiter. Wenn ein Objekt im Blickwinkel einer anderen Kamera auftaucht, gleicht das System es mit Tracklets benachbarter Kameras mithilfe von 3D-Positionskorrelation ab. Ein zentraler Server ist hierbei nicht erforderlich. Das System umfasst auch eine automatische Kamerakalibrierung, um die mühsame Aufgabe der manuellen Synchronisierung aller Kameras über ein globales räumliches Koordinatensystem zu reduzieren.

DeepStream ermöglicht flexible Bereitstellungsoptionen in Edge-Geräten, Rechenzentren oder hybriden Konfigurationen. Das verteilte Design des Systems verarbeitet Daten lokal, anstatt alle Videos zentral zu streamen. Dadurch sind die Anforderungen an die Bandbreite reduziert und es ist möglich, die Anzahl der Kameras anzupassen, ohne dass Leistungsengpässe entstehen.

NVIDIA DeepStream ist detektorunabhängig und unterstützt jedes Modell, das Begrenzungsbereiche erzeugt. Sie können Standardarchitekturen wie YOLO und Faster R-CNN, mit NVIDIA TAO trainierte Modelle oder Ihre eigenen benutzerdefinierten Modelle verwenden. Da das Tracking der Erkennung nachgelagert ist, kann man den Detektor auswählen oder austauschen, der am besten zum eigenen Anwendungsfall passt.

Erste Schritte

Diesen Anwendungsfall erstellen

Beschleunigen Sie die Entwicklung Ihrer KI-Anwendung für Multi-Kamera-Tracking um mindestens das Sechsfache mit NVIDIA DeepStream-Agenten-Fähigkeiten

Ähnliche Anwendungsfälle