JDO / EMBODIED INTELLIGENCE TECHNOLOGY

Embodied-Intelligence-Technologie für Fahrzeuge und Roboter

Das JDO AI-System verbindet Wahrnehmung, Entscheidungsfindung, Ausführung und Rückmeldung und wird an unterschiedliche Aufgaben in Fahrzeugen und Robotern angepasst.

AI-Gesamtsystem kennenlernen

JDO AI-Gesamtsystem

Für die Koordination im Gesamtfahrzeug Informationen aus Innenraum, Umgebung und Fahrzeugstatus zusammenführen.

Zentrales System · Verstehen und Entscheiden

Gelände, Fahrbahnunebenheiten und Fahrzeugzustand einbeziehen, um Kontext und Aufgabenziele zu verstehen und das Gesamtfahrzeug zu koordinieren.

Ausführungssystem · Ausführen und Rückmelden

Das Gehirn koordiniert die Aufgabe. Das Kleinhirn führt sie in den Bereichen intelligentes Fahren, Fahrwerk und Cockpit in Echtzeit aus und meldet den Status an das Gehirn zurück.

Fahrassistenz
Fahrstrategie
Fahrwerk
Federung und Fahrzeuglage
Cockpit
Interaktion und Hinweise
Hellgrauer dreidimensionaler öffentlicher Raum mit Fußgängern vor einem Gebäudeeingang und einem weißen Fahrzeug auf der Straße

Ein System für vielfältige Aufgaben

Gemeinsame Grundlage für Fahrzeuge und Roboter, angepasst an die jeweilige Plattform

Hierarchisches Gedächtnis

Aufgaben, Erfahrungen und langfristige Präferenzen

Adaptive Inferenz

Den Umfang der Verarbeitung an die Aufgabe anpassen

Kontextprognose

Spätere Kontexte vorausschauend einschätzen

Erfahrung mit Automotive-Technologie

Grundlagen für Wahrnehmung, Verstehen und Gedächtnis bei Interaktionen und Aufgaben im Fahrzeug bereitstellen.

Visuelles Sprachverständnis (VLM)

Visuelle und sprachliche Informationen verbinden, um Verkehr, Objekte, Oberflächen und Fragestellungen innerhalb und außerhalb des Cockpits zu verstehen.

Sprachsteuerung im Fahrzeug und lokale Reaktion

Die Sprachverarbeitung im Fahrzeug richtet sich auf das Verstehen von Nutzeranliegen bei Fahrgeräuschen; die Reaktion direkt im Fahrzeug berücksichtigt schwache Verbindungen und Offline-Bedingungen.

Status- und gesundheitsbezogene Wahrnehmung

Bei vorliegender Autorisierung und verfügbaren Daten unterstützt das System Einschätzungen und Hinweise, ersetzt jedoch keine medizinische Diagnose.

Fahrer- und Insassenzustand erfassen

Wahrnehmungseingaben zum Zustand von Fahrer, Insassen und Kindern bereitstellen, um Hinweise, Interaktion und Dienste zu unterstützen.

Multimodale Fusion und Kontextverständnis

Visuelle, sprachliche und akustische Informationen mit Fahrzeugstatus verknüpfen und daraus einen nutzbaren Kontext bilden.

Gedächtnisfunktionen

Präferenzen und Aufgabenkontext im vom Nutzer autorisierten Umfang erhalten, damit Dienste nahtlos fortgesetzt werden können.

Unterstützender Technologie-Stack

JDO Canghai AI Core

Multimodale Modelle und Wahrnehmungsalgorithmen

Nutzeräußerungen mit dem visuellen Kontext verknüpfen.

Insassen, beleuchtete Displays und eine Stadt vor den Fenstern in einem hellgrauen dreidimensionalen Cockpit

Natürliche Sprache

Modelle für natürliche Sprache helfen, Äußerungen und Anliegen von Nutzern im Fahrzeug zu verstehen.

Visuelles Sprachverständnis und Wahrnehmung

Visuelles Sprachverständnis und Wahrnehmungsalgorithmen verbinden, um Bildverständnis und Objekterkennung zu unterstützen.

AIOS

Kontextverwaltung und Agent-Laufzeit

Über das Laufzeitframework an unterschiedliche Plattformen anpassen.

Die Modellinferenz wird für einen effizienten Betrieb auf dem Gerät an die Rechenleistung des Chips und die Betriebsbedingungen angepasst.

Physisches, beleuchtetes Display in einem hellgrauen dreidimensionalen Cockpit mit Karten-, Medien- und Umgebungskomponenten

Laufzeit und Kontext

Aufgabenkontext und Verlaufsinformationen verwalten und die Agent-Orchestrierung organisieren.

Plattformintegration und -anpassung

Benötigte Modelle und Funktionen über APIs, Container und Middleware anbinden.

Generative Komponenten und Designs

Die Generierung von Komponenten, wechselnde Designs und Kombinationen von Oberflächen untersuchen.

AI Agent

Absichten analysieren, Aufgaben planen und Werkzeuge aufrufen

Mehrere Agenten werden anhand von Kontextinformationen und Aufgabenzielen koordiniert, um Aufgaben in Mobilitätsdiensten und Robotikanwendungen gemeinsam zu erfüllen.

Hellgraues dreidimensionales Aufgabenformular, das Dialogeingabe, Straßenkarte und Ladewerkzeug verbindet

Absichten und Anforderungen

Anforderungen und Einschränkungen über mehrere Dialogrunden zusammenführen.

Planen und Aufrufen

Aufgabenschritte organisieren, Werkzeuge und Dienste nach Bedarf aufrufen und Ausführungsergebnisse aufnehmen.

GUI verstehen und bedienen

Gemeinsam mit Partnerfähigkeiten das Verstehen von Oberflächen und zielgerichtete Bedienvorgänge untersuchen.

AI Cloud

API-/MCP-Integration und Model-Service-Management

AI Cloud verwaltet Cloud-Modelle und Wissensressourcen, bindet Geschäftsdienste an und unterstützt Anwendungsupdates sowie die Überwachung des Betriebs.

Computerschränke, Fachpersonal und ein Betriebsarbeitsplatz in einem hellgrauen dreidimensionalen Servicebereich

Modell- und Wissensressourcen

Cloud-Modelle und Wissensressourcen verwalten.

Geschäftsdienste anbinden

Geschäftsdienste über API / MCP anbinden.

Servicebetrieb

  • Anwendungsaktualisierungen
  • Laufzeitüberwachung

Technologische Fähigkeiten in reale Anwendungen bringen