ArmSoM
← Alle Geschichten

Aufbau eines Offline-Voice-Interfaces: Audio Capture ist nur der erste Schritt

Eine Offline-Sprachanwendung muss nutzbares Audio erfassen, Sprache erkennen und innerhalb ihres Speicherbudgets eine Antwort zurückgeben. P2 Pro ist für die Audioseite dieses Designs relevant. Ob die komplette Anwendung passt, hängt von den gewählten Modellen und Services ab.

ArmSoM P2 Pro

ArmSoM P2 Pro

Testabscheidung vor Erkennung

Audio mit dem vorgesehenen Mikrofon, Codec und Boardbild aufnehmen. Überprüfen Sie das Musterformat, die Kanalbestellung und das Cliping, hören Sie dann die Aufzeichnung an und prüfen Sie sie. Die Erkennung wird erst hinzugefügt, nachdem der Pfad stabil ist. Messen Sie die Modellladung und den Spitzenspeicher sowie die Reaktionszeit; Ein System, das stark tauscht, kann sich nach dem Aufwärmen sehr unterschiedlich verhalten.

Testen Sie in dem Raum, in dem es funktionieren wird

Lüftergeräusche, Lautsprecherwiedergabe, Entfernung und Nachhall können die Erkennung beeinflussen. Ein mit Zustimmung genehmigtes Prüfgerät mit den vorgesehenen Mikrofonen und dem Gehäuse aufzeichnen. Messen Sie verpasste Befehle und falsche Aktivierungen, auch während das Gerät Audio abspielt. Eine klare Aufzeichnung an einem Schreibtisch ist kein Beweis für eine Fernfeldleistung.

Halten Sie das Offline-Versprechen präzise

Trennen Sie das Netzwerk und testen Sie Start, Erkennung und Reaktion. Prüfen Sie, ob Modell-Downloads, Authentifizierung oder Zeitsynchronisation versteckte Abhängigkeiten sind. Definieren Sie das Verhalten, wenn das Vertrauen gering ist, und bieten Sie eine manuelle Möglichkeit, eine Aktion zu wiederholen oder abzubrechen. Speichern Sie Aufzeichnungen nur bei Bedarf und machen Sie dieses Verhalten für die Benutzer verständlich.

ArmSoM Sige5

ArmSoM Sige5

Passen Sie die Wahl an Ihre Anforderungen an

Anforderung oder Situation

Was zu bewerten ist

Einzelheiten der Entscheidung

Fang

Mikrofon und Gehäuse

Messen Sie Lärm und Clipping.

Schlussfolgerung

Ausgewähltes Modell und Latenz

Validieren auf dem Zielprozessor.

Offline-Verhalten

Netz getrennt

Testen Sie die komplette Interaktion.

Beispielhafte Gestaltung

Testen Sie Offline-Voice unter einem getrennten Netzwerk

Ein Offline-Anspruch sollte das Entstecken des Netzwerks überleben, nachdem das System aus einem sauberen Zustand gestartet wurde. Prüfen Sie, ob Modelldateien, Lizenzen oder Initialisierungsdienste aus der Ferne abgerufen werden. Testen Sie die Aufweck-, Erkennungs- und Reaktionsstufen separat unter Verwendung realistischer Hintergrundgeräusche. Eine kleine Audioplatine kann als Frontend für einen anderen Prozessor fungieren, aber diese Architektur sollte explizit beschrieben werden, anstatt als alle Verarbeitungen auf dem Mikrofonendpunkt dargestellt zu werden.

Hardware und Dokumentation

P2 Pro · RK3308B-S

RK3308B-S, 256 MB / 512 MB DDR3, 100 Mbps Ethernet, PDM und I2S Audio. Boardgröße: 65 × 52.5 mm. Speicher- und Netzzubehör hängen von der bestellten Konfiguration ab.

Hardware-Dokumentation · Produktdetails

Sige5 · RK3576

RK3576, vier Cortex-A72 und vier Cortex-A53 Kerne, 6 TOPS NPU, Dual Gigabit Ethernet und M.2 PCIe 2.1 x1.

Hardware-Dokumentation · Produktdetails

Häufig gestellte Fragen

Enthält ein audiofähiges Board automatisch einen Offline-Assistenten?

Nein. Anwendung, Modelle, Audioverarbeitung und Interaktionsverhalten müssen integriert und getestet werden.

Produktinformationen und Support

Entdecken Sie P2 Pro

ArmSoM kontaktieren

Quellen

Geschrieben von ArmSoM mit der folgenden Dokumentation. Beispieldesigns sind Vorschläge, keine gemessenen Kundeninstallationen.

Verwandtes Lesen