Πώς μειώνετε τον λανθάνοντα χρόνο στην ενδοσκοπική απεικόνιση;

Εισαγωγή
Στην ενδοσκόπηση, κάθε χιλιοστό του δευτερολέπτου έχει σημασία. Όταν ένας χειρουργός καθοδηγεί μια μονάδα κάμερας ιατρικού ενδοσκοπίου μέσα από ευαίσθητο ιστό ή ένας επιθεωρητής περιηγείται σε ένα borescope μέσα σε έναν κινητήρα τζετ, μια αισθητή καθυστέρηση μεταξύ της κίνησης του άκρου και της προβολής της εικόνας στην οθόνη μπορεί να προκαλέσει αποπροσανατολισμό ή σφάλματα. Αυτή η καθυστέρηση είναι καθυστέρηση . Η μείωσή του είναι απαραίτητη για τον έλεγχο σε πραγματικό χρόνο και τον συντονισμό χεριού-ματιού. Αυτό το άρθρο εξηγεί από πού προέρχεται η καθυστέρηση σε μια μονάδα κάμερας ενδοσκοπίου και πώς να την ελαχιστοποιήσετε.

Τι είναι η καθυστέρηση στην απεικόνιση ενδοσκοπίου;
Η καθυστέρηση είναι ο χρόνος από την αλλαγή σκηνής (π.χ. η κάμερα μετακινείται) μέχρι την αλλαγή που εμφανίζεται στην οθόνη. Περιλαμβάνει:

• Έκθεση αισθητήρα και ανάγνωση

• Επεξεργασία σήματος εικόνας (ISP)

• Μετάδοση δεδομένων

• Απόδοση οθόνης

Για ένα τυπικό ενδοσκόπιο υψηλής ευκρίνειας , η συνολική καθυστέρηση κυμαίνεται συχνά από 30 ms έως πάνω από 100 ms. Κάτω από 30 ms είναι καλό για εργασίες σε πραγματικό χρόνο. πάνω από 50 ms γίνεται αισθητό.

Πηγές λανθάνοντος χρόνου και πώς να τις διορθώσετε

1. Επιλέξτε μια γρήγορη ανάγνωση αισθητήρα
Η μονάδα κάμερας αισθητήρα είναι το πρώτο σημείο συμφόρησης. Οι αισθητήρες κυλιόμενου κλείστρου διαβάζουν τις σειρές διαδοχικά – ένα πλήρες πλαίσιο 1080p μπορεί να διαρκέσει 20–30 ms. Για να μειώσετε την καθυστέρηση :

• Χρησιμοποιήστε μια καθολικού κλείστρου cmos μονάδα κάμερας – όλα τα pixel καταγράφονται ταυτόχρονα, ανάγνωση κάτω από 5 ms.

• Ενεργοποίηση περιοχής ενδιαφέροντος (ROI) – διαβάστε μόνο μια μικρή περιοχή, μειώνοντας σημαντικά τον χρόνο ανάγνωσης.

• Επιλέξτε έναν αισθητήρα με γρήγορο ρολόι pixel και πολλές λωρίδες (π.χ. MIPI 4 λωρίδων).

Για μια μονάδα κάμερας ιατρικού ενδοσκοπίου , το σφαιρικό κλείστρο είναι προτιμότερο κατά την επιθεώρηση κινούμενου ιστού.

2. Βελτιστοποιήστε το ISP Pipeline
On-board ISP (διόρθωση χρώματος, μείωση θορύβου, όξυνση) προσθέτει καθυστέρηση. Για να το κόψετε:

• Παράκαμψη περιττών μπλοκ – π.χ. παράλειψη προσωρινής μείωσης θορύβου εάν η σκηνή είναι στατική.

• Χρησιμοποιήστε μια απλή διαμόρφωση ISP - μόνο demosaic και gamma.

• Μετακινήστε τον ISP σε έναν ισχυρό κεντρικό υπολογιστή – εάν ο κεντρικός υπολογιστής έχει εφεδρική CPU, επεξεργαστείτε εκεί τα μη επεξεργασμένα δεδομένα.

Για μια μονάδα κάμερας AI , τροφοδοτήστε ακατέργαστα δεδομένα της Bayer απευθείας στον επιταχυντή AI, παρακάμπτοντας εντελώς τον ISP.

3. Χρησιμοποιήστε μια διεπαφή χαμηλής καθυστέρησης

• MIPI CSI‑2 – Το καλύτερο για χαμηλή καθυστέρηση. Χωρίς επιβάρυνση πρωτοκόλλου, γράφει απευθείας στη μνήμη. Τυπική καθυστέρηση <5 ms.

• USB (UVC) – Προσθέτει μερικά χιλιοστά του δευτερολέπτου. Χρησιμοποιήστε USB 3.0 (γρηγορότερο ισόχρονο) και μειώστε το βάθος του buffer.

• WiFi – Αποφύγετε τη χρήση σε πραγματικό χρόνο. προσθέτει 20–100 ms.

Για ένα ενδοσκόπιο υψηλής ευκρίνειας συνδεδεμένο σε φορητό υπολογιστή, το USB 3.0 είναι αποδεκτό. Για ενσωματωμένα συστήματα, χρησιμοποιήστε το MIPI.

4. Μειώστε την καθυστέρηση της οθόνης
Η ίδια η οθόνη προσθέτει καθυστέρηση. Χρήση:

• Οθόνη τύπου gaming με χρόνο απόκρισης 1–5 ms.

• Direct HDMI/DisplayPort – αποφύγετε τους προσαρμογείς USB-to-HDMI.

• Απενεργοποιήστε τη μετεπεξεργασία στην οθόνη (εξομάλυνση κίνησης, κ.λπ.).

5. Βελτιώστε την προσωρινή αποθήκευση λογισμικού
Το λογισμικό κεντρικού υπολογιστή συχνά αποθηκεύει στην προσωρινή μνήμη πολλά καρέ. Για να μειώσετε την καθυστέρηση:

• Ζητήστε ένα μόνο buffer (V4L2 σε Linux, MF_READWRITE σε Windows).

• Χρησιμοποιήστε απόδοση με επιτάχυνση υλικού (OpenGL, DirectX) έναντι απόδοσης λογισμικού.

• Για μια μονάδα AI κάμερας , εκτελέστε το συμπέρασμα AI στην ίδια GPU που αποδίδει το βίντεο – αποφύγετε την αντιγραφή καρέ.

6. Χρησιμοποιήστε την επιτάχυνση υλικού για AI
Μια μονάδα κάμερας AI που στέλνει καρέ στο σύννεφο προσθέτει καθυστέρηση δικτύου 100+ ms. Χρησιμοποιήστε έναν επιταχυντή τεχνητής νοημοσύνης στη συσκευή (Google Coral, NVIDIA Jetson) για επεξεργασία με ταχύτητα καλωδίου, διατηρώντας την καθυστέρηση κάτω από 50 ms.

7. Μετρήστε τον λανθάνοντα χρόνο σας
Χρησιμοποιήστε μια κάμερα υψηλής ταχύτητας για να καταγράψετε τόσο το άκρο του ενδοσκοπίου όσο και την οθόνη. Μετρήστε καρέ μεταξύ μιας φυσικής κίνησης (π.χ. ένα LED που αναβοσβήνει) και της εμφάνισής της στην οθόνη. Στόχοι:

• Μονάδα κάμερας ιατρικού ενδοσκοπίου : <30 ms

• Βιομηχανικό βοροσκόπιο : <50 ms

• Μονάδα κάμερας AI με ανίχνευση: <100 ms (συμπεριλαμβανομένου του συμπεράσματος)

Παραδείγματα περιπτώσεων

• Μονάδα κάμερας ιατρικού ενδοσκοπίου – Ένας κατασκευαστής λαπαροσκοπίου μειώνει τον λανθάνοντα χρόνο από 80 ms σε 25 ms μεταβαίνοντας από το ρολό (30 ms) στο καθολικό κλείστρο (5 ms) και χρησιμοποιώντας MIPI αντί για USB.

• Ενδοσκόπιο υψηλής ευκρίνειας – Ένας κατασκευαστής borescope μείωσε τον λανθάνοντα χρόνο από 70 ms σε 40 ms απενεργοποιώντας τη μείωση θορύβου επί του σκάφους (εξοικονόμηση 15 ms) και χρησιμοποιώντας μια οθόνη χαμηλής καθυστέρησης (εξοικονόμηση 15 ms).

• Μονάδα κάμερας AI – Ένα σύστημα ανίχνευσης πολυπόδων σε πραγματικό χρόνο μετέφερε τα συμπεράσματα από έναν απομακρυσμένο υπολογιστή σε έναν επιταχυντή τεχνητής νοημοσύνης στην κάμερα, μειώνοντας τον λανθάνοντα χρόνο από άκρο σε άκρο από 120 ms σε 45 ms.

Μονάδες κάμερας ενδοσκοπίου χαμηλής καθυστέρησης της Sincere
Στη Sincere, σχεδιάζουμε προϊόντα μονάδας κάμερας ενδοσκοπίου με βασική παράμετρο τον λανθάνοντα χρόνο:

• Μονάδα κάμερας ενδοσκοπίου – Καθολικοί αισθητήρες κλείστρου, διεπαφή MIPI, προσαρμοσμένη βελτιστοποίηση ISP.

• Ενδοσκόπιο υψηλής ευκρίνειας – Μονάδες 1080p και 4K με γρήγορη ανάγνωση.

• Μειώστε την καθυστέρηση – Προσαρμοσμένες ρυθμίσεις buffer και παράκαμψη αγωγών.

• Μονάδα κάμερας Ai – Επιταχυντές τεχνητής νοημοσύνης σε μονάδα για εξαγωγή συμπερασμάτων κάτω των 50 ms.

• Μονάδα κάμερας Cmos – Αισθητήρες Sony IMX με λειτουργίες γρήγορης ανάγνωσης.

• Μονάδα κάμερας ιατρικού ενδοσκοπίου – Αποστειρώσιμη, χαμηλής καθυστέρησης για χειρουργική επέμβαση.

• Μονάδα κάμερας αισθητήρα – Προσαρμοσμένη επιλογή αισθητήρα για να καλύψει τον προϋπολογισμό σας για καθυστέρηση.

Περίληψη
Για να μειώσετε τον λανθάνοντα χρόνο στην απεικόνιση ενδοσκοπίου, επιτεθείτε σε κάθε στάδιο: ανάγνωση αισθητήρα, ISP, διεπαφή, οθόνη και λογισμικό. Επιλέξτε μια μονάδα κάμερας cmos με καθολικό κλείστρο. Προτιμήστε το MIPI έναντι του USB. Βελτιώστε ή αποφορτώστε τον ISP. Χρησιμοποιήστε μια οθόνη χαμηλής καθυστέρησης και ελαχιστοποιήστε την προσωρινή αποθήκευση λογισμικού. Για μια μονάδα AI κάμερας , η επιτάχυνση στη συσκευή εξαλείφει την καθυστέρηση δικτύου. Είτε χρειάζεστε μια μονάδα κάμερας ιατρικού ενδοσκοπίου για χειρουργική επέμβαση είτε ένα ενδοσκόπιο υψηλής ευκρίνειας για επιθεώρηση, η χαμηλότερη καθυστέρηση βελτιώνει την ασφάλεια και την αποτελεσματικότητα.

Επικοινωνήστε με την Sincere για να συζητήσετε τις απαιτήσεις της χαμηλής καθυστέρησης μονάδας κάμερας ενδοσκοπίου .