Η NVIDIA ανακοίνωσε το Cosmos3-H-Dreams, την τελευταία εξέλιξη στα «μοντέλα θεμελίωσης κόσμου» (World Foundation Models), το οποίο υπόσχεται να αλλάξει ριζικά τον τρόπο με τον οποίο εκπαιδεύονται τα χειρουργικά ρομπότ. Σε αντίθεση με τις παραδοσιακές αριθμητικές προσομοιώσεις που απαιτούν τον ρητό σχεδιασμό της γεωμετρίας και της φυσικής των ιστών, το νέο σύστημα μαθαίνει την οπτική δυναμική απευθείας από βίντεο κλινικών επεμβάσεων και κινηματικά δεδομένα ρομπότ.
Από το Εργαστήριο στο Χειρουργείο
Ενώ οι προηγούμενες εκδόσεις περιορίζονταν σε απλές εργαστηριακές δοκιμές (tabletop tasks), το Cosmos3-H-Dreams εκπαιδεύτηκε σε πραγματικές καταγραφές χολοκυστεκτομής από την πλατφόρμα Versius της CMR Surgical. Το σύστημα καλείται να διαχειριστεί την πολυπλοκότητα του ανθρώπινου σώματος, όπου οι αντανακλάσεις, η κίνηση των ιστών και ο καπνός από τα χειρουργικά εργαλεία δημιουργούν ένα εξαιρετικά δυναμικό περιβάλλον.
Τεχνική Υπεροχή και Πραγματικός Χρόνος
Το μοντέλο βασίζεται στο Cosmos3-H-Embodied-Nano με 16 δισεκατομμύρια παραμέτρους. Για την επίτευξη απόκρισης σε πραγματικό χρόνο, η NVIDIA χρησιμοποίησε τη βιβλιοθήκη FlashDreams και μια διαδικασία «απόσταξης» (distillation) από ένα μοντέλο-δάσκαλο σε μοντέλα-μαθητές (δύο ή τεσσάρων βημάτων). Αυτή η προσέγγιση επιτρέπει στο σύστημα να τρέχει σε μία μόνο κάρτα γραφικών NVIDIA RTX PRO 6000, διατηρώντας την οπτική πιστότητα και τη χρονική συνέπεια.
- 28 διαστάσεις δράσης (κινήσεις βραχιόνων, λαβίδες, έλεγχος ενέργειας).
- Εκπαίδευση με τη μέθοδο Self-Forcing για την αποφυγή συσσώρευσης σφαλμάτων.
- Δυνατότητα παραγωγής ρεαλιστικών αντιδράσεων των ιστών σε μη προκαθορισμένες κινήσεις του χειρουργού.
Παρά τον εντυπωσιακό ρεαλισμό, η NVIDIA διευκρινίζει ότι το Cosmos3-H-Dreams παραμένει ένα ερευνητικό εργαλείο και δεν προορίζεται για χρήση σε ασθενείς, θέτοντας όμως τις βάσεις για την αυτόνομη χειρουργική του μέλλοντος.