Τι προσφέρουν οι δεξιότητες πράκτορα
Οι δεξιότητες πράκτορα καλύπτουν βασικές λειτουργίες που απαιτούνται για αυτόνομα συστήματα – αντίληψη, πλοήγηση, χειρισμό αντικειμένων και κατανόηση σκηνής. Αντί να χτίζουν αυτές τις ικανότητες από το μηδέν, οι προγραμματιστές μπορούν να ενσωματώσουν τις έτοιμες δεξιότητες. Η NVIDIA αναφέρει ότι αυτή η προσέγγιση μειώνει τον χρόνο που απαιτείται για την εκπαίδευση και την ανάπτυξη μοντέλων AI για αυτοκίνητα, ρομπότ και κάμερες.
Οι δεξιότητες είναι προσαρμοσμένες για τρεις κύριους τομείς. Για αυτόνομα οχήματα, βοηθούν στην ανίχνευση λωρίδας, παρακολούθηση πεζών και λήψη αποφάσεων σε διασταυρώσεις. Για ρομποτική, εστιάζουν στη σύλληψη αντικειμένων, τη μετακίνηση σε αποθήκες και την απόκριση σε ανθρώπινες εντολές. Για όραση τεχνητής νοημοσύνης, βελτιώνουν την αναγνώριση αντικειμένων και την ανίχνευση ανωμαλιών σε ροές βίντεο.
Το Cosmos 3 ως βάση
Στο παρασκήνιο, το Cosmos 3 παρέχει τον βασικό κορμό προσομοίωσης και εκπαίδευσης. Η πλατφόρμα διαχειρίζεται την ποικιλομορφία των πραγματικών σεναρίων – διαφορετικός φωτισμός, καιρός και έδαφος – ώστε οι δεξιότητες πράκτορα να μπορούν να δοκιμαστούν και να βελτιστοποιηθούν χωρίς φυσικά πρωτότυπα. Η NVIDIA περιγράφει το Cosmos 3 ως ένα περιβάλλον ψηφιακού διπλού (digital twin) όπου εκατομμύρια ώρες οδήγησης ή περπατήματος μπορούν να προσομοιωθούν σε λίγες ημέρες.
Επειδή το Cosmos 3 μαθαίνει συνεχώς από τα δεδομένα που παράγει, οι δεξιότητες πράκτορα ενημερώνονται με την πάροδο του χρόνου. Αυτό σημαίνει ότι ένα ρομπότ που χρησιμοποιεί αυτές τις δεξιότητες μπορεί να βελτιώσει το κράτημά του σε ένα ολισθηρό αντικείμενο χωρίς χειροκίνητη αλλαγή κώδικα. Το ίδιο ισχύει για ένα αυτοοδηγούμενο αυτοκίνητο που συναντά ένα νέο είδος εργοταξίου.
Για εταιρείες που εργάζονται σε αυτοοδηγούμενα αυτοκίνητα, τα νέα εργαλεία θα μπορούσαν να απλοποιήσουν μια διαδικασία που είναι γνωστά περίπλοκη. Η εκπαίδευση ενός οχήματος να αναγνωρίζει ένα σταματημένο σχολικό λεωφορείο ή έναν πεζό στη βροχή απαιτεί συχνά μήνες συλλογής και επισημείωσης δεδομένων. Οι δεξιότητες πράκτορα της NVIDIA έρχονται προ-εκπαιδευμένες σε τέτοιες ακραίες περιπτώσεις, επιτρέποντας στους προγραμματιστές να ξεκινήσουν από υψηλότερη βάση.
Οι δεξιότητες στοχεύουν επίσης στη μείωση της ανάγκης για ακριβές αναβαθμίσεις υλικού. Λειτουργούν στα υπάρχοντα τσιπ αυτοκινήτων της NVIDIA και μπορούν να προσαρμοστούν σε διαφορετικές διατάξεις αισθητήρων. Αυτό δίνει στους κατασκευαστές αυτοκινήτων ευελιξία χωρίς
