Ένα από τα σημαντικότερα ετήσια γεγονότα στον τομέα της τεχνητής νοημοσύνης ξεκινά αυτή την εβδομάδα στη Σιγκαπούρη: Διεθνές Συνέδριο Κατάρτισης. Ως συνήθως, το Nvidia Giant Chip είχε μια σοβαρή παρουσία στο συνέδριο, παρουσιάζοντας περισσότερες από 70 έρευνες από την ομάδα του.
Επίσης: Η NVIDIA ξεκινά εργαλεία λογισμικού NEMO για να βοηθήσει τις επιχειρήσεις να δημιουργήσουν πράκτορες χρήστη της τεχνητής νοημοσύνης
Τα έγγραφα καλύπτουν θέματα από τη δημιουργία μουσικής για τη δημιουργία 3D-ρεαλιστικών βίντεο, των εργασιών κατάρτισης ρομπότ και της δυνατότητας δημιουργίας αρκετών μεγάλων γλωσσικών μοντέλων πατώντας τα κουμπιά.
Όχι μόνο μια εταιρεία τσιπ
“Οι άνθρωποι συχνά σκέφτονται για την Nvidia ως εταιρεία τσιπ που κάνει εκπληκτικές μάρκες και, φυσικά, είμαστε πραγματικά περήφανοι για αυτό”, δήλωσε ο Brian Katanzaro, επικεφαλής του τμήματος μελέτης Nvidia Applied, σε συνέντευξή του στο ZDNET. “Αλλά η ιστορία που νομίζω ότι είναι πιο σημαντική, είναι ότι για να κάνουμε αυτά τα εκπληκτικά τσιπ, πρέπει να διεξάγουμε τέτοια έρευνα, επειδή μας διδάσκει πώς να δημιουργήσουμε όλα αυτά τα συστήματα”.
Επίσης: Το Nvidia κυριαρχεί στο Gen AI, που σκοντάφτει 2 ανταγωνιστές AI Chips
Τα έγγραφα που υπέβαλαν αυτή την εβδομάδα, τα περισσότερα από τα οποία δημοσιεύθηκαν κατά το παρελθόν έτος περίπου στο διακομιστή Preprint Arxiv, ποικίλλουν από καθαρές μελέτες σε προγράμματα που προσφέρουν άμεσα χρήσιμα εργαλεία.
Για παράδειγμα, στην πρώτη κατηγορία, ένα έργο που ονομάζεται Llamaflex βελτιώνει το έργο της δημιουργίας πολλών μεγάλων γλωσσικών μοντέλων από έναν γονέα. Σήμερα, το συνηθισμένο φαινόμενο για να “οδηγήσει” ένα ενιαίο, πολύ μεγάλο LLM στο “Student” LLM, το οποίο κληρονομεί την ικανότητα ενός “δασκάλου”, αλλά καταλαμβάνει λιγότερη αποθήκευση μνήμης.
Οι ερευνητές Nvidia Ruisi Kai και η ομάδα του παρατήρησαν ότι η μέθοδος απόσταξης μπορεί να βελτιωθεί χρησιμοποιώντας αυτό που ονομάζουν “ελαστική προκαταρκτική προετοιμασία”. Αποδοχή ενός ενιαίου LLM-LLM-σε αυτή την περίπτωση, πλατφόρμες LLAMA LLAMA 3.18B από Meta Platforms, ένα στάδιο μεγάλης προσθήκης εκπαίδευσης με 60 δισεκατομμύρια νέα μάρκες εκπαίδευσης. Το αποτέλεσμα είναι ένας αλγόριθμος που ονομάζεται “δρομολογητής”, ο οποίος μπορεί να εμφανίσει αυτόματα οποιαδήποτε ποσότητα SAMS LLMS σύμφωνα με διαφορετικά μεγέθη σχεδόν όταν πιέζετε ένα κουμπί.
Ίδρυμα Fugatto
Στην κατηγορία των πιο απτών προγραμμάτων, το πρόγραμμα Fugatto 1 είναι ένα “μοντέλο θεμελίωσης” για τη σύνθεση του ήχου, το μοντέλο του AI, το οποίο μπορεί να επεξεργαστεί οποιονδήποτε συνδυασμό οδηγιών κειμένου και κλιπ ήχου και μετατρέπει το κλιπ με βάση τις οδηγίες. “Είμαι πολύ ενθουσιασμένος Fugatto”, δήλωσε ο Katanzaro Zdnet.
Επίσης: Έχω δοκιμάσει πολλές εικόνες AI, και NVIDIA και MIT
Για παράδειγμα, ο Fugatto μπορεί να δημιουργήσει έναν ήχο κατόπιν αιτήματος, για παράδειγμα, Cat Meow. Μπορεί να επιλέξει ένα δείγμα του τραγουδιού για να αναπαράγει κάθε μεμονωμένο τραγουδιστή. Μπορεί να συνδυάσει τον ήχο των κυματισμών νερού με τον ήχο μιας κλασικής κιθάρας για να δημιουργήσει έναν υβριδικό ήχο, ο οποίος είναι μια πρόσμιξη δύο.
Το νευρωνικό δίκτυο Fugatto σχεδιάστηκε στο Google το 2022, το οποίο μπορεί να λειτουργήσει σε “φασματογραφήματα”, ακούγεται σαν πρότυπα κύματος. Η αρχική συμβολή του Rafael Valle και της ομάδας του από την NVIDIA είναι ένα νέο σύνολο δεδομένων και ένας τρόπος κατάρτισης που διδάσκει το μοντέλο να χειρίζεται σύνθετες ομάδες κειμένου.
Επίσης: Ανάπτυξη υπολογιστή: Πώς οι επιχειρήσεις αλλάζουν τις τεχνολογίες τους για να συμβαδίσουν
Τα έργα NVIDIA, όπως το Fugatto, με βάση πολλές προηγούμενες καινοτομίες, όπως κάθε ερευνητικό εργαστήριο. Μία από τις σημαντικές πτυχές που διακρίνουν το ερευνητικό έργο της NVIDIA είναι ότι κατά κανόνα προσφέρουν περισσότερες τεχνικές λεπτομέρειες σχετικά με τις υλοποιήσεις υλικού που χρησιμοποιούνται στη μελέτη, όπως, για παράδειγμα, ο αριθμός των χρησιμοποιούμενων τσιπ GPU, ενώ άλλα εργαστήρια συχνά απελευθερώνουν αυτά τα δεδομένα.
Το AI ενημερώνει για την ανάπτυξη τσιπ
Τα ερευνητικά έργα, όπως το Llamaflex και το Fugatto, εκτελούν πολλές λειτουργίες. Τονίζουν πολλούς τρόπους για να χρησιμοποιήσετε τσιπ Nvidia, κάτι που είναι πάντα ένας πολύ καλός τρόπος για να προωθήσετε τις δυνατότητες αυτών των τμημάτων. Υποστηρίζουν επίσης την Nvidia σε μια κατάσταση τέχνης για τεχνητή νοημοσύνη, η οποία μπορεί να ενημερώσει για την ανάπτυξη των τσιπ της εταιρείας. Βοηθούν την εταιρεία να προσελκύσει ταλέντα, επιδεικνύοντας έργα που μπορούν να κερδίσουν ανταμοιβές και αναγνώριση των συνομηλίκων.
Επίσης: Το τελευταίο τσιπ Google αφορά τη μείωση ενός τεράστιου κρυμμένου κόστους στην τεχνητή νοημοσύνη
Και δείχνουν πώς η υγρή δύναμη των τσιπ Nvidia παίζει σημαντικό ρόλο στο AI ως πεδίο. Η “επιτάχυνση” του AI είναι μια ιστορία που δεν είναι τόσο διάσημη όσο θα έπρεπε, δήλωσε ο Katansero.
“Πιστεύω ότι η σημαντική πρόοδος στο AI τα τελευταία 15 χρόνια προέρχεται από την επιτάχυνση”, δήλωσε ο Katsansaro.
Ελέγξτε όλες τις εκδόσεις NVIDIA Research σχετικά με τον κύριο ιστότοπο της έρευνας.
Αποκτήστε τις καλύτερες πρωινές ιστορίες στο γραμματοκιβώτιό σας κάθε μέρα με το δικό μας Tech Today Newspletter.
