Ο αγώνας εξοπλισμών μεταξύ εταιρειών τεχνολογίας σχετικά με μοντέλα τεχνητής νοημοσύνης έχει θερμανθεί σημαντικά τις τελευταίες δύο εβδομάδες. Το OpenAI αποκάλυψε το GPT-4o αμέσως πριν η Google ανακοινώσει μια σειρά από βελτιώσεις Gemini. Ακολούθησε η Microsoft που ανακοίνωσε μια δέσμη υπολογιστών Copilot+ μαζί με δικές της βελτιώσεις AI.
Αλλά ενώ όλα αυτά συνέβαιναν, η Meta φρόντιζε από μόνη της την τεχνητή νοημοσύνη. Η εταιρία απελευθερώθηκε αθόρυβα ένα ερευνητική εργασία σχετικά με τις προσπάθειές της στον πολυτροπικό χώρο AI. Εντοπίστηκε από Venture Beatτο έγγραφο δείχνει ότι ο Meta εργάζεται σε ένα πολυτροπικό μοντέλο μεγάλης γλώσσας που ονομάζεται Chameleon.
Αυτό δεν πρέπει να συγχέεται με το παραγωγικό μοντέλο AI CM3leon (προφέρεται Chameleon) που το Meta AI αποκαλύφθηκε το περασμένο καλοκαίρι. Η Meta AI είπε στην ανάρτησή της στο blog ότι το μοντέλο CM3leon θα οδηγήσει σε βελτιώσεις στα μελλοντικά LLM.
Η ερευνητική εργασία ισχυρίζεται ότι ο Chameleon είναι υπερσύγχρονος και κερδίζει ή ανταγωνίζεται ομοιόμορφα άλλα μοντέλα όπως το Gemini, το GPT-4 και το Llama-2 της Meta.
Παρόμοια με το Gemini της Google, ο Chameleon είναι χτισμένος σε μια αρχιτεκτονική μεικτής μορφής που βασίζεται σε διακριτικά πρώιμης σύντηξης. Αυτό σημαίνει ότι το μοντέλο κατασκευάστηκε για να μαθαίνει από την αρχή από έναν συνδυασμό εικόνων, κώδικα, κειμένου και άλλων εισόδων και χρησιμοποιεί αυτό το περιεχόμενο για τη δημιουργία ακολουθιών.
Ο άλλος τρόπος για να χτίσετε μια πολυτροπική αρχιτεκτονική είναι να ράψετε μαζί έναν αριθμό μοντέλων που έχουν εκπαιδευτεί σε έναν μόνο τρόπο. Αυτό ονομάζεται «όψιμη σύντηξη». Ουσιαστικά, το σύστημα AI παίρνει μεμονωμένα μοντέλα και τα συγχωνεύει για να βγάλει συμπεράσματα. Η καθυστερημένη σύντηξη προφανώς λειτουργεί καλά, αλλά μπορεί να είναι περιοριστική στην ικανότητα του AI να ενσωματώνει πληροφορίες.
Στο έγγραφο, οι συγγραφείς λένε ότι ο Chameleon μοιάζει περισσότερο με το Gemini της Google που κατασκευάστηκε με παρόμοιο τρόπο. Σε αντίθεση με τον Δίδυμο, ωστόσο, οι ερευνητές λένε ότι ο Χαμαιλέοντας είναι ένα μοντέλο από άκρο σε άκρο.
Αναβαθμίστε τη ζωή σας με μια καθημερινή δόση από τις μεγαλύτερες τεχνολογικές ειδήσεις, τα hacks στον τρόπο ζωής και την επιμελημένη μας ανάλυση. Γίνετε ο πρώτος που θα μάθετε για τα τελευταίας τεχνολογίας gadget και τις πιο δημοφιλείς προσφορές.
Εάν οι ισχυρισμοί και οι δοκιμές της εφημερίδας είναι αληθείς και μπορούν να αναπαραχθούν, φαίνεται ότι το μοντέλο Chameleon ταιριάζει ή υπερβαίνει πολλά από τα μοντέλα τεχνητής νοημοσύνης που είναι διαθέσιμα σήμερα.
Μια ενδιαφέρουσα πτυχή στους ισχυρισμούς που γίνονται για τον Χαμαιλέοντα, είναι ότι ο Mark Zuckerberg και ο Meta ωθούν τον ανοιχτό κώδικα ως το μέλλον για μεγάλο μέρος του τρέχοντος έτους. Το ήδη υπάρχον Llama 3 είναι ανοιχτού κώδικα και αναμένεται να λάβει μεγάλη ενημέρωση τον Ιούλιο. Η Meta μόλις άνοιξε επίσης το λειτουργικό σύστημα των ακουστικών Quest στους κατασκευαστές υλικού.
Το έγγραφο δεν αναφέρει εάν ή πότε η Meta μπορεί να κυκλοφορήσει αυτό το νέο μοντέλο. Δημόσια, ο Μέτα εργάστηκε σκληρά για την τελευταία επανάληψη του βοηθού Λάμα. Το Llama 3 μόλις κυκλοφόρησε στο Facebook, το Instagram και το WhatsApp στα τέλη Απριλίου.
Αλλά ενώ όλα αυτά συνέβαιναν, η Meta φρόντιζε από μόνη της την τεχνητή νοημοσύνη. Η εταιρία απελευθερώθηκε αθόρυβα ένα ερευνητική εργασία σχετικά με τις προσπάθειές της στον πολυτροπικό χώρο AI. Εντοπίστηκε από Venture Beatτο έγγραφο δείχνει ότι ο Meta εργάζεται σε ένα πολυτροπικό μοντέλο μεγάλης γλώσσας που ονομάζεται Chameleon.
Αυτό δεν πρέπει να συγχέεται με το παραγωγικό μοντέλο AI CM3leon (προφέρεται Chameleon) που το Meta AI αποκαλύφθηκε το περασμένο καλοκαίρι. Η Meta AI είπε στην ανάρτησή της στο blog ότι το μοντέλο CM3leon θα οδηγήσει σε βελτιώσεις στα μελλοντικά LLM.
Η ερευνητική εργασία ισχυρίζεται ότι ο Chameleon είναι υπερσύγχρονος και κερδίζει ή ανταγωνίζεται ομοιόμορφα άλλα μοντέλα όπως το Gemini, το GPT-4 και το Llama-2 της Meta.
Παρόμοια με το Gemini της Google, ο Chameleon είναι χτισμένος σε μια αρχιτεκτονική μεικτής μορφής που βασίζεται σε διακριτικά πρώιμης σύντηξης. Αυτό σημαίνει ότι το μοντέλο κατασκευάστηκε για να μαθαίνει από την αρχή από έναν συνδυασμό εικόνων, κώδικα, κειμένου και άλλων εισόδων και χρησιμοποιεί αυτό το περιεχόμενο για τη δημιουργία ακολουθιών.
Ο άλλος τρόπος για να χτίσετε μια πολυτροπική αρχιτεκτονική είναι να ράψετε μαζί έναν αριθμό μοντέλων που έχουν εκπαιδευτεί σε έναν μόνο τρόπο. Αυτό ονομάζεται «όψιμη σύντηξη». Ουσιαστικά, το σύστημα AI παίρνει μεμονωμένα μοντέλα και τα συγχωνεύει για να βγάλει συμπεράσματα. Η καθυστερημένη σύντηξη προφανώς λειτουργεί καλά, αλλά μπορεί να είναι περιοριστική στην ικανότητα του AI να ενσωματώνει πληροφορίες.
Στο έγγραφο, οι συγγραφείς λένε ότι ο Chameleon μοιάζει περισσότερο με το Gemini της Google που κατασκευάστηκε με παρόμοιο τρόπο. Σε αντίθεση με τον Δίδυμο, ωστόσο, οι ερευνητές λένε ότι ο Χαμαιλέοντας είναι ένα μοντέλο από άκρο σε άκρο.
Αναβαθμίστε τη ζωή σας με μια καθημερινή δόση από τις μεγαλύτερες τεχνολογικές ειδήσεις, τα hacks στον τρόπο ζωής και την επιμελημένη μας ανάλυση. Γίνετε ο πρώτος που θα μάθετε για τα τελευταίας τεχνολογίας gadget και τις πιο δημοφιλείς προσφορές.
Εάν οι ισχυρισμοί και οι δοκιμές της εφημερίδας είναι αληθείς και μπορούν να αναπαραχθούν, φαίνεται ότι το μοντέλο Chameleon ταιριάζει ή υπερβαίνει πολλά από τα μοντέλα τεχνητής νοημοσύνης που είναι διαθέσιμα σήμερα.
Μια ενδιαφέρουσα πτυχή στους ισχυρισμούς που γίνονται για τον Χαμαιλέοντα, είναι ότι ο Mark Zuckerberg και ο Meta ωθούν τον ανοιχτό κώδικα ως το μέλλον για μεγάλο μέρος του τρέχοντος έτους. Το ήδη υπάρχον Llama 3 είναι ανοιχτού κώδικα και αναμένεται να λάβει μεγάλη ενημέρωση τον Ιούλιο. Η Meta μόλις άνοιξε επίσης το λειτουργικό σύστημα των ακουστικών Quest στους κατασκευαστές υλικού.
Το έγγραφο δεν αναφέρει εάν ή πότε η Meta μπορεί να κυκλοφορήσει αυτό το νέο μοντέλο. Δημόσια, ο Μέτα εργάστηκε σκληρά για την τελευταία επανάληψη του βοηθού Λάμα. Το Llama 3 μόλις κυκλοφόρησε στο Facebook, το Instagram και το WhatsApp στα τέλη Απριλίου.