Το xAI του Έλον Μασκ ανακοίνωσε σχέδια για την κατασκευή ενός υπερυπολογιστή που στοχεύει στην προώθηση των δυνατοτήτων του Grok, ενός παραγωγικού chatbot τεχνητής νοημοσύνης που διατίθεται στο X μέσω ενός μοντέλου συνδρομής. Αυτές οι πληροφορίες προέκυψαν από μια παρουσίαση επενδυτών που εξετάστηκε από το The Information.
Συνεργασία με Oracle και Nvidia
Η κατασκευή αυτού του υπερυπολογιστή προβλέπεται να κοστίσει δισεκατομμύρια δολάρια, αντικατοπτρίζοντας το υψηλό κόστος των δεκάδων χιλιάδων Nvidia Απαιτούνται GPU H100. Αυτή η σημαντική επένδυση υπογραμμίζει την κλίμακα και τη φιλοδοξία των σχεδίων της xAI. Ο υπερυπολογιστής θα χρησιμεύσει ως η ραχοκοκαλιά για την ανάπτυξη πιο εξελιγμένων μοντέλων γλώσσας, ενισχύοντας τις δυνατότητες του Grok.
Η xAI εξετάζει το ενδεχόμενο συνεργασίας με την Oracle για την ανάπτυξη του σχεδιαζόμενου υπερυπολογιστή, ο οποίος αναμένεται να ολοκληρωθεί μέχρι τα τέλη του 2025. Το έργο θα χρησιμοποιεί μια διαμόρφωση GPU τέσσερις φορές μεγαλύτερη από τα τρέχοντα μεγαλύτερα cluster. Ο Musk έχει υποδείξει ότι οι μελλοντικές εκδόσεις του Grok θα απαιτούν πάνω από 100.000 H100 GPU, σημαντικά περισσότερες από τις 20.000 GPU που χρησιμοποιούνται για την εκπαίδευση του Grok 2. Το φιλόδοξο έργο έχει παρομοιαστεί με τα γιγαεργοστάσια της Tesla, αναφέροντάς το ως «γιγαφουργείο υπολογιστών». p>