Il registro
Infrastruttura in esercizio, non una proposta.
MAIA BRAIN è in uso presso diverse multinazionali dei settori petrolio e gas, finanza e tecnologia, dove sostiene i normali carichi di lavoro aziendali, in ambiti ristretti e ampi, come un unico sistema di uso generale (scheda tecnica di MAIA BRAIN, sezione I). Per scelta, a tutela della riservatezza dei clienti, non ne facciamo i nomi. La stessa architettura, senza alcun riaddestramento, legge un patrimonio documentale legale in un'installazione e ripara programmi in un'altra. Rispetto ai modelli neurali di frontiera vince per multipli, non per margini.
Un'installazione misurata
Un patrimonio documentale legale di 1.620 documenti, letto da cima a fondo.
La sua provenienza è stata accertata, non presunta. Ogni oggetto è stato riconciliato tra l'indice, l'archivio e un controllo dei checksum prima che venisse posta una sola domanda.
-
1.620 su 1.620
somme di controllo corrispondenti
Nessun oggetto senza un record, nessun record senza un oggetto, nessuna dimensione discordante, nessun file vuoto
-
278.768
fatti ammessi
Ciascuno con l'indicazione della propria origine
-
1 ms
tempo di risposta mediano
Calcolata su 61 funzionalità cronometrate. 52 su 61 hanno risposto in meno di 1,5 secondi
Scheda tecnica di MAIA BRAIN, sezione I.
-
Che cosa vale, in termini aziendali.
Un patrimonio documentale di queste dimensioni è di norma un progetto di lettura con una scadenza, affidato a persone il cui tempo è il più costoso dell'azienda, e la risposta vale solo quanto le parti a cui sono riuscite ad arrivare. Qui tutto è interrogabile, in millisecondi, con la pagina dietro ogni risposta. Le due settimane passate a scrivere a quattro uffici non ci sono più.
-
E sul codice.
La stessa costruzione è stata applicata da cima a fondo a un unico repository di 10,4 milioni righe di codice sorgente in C++, Python e Java, da cui l'analizzatore ha ammesso 2,31 milioni schemi, uno per procedura, a circa 41 mila righe al secondo in un solo passaggio. Spine Is All You Need.
Cinque modi di fare lo stesso lavoro
Dove sta davvero la differenza.
Successo nei compiti su lavori la cui difficoltà sta nel tenere traccia di stato e procedura, non nel riconoscere qualcosa. Più alto è meglio.
| Che cosa misura | Con una trascrizione | Con il recupero | Con un contesto da un milione di token | Con un archivio strutturato | Con MAIA BRAIN |
|---|---|---|---|---|---|
| Pianificazione su uno stato che cambia | 4,3 | 5,1 | 4,8 | 31,6 | 98,4 |
| Ragionamento con vincoli rigidi | 42,5 | 43,9 | 44,7 | 61,2 | 98,6 |
| Seguire un valore in un documento lungo | 99,6 | 99,4 | 99,7 | 99,5 | 99,8 |
| Mantenere lo stato in un compito lungo | 20,5 | 24,8 | 22,1 | 36,3 | 98,5 |
| Lavoro in più passaggi con strumenti | 34,0 | 36,2 | 35,4 | 52,7 | 98,2 |
Da 98,2 a 99,8, contro valori che scendono fino a 4,3. Questo vi dice con precisione per quali dei vostri problemi è pensato, ed è un'informazione più utile di un singolo numero da titolo.
Successo rispetto al costo
2,5 volte il successo nei compiti, a circa un trentesimo del costo.
Lo stesso lavoro, svolto in cinque modi. La prima riga è un modello di frontiera che porta avanti il compito da solo, ed è ciò che vende gran parte del mercato. Il costo è relativo a quella riga.
| Configurazione | Costo relativo | Successo nei compiti |
|---|---|---|
| Un modello di frontiera da solo, senza archivio | 1,000 | 40,2 |
| MAIA, con modelli di frontiera a entrambi gli estremi | 1,040 | 98,7 |
| MAIA, con un modello aperto 8B affinato per il compito | 0,031 | 98,5 |
| MAIA, con un modello aperto 3B affinato per il compito | 0,012 | 96,8 |
| MAIA, con lo stesso modello 8B preso così com'è | 0,031 | 71,4 |
-
Leggete la terza riga accanto alla prima.
2,5 volte il tasso di successo, a circa un trentesimo del costo di inferenza e della potenza di calcolo e dell'energia che lo sostengono. È questo che evita che un'installazione venga ridotta a un campione. Alle tariffe dei modelli di frontiera i conti tornano solo su una porzione ristretta. Per questo tanti progetti pilota riescono e così pochi crescono.
-
E leggete anche l'ultima riga.
Lo stesso modello aperto, preso così com'è anziché adattato al compito, perde ventisette punti. La risorsa scarsa non è la dimensione del modello. È un modello addestrato per il lavoro che gli si chiede di fare. Ed è anche per questo che qui «su misura» significa qualcosa: l'adattamento è il risultato, non la confezione.
Perché regge quando la domanda si fa più difficile
Non c'è un centro del contesto in cui perdersi.
Un fatto ammesso al suo arrivo ha un indirizzo, non una posizione. Recuperarlo è una ricerca puntuale il cui costo non dipende da quanto altro materiale lo circonda, perché l'archivio non ha un centro.
Così otto fatti raccolti insieme sono otto ricerche. La piattezza è il punto. L'altezza da sola non avrebbe nulla di notevole.
Mettete in grafico le risposte corrette rispetto al numero di riferimenti che una domanda deve seguire: al quarto passaggio la differenza è di un ordine di grandezza. Al quinto lo supera.
Sono esattamente le domande a cui oggi un'azienda non sa rispondere: quelle in cui le prove stanno in quattro sistemi e ogni risposta dipende dalla precedente.
I due numeri che ci chiedono
99% di accuratezza. 14 giorni per l'avvio.
-
99%
Il dato commerciale, ed è un arrotondamento di misurazioni, non un'affermazione che queste non sostengono: 98,7 con modelli di frontiera a entrambi gli estremi, 98,5 con un modello aperto 8B affinato, contro 40,2 di un modello di frontiera che lavora da solo. L'accuratezza è quanta parte di un lavoro viene portata a termine. Il determinismo è un'altra cosa, ed è ciò che rende la risposta verificabile: gli stessi input e le stesse regole portano alla stessa conclusione, e la conclusione mostra il proprio ragionamento.
-
14 giorni
Dalla decisione all'avvio, in tre fasi, con credenziali in sola lettura a livello di database per tutte le fasi iniziali e una traccia di audit completa dal primo giorno. Fondazione e connettività, nei giorni da 1 a 4. Validazione e collaudo, nei giorni da 5 a 8, quando i vostri esperti verificano il ragionamento. Produzione dal giorno 9. Sono 14 giorni e non i tempi di un progetto di ricerca perché adattare MAIA a una nuova organizzazione non richiede alcun riaddestramento. È il fatto su cui poggia tutto il resto.
Da dove vengono i dati
Due studi, e potete leggerli entrambi.
-
«Spine Is All You Need for Going Further»
Il resoconto completo e la specifica sperimentale. La fonte delle tabelle di benchmark e di costo qui sopra.
-
«MAIA Brain: Language Models at the Edges of a Governed Symbolic Core»
La scheda di accompagnamento. Lo storico delle installazioni, l'architettura e la tabella dei costi e dei modelli agli estremi.
Chiedeteli per titolo e ve li invieremo. Un'affermazione verificabile è l'unica che valga la pena di fare, ed è in fondo ciò che vendiamo.
Il passo successivo
Fateci provare sui vostri dati.
Il modo più rapido per mettere alla prova risultati come questi è affidarci una domanda a cui oggi non sapete rispondere, e osservare. Portatene una che attraversi quattro sistemi, e vi mostreremo che cosa legge MAIA, che cosa conclude e con quale autorità ha agito.