RICERCA INDIPENDENTE
11 ricerche sull'economia greca e su quanto costa davvero far girare sistemi di IA. Ognuna pubblica i propri dati, il codice che ha prodotto ogni tabella e un registro di ogni affermazione esaminata, comprese quelle che non hanno superato la verifica e non sono mai entrate nel testo. Gratis, senza modulo, senza registrazione.
Scarica tutte e 11 3,7 MB, 281 pagine
Le ricerche sono scritte in inglese e restano in inglese. Una ricerca passata per la traduzione automatica perde più credibilità di quanta portata guadagni: tradotta è questa pagina, non il lavoro.
01. RICERCA SUL MERCATO GRECO
Quanto costa davvero vendere online in Grecia, cosa porta realmente un ordine greco, cosa inviano a un browser 900 negozi greci, e chi pubblica questi numeri.
01
Un censimento della ricerca aziendale in Grecia: 68 programmi di pubblicazione, 64 editori, 15 settori. Chi produce i numeri su cui poggiano le decisioni, quanto lontano li porta la stampa, e quali di essi citano i motori di risposta.
02
Cosa conta e cosa lascia fuori la cifra di 36,1 miliardi di euro dell'e-commerce, più un modello di costo pieno costruito solo su tariffe pubblicate, che puoi applicare al tuo carrello.
06
900 domini greci misurati in un giorno. Il 36,8% non invia alcun header di sicurezza, l'11,1% fallisce un handshake TLS valido, e cinque negozi su 505 superano cinque controlli elementari. Nessun sito viene nominato.
07
Quanto costa un anno di vendite online in Grecia, calcolato solo da pagine pubblicate. Su 32 voci di costo, sei non hanno alcun prezzo pubblicato, e sono in modo sproporzionato quelle obbligatorie.
02. MISURARE I SISTEMI DI IA
Quanto costa un agente per esecuzione, cosa lo fa funzionare, e perché lo stesso anno produce sia un 5% sia un 88% di adozione dell'IA. Misurato su sistemi in produzione, comprese le versioni peggiorate.
03
Venti statistiche molto citate sull'IA, valutate su sei criteri. Perché lo stesso anno dà 5% e 88%, dove stanno davvero le imprese greche una volta separate le classi dimensionali, e perché la spiegazione della carenza di competenze non regge davanti ai dati di spesa.
04
Tre agent harness su un solo modello, 45 sessioni valutate. Include tre difetti trovati nello strumento di misura stesso e due risultati pubblicati ritirati di conseguenza.
05
Sette versioni di un agente in produzione sullo stesso benchmark, comprese le due peggiorate, e un controllo negativo che mostra come la suite arrivi al 22,8% senza fare assolutamente nulla.
08
Sei harness per agenti, quattro modelli, undici scenari e un controllo che non fa nulla. Il modello spiega l'88 per cento della differenza e l'harness il 7, e sedici sessioni hanno distrutto file degli utenti su un'istruzione vaga.
09
Due siti greci, 58 giorni osservati ciascuno, misurati dai loro stessi access log. Fra seicento e duemilatrecento pagine prese per ogni lettore restituito, su siti che non hanno mai bloccato un crawler.
12
Lo stesso modello su Linux e su Windows. Settantasei comandi nella forma che un modello scrive per impostazione predefinita passano al 97,4 per cento sotto una shell POSIX e al 26,3 per cento sotto il PowerShell che l'agente riceve davvero, sulla stessa macchina. La differenza di sistema operativo non è rilevabile, e i sei comandi che invece cambia riportano tutti successo.
03. PROVE E METODO
Come nascono le affermazioni aziendali, chi le ha verificate, e cosa emerge quando qualcuno guarda la metà delle prove che il metodo non campiona mai.
11
I consigli alle startup si costruiscono leggendo le aziende che hanno vinto. Contro 1.404 aziende da un miliardo e 410 andate a zero, le categorie che dovrebbero prevedere il successo descrivono già il 63,5 per cento di quelle morte.
LA STRUMENTAZIONE
Ogni ricerca pubblica anche la macchina che l'ha prodotta. È abbastanza raro da meritare di essere detto chiaramente, perché è proprio ciò che ti permette di contraddirmi con le prove invece che con il tono.
Ogni cifra di ogni ricerca si ricalcola dai file pubblicati accanto: il crawler, il benchmark, il calcolatore di costo, i risultati grezzi.
Ogni ricerca porta un registro di ogni affermazione fattuale esaminata, comprese quelle tagliate, ridimensionate o bocciate alla verifica. I registri sono stati scritti prima del testo, ed è esattamente il loro senso.
In questo programma sono stati commessi e individuati cinque errori di misura, e ciascuno è raccontato dove è avvenuto, non in appendice. Due avevano già prodotto risultati pubblicati, che sono ritirati.
Ogni modifica successiva alla pubblicazione sta in un registro pubblico, con data e motivo. Una politica di correzione che nessuno può ispezionare non è una politica.
CONDIZIONI
Tutto qui è pubblicato con licenza Creative Commons Attribution 4.0: copia, cita, fai grafici, costruiscici sopra, anche commercialmente, con attribuzione. Il codice di analisi è MIT. Non c'è alcun modulo email davanti a niente, perché una ricerca che sostiene di verificare invece di fidarsi non può chiederti prima l'indirizzo.
INDIPENDENZA
Nessuno sponsor, cliente o fornitore ha finanziato, revisionato o approvato questo lavoro. Dove il soggetto sono le mie imprese o il mio software, e in tre delle 11 lo sono, è dichiarato nel primo paragrafo della ricerca e nella sua dichiarazione di interessi.
Le correzioni sono benvenute e vengono registrate con data e motivo nel registro pubblico, mai inserite in silenzio. Se un numero qui è sbagliato, per me vale più del complimento.
Dimmi cosa non torna