Questa ripresa si basa su 1 miliardo di passaggi di utenti di taxi a New York.
Due astronomi dell'Università di Groningen (Paesi Bassi) hanno creato una biblioteca virtuale in grado di generare visualizzazioni basate su centinaia di milioni di punti dati. Inizialmente, il software è stato creato per elaborare una grande quantità di dati di missione Gaia. Ma può anche visualizzare modelli in altri file di dati di grandi dimensioni. È open source e gratuito da usare.
Il software si chiamava Vaex - "visualizzazione e studio di grandi insiemi di dati tabulari". Può creare una visualizzazione di miliardi di punti dati in un solo secondo e si comporta come le mappe di Google. Ma Google Maps utilizza server veloci e potenti per il lavoro, e Vaex costa un laptop. Il potere del Vaex si basa su diversi metodi intelligenti. Usa un algoritmo intelligente che massimizza tutta la potenza di calcolo disponibile. Quindi conta solo i dati richiesti dal disco rigido e li invia alla memoria principale del computer. Inoltre, la memoria di lavoro non memorizza copie di dati non necessarie.
Il potere del Vaex è stato dimostrato dal vivo in diverse conferenze. Utilizzato un set di dati di 1 miliardo di documenti relativi ai taxi di New York. Si è scoperto che puoi vedere quali viaggi portano grandi profitti e dove ci si può aspettare un taxi in qualsiasi parte della giornata. Questo suggerisce che Vaex dovrebbe essere usato al di fuori dell'astronomia.
