Yahoo lanza la mayor aplicación Hadoop
Yahoo ha lanzado la mayor aplicación Hadoop existente. Yahoo! Search Webmap es una aplicación que se ejecuta en un cluster de más de 10.000 máquinas Linux, que produce datos para cada consulta que se hace en Yahoo! Web search query.
Entre los datos que maneja Webmap nos encontramos con:
- Un trillón de elaces entre páginas.
- 300 TB de datos de salida (comprimidos).
- 5 Petabytes de disco.
El proceso no es nuevo, solo es nuevo el uso de Hadoop, el cual permite ahorrar un 66% de tiempo que la versión anterior.
Por si a alguien le interesa, unos comentarios de los desarrolladores de Yahoo.
Yahoo! Launches World’s Largest Hadoop Production Application
Vía / dzone