PetaBox

PetaBox , también estilizado como Petabox , es una unidad de almacenamiento de Capricorn Technologies y el Internet Archive . ^{[ 1 ] [ 2 ]} Fue diseñado por el personal del Internet Archive y CR Saikley para almacenar y procesar un petabyte (un millón de gigabytes) de información. ^{[ 3 ]}

• Densidad: 1,4 petabytes/rack
• Consumo de energía: 3  kW/petabyte
• No tiene aire acondicionado, sino que utiliza el calor residual para ayudar a calentar el edificio.

Los objetivos de diseño de Petabox incluían: ^{[ 3 ]}

• Bajo consumo: 6  kW por rack, 60  kW para todo el clúster de almacenamiento.
• Alta densidad: más de 100 TB/ rack
• Computación local para procesar los datos (800 PC de gama baja)
• Posibilidad de compatibilidad con múltiples sistemas operativos, Linux estándar.
• Apto para servicios de colocación
• Compatible con contenedores de envío: puede utilizarse en un contenedor de envío de 20' x 8' x 8'.
• Mantenimiento sencillo: un administrador de sistema por petabyte.
• Software para automatizar la duplicación completa
• Fácil de escalar
• Diseño y almacenamiento económicos

El primer rack de 100 terabytes entró en funcionamiento en Ámsterdam, en la sede europea de Internet Archive, la Stichting Internet Archive (SIA), en junio de 2004. El segundo rack de 80 terabytes entró en funcionamiento en su sede principal de San Francisco ese mismo año. Posteriormente, Internet Archive escindió su producción de Petabox a la recién creada empresa Capricorn Technologies. ^{[ 3 ]}

Entre 2004 y 2007, Capricorn replicó el despliegue de Petabox del Internet Archive para importantes instituciones académicas , conservacionistas digitales, agencias gubernamentales, centros de computación de alto rendimiento (HPC) y de investigación, proveedores de imágenes médicas , repositorios de imágenes digitales , empresas de externalización de almacenamiento y otras organizaciones. Su producto más grande utiliza discos de 750 gigabytes. En 2007, el centro de datos del Internet Archive albergaba aproximadamente tres petabytes de tecnología de almacenamiento Petabox.

En 2010, la cuarta versión de Petabox comenzó a funcionar. Cada Petabox permitía 480 TB de almacenamiento bruto (240 discos de 2 TB cada uno, configurados con 24 discos por unidad de rack de 4U de altura y con 10 unidades por rack) ejecutándose en Linux . ^{[ 4 ] [ 5 ]}

A diciembre de 2021, el sistema de almacenamiento Petabox del Internet Archive consta de cuatro centros de datos, 745 nodos y 28 000 discos giratorios. La Wayback Machine contiene 57 petabytes de información; las colecciones de libros, música y vídeos contienen 42 petabytes adicionales, lo que suma un total de 99 petabytes de "datos únicos". ^{[ 3 ]} Debido a que el contenido se respalda en múltiples ubicaciones, se utilizan un total de 212 petabytes. ^{[ 6 ] [ 7 ]}

• Descripción general de Petabox en Internet Archive