Standard Performance Evaluation Corp. (SPEC) ha lanzado una nueva versión importante de su referencia de solución de almacenamiento, diseñada para ayudar a los administradores de TI a tomar mejores decisiones de compra, configuración y optimización.
por Don Capps, presidente del subcomité de almacenamiento de SPEC
Standard Performance Evaluation Corp. (SPEC) ha lanzado una nueva versión importante de su referencia de solución de almacenamiento, diseñada para ayudar a los administradores de TI a tomar mejores decisiones de compra, configuración y optimización.
El nuevo benchmark SPECstorage Solution 2020 se basa en aplicaciones reales y escenarios del mundo real. Incluye nuevas cargas de trabajo para inteligencia artificial (IA) y genómica, capacidades de carga de trabajo personalizadas ampliadas, escalado mucho mejor y un mecanismo de visualización estadística para mostrar resultados de referencia. También hay docenas de actualizaciones que hacen que el punto de referencia sea más fácil de usar y más eficiente en la entrega de resultados.
Cargas de trabajo del mundo real
Las cargas de trabajo dentro del benchmark SPECstorage Solution 2020 representan aplicaciones utilizadas en cinco mercados diferentes. Cada carga de trabajo tiene un conjunto de criterios de aprobación o falla que se deben cumplir para validar los resultados de referencia. Ejemplos de criterios incluyen:
- Si la solución de almacenamiento bajo prueba mantuvo la tasa de operación promedio sostenida solicitada.
- Si la solución mantuvo una latencia promedio por debajo de un umbral determinado.
- Si la solución mantuvo un equilibrio equitativo de operaciones en los subcomponentes de la carga de trabajo.
- Si la solución mantuvo una latencia máxima por debajo de un umbral específico para cualquier subcomponente de la carga de trabajo.
La nueva carga de trabajo de IA representa entornos de procesamiento de imágenes AI Tensorflow, con rastros recopilados de sistemas que ejecutan conjuntos de datos COCO, Resnet50 y CityScape. Las métricas se basan en el número de eventos simultáneos recibas nuevas vacantes en tu correo— definido como un conjunto de subcomponentes que abarcan un flujo de trabajo completo — que puede sostenerse bajo los criterios definidos de aprobación/rechazo.
La nueva carga de trabajo de genómica proviene de los rastros de las operaciones de E/S utilizadas por las instalaciones comerciales y de investigación para realizar análisis genéticos. Los datos se han desinfectado para que no contengan ninguno de los datos del genoma original. Las métricas se basan en la cantidad de trabajos simultáneos que se pueden mantener según los criterios de aprobación o falla de la carga de trabajo.
Se transfieren tres cargas de trabajo del banco de pruebas SPEC SFS 2014 SP2, publicado en diciembre de 2017:
- La carga de trabajo de automatización de diseño electrónico (EDA) representa el comportamiento típico de una combinación de aplicaciones EDA, incluido el procesamiento de front-end y back-end. Las métricas se basan en la cantidad de trabajos que se pueden completar dentro de un conjunto definido de criterios de aprobación/rechazo.
- La carga de trabajo del entorno de creación de software comprende pruebas intensivas de metadatos derivadas del análisis y seguimientos del sistema de aplicaciones del mundo real. Las métricas se basan en la cantidad de compilaciones simultáneas que se pueden completar según los criterios de aprobación o falla.
- La carga de trabajo de adquisición de datos de video (VDA) simula aplicaciones que almacenan datos adquiridos de una fuente sensible al tiempo, como una cámara de vigilancia. Las métricas se basan en la cantidad de secuencias de video que se pueden capturar según los criterios de aprobación o falla.
Cargas de trabajo personalizadas
El nuevo punto de referencia permite a los usuarios personalizar las cargas de trabajo existentes o crear otras nuevas para obtener información sobre los problemas de rendimiento del almacenamiento.
Las cargas de trabajo personalizadas pueden acomodar una combinación de generadores de carga de Unix y Windows para aplicaciones que usan esta combinación en sus flujos de trabajo. Un ejemplo de esta combinación sería un sistema Windows que recopila datos de sensores y los almacena mediante SMB, mientras que una granja de cómputo basada en Unix analiza los datos mediante NFS, Lustre, GPFS o alguna otra tecnología de sistema de archivos.
Un sofisticado mecanismo de sincronización dentro del benchmark SPECstorage Solution 2020 mantiene todos los procesos de generación de carga distribuidos geográficamente sincronizados con una resolución de submilisegundos.
Escalamiento masivo con menos restricciones
Los nuevos mecanismos internos de IPC en SPECstorage Solution 2020 reducen significativamente la cantidad de puertos TCP y búsquedas de DNS, lo que mejora la escalabilidad, la confiabilidad y el rendimiento de inicio y tiempo de ejecución. Se ha aumentado el escalado de 60,000 procesos generadores de carga en versiones anteriores a más de 4 millones de procesos que se pueden distribuir por todo el mundo.
Un sofisticado mecanismo de sincronización mantiene todos los procesos de generación de carga distribuidos geográficamente sincronizados con una resolución de submilisegundos.
La nueva eficiencia de escalado es especialmente significativa para probar soluciones de almacenamiento basadas en la nube. Este es un desarrollo importante, ya que entre los proveedores de la nube, los puertos TCP son un recurso escaso, y la mayoría de las máquinas virtuales pueden acomodar solo unos pocos miles en el mejor de los casos. El nuevo punto de referencia nunca requiere más de 1,000 puertos TCP. Esto permite a los usuarios escalar hasta 4 millones de procesos sin encontrarse con las limitaciones de la nube.
El nuevo mecanismo de visualización estadística dentro de SPECstorage Solution 2020 permite a los usuarios extraer contadores de tiempo de ejecución y conectarlos a una base de datos para su visualización.
Visualización para obtener más información
El nuevo mecanismo de visualización estadística dentro de SPECstorage Solution 2020 permite a los usuarios extraer contadores de tiempo de ejecución y conectarlos a una base de datos como Graphite, Carbon o Grafana para su visualización. Esto proporciona una mayor comprensión de los detalles de comportamiento y funcionamiento del sistema bajo prueba.
Disponible ahora para descargar
El benchmark SPECstorage Solution 2020 está disponible para descarga inmediata en el sitio web de SPEC por $2,000, con descuentos para instituciones académicas y de investigación calificadas. Los resultados del nuevo punto de referencia no son comparables con los de los puntos de referencia de almacenamiento de SPEC anteriores.
Los miembros corporativos de SPEC activos en el desarrollo del benchmark incluyen Dell, IBM, Intel, iX Systems, NetApp, Pure Storage y WekaIO. Los colaboradores individuales de apoyo incluyen a Udayan Bapat, Sorin Faibish y Brian Pawlowski.
###
Don Capps tiene más de 30 años de experiencia en ingeniería de rendimiento para sistemas de almacenamiento. Es ingeniero de rendimiento de Netapp; fundador de Iozone.org, una organización sin fines de lucro que produce y distribuye software gratuito para medir el rendimiento de los sistemas de almacenamiento informático; y presidente del subcomité de almacenamiento de Standard Performance Evaluation Corp. (SPEC).
Interactuar con StorageReview
Boletín informativo | Canal de YouTube | Podcast iTunes/Spotify | @Instagram | Twitter | Facebook | RSS Feed
