Intel® Select Solutions para BigDL en Apache Spark

Acelere y simplifique el desarrollo y la implementación del aprendizaje profundo en una infraestructura optimizada y verificada.
Ver la información resumida de la solución ›

Configuración básica para Intel® Select Solutions para BigDL en Apache Spark

Componente

Intel® Select Solutions para BigDL en Apache Spark
Configuración básica

Mínimo de un nodo maestro

Procesador

Procesador Intel® Xeon® Gold 6148 (2,40 GHz, 20 núcleos, 40 hilos), procesador Intel® Xeon® Gold 6248 (2,5 GHz, 20 núcleos) o un procesador escalable Intel® Xeon® de número más elevado

Memoria

192 GB o más (12 DDR4-2666 de 16 GB)

Disco de arranque**

1 SSD Intel® serie DC S4500/S4510 de 240 GB o mayor tamaño (M.2 o 2,5 pulgadas) o de número más elevado

Controladora HBA de almacenamiento por nodo**

No corresponde (N/C)

Segmentación de datos

4 SSD Intel® serie DC S4500/S4510 o de número más elevado, de 960 GB o de mayor capacidad

Red de datos

Adaptador de redes convergentes Intel® Ethernet X722 de 10 Gb (Intel® Ethernet CNA X722)

Red de gestión por nodo

1 GbE puerto 0/RMM puerto integrado

Mínimo de cuatro nodos trabajadores

Procesador

Procesador Intel® Xeon® Gold 6148 (2,40 GHz, 20 núcleos, 40 hilos), procesador Intel® Xeon® Gold 6248 (2,5 GHz, 20 núcleos), o procesador escalable Intel® Xeon® de número más elevado

Memoria

384 GB o más (12 DDR4-2666 de 32 GB)

Disco de arranque**

1 SSD Intel® serie DC S4500/S4510 (M.2 o 2,5 pulgadas) o de número más elevado, de 240 GB o mayor capacidad

Controladora HBA de almacenamiento por nodo**

N/C

Segmentación de datos

4 SSD Intel® serie DC S4500/S4510 o de número más elevado, de 3,8 TB o de mayor capacidad

Red de datos

Adaptador de redes convergentes Intel® Ethernet X722 de 10 Gb (Intel® Ethernet CNA X722)

Red de gestión por nodo

1 GbE puerto 0/RMM puerto integrado

Conmutadores para redes

Conmutador de parte alta de bastidor (ToR)

Conmutador de 10 Gbps y 48 puertos

Conmutador de administración

Conmutador de 1 Gbps y 48 puertos

Software

SO Linux

CentOS Linux versión 7.5.1804 o Red Hat Enterprise Linux* (RHEL*) 7

Apache Spark

2.2.0

Apache Hadoop

2.7.3

Kit de desarrollo Java (JDK)

Oracle JDK 1.8.0 actualización 181 o posterior

BigDL

0,6

Analytics Zoo

0,2

Intel® Distribution para Python*

2,7

Intel® Math Kernel Library (Intel® MKL)

Intel® MKL versión 2018 actualización 3

Se aplica a todos los nodos

Módulo de plataforma fiable (TPM)

TPM 1.2 independiente o TPM de firmware (Tecnología Intel® Platform Trust [Intel® PTT])

Optimizaciones de firmware y software

Intel® Volume Management Device (Intel® VMD) activada**

Intel® Boot Guard activada**

Tecnología Intel® Hyper-Threading (Tecnología Intel® HT) desactivada

Tecnología Intel® Turbo Boost activada

P-states activada**

C-states activada**

Configuración de administración de la energía definida en rendimiento**

Configuración de la carga de trabajo definida en equilibrada**

Streamer Memory Latency Checker (MLC) activada**

Prefetch espacial MLC activada**

Prefetch de datos de Data Cache Unit (DCU) activada**

Prefetch de instrucción de DCU activada**

Prefetch de caché de último nivel (LLC) desactivada**

Escalación de frecuencia uncore activada**

Estándares de rendimiento mínimo

Verificados para cumplir o superar las siguientes prestaciones de rendimiento mínimo:

Rendimiento de ImageNet Training

375 imágenes por segundo con una precisión de las 5 mejores del 85 % o mejor1
**Recomendada, pero no necesaria

Información sobre productos y rendimiento

1

Los resultados de rendimiento se basan en pruebas realizadas a partir del miércoles, 10 de octubre de 2018 y es posible que no reflejen todas las actualizaciones de seguridad disponibles públicamente. Consulte la publicación de la configuración para obtener más información. Ningún producto es completamente seguro. Configuración: un nodo maestro: 2 procesadores Intel® Xeon® Gold 6148, Placa Intel® S2600WFT para servidores, memoria total: 192 GB, 12 ranuras/16 GB/2666 megatransferencias por segundo (MT/s) DDR4 RDIMM, tecnología Intel® Hyper-Threading (tecnología Intel® HT) desactivada, tecnología Intel® Turbo Boost activada; almacenamiento (arranque): 1 Intel® SSD DC S4500 de 240 GB; almacenamiento: 4 Intel® SSD DC S4500 de 960 GB; dispositivos de red: 1 Adaptador de red Intel® Ethernet X722 de 10 Gb, velocidad de red: 10 GbE, ucode: 0x043, SO/software: CentOS* Linux versión 7.5.1804; cuatro nodos trabajadores: 2 procesadores Intel® Xeon® Gold 6148, Placa Intel® S2600WFT para servidores, memoria total: 384 GB, 12 ranuras/32 GB/2666 megatransferencias por segundo (MT/s) DDR4 RDIMM, tecnología Intel® HT desactivada, tecnología Intel® Turbo Boost activada; almacenamiento (arranque): 1 Intel® SSD DC S4500 de 240 GB; almacenamiento: 4 Intel® SSD DC S4500 de 3,8 TB; dispositivos de red: 1 Adaptador de red Intel® Ethernet X722 de 10 Gb, velocidad de red: 10 GbE, ucode: 0x043, SO/software: CentOS* Linux versión 7.5.1804.