Expansión a una máquina virtual iaaS de Azure desde un clúster de HPC Pack

Requisitos para agregar nodos de proceso de IaaS de Azure con Microsoft HPC Pack

En esta sección se describen los requisitos para agregar nodos de proceso de IaaS de Azure al clúster de HPC.

Versión compatible del clúster de Microsoft HPC Pack

Para implementar nodos de proceso de IaaS de Azure en el clúster de HPC Pack, debe ejecutar Microsoft HPC Pack 2016 Update 1 o una versión posterior.

Si desea crear un nuevo clúster de HPC Pack completamente en Azure, vaya a Implementación de un clúster de HPC Pack 2016 en Azure y elija una plantilla para implementar. De lo contrario, primero debe crear un clúster de HPC Pack local. Para obtener las instrucciones de instalación de un clúster de HPC Pack híbrido, consulte a continuación:

• Introducción a HPC Pack 2016

Cuenta de suscripción de Azure

Debes obtener una suscripción de Azure o que te asignen el rol Propietario de la suscripción.

• Para crear una suscripción de Azure, vaya al sitio de Azure.

• Para acceder a una suscripción existente, vaya a Azure Portal.

Infraestructura de red

Deberá proporcionar una red virtual de Azure y una subred para los nodos de proceso de IaaS de Azure.

Si tiene previsto crear un clúster de HPC Pack completamente en Azure, debe crear los nodos principales y los nodos de proceso de IaaS de Azure en una sola red virtual de Azure.

Sin embargo, si tiene previsto crear un clúster de HPC Pack híbrido con nodos principales en la red corporativa local y crear nodos de proceso de IaaS de Azure en Azure, debe configurar un VPN de sitio a sitio o conexión de ExpressRoute desde la red local a la red virtual de Azure. Los nodos principales también deben poder conectarse a través de Internet a los servicios de Azure. Es posible que tenga que ponerse en contacto con el administrador de red para configurar esta conectividad.

Configuración del grupo de seguridad de red para la red virtual de Azure

Se recomienda configurar un grupo de seguridad de red para la subred de red virtual de Azure. En la siguiente tabla puerto de HPC se enumeran los puertos de escucha de cada tipo de nodo HPC. Para obtener más información sobre los puertos, consulte este documento.

Para el clúster de HPC Pack con nodos principales en Azure

Para un clúster de HPC Pack completamente en Azure, se deben configurar las siguientes reglas de NSG.

1. Reglas de seguridad de entrada

La regla de seguridad de entrada predeterminada AllowVNetInBound permite todo el tráfico entrante dentro de la red virtual. Pero si ha agregado reglas para denegar el tráfico con source VirtualNetwork o Cualquier con mayor prioridad, asegúrese de que no se deniegan los puertos enumerados en tabla de puertos HPC.

Si desea enviar trabajos desde el cliente local a través de Internet, debe agregar las siguientes reglas de seguridad de entrada.

2. Reglas de seguridad de salida

La regla de seguridad de salida predeterminada AllowVNetOutBound permite todo el tráfico de red saliente dentro de la virtual. Sin embargo, si ha agregado alguna regla para denegar el tráfico con Destination VirtualNetwork o Any with higher priority (Cualquier con mayor prioridad), asegúrese de que no se deniegan los puertos enumerados en tabla de puertos HPC.

La regla de seguridad de salida predeterminada AllowInternetOutBound permite que todo el tráfico saliente Internet. Pero si ha agregado reglas para denegar el tráfico con Destination Internet o Any with higher priority ( Cualquier con mayor prioridad), se deben agregar las siguientes reglas de salida con prioridades más altas:

Para el clúster de HPC Pack híbrido con nodos principales locales

En el caso del clúster de HPC Pack híbrido con nodos principales locales y nodos de agente y nodos de proceso de IaaS de Azure, las siguientes reglas de NSG deben configurarse desde la perspectiva de los nodos de proceso de IaaS de Azure.

1. Reglas de seguridad de entrada

La regla de seguridad de entrada predeterminada AllowVNetInBound permite todo el tráfico entrante dentro de la red virtual. Sin embargo, si ha agregado reglas para denegar el tráfico con VirtualNetwork o Cualquier con mayor prioridad, asegúrese de que no se deniegan los puertos para nodo de proceso de Linux y nodo de proceso de Windows que se muestran en tabla de puertos HPC.

2. Reglas de seguridad de salida

La regla de seguridad de salida predeterminada AllowVNetOutBound permite todo el tráfico de red saliente dentro de la virtual. Pero si ha agregado reglas para denegar el tráfico con Destination VirtualNetwork o Cualquier con mayor prioridad, se deben agregar las siguientes reglas de salida con prioridades más altas, de modo que los nodos de proceso de IaaS de Azure puedan conectarse a los nodos principales locales.

La regla de seguridad de salida predeterminada AllowInternetOutBound permite que todo el tráfico saliente Internet. Pero si ha agregado reglas para denegar el tráfico con Destination Internet o Any with higher priority ( Cualquier con mayor prioridad), se deben agregar las siguientes reglas de salida con prioridades más altas:

Los nodos principales de HPC Pack pueden acceder a las siguientes direcciones URL públicas en el paso Establecer configuración de implementación de Azure y Crear y administrar nodos de proceso de IaaS de Azure paso, los agregará a la lista de permitidos de los firewalls locales.

https://management.core.windows.net

https://management.azure.com

https://login.microsoftonline.com

https://login.live.com

https://login.windows.net

https://graph.windows.net

https://hpcazuresasdispatcher.azurewebsites.net

https://hpcazureconsumptionsb.servicebus.windows.net

https://*.vault.azure.net

https://*.microsoft.com

https://*.msauth.net

https://*.msftauth.net

https://*.core.windows.net

Paso 1. Configuración del clúster para admitir implementaciones de nodos de proceso de IaaS de Azure

Abra el administrador de clústeres de HPC en un nodo principal de , en lista de tareas pendientes de implementación, complete las tres tareas de implementación necesarias . El nombre de usuario y la contraseña de las credenciales de instalación de que proporcionó se usarán como nombre de usuario de administrador y contraseña de las máquinas virtuales de Azure.

Paso 1.1 Establecer la configuración de implementación de Azure

Puede establecer la configuración de implementación de Azure con el Administrador de clústeres de HPC o comandos de PowerShell.

Establecimiento de la configuración de implementación de Azure con el Administrador de clústeres de HPC

Puede hacer clic en Establecer configuración de implementación de Azure y seguir el asistente para completar la configuración.

1. Configuración de la entidad de servicio de Azure

El servicio HPC Pack usa la entidad de servicio de Azure para aprovisionar, iniciar, detener y eliminar máquinas virtuales iaaS de Azure. Para configurar la entidad de servicio de Azure, haga clic en el botón Inicio de sesión para iniciar sesión en su cuenta de Azure en la página de la entidad de servicio de Azure .

Si su cuenta le proporciona acceso a más de un inquilino de Azure AD, haga clic en su cuenta en la esquina superior derecha. A continuación, establezca la sesión del portal en el inquilino deseado. Debe tener permiso para acceder a los recursos del directorio.

Haga clic en Microsoft Entra ID en el panel de navegación de servicios izquierdo, haga clic en Usuarios y grupos y asegúrese de que ya haya cuentas de usuario creadas o configuradas.

Si tiene varias suscripciones de Azure asociadas a su cuenta de Azure, haga clic en el botón Seleccione para elegir la suscripción que se usa para implementar los nodos de proceso de IaaS de Azure.

Puede elegir una entidad de servicio de Azure existente en lista de nombre de entidad de servicio y hacer clic en el botón Examinar para elegir el certificado de administración de correcto que se usó para crear la entidad de servicio de Azure o puede hacer clic en el botón Crear para crear una nueva entidad de servicio de Azure.

Si decide crear una nueva entidad de servicio de Azure, en el cuadro de diálogo Crear entidad de servicio de Azure, especifique una nombre para mostrar descriptivo para la nueva entidad de servicio de Azure y haga clic en Examinar para elegir una Certificado en equipo local\Almacén personal, o haga clic en Importar para importar un certificado de formato PFX o generar un nuevo certificado autofirmado. A continuación, haga clic en Aceptar para crear la entidad de servicio de Azure.

2. Especificar Azure Virtual Network

En la página red virtual de Azure, especifique la información de la red virtual de Azure en la que se crearán los nodos de proceso de IaaS de Azure.

ubicación de Azure: la ubicación de Azure en la que se encuentra la red virtual.

nombre del grupo de recursos: el grupo de recursos en el que se creó la red virtual.

nombre de red virtual: el nombre de la red virtual en la que se crearán los nodos de proceso de IaaS de Azure.

Nombre de subred: nombre de la subred en la que se crearán los nodos de proceso de IaaS de Azure.

3. Configuración del certificado de Azure Key Vault

El servicio HPC Pack usa el certificado X.509 para proteger la comunicación del nodo HPC. Por lo tanto, es necesario importar este certificado a Azure Key Vault para que se pueda instalar en la máquina virtual iaaS de Azure durante el aprovisionamiento. En página de certificado de Azure Key Vault, haga clic en el botón Seleccione para elegir el nombre de Azure Key Vault y nombre secreto si ya ha creado el secreto de Azure Key Vault. O bien, haga clic en el botón Crear para crear uno nuevo.

Si decide crear un nuevo secreto de Key Vault, puede seleccionar un nombre de almacén de claves de Azure existente en la lista Nombre del almacén, o bien hacer clic en Crear para crear un nuevo almacén de claves de Azure. A continuación, especifique un nombre secreto descriptivo, haga clic en Examinar o Importar para seleccionar un certificado correcto.

Revise la configuración y haga clic en Finalizar para completar la configuración.

Establecimiento de la configuración de implementación de Azure con PowerShell

También puede optar por ejecutar los siguientes comandos de PowerShell para establecer la configuración de implementación de Azure si ya lo ha hecho:

• Ha creado la entidad de servicio de Azure y el certificado de Azure Key Vault.
• Se ha instalado el certificado de la entidad de servicio de Azure para equipo local\Personal almacén de certificados con clave privada en todas las máquinas del nodo principal.

Add-PSSnapin Microsoft.Hpc
# Set Azure subscription and Service Principal information
Set-HpcClusterRegistry -PropertyName SubscriptionId -PropertyValue <subscriptionId>
Set-HpcClusterRegistry -PropertyName TenantId -PropertyValue <tenantId>
Set-HpcClusterRegistry -PropertyName ApplicationId -PropertyValue <ServiceprincipalApplicationId>
Set-HpcClusterRegistry -PropertyName Thumbprint -PropertyValue <ServiceprincipalCertThumbprint>

# Set Virtual network information
Set-HpcClusterRegistry -PropertyName VNet -PropertyValue <VNetName>
Set-HpcClusterRegistry -PropertyName Subnet -PropertyValue <SubnetName>
Set-HpcClusterRegistry -PropertyName Location -PropertyValue <VNetLocation>
Set-HpcClusterRegistry -PropertyName ResourceGroup -PropertyValue <VNetResourceGroup>

# Set Azure Key vault certificate
Set-HpcKeyVaultCertificate -ResourceGroup <KeyVaultResourceGroupName> -CertificateUrl <KeyVaultSecretUrlWithVersion> -CertificateThumbprint <KeyVaultCertificateThumbprint>

Paso 1.2 Configuración de otras propiedades del clúster

Si tiene previsto crear nodos de proceso de Azure IaaS de Windows sin dominio o nodos de proceso de Linux en otra subred donde busquen los nodos principales, ejecute el siguiente comando de PowerShell en un nodo principal para que el clúster agregue entradas de host para nodos en diferentes subredes. Si no lo ha hecho, los nodos no serán accesibles para los nodos principales porque los nodos principales no pueden resolver su nombre de host.

Set-HpcClusterRegistry -PropertyName HostFileForOtherSubnet -PropertyValue 1
if($env:CCP_CONNECTIONSTRING -like "*,*,*") {
    Connect-ServiceFabricCluster
    $opId = [Guid]::NewGuid()
    Start-ServiceFabricPartitionRestart -OperationId $opId -RestartPartitionMode AllReplicasOrInstances -ServiceName fabric:/HpcApplication/ManagementStatelessService -ErrorAction Stop
}

Si ejecuta HPC Pack 2016 Update 2 o una versión anterior y planea crear nodos de proceso de Linux de IaaS de Azure creados con la plantilla de nodo IaaS de Azure, ejecute el siguiente comando de PowerShell en un nodo principal para habilitar la comunicación a través de Http entre nodos principales y nodos de proceso de Linux.

Set-HpcClusterRegistry -PropertyName LinuxHttps -PropertyValue 0
if($env:CCP_CONNECTIONSTRING -like "*,*,*") {
    Connect-ServiceFabricCluster
    $opId = [Guid]::NewGuid()
    Start-ServiceFabricPartitionRestart -OperationId $opId -RestartPartitionMode AllReplicasOrInstances -ServiceName fabric:/HpcApplication/SchedulerStatefulService -ErrorAction Stop
} else {
    Restart-Service -Name HpcScheduler
}

Si ejecuta HPC Pack 2019 Update 2 o una versión anteriory planea crear nodos de proceso de Linux iaaS de Azure creados con la plantilla de nodo IaaS de Azure, consulte Administrar clave de autenticación de Linux para HPC Pack para asegurarse de que ha establecido la clave de autenticación de Linux para los nodos de proceso de Linux.

Paso 2. Creación de una plantilla de nodo iaaS de Azure

En el panel configuración de , haga clic en Plantillas de nodoy haga clic en Nuevo en la lista Acciones de para crear una plantilla de nodo iaaS de Azure.

En página Elegir tipo de plantilla de nodo, elija el tipo de plantilla de nodo como plantilla de nodo IaaS de Azure.

En la página Especificar nombre de plantilla, especifique un nombre de plantilla de y, opcionalmente, especifique elDescripción de .

En la página Especificar información del grupo de máquinas virtuales, especifique nombre del grupo de recursos del grupo de recursos de Azure en el que se crearán los nodos de proceso de IaaS. Puede seleccionar un grupo de recursos existente o especificar un nuevo nombre de grupo de recursos. Si especifica un nuevo nombre de grupo de recursos, el clúster de HPC Pack creará el grupo de recursos al implementar el primer nodo de proceso de IaaS de Azure con esta plantilla de nodo.

Especifique si desea crear nodos en un conjunto de disponibilidad de Azure y especifique el nombre del conjunto de disponibilidad si es necesario. Si especifica un nuevo nombre de conjunto de disponibilidad, el clúster de HPC Pack lo creará al implementar el primer nodo de proceso iaaS de Azure con esta plantilla de nodo.

En la página Especificar imagen de máquina virtual, especifique la imagen de máquina virtual que se usa para implementar los nodos de proceso de IaaS. Puede seleccionar uno de los siguientes tipos de imagen: MarketplaceImage, CustomWindowsImageo CustomLinuxImage.

Si elige tipo de imagen como MarketplaceImage, seleccione tipo de sistema operativo y etiqueta de imagen para elegir una imagen de máquina virtual pública en Azure Marketplace.

Si el tipo de sistema operativo de está con Windows y los nodos principales de HPC Pack están unidos a un dominio, especifique si desea Unir los nodos al dominio. Se recomienda unir los nodos de proceso de Windows al dominio.

Si elige tipo de imagen como CustomImage, especifique la tipo de sistema operativo, el nombre de imagen de la imagen de máquina virtual personalizada y el grupo de recursos de en el que se almacena la imagen. La imagen de máquina virtual debe haberse creado en la misma ubicación de Azure en la que se crearán los nodos de proceso de IaaS de Azure y asegúrese de que a la entidad de servicio de Azure especificada en el paso 1.1 se le concede permiso de lectura a la imagen personalizada. Siga Crear imagen personalizada para crear su propia imagen personalizada para la máquina virtual iaaS.

Puede hacer clic en el vínculo Más información sobre la imagen de máquina virtual personalizada para el nodo de proceso de HPC Pack para aprender a crear una imagen de máquina virtual de nodo de proceso de HPC Pack personalizada.

Si elige tipo de imagen como SharedImage, especifique el tipo de sistema operativo , el identificador de recurso de Azure de la imagen de máquina virtual compartida en Azure Shared Image Gallery. Asegúrese de que a la entidad de servicio de Azure especificada en el paso 1.1 se le concede permiso read a la galería de imágenes compartidas.

En la página Revisar, revise la configuración que ha especificado y haga clic en Crear para crear la plantilla de nodo.

Antes de crear nuevos nodos de proceso de IaaS de Azure con la plantilla de nodo, si desea especificar algunas opciones avanzadas, por ejemplo, Use Azure Spot VMs (Uso de máquinas virtuales de Acceso puntual de Azure), consulte Opciones avanzadas para la plantilla de nodo IaaS.

Paso 3. Creación de los nodos de proceso de IaaS y administración de ellos

Abra la consola del Administrador de clústeres de HPC, haga clic en barra de administración de recursos y haga clic en Agregar nodo para iniciar el Asistente para agregar nodos.

En la página Seleccionar método de implementación, seleccione Agregar nodos de máquina virtual iaaS de Azure.

En la página Especificar nuevos nodos, seleccione la plantilla Nodo que acabamos de crear en el paso 2 y especifique Número de nodos y tamaño de máquina virtual de nodosy haga clic en Siguiente.

Después de hacer clic en Finalizar, puede encontrar dos nodos nuevos en lista nodos. Las máquinas virtuales de Azure correspondientes para estos dos nodos aún no se han creado en azure.

A continuación, puede elegir los nodos y hacer clic en Inicio para crear las máquinas virtuales en Azure.

Espere a que se aprovisione el aprovisionamiento de los nodos de proceso de IaaS de Azure.

Una vez completada la implementación de los nodos de proceso de IaaS de Azure y el de estado del nodo de se convierte en correcto, puede enviar trabajos a estos nodos.

Para detener manualmente los nodos, haga clic en Detener y las máquinas virtuales de Azure se desasignarán.

También puede Eliminar los nodos si ya no los necesita, las máquinas virtuales de Azure también se eliminarán si lo hace.

Si ha habilitado la característica crecimiento automático y reducción de nodos de Azure, los nodos iaaS de Azure se iniciarán o detendrán automáticamente en función de la carga de trabajo del clúster, consulte Reducción automática de los recursos de Azure.

Opciones avanzadas para la plantilla de nodo iaaS

En la mayoría de los escenarios, puede usar directamente la plantilla de nodo creada en el paso 2 para crear nodos de proceso de IaaS de Azure, no es necesario especificar opciones avanzadas. Si desea especificar opciones avanzadas, vaya a Configuración ->Plantillas de nodo, seleccione la plantilla de nodo que acaba de crear y haga clic en Editar.

• Uso de máquinas virtuales de Azure Spot

La creación de nodos de proceso de IaaS de Azure con máquinas virtuales de Acceso puntual de Azure es una característica introducida en HPC Pack 2019. El uso de máquinas virtuales de Acceso puntual de Azure le permite aprovechar la capacidad de proceso de Azure sin usar con un ahorro significativo de costos. Sin embargo, no hay ningún Acuerdo de Nivel de Servicio para máquinas virtuales de Acceso puntual de Azure.

• Es posible que se produzca un error en la implementación del nodo de proceso de IaaS si no hay ninguna capacidad de acceso puntual disponible en la región de Azure especificada.

• Cualquier máquina virtual de Acceso puntual de Azure en ejecución se puede expulsar y mover al estado detenido desasignado en cualquier momento en el que la infraestructura de Azure necesite la capacidad de vuelta. En ese caso, el nodo de proceso de HPC correspondiente se mostrará en Estado de mantenimiento del nodo de error y las tareas que se ejecutan en el nodo se interrumpirán y se volverán a poner en cola.

• La infraestructura de Azure no volverá a implementar automáticamente una máquina virtual de Acceso puntual de Azure expulsada cuando vuelva a estar disponible la capacidad de spot. Puede intentar desconectar manualmente el nodo y, a continuación, reiniciarlo en HPC Cluster Manager para volver a implementar la máquina virtual de Acceso puntual de Azure más adelante, pero la nueva implementación puede producir un error debido a que no hay capacidad de spot disponible.

• Servidores DNS

De forma predeterminada, la opción Servidores DNS no está establecida y las interfaces de red de las máquinas virtuales de Azure obtienen la configuración del servidor DNS de la red virtual. Si desea establecer explícitamente los servidores DNS para las interfaces de red, especifique la lista de servidores DNS separados por comas.

• Actualización automática de HPC

HPC Pack usa la extensión de máquina virtual de Azure para implementar componentes de HPC Pack en las máquinas virtuales de Azure. La opción Actualización automática de HPC especifica si el agente de máquina virtual de Azure debe actualizar automáticamente la versión de HPC Pack si se publica una nueva versión de la extensión de máquina virtual del nodo de proceso de HPC Pack. El valor predeterminado es False, se recomienda encarecidamente no establecerlo en True, ya que las tareas en ejecución se interrumpirán y también se producirán errores en los trabajos de HPC.