Slurm Workload Manager: Guia para iniciantes sobre agendamento de tarefas de HPC

Os clusters de computação de alto desempenho impulsionam as tarefas computacionais mais exigentes de hoje, mas navegar nesses ambientes compartilhados requer um poderoso orquestrador. Entender como interagir com o Slurm Workload Manager é a chave para executar suas tarefas de dados intensivos de forma eficiente e sem conflitos de recursos. Este curso baseado em texto orienta você desde os conceitos básicos de computação de alto desempenho até o gerenciamento confiável de suas próprias cargas de trabalho de compute. Ao trabalhar com explicações claras e exemplos práticos de linha de comando, você aprenderá a escrever scripts de envio robustos, solicitar hardware especializado e otimizar seus tempos de fila. Você fará a transição de testes manuais para execução automatizada e paralelizada em clusters de grande escala. O que você vai aprender: - Aprenda a terminologia básica da computação em cluster, incluindo nós, partições, tarefas e trabalhos. - Escreva e envie scripts em lote para automatizar fluxos de trabalho computacionais complexos. - Solicitar recursos de hardware específicos, incluindo CPUs multi-core e alocadores de GPU modernos para cargas de trabalho de aprendizado de máquina. - Monitore os estados de trabalho, interprete os arquivos de log e solucione falhas comuns de execução. - Entenda como executar aplicativos em contêineres de forma eficiente dentro de um ambiente Slurm. - Aplicar as melhores práticas para a alocação de recursos para manter alta eficiência e respeitar as políticas de compartilhamento justo do cluster. Este curso começa com definições fundamentais da arquitetura de cluster antes de avançar para operações práticas de linha de comando e escrita de script. Você explorará cenários realistas e analisará configurações de exemplo para construir um modelo mental forte de agendamento de trabalhos. Este curso é projetado para pesquisadores, cientistas de dados e desenvolvedores de software que são novos na computação de alto desempenho. Não é necessária experiência prévia com o Slurm ou gerenciamento de cluster, embora seja recomendada uma familiaridade básica com a linha de comando do Linux. Comece a otimizar seus fluxos de trabalho de computação de alto desempenho hoje mesmo com este guia abrangente.