Últimas atualizações do Altair Accelerator, o agendador de tarefas corporativas mais rápido do setor

Altair é uma empresa ampla que fornece tecnologia de capacitação crítica em muitas disciplinas que serão familiares aos leitores do SemiWiki. De acordo com seu site, Altair entrega soluções de arquitetura aberta para análise de dados e IA, engenharia auxiliada por computador e computação de alto desempenho (HPC). Você pode aprender mais sobre os projetos Altair coberto no SemiWiki aqui. O agendamento de tarefas em nível empresarial é um exemplo da tecnologia crítica que a Altair oferece. Melhorias recentes e significativas no produto são o assunto desta postagem. Continue lendo para saber mais sobre as atualizações mais recentes do Altair Accelerator, o agendador de tarefas empresariais mais rápido do setor.

Accelerator é um agendador de tarefas de nível empresarial de alto rendimento. Sua aplicação está focada em projetos complexos de semicondutores. A arquitetura é flexível e pode suportar uma variedade de infraestruturas, desde pequenos farms de servidores dedicados até ambientes de cluster complexos e distribuídos de alto desempenho.

Uma ferramenta como essa é necessária aos designers para permitir agendamento rápido e gerenciamento de recursos para suas tarefas de design em utilização de CPU, memória e licença EDA. À medida que as infraestruturas de computação se tornam mais complexas e distribuídas, há também uma necessidade crescente de gerir recursos para manter o rendimento elevado e, ao mesmo tempo, gerir os custos globais. Do ponto de vista de gerenciamento, pode haver milhares de trabalhos para agendar e priorizar todos os dias – é necessária uma ferramenta com alta visibilidade e baixa latência para operar com sucesso em tal ambiente.

Este ano, uma interface nativa Kafka foi adicionada para aprimorar a visualização de uma ampla gama de informações relacionadas ao agendamento de lotes para o Accelerator. Informações como esta são notoriamente difíceis e dispendiosas de capturar, por isso esta melhoria é significativa. Apache Kafka é uma ferramenta de código aberto para processar múltiplas fontes de streaming de dados em tempo real. Kafka é bastante popular, com mais de 80% de todas as empresas da Fortune 100 o utilizando.

O monitoramento de um sistema em lote de alto desempenho pode ser difícil. A maioria das abordagens normalmente desacelera o sistema devido às tarefas de relatório, que competem com as tarefas de processamento de trabalhos.

Fica mais difícil quando há vários consumidores dos dados monitorados. Diminuir a taxa de atualização dos dados do monitor pode ajudar, mas as informações não são precisas ou em tempo real.

Um sistema como o Kafka ajuda apoiando muitos consumidores. Os dados são publicados uma vez, mas muitos consumidores podem ler a mensagem, portanto, há apenas uma carga extra no sistema em lote, em vez de muitas. Para vários clusters, vários sistemas em lote podem ser configurados para publicar em uma única instância do Kafka.

A frequência da publicação de dados exige cuidado, mesmo neste cenário. Com que frequência o sistema deve publicar e como os dados são extraídos do sistema em lote? É importante entender a rapidez com que as coisas estão mudando no sistema em lote. Por exemplo, o Altair Accelerator pode despachar várias centenas de trabalhos por segundo, e cada despacho pode alterar o estado de 20 a 30 métricas. É um enorme volume de dados apenas para algumas medições básicas.

Com seu sistema de métricas internas, o Accelerator acumula dados em um curto espaço de tempo – cerca de 10 segundos. Embora isso perca resolução no nível do loop de despacho individual, os dados resultantes costumam ser mais úteis devido à alta variação entre as iterações do loop de despacho. Mesmo com esse acúmulo, ainda há a sobrecarga de retirar os dados do loop interno. A Altair optou por codificar diretamente as rotinas do editor Kafka no núcleo do sistema em lote para reduzir a sobrecarga.

Os resultados das melhorias no Altair Accelerator são significativos. Você pode ter mais informações e veja exemplos de relatórios aqui. Você também pode ver um breve demonstração do novo painel do Accelerator aqui. Há também ótimos exemplos de fluxos de dados aprimorados que agora são possíveis com a nova versão aqui. Essas informações ajudarão você a conhecer as atualizações mais recentes do Altair Accelerator, o agendador de tarefas empresariais mais rápido do setor.

Compartilhe esta postagem via: Fonte: https://semiwiki.com/eda/altair/304169-latest-updates-to-altair-accelerator-the-industrys-fastest-enterprise-job-scheduler/