Histórico
Nesta seção:
Esta seção apresenta a evolução do GridUnesp ano a ano, desde sua concepção até os dias atuais.
O vídeo abaixo resume a história do GridUnesp desde a sua criação.
2008 - Anúncio da Infraestrutura
A Unesp anuncia a maior infraestrutura computacional de alto desempenho da América Latina.
Investimento total: R$ 8 milhões
Ministério da Ciência e Tecnologia: R$ 4,4 milhões (via Finep/Fundunesp)
Unesp: R$ 3,6 milhões
Aquisição: Processo licitatório com ampla concorrência, vencido pela Sun Microsystems do Brasil.
Especificações do hardware original:
Processadores: Quad Core Intel Xeon 5400
Núcleos de processamento: 2.048
Capacidade: 33,3 teraflops (trilhões de cálculos por segundo)
Composição:
Cluster central: 256 nós de processamento no campus da Unesp em São Paulo (Barra Funda)
Seis clusters distribuídos: 16 nós cada, nos campi de:
Araraquara
Bauru
Botucatu
Ilha Solteira
Rio Claro
São José do Rio Preto
Conectividade:
Conexão em alta velocidade à Internet2 norte-americana
Rede MetroSampa interligando instituições na região metropolitana de São Paulo
Rede ANSP/RNP/Florida International University entre São Paulo e Miami
Rede KyaTera da Fapesp conectando São Paulo aos clusters do interior
Benefícios para a comunidade científica:
Acesso remoto para operações computacionais de grande escala
Atendimento a áreas que requerem processamento e análise de grandes volumes de dados
Redução no tempo de cálculo das pesquisas
Liderança em desempenho com baixo consumo energético
Parcerias internacionais (Open Science Grid - EUA, grids europeus e asiáticos)
2009 - Início de Operações
O GridUnesp entra em funcionamento, representando um marco brasileiro em:
Computação de alto desempenho
Redes ópticas de longa distância para pesquisa científica
Capacidade equivalente à época:
10 mil computadores pessoais
Armazenamento equivalente a uma torre de 18 andares de DVDs empilhados
Velocidade de comunicação 5.000 vezes maior que a banda larga doméstica
Capacitação:
Primeiro curso oferecido no Núcleo de Computação Científica da Unesp (NCC/Unesp), com:
Formato presencial e transmissão online
Funcionamento básico do GridUnesp
Compiladores e ferramentas de desenvolvimento
Técnicas de paralelismo e otimização
2010 - Expansão e Divulgação
Evento MasterClass:
Recebimento de estudantes do ensino médio durante evento internacional, com:
Apresentação sobre a infraestrutura do GridUnesp
Visita ao cluster no Datacenter
Métricas ao final do ano:
26 projetos científicos cadastrados
Áreas contempladas: Biofísica, Biologia, Ciência dos Materiais, Computação, Física, Geociências, Química
90 membros registrados
10 milhões de horas de processamento
2011 - Crescimento Acelerado
Nova chamada para cadastramento de projetos
12 novos projetos científicos
41 novos usuários
Mais de 20 milhões de horas de processamento
2012 - Reconhecimento Internacional
Descoberta do Bóson de Higgs:
Cientistas ligados ao GridUnesp participam da descoberta no CERN.
Visita do CERN:
Comitiva de seis físicos da Organização Europeia para Pesquisa Nuclear visita o GridUnesp, relacionada ao pleito do Brasil para ingresso como membro-associado.
2013 - Consolidação e Novos Serviços
Workshop para administradores HPC:
Apoio às equipes técnicas dos grupos de pesquisa
Treinamento baseado na experiência do GridUnesp
Criação de rede de relacionamentos e troca de conhecimento
Intel Software Conference:
Programação paralela com foco em Intel Xeon Phi
Atividades práticas
ANSPGrid CA:
Implantação da Autoridade Certificadora ANSPGrid CA no NCC/Unesp:
Emissão de certificados de grid X509 para pesquisadores
Criptografia de chave pública para comunidade científica paulista
Conformidade com diretrizes do International Grid Trust Federation (IGTF)
2014 - Acessibilidade
Criação de portal web para facilitar o acesso dos pesquisadores:
Interface intuitiva para fluxo completo de trabalho
Desenvolvimento com código livre e aberto
Ferramenta acessível via browser
Visita da imprensa:
Repórteres trainees do jornal Folha de S. Paulo conhecem a infraestrutura durante Programa de Treinamento em Ciência e Saúde.
2015 - Marcas Expressivas
O GridUnesp atinge:
Mais de 60 projetos científicos cadastrados
Mais de 300 usuários registrados
Mais de 140 milhões de horas de processamento
2016 - Upgrade e Conquistas Científicas
Descoberta de ondas gravitacionais:
O LIGO (Laser Interferometer Gravitational-wave Observatory) anuncia a detecção de ondas gravitacionais. O GridUnesp foi:
A segunda estrutura que mais contribuiu no processamento, depois do Fermilab
7,5 milhões de horas processadas (12,3% do total no OSG)
Aquisição de novos equipamentos (upgrade):
Financiamento: R$ 2,2 milhões pela Finep
Fornecedor: Huawei
Especificações do novo hardware:
Processamento:
56 servidores (1.568 núcleos)
2 processadores Intel E5-2680 v4 (2.4 GHz) por servidor
28 núcleos por servidor
4 GB por núcleo
Rede 40 GB/s
60 TFlops (teórico)
Gerenciamento:
4 servidores com 12 núcleos cada
Rede 40 GbE
Armazenamento:
288 TB raw (216 TB efetivos)
Discos NL-SAS de 4 TB com tecnologia Lustre
4 servidores de controle
Rede interna:
40 GbE interligando nós de processamento
2 switches com 32 portas de 40GbE cada
Ganhos do upgrade:
Solução para infraestrutura saturada
Diminuição do consumo energético em 15 vezes
Nova documentação:
Liberação da documentação de usuários reformulada e atualizada.
2017 - Conclusão do Upgrade
Capacidade final:
Característica |
Anterior |
Após upgrade |
Processamento |
23 TFlops |
77 TFlops |
Armazenamento |
136 TB |
288 TB |
Núcleos (cores) |
2.048 |
3.104 |
2018 - Ampliação e Estatísticas
ANSPGrid CA:
Certificados passam a ser emitidos para institutos de pesquisa de todo o Brasil
Atualização da Política de Certificado (versão 2.0)
Estatísticas:
Mais de 80 projetos científicos cadastrados
500 usuários registrados
170 milhões de horas de processamento
Mais de 200 publicações com recursos do GridUnesp
2019 - Divulgação Científica
Evento MasterClass especial:
Celebração do Dia Internacional das Mulheres e Meninas na Ciência:
Cerca de 100 meninas de escolas públicas e privadas
Apresentação de temas da Física (Modelo Padrão)
Visita ao cluster no Data Center
2020 - Pandemia e Demanda Acelerada
Operação:
Equipe em regime de teletrabalho
Manutenção remota da quase totalidade dos sistemas
Demanda:
Mais de 100 projetos cadastrados (19 apenas em 2020)
Mais de 650 usuários registrados (75 em 2020)
Cerca de 13 milhões de horas de processamento no ano
2021 - Continuidade Remota
Manutenção do regime de teletrabalho
67 novos usuários cadastrados
Mais de 11 milhões de horas de processamento
ANSPGrid CA:
Certificado raiz renovado por mais 10 anos
Atualização da Política de Certificado (versão 3.0)
2022 - Retorno e Consolidação
Retorno ao trabalho presencial
Raros períodos de ociosidade do cluster
Mais de 1.000 jobs diários na partição (≈50% em execução)
Lançamento da versão 2.0 da documentação de usuários
2023-2024 - Expansão Contínua
Novos equipamentos:
Novo storage de 400 TB com a instalação de um sistema mais moderno e confiável
Nós GPU para atender demandas de aprendizado de máquina e inteligência artificial
Comunidade:
Mais de 140 projetos cadastrados
Mais de 850 usuários registrados
Produção científica contínua em múltiplas áreas do conhecimento
2025 - Novos Marcos
Ultrapassa a marca de 1000 usuários registrados
Utilização intensiva de GPU: mais de 50 mil jobs em 1 ano
Mais de 160 aplicações científicas e correspondentes versões instaladas desde 2017
Ver também
Estatísticas - Dados atualizados de uso
Infraestrutura - Configuração atual do cluster
Publicações - Produção científica com uso do GridUnesp
COVID-19 - Impacto da pandemia nas operações