.. _historico: ========= Histórico ========= .. contents:: Nesta seção: :local: :depth: 2 Esta seção apresenta a evolução do GridUnesp ano a ano, desde sua concepção até os dias atuais. O vídeo abaixo resume a história do GridUnesp desde a sua criação. .. raw:: html
2008 - Anúncio da Infraestrutura ================================ A Unesp anuncia a maior infraestrutura computacional de alto desempenho da América Latina. **Investimento total:** R$ 8 milhões - **Ministério da Ciência e Tecnologia:** R$ 4,4 milhões (via Finep/Fundunesp) - **Unesp:** R$ 3,6 milhões **Aquisição:** Processo licitatório com ampla concorrência, vencido pela Sun Microsystems do Brasil. **Especificações do hardware original:** - Processadores: Quad Core Intel Xeon 5400 - Núcleos de processamento: 2.048 - Capacidade: 33,3 teraflops (trilhões de cálculos por segundo) **Composição:** - **Cluster central:** 256 nós de processamento no campus da Unesp em São Paulo (Barra Funda) - **Seis clusters distribuídos:** 16 nós cada, nos campi de: - Araraquara - Bauru - Botucatu - Ilha Solteira - Rio Claro - São José do Rio Preto **Conectividade:** - Conexão em alta velocidade à Internet2 norte-americana - Rede MetroSampa interligando instituições na região metropolitana de São Paulo - Rede ANSP/RNP/Florida International University entre São Paulo e Miami - Rede KyaTera da Fapesp conectando São Paulo aos clusters do interior **Benefícios para a comunidade científica:** - Acesso remoto para operações computacionais de grande escala - Atendimento a áreas que requerem processamento e análise de grandes volumes de dados - Redução no tempo de cálculo das pesquisas - Liderança em desempenho com baixo consumo energético - Parcerias internacionais (Open Science Grid - EUA, grids europeus e asiáticos) 2009 - Início de Operações ========================== O GridUnesp entra em funcionamento, representando um marco brasileiro em: - Computação de alto desempenho - Redes ópticas de longa distância para pesquisa científica **Capacidade equivalente à época:** - 10 mil computadores pessoais - Armazenamento equivalente a uma torre de 18 andares de DVDs empilhados - Velocidade de comunicação 5.000 vezes maior que a banda larga doméstica **Capacitação:** Primeiro curso oferecido no Núcleo de Computação Científica da Unesp (NCC/Unesp), com: - Formato presencial e transmissão online - Funcionamento básico do GridUnesp - Compiladores e ferramentas de desenvolvimento - Técnicas de paralelismo e otimização 2010 - Expansão e Divulgação ============================ **Evento MasterClass:** Recebimento de estudantes do ensino médio durante evento internacional, com: - Apresentação sobre a infraestrutura do GridUnesp - Visita ao cluster no Datacenter **Métricas ao final do ano:** - 26 projetos científicos cadastrados - Áreas contempladas: Biofísica, Biologia, Ciência dos Materiais, Computação, Física, Geociências, Química - 90 membros registrados - 10 milhões de horas de processamento 2011 - Crescimento Acelerado ============================ - Nova chamada para cadastramento de projetos - **12 novos projetos científicos** - **41 novos usuários** - Mais de **20 milhões** de horas de processamento 2012 - Reconhecimento Internacional =================================== **Descoberta do Bóson de Higgs:** Cientistas ligados ao GridUnesp participam da descoberta no CERN. **Visita do CERN:** Comitiva de seis físicos da Organização Europeia para Pesquisa Nuclear visita o GridUnesp, relacionada ao pleito do Brasil para ingresso como membro-associado. 2013 - Consolidação e Novos Serviços ==================================== **Workshop para administradores HPC:** - Apoio às equipes técnicas dos grupos de pesquisa - Treinamento baseado na experiência do GridUnesp - Criação de rede de relacionamentos e troca de conhecimento **Intel Software Conference:** - Programação paralela com foco em Intel Xeon Phi - Atividades práticas **ANSPGrid CA:** Implantação da Autoridade Certificadora `ANSPGrid CA `_ no NCC/Unesp: - Emissão de certificados de grid X509 para pesquisadores - Criptografia de chave pública para comunidade científica paulista - Conformidade com diretrizes do International Grid Trust Federation (IGTF) 2014 - Acessibilidade ===================== Criação de portal web para facilitar o acesso dos pesquisadores: - Interface intuitiva para fluxo completo de trabalho - Desenvolvimento com código livre e aberto - Ferramenta acessível via browser **Visita da imprensa:** Repórteres trainees do jornal Folha de S. Paulo conhecem a infraestrutura durante Programa de Treinamento em Ciência e Saúde. 2015 - Marcas Expressivas ========================= O GridUnesp atinge: - Mais de **60** projetos científicos cadastrados - Mais de **300** usuários registrados - Mais de **140 milhões** de horas de processamento 2016 - Upgrade e Conquistas Científicas ======================================= **Descoberta de ondas gravitacionais:** O LIGO (Laser Interferometer Gravitational-wave Observatory) anuncia a detecção de ondas gravitacionais. O GridUnesp foi: - A segunda estrutura que mais contribuiu no processamento, depois do Fermilab - 7,5 milhões de horas processadas (12,3% do total no OSG) **Aquisição de novos equipamentos (upgrade):** - **Financiamento:** R$ 2,2 milhões pela Finep - **Fornecedor:** Huawei **Especificações do novo hardware:** *Processamento:* - 56 servidores (1.568 núcleos) - 2 processadores Intel E5-2680 v4 (2.4 GHz) por servidor - 28 núcleos por servidor - 4 GB por núcleo - Rede 40 GB/s - 60 TFlops (teórico) *Gerenciamento:* - 4 servidores com 12 núcleos cada - Rede 40 GbE *Armazenamento:* - 288 TB raw (216 TB efetivos) - Discos NL-SAS de 4 TB com tecnologia Lustre - 4 servidores de controle *Rede interna:* - 40 GbE interligando nós de processamento - 2 switches com 32 portas de 40GbE cada **Ganhos do upgrade:** - Solução para infraestrutura saturada - Diminuição do consumo energético em 15 vezes **Nova documentação:** Liberação da documentação de usuários reformulada e atualizada. 2017 - Conclusão do Upgrade =========================== **Capacidade final:** ================ ========= ============ Característica Anterior Após upgrade ---------------- --------- ------------ Processamento 23 TFlops 77 TFlops Armazenamento 136 TB 288 TB Núcleos (cores) 2.048 3.104 ================ ========= ============ 2018 - Ampliação e Estatísticas =============================== **ANSPGrid CA:** - Certificados passam a ser emitidos para institutos de pesquisa de todo o Brasil - Atualização da Política de Certificado (versão 2.0) **Estatísticas:** - Mais de 80 projetos científicos cadastrados - 500 usuários registrados - 170 milhões de horas de processamento - Mais de 200 publicações com recursos do GridUnesp 2019 - Divulgação Científica ============================ **Evento MasterClass especial:** Celebração do Dia Internacional das Mulheres e Meninas na Ciência: - Cerca de 100 meninas de escolas públicas e privadas - Apresentação de temas da Física (Modelo Padrão) - Visita ao cluster no Data Center 2020 - Pandemia e Demanda Acelerada =================================== **Operação:** - Equipe em regime de teletrabalho - Manutenção remota da quase totalidade dos sistemas **Demanda:** - Mais de 100 projetos cadastrados (19 apenas em 2020) - Mais de 650 usuários registrados (75 em 2020) - Cerca de 13 milhões de horas de processamento no ano 2021 - Continuidade Remota ========================== - Manutenção do regime de teletrabalho - **67** novos usuários cadastrados - Mais de **11 milhões** de horas de processamento **ANSPGrid CA:** - Certificado raiz renovado por mais 10 anos - Atualização da Política de Certificado (versão 3.0) 2022 - Retorno e Consolidação ============================= - Retorno ao trabalho presencial - Raros períodos de ociosidade do cluster - Mais de 1.000 jobs diários na partição (≈50% em execução) - Lançamento da versão 2.0 da documentação de usuários 2023-2024 - Expansão Contínua ============================= **Novos equipamentos:** - Novo storage de 400 TB com a instalação de um sistema mais moderno e confiável - Nós GPU para atender demandas de aprendizado de máquina e inteligência artificial **Comunidade:** - Mais de 140 projetos cadastrados - Mais de 850 usuários registrados - Produção científica contínua em múltiplas áreas do conhecimento 2025 - Novos Marcos =================== - Ultrapassa a marca de 1000 usuários registrados - Utilização intensiva de GPU: mais de 50 mil jobs em 1 ano - Mais de 160 aplicações científicas e correspondentes versões instaladas desde 2017 .. seealso:: - :ref:`estatistica` - Dados atualizados de uso - :ref:`infraestrutura` - Configuração atual do cluster - :ref:`publicacoes` - Produção científica com uso do GridUnesp - :ref:`covid19` - Impacto da pandemia nas operações