Uso de técnicas para otimização do backup de tabelas de bancos com dados históricos para economia de recursos computacionais e financeiros
Introdução/Objetivo: O Centro de Computação (CCUEC) administra o histórico de acessos às redes WIFI da Unicamp, dados que, por força do Marco Civil da Internet, devem ser armazenados por no mínimo um ano. Com uma carga diária de 2 milhões de registros e um volume total de 670 GB, este banco de dados...
Saved in:
| Main Author: | |
|---|---|
| Format: | Online |
| Language: | Portuguese |
| Published: |
Universidade Estadual de Campinas (UNICAMP)
2023
|
| Subjects: | |
| Online Access: | https://econtents.sbu.unicamp.br/eventos/index.php/simtec/article/view/7587 |
| Tags: |
Add Tag
No Tags, Be the first to tag this record!
|
| _version_ | 1864359381316927488 |
|---|---|
| author | Ferrette, Gabriel Felipe |
| author_facet | Ferrette, Gabriel Felipe |
| author_sort | Ferrette, Gabriel Felipe |
| collection | Portal de Eventos Científicos da UNICAMP |
| container_reference | Resumo dos trabalhos do SIMTEC Simpósio dos Profissionais da UNICAMP; v. 8 (2022): Temática: SimTec 25 anos: Histórias, Conquistas e Desafios Profissionais - Eixo 1; e02200773 |
| description | Introdução/Objetivo: O Centro de Computação (CCUEC) administra o histórico de acessos às redes WIFI da Unicamp, dados que, por força do Marco Civil da Internet, devem ser armazenados por no mínimo um ano. Com uma carga diária de 2 milhões de registros e um volume total de 670 GB, este banco de dados representava o maior desafio de backup da unidade. Metodologia: Foram realizados estudos com a extensão Citus para PostgreSQL, que permite converter tabelas para o formato Colunar e particioná-las. Embora esse formato não suporte deleções ou atualizações individuais, ele é ideal para logs históricos, onde ocorrem apenas inserções. A remoção de dados antigos é feita pela exclusão de partições completas, otimizando a manutenção. Resultados: Após a instalação e particionamento das tabelas por ano, os resultados foram: a redução de armazenamento com o banco passando de 670 GB para 205 GB (economia de 70%); a eficiência de Backup com o tempo diário de execução caindo de 10 horas para 3 horas; as consultas tornaram-se duas vezes mais rápidas e a redução drástica no uso de cartuchos de backup, recurso de alto custo essencial para Disaster Recovery. Conclusão: O uso da extensão Citus provou-se altamente eficaz para ambientes de dados históricos. Além de otimizar o espaço e o tempo de backup, a solução resolveu problemas de concorrência que afetavam outras unidades da Unicamp, garantindo maior estabilidade e performance ao serviço prestado pelo CCUEC. |
| first_indexed | 2025-10-08T13:59:46Z |
| format | Online |
| id | ojs-article-7587 |
| institution | Universidade Estadual de Campinas |
| issn | 2525-5398 |
| language | por |
| last_indexed | 2026-04-09T21:01:56Z |
| publishDate | 2023 |
| publisher | Universidade Estadual de Campinas (UNICAMP) |
| record_format | ojs |
| spelling | ojs-article-75872026-04-09T13:10:04Z Uso de técnicas para otimização do backup de tabelas de bancos com dados históricos para economia de recursos computacionais e financeiros Ferrette, Gabriel Felipe PostgreSQL Citus Colunar Economia de recursos financeiros Economia de recursos computacionais Introdução/Objetivo: O Centro de Computação (CCUEC) administra o histórico de acessos às redes WIFI da Unicamp, dados que, por força do Marco Civil da Internet, devem ser armazenados por no mínimo um ano. Com uma carga diária de 2 milhões de registros e um volume total de 670 GB, este banco de dados representava o maior desafio de backup da unidade. Metodologia: Foram realizados estudos com a extensão Citus para PostgreSQL, que permite converter tabelas para o formato Colunar e particioná-las. Embora esse formato não suporte deleções ou atualizações individuais, ele é ideal para logs históricos, onde ocorrem apenas inserções. A remoção de dados antigos é feita pela exclusão de partições completas, otimizando a manutenção. Resultados: Após a instalação e particionamento das tabelas por ano, os resultados foram: a redução de armazenamento com o banco passando de 670 GB para 205 GB (economia de 70%); a eficiência de Backup com o tempo diário de execução caindo de 10 horas para 3 horas; as consultas tornaram-se duas vezes mais rápidas e a redução drástica no uso de cartuchos de backup, recurso de alto custo essencial para Disaster Recovery. Conclusão: O uso da extensão Citus provou-se altamente eficaz para ambientes de dados históricos. Além de otimizar o espaço e o tempo de backup, a solução resolveu problemas de concorrência que afetavam outras unidades da Unicamp, garantindo maior estabilidade e performance ao serviço prestado pelo CCUEC. Universidade Estadual de Campinas (UNICAMP) 2023-07-24 info:eu-repo/semantics/article info:eu-repo/semantics/publishedVersion Texto Text application/pdf https://econtents.sbu.unicamp.br/eventos/index.php/simtec/article/view/7587 10.20396/simtec.vi8.Eixo 1.7587 Resumo dos trabalhos do SIMTEC Simpósio dos Profissionais da UNICAMP; v. 8 (2022): Temática: SimTec 25 anos: Histórias, Conquistas e Desafios Profissionais - Eixo 1; e02200773 2525-5398 por https://econtents.sbu.unicamp.br/eventos/index.php/simtec/article/view/7587/7283 Brazil; Contemporary Brasil; Contemporâneo Copyright (c) 2022 Gabriel Felipe Ferrette https://creativecommons.org/licenses/by/4.0 |
| spellingShingle | Ferrette, Gabriel Felipe PostgreSQL Citus Colunar Economia de recursos financeiros Economia de recursos computacionais Uso de técnicas para otimização do backup de tabelas de bancos com dados históricos para economia de recursos computacionais e financeiros |
| title | Uso de técnicas para otimização do backup de tabelas de bancos com dados históricos para economia de recursos computacionais e financeiros |
| title_full | Uso de técnicas para otimização do backup de tabelas de bancos com dados históricos para economia de recursos computacionais e financeiros |
| title_fullStr | Uso de técnicas para otimização do backup de tabelas de bancos com dados históricos para economia de recursos computacionais e financeiros |
| title_full_unstemmed | Uso de técnicas para otimização do backup de tabelas de bancos com dados históricos para economia de recursos computacionais e financeiros |
| title_short | Uso de técnicas para otimização do backup de tabelas de bancos com dados históricos para economia de recursos computacionais e financeiros |
| title_sort | uso de técnicas para otimização do backup de tabelas de bancos com dados históricos para economia de recursos computacionais e financeiros |
| topic | PostgreSQL Citus Colunar Economia de recursos financeiros Economia de recursos computacionais |
| url | https://econtents.sbu.unicamp.br/eventos/index.php/simtec/article/view/7587 |
| work_keys_str_mv | AT ferrettegabrielfelipe usodetecnicasparaotimizacaodobackupdetabelasdebancoscomdadoshistoricosparaeconomiaderecursoscomputacionaisefinanceiros |
