Fragmentación de archivos
En algunos casos puede ser conveniente dividir un conjunto de datos en varios archivos para facilitar su descarga, procesamiento y reutilización. Sin embargo, la fragmentación debe aplicarse únicamente cuando aporte un beneficio concreto para las personas usuarias.
Como criterio general, se recomienda publicar un único archivo siempre que su tamaño y volumen de información permitan una descarga y procesamiento razonables.
La fragmentación puede resultar conveniente cuando:
- el archivo supera aproximadamente un millón de registros;
- el tamaño del archivo dificulta su descarga o procesamiento;
- el conjunto de datos crece de manera sostenida y continuará aumentando con el tiempo.
Cuando un archivo contiene menos de 500.000 registros y no se prevé un crecimiento significativo en el corto plazo, se recomienda mantener una única versión.
Criterios de fragmentación
Cuando sea necesario dividir un conjunto de datos, se recomienda utilizar criterios simples, consistentes y fáciles de comprender.
Los criterios más habituales son:
- Temporales, por ejemplo: año, semestre, trimestre, mes o día.
- Geográficos, por ejemplo: provincia, departamento, municipio o barrio.
- Temáticos, cuando el dominio de la información permita identificar categorías claramente diferenciadas.
En todos los casos, el criterio elegido debe mantenerse de forma consistente entre las distintas versiones del conjunto de datos.
Para la fragmentación temporal se recomienda utilizar los formatos YYYY, YYYYMM o YYYYMMDD, según corresponda, siguiendo la norma ISO 8601.
Cuando la fragmentación sea geográfica, se recomienda utilizar las denominaciones definidas en la Guía para la identificación y uso de entidades interoperables.
Publicar también una versión completa
Siempre que sea posible, además de los archivos fragmentados se recomienda publicar una versión completa del conjunto de datos.
Esto evita que las personas usuarias deban descargar y consolidar manualmente múltiples archivos cuando necesitan trabajar con la totalidad de la información.
Compresión
Cuando la versión completa tenga un tamaño considerable (por ejemplo, superior a 50 MB), se recomienda ofrecer también una versión comprimida utilizando formatos abiertos y sin pérdida de información, como ZIP o GZIP.
Recomendación
La fragmentación debe facilitar el acceso a los datos, no dificultarlo. Siempre que sea posible, publicá tanto los archivos fragmentados como una versión completa del conjunto de datos.