fisheries-and-environment-data-warehouse
activeCe dépôt contient un entrepôt de données dédié à l'analyse des données relatives aux activités et contrôles des pêches et de l'environnement marin. Il permet de centraliser et d'analyser les informations pour une meilleure gestion des ressources.
Python
AGPL-3.0DocumentationFeatures
- Collecte de données
- Transformation de données
- Analyse de données
- Visualisation de données
- Automatisation des flux de données
Tech Stack
Dépendances
PoetryPrefectPandasDuckDBClickhouse-connectGeoPandasUnidecodeH3
Composants
- Pipeline de données (Prefect)
- Base de données ClickHouse
- API (potentielle)
- Scripts Python pour l'extraction, la transformation et le chargement (ETL)
- Docker pour la conteneurisation
Tags
Changelog
Changelog : fisheries-and-environment-data-warehouse (derniers 30 jours)
Résumé
Les dernières mises à jour de l'entrepôt de données pêche et environnement se concentrent sur l'amélioration des données disponibles et la planification des flux de données. Une nouvelle fonctionnalité permet d'ajouter un champ "mois" aux rapports, facilitant l'analyse temporelle des données. Des ajustements ont également été apportés à la planification des tâches d'actualisation des activités.
Évolutions fonctionnelles
- Ajout d'un champ "mois" aux rapports, permettant une analyse plus fine des données temporelles. (#136, #139)
- Mise à jour de la planification du flux de données "activities" pour optimiser l'actualisation des données. (#135, #141)
Évolutions techniques
- Mise à jour de la librairie
urllib3en version 2.6.3. (#139)
Métriques
- Stars
- 3
- Forks
- 0
- Open Issues
- 16
- Last Activity
- 5 days ago
Information
- Target Audience
- Professionnels
- Authentication
- none
- Testing
- pytest, Coverage
- CI/CD
- CI/CD (GitHub Actions), Trivy (analyse de vulnérabilités), GitLab CI