Je vais concevoir une stratégie et un pipeline d'archivage de données pour aurora postgresql
Ingénieur en bases de données AWS, pipelines de données et optimisation des coûts cloud
À propos de ce service
J'aide les équipes à gérer des bases de données PostgreSQL et Aurora PostgreSQL en pleine croissance en concevant et en construisant des pipelines d'archivage de données qui maintiennent les tables de production légères sans perdre l'accès aux données historiques.
Ce que je propose :
- Stratégie d'archivage : règles de conservation et politique pour ce qui sort de la production
- - Construction du pipeline : tâches automatisées déplaçant les données anciennes d'Aurora PostgreSQL vers S3 dans un format interrogeable
- - Workflow de suppression conforme aux règles de conservation
- - Validation : vérifications pour s'assurer que les données archivées correspondent à la source avant nettoyage
- - Documentation : un runbook que votre équipe peut exécuter et étendre
Conçu pour les équipes dont les tables Aurora PostgreSQL croissent rapidement ou qui ont besoin d'une politique de conservation défendable pour la conformité.
Note : les packages ci-dessous couvrent la stratégie, la conception et la construction du pipeline. La mise en œuvre complète sur plusieurs tables nécessite une offre personnalisée après notre discussion.
Contactez-moi d'abord pour confirmer la version du moteur et le volume de données.
Fournisseur de services cloud:
Amazon Web Services
Expertise:
Migration
Ressource du cloud computing:
RDS
Autres services de Cloud computing I Offre
FAQ
Traduction automatique
Combien de temps prend la mise en œuvre complète d'un archivage de données ?
La stratégie et la construction du pipeline pour un flux d'archivage prennent environ 1 à 2 semaines. La mise en œuvre sur plusieurs tables ou une migration complète en production est proposée sous forme d'offre personnalisée après notre discussion.
Travaillez-vous uniquement avec Aurora PostgreSQL ou avec d'autres moteurs aussi ?
Je me concentre sur Aurora PostgreSQL et RDS PostgreSQL, mais le même modèle d'archivage fonctionne pour MySQL et SQL Server. Indiquez-moi votre moteur et je confirmerai si cela convient.
Les données archivées seront-elles toujours interrogeables ou sont-elles verrouillées ?
Interrogeables. Je dépose les données archivées dans S3 au format Parquet et configure Athena pour que vous puissiez toujours exécuter des requêtes SQL dessus, juste en dehors de votre base de données de production.
