jobapplier

Senior Data Engineer

GitGuardian

Join GitGuardian, a global cybersecurity scale-up, as a Senior Data Engineer. You will be part of the Public Intelligence squad, responsible for building the engine that protects companies from secrets leaked in public. Your mission will involve rethinking how public data is collected, stored, and processed to improve speed, cost, and reliability. You will work closely with software engineers and AI engineers, and your technical environment will include Python, SQL, S3, ClickHouse, Snowflake, and more.

About GitGuardian

  • Concevoir, construire et gérer les pipelines de données de l'équipe, de la collecte aux tables utilisées par les agents, le produit et l'équipe commerciale.
  • Orchestrer les pipelines avec Dagster et les déployer avec Docker, Kubernetes et Terraform.

Requirements

  • Modéliser les données publiques : choisir le grain, les clés et le stockage (S3, ClickHouse, Snowflake, PostgreSQL) en fonction des besoins de chaque consommateur.