Data Engineer / Data OPS - Freelance (H/F)

Taux journalier (TJM): 670 Bonjour, Dans le cadre de ses projets clients, Visian est à la recherche d'un Data Engineer/Data Ops MISSIONS Vous interviendrez notamment sur les sujets suivants : * Concevoir et faire évoluer les chaînes de collecte, transformation, stockage et exposition des logs. * Accompagner les cas d'usage depuis la phase d'étude jusqu'à leur implémentation. * Concevoir et automatiser les pipelines d'ingestion de données en batch et temps réel. * Mettre en place les mécanismes de contrôle qualité permettant de garantir l'intégrité et la fiabilité des données. * Participer à la conception des solutions techniques et fonctionnelles liées à la gestion des données opérationnelles. * Gérer les flux de données ainsi que leur cycle de vie. * Développer et maintenir des traitements de données sur des environnements de streaming. * Accompagner les utilisateurs sur leurs besoins d'analyse de données, notamment autour : * de l'observabilité ; * du suivi opérationnel ; * de la détection d'événements de sécurité. * Contribuer au développement de dashboards et de cas d'usage Data / ML / IA. * Mettre en œuvre les solutions dans une démarche Agile / DevOps avec automatisation CI/CD. * Rédiger la documentation technique, fonctionnelle et d'exploitation. * Assurer le support technique et fonctionnel et participer à l'analyse et à la résolution des incidents. * Travailler en proximité avec les équipes Data, Log Management, Infrastructure et les équipes opérationnelles. ENVIRONNEMENT TECHNIQUE * Kafka * Elasticsearch / Kibana * Logstash * Apache Flink * OpenTelemetry * Python * Java * SQL * GitLab * Kubernetes * CI/CD * Architectures microservices * Environnements infrastructure / réseau / systèmes PROFIL RECHERCHÉ * Expérience confirmée en Data Engineering, traitement de logs, observabilité ou plateformes de données. * Bonne maîtrise des problématiques de streaming de données. * Expérience dans la conception de solutions de collecte, ingestion, transformation et stockage de données. * Très bonne connaissance de Kafka et/ou de technologies équivalentes de streaming. * Bonne maîtrise de Python et/ou Java ainsi que SQL. * Expérience avec la suite Elastic : Elasticsearch, Kibana, Logstash. * Connaissance d'Apache Flink et/ou d'OpenTelemetry appréciée. * Bonne compréhension des environnements infrastructure, systèmes et réseaux. * Maîtrise des pratiques DevOps / CI/CD, idéalement avec GitLab et Kubernetes. * Capacité à intervenir sur l'ensemble du cycle de vie d'un flux de données, de la collecte jusqu'à son exploitation. * Bon niveau d'anglais