Data Engineering & IA

Data Engineering
& Intelligence Artificielle

Pipelines ETL sécurisés, extraction et linéarisation SNDS, modèles de machine learning et traitement du langage naturel clinique.

233
Variables sélectionnées SNDS
8
Pipelines EDS
99.9%
Disponibilité plateforme
15+
Algorithmes ML

Une stack data complète et performante

Nous construisons des pipelines robustes, scalables et sécurisés pour extraire, transformer et analyser les données de santé.

Pipeline Victoria (SNDS)

Pipeline ETL propriétaire en Spark/Scala. 3 étapes : conversion SNDS en Parquet, nettoyage via WikiPipeline, extraction par entités (CCAM, CIM-10, LPP, Médicaments, Patients, Consultations, ALD, GHM). V2 médico-économique pour la valorisation des parcours.

Filters (Data Minimization)

11 jobs spécialisés en Spark/Scala : variables de parcours de soins, hospitalisations, médicaments, exposition DDD, polypharmacie, consommation de ressources, arrêts de travail et coûts. 100% de couverture de tests.

Machine Learning

Algorithmes de classification, régression, clustering. Phénotypage automatique de pathologies complexes par deep learning.

Contrôle qualité automatisé

Détection automatique d'anomalies dans les jeux de données. Validation des règles métier, cohérence temporelle et complétude des variables.

Rosetta : traitement des données de cohortes

Pré-évaluation qualité

Analyse automatique de la qualité des données de registres avant traitement.

Librairie modulaire

Moteur commun avec fonctions de base + fonctions spécifiques par registre. Développé en Python avec couverture de tests.

Input/Output

Prise en charge de fichiers Excel et fichiers de spécification. Production d'une base registre normalisée (1 ligne par patient, 1 colonne par variable brute).

Déploiement

Conteneurisation Docker, versionnage GitLab, intégration continue.

Pipeline de déploiement

Git (GitLab CI) Scan de sécurité Image Docker
Kubernetes EDS

Une architecture sécurisée et certifiée

Notre plateforme repose sur une infrastructure certifiée HDS, avec environnements isolés et chiffrement de bout en bout.

Hébergement HDS certifié

Infrastructure conforme aux standards de sécurité des données de santé, audit annuel et certification continue.

Environnements isolés

Espaces de travail dédiés par projet, ségrégation des accès, logs d'audit complets pour traçabilité complète.

Chiffrement bout-en-bout

Données chiffrées en transit et au repos. Gestion des clés de chiffrement, authentification multi-facteurs pour tous les accès.

Monitoring & alertes

Surveillance en temps réel des pipelines, alertes sur anomalies, dashboards de performance et d'uptime.

Outils analytiques

R
R & RStudio
Data manipulation, visualisation, modèles statistiques
Py
Python & Jupyter
Machine learning, deep learning, traitement d'images médicales

L'IA au cœur de tous nos processus

Nous intégrons l'intelligence artificielle dans l'ensemble de nos processus pour améliorer les délais de production et la qualité de nos livrables.

Rédaction de protocoles

Assistance IA pour la rédaction des protocoles d'étude, la revue bibliographique et la structuration des dossiers CESREES. Gain de temps significatif sur les phases préparatoires.

Développement & code review

Génération et revue de code assistées par IA pour les pipelines ETL, les scripts d'analyse et les algorithmes de phénotypage. Réduction des erreurs et accélération du développement.

Analyse & interprétation

Assistance IA pour l'interprétation des résultats statistiques, la détection d'anomalies dans les jeux de données et l'identification de patterns dans les parcours patients.

Contrôle qualité

Vérification automatisée de la cohérence des résultats, détection de valeurs aberrantes, validation croisée des outputs. L'IA renforce chaque étape de notre chaîne de production.

Accélérez votre projet data

Découvrez notre infrastructure technique et nos capacités en data science.
Nous construisons des pipelines robustes et scalables pour vos données de santé.