Skip to Main content Skip to Navigation
Theses

Contributions to large-scale data processing systems

Résumé : Cette thèse couvre le sujet des systèmes de traitement de données àgrande échelle, et plus précisément trois approches complémentaires :la conception d'un système pour prédir des défaillances de serveursgrâce à l'analyse de leurs données de supervision; l'acheminement dedonnées dans un système à temps réel en étudiant les corrélationsentre les champs des messages pour favoriser la localité; etfinalement un environnement de développement innovateur pour concevoirdes transformations de donées en utilisant des graphes orientés deblocs.À travers le projet Smart Support Center, nous concevons unearchitecture qui passe à l'échelle, afin de stocker des sériestemporelles rapportées par des moteurs de supervision, qui vérifienten permanence la santé des systèmes informatiques. Nous utilisons cesdonnées pour effectuer des prédictions, et détecter de potentielsproblèmes avant qu'ils ne ne produisent.Nous nous plongeons ensuite dans les algorithmes d'acheminement pourles sytèmes de traitement de données en temps réel, et développons unecouche pour acheminer les messages plus efficacement, en évitant lesrebonds entre machines. Dans ce but, nous identifions en temps réelles corrélations qui apparaissent entre les champs de ces messages,tels les mots-clics et leur localisation géographique, par exempledans le cas de micromessages. Nous utilisons ces corrélations pourcréer des tables d'acheminement qui favorisent la colocation desacteurs traitant ces messages.Pour finir, nous présentons λ-blocks, un environnement dedéveloppement pour effectuer des tâches de transformations de donnéessans écrire de code source, mais en créant des graphes de blocs decode. L'environnement est rapide, et est distribué avec des pilesincluses: libraries de blocs, modules d'extension, et interfaces deprogrammation pour l'étendre. Il est également capable de manipulerdes graphes d'exécution, pour optimisation, analyse, vérification, outout autre but.
Document type :
Theses
Complete list of metadatas

Cited literature [119 references]  Display  Hide  Download

https://tel.archives-ouvertes.fr/tel-01891825
Contributor : Abes Star :  Contact
Submitted on : Wednesday, October 10, 2018 - 8:59:05 AM
Last modification on : Friday, July 17, 2020 - 11:10:24 AM
Document(s) archivé(s) le : Friday, January 11, 2019 - 1:04:12 PM

File

CANEILL_2018__-_archivage.pdf
Version validated by the jury (STAR)

Identifiers

  • HAL Id : tel-01891825, version 1

Collections

Citation

Matthieu Caneill. Contributions to large-scale data processing systems. Other [cs.OH]. Université Grenoble Alpes, 2018. English. ⟨NNT : 2018GREAM006⟩. ⟨tel-01891825⟩

Share

Metrics

Record views

200

Files downloads

280