Skip to content

angelurano/tfm-bigdata

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 

History

28 Commits
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 

Repository files navigation

Sistema de Procesamiento de Datos Ferroviarios

Proyecto final desarrollado para el Máster (CE) de Formación Profesional en Big Data (PEBD) del IES Clara del Rey. :shipit:

Este proyecto diseña e implementa una infraestructura completa de Big Data, desde la ingesta, almacenamiento, procesamiento y análisis de datos de posición y horarios de trenes de Cercanías Renfe en tiempo real, utilizando también el estándar internacional GTFS-Realtime.

Documentación del Proyecto

Toda la documentación técnica esta detallada en el directorio /docs.

Stack Tecnológico

  • Infraestructura

    Docker Docker Compose
  • Ingesta y Orquestación

    Apache NiFi
  • Mensajería Distribuida

    Apache Kafka
  • Almacenamiento

    Apache Hadoop MongoDB
  • Procesamiento y Visualización

    Apache Spark PySpark Jupyter Lab Pandas Matplotlib

About

Trabajo de Fin de Máster (CE) de Big Data

Resources

Stars

0 stars

Watchers

0 watching

Forks

Releases

No releases published

Packages

 
 
 

Contributors

Languages