Feature/docker#132
Merged
Merged
Conversation
…itHub Container Registry
Millores implementades:
Docker Build & Performance:
- Cache BuildKit Maven per builds 80% més ràpids (5 min → 1 min rebuilds)
- Multi-stage optimitzat amb 4 etapes (deps, builder, tester, runtime)
- Stage tester opcional per executar tests sense ralentitzar builds
- Layer caching intel·ligent amb POMs separats
Seguretat:
- Execució non-root amb UID 185 (usuari spark)
- Permisos restrictius 775 en lloc de 777
- 10 labels OCI estàndard per traçabilitat completa
- Build validation automàtica de JARs
Observabilitat:
- Health checks (interval 30s, timeout 10s, 3 retries)
- Logging rotat (10MB x 3 fitxers amb compressió)
- Restart policy automàtic (màx 3 intents)
- Variables d'entorn APP_VERSION i SPARK_VERSION
- Build metadata amb BUILD_DATE i VCS_REF
Developer Experience:
- Makefile amb 10+ comandes simplificades i validació
- Scripts executables: build.sh, run.sh, validate.sh
- Profiles Docker Compose (spark3/spark4)
- Warnings BUILD_DATE/VCS_REF solucionats amb defaults
GitHub Container Registry:
- Workflow automàtic per construir i publicar imatges
- Suport Spark 3.5 i Spark 4 simultani
- Tags semàntics (latest, version, SHA)
- Cache de GitHub Actions per builds ràpids
- Imatges disponibles a ghcr.io/csuc/prc-csv2xml
Documentació:
- docker/QUICKSTART.md - Guia ràpida de 3 passos
- docker/README.md - Ampliat amb troubleshooting complet
- docker/GITHUB_PACKAGES.md - Ús d'imatges pre-construïdes
- .github/SETUP_GHCR.md - Configuració GitHub Packages
Fitxers nous:
- Makefile, .dockerignore, docker/Dockerfile.spark4
- docker/{build,run,validate}.sh, docker/.env.example
- .github/workflows/docker.yml
BREAKING CHANGES:
- Profiles requerits per docker-compose (--profile spark3/spark4)
- BUILD_DATE i VCS_REF ara tenen defaults "unknown" si no es defineixen
Canvis al build system: Maven: - Actualitzar Spark 3.5.0 → 3.5.1 - Afegir variable scala.binary.version per flexibilitat - Dependencies Spark amb scope "provided" (no dupliquen al JAR) - Nou perfil "spark4" per compilar amb Spark 4.0.2 + Scala 2.13 + Java 21 Construcció: - mvn clean package (default: Spark 3.5 / Scala 2.12 / Java 8) - mvn clean package -Pspark4 (Spark 4.0 / Scala 2.13 / Java 21) Aquests canvis permeten mantenir dues versions binàries simultànies per suportar els dos Dockerfiles (Spark 3.5 i Spark 4).
amartinezcsuc
force-pushed
the
feature/docker
branch
from
0b65e55 to
e3784df
Compare
Resolt conflictes de merge entre master i feature/docker. Canvis principals: - Mantinguda configuració Docker optimitzada amb BuildKit - Actualitzat Spark a 3.5.1 (vs 3.5.0 de master) - Preservades millores de seguretat i health checks - Mantingut suport per Spark 4 amb perfil Maven - Conservades exclusions Cursor/Claude AI al .gitignore Els conflictes s'han resolt mantenint les millores de feature/docker que inclouen multi-stage builds, cache, logging i documentació ampliada.
Canvis al workflow Docker: - Eliminat build de Spark 4 del workflow GitHub Actions - Canviat prefix dels tags SHA de branch dinàmic a prefix fix 'sha-' - Mantingut només el build de la imatge base (Spark 3.5.1) El Dockerfile.spark4 continua disponible per builds locals amb Docker Compose o Makefile utilitzant el perfil spark4.
Solucionat error de permisos al crear directoris /app i /data. La imatge base apache/spark:3.5.1 requereix executar com a root per modificar permisos de directoris existents. Canvis: - Afegit USER root abans de crear/modificar directoris - Assegurat chown correcte després de copiar JARs - Mantingut canvi a usuari 185 per execució final Fixes GitHub Actions build error: "Permission denied" al crear directoris.
This file contains hidden or bidirectional Unicode text that may be interpreted or compiled differently than what appears below. To review, open the file in an editor that reveals hidden Unicode characters.
Learn more about bidirectional Unicode characters
Sign up for free
to join this conversation on GitHub.
Already have an account?
Sign in to comment
1 participant
Add this suggestion to a batch that can be applied as a single commit.This suggestion is invalid because no changes were made to the code.Suggestions cannot be applied while the pull request is closed.Suggestions cannot be applied while viewing a subset of changes.Only one suggestion per line can be applied in a batch.Add this suggestion to a batch that can be applied as a single commit.Applying suggestions on deleted lines is not supported.You must change the existing code in this line in order to create a valid suggestion.Outdated suggestions cannot be applied.This suggestion has been applied or marked resolved.Suggestions cannot be applied from pending reviews.Suggestions cannot be applied on multi-line comments.Suggestions cannot be applied while the pull request is queued to merge.Suggestion cannot be applied right now. Please check back later.
No description provided.