Jaką ksiunszkę naukową polecicie se dla chłopa czu na data engineer idzie? Najlepiej coś o architekturze tych ETLi typu data lake, data mesh czy tego typu cuda. #programowanie #dataengineering #python
@aczutuse: te książki są naprawdę słabe. Dobrze, że je z libgena ściągam, a nie kupuje bo bym się wściekł z wydania paru stówek na parafrazowanie dokumentacji z microsoft learna. Takich ogólnych nie znalazłem, ale jak np. pod konkretny Microsoftwoy stack to może "The Azure Data Lakehouse Toolkit: Building and Scaling Data Lakehouses on Azure with Delta Lake, Apache Spark, Databricks, Synapse Analytics, and Snowflake" Ron L Esteve.
@aczutuse: Ponieważ zajmuję się architekturą, a nie implementacją to nie polecę ci materiałów do nauki konkretnych narzędzi, ale mogę ci polecić książki które traktują o wzorcach, dobrych praktykach, praktycznych rozwiązaniach, często na przykładach. - The Data Warehouse Toolkit: The Definitive Guide to Dimensional Modeling -> dużo teorii ale też przykładów opartych na prawdziwych domenach jak finanse, e-commerce czy ubezpieczenia - Data Mesh: Delivering Data-Driven Value at Scale -> głównie teoria o
@markaron: hej, jest jakaś książka z zasadami jak projektować data lake/lakehouse? Chodzi mi o to np. jak powinna wyglądać optymalna struktura folderów/plików dla przetwarzania parquetów.
#programowanie #dataengineering #python
Takich ogólnych nie znalazłem, ale jak np. pod konkretny Microsoftwoy stack to może "The Azure Data Lakehouse Toolkit: Building and Scaling Data Lakehouses on Azure with Delta Lake, Apache Spark, Databricks, Synapse Analytics, and Snowflake" Ron L
Esteve.
Wpisz sobie data lake
https://github.com/andkret/Cookbook
fajnosc wyglada
masz linki do pogadanek
- The Data Warehouse Toolkit: The Definitive Guide to Dimensional Modeling -> dużo teorii ale też przykładów opartych na prawdziwych domenach jak finanse, e-commerce czy ubezpieczenia
- Data Mesh: Delivering Data-Driven Value at Scale -> głównie teoria o