Uy si totalmente de acuerdo! Ahora todas las transformaciones ahora son en codigo! En su momento, tambien estaba pasando pero a mi lo que me paso es que todas las transformaciones las comenzamos a hacer en Stored Procedures para explotar el poder de los motores de DB
Gracias por compartir. En el minuto 32 del video, decidiste comentar el codigo del pipeline, unicamente para reducir el scope del pipeline al solid de dbt. Quizas solo como referencia, puedo agregar que la seccion de playground de Dagit te permite hacer un filtro de los solids que quieres ejecutar en el pipeline, de manera que te ofrece la habilidad de limitar los solids filtrados con una sintaxis peculiar que incluye el nombre del solid y el signo de + o * posicionado como prefijo o sufijo del nombre, como mecanismo de filtro. Asi, no hay necesidad modificar el pipeline, solo el filtro de ejecucion. Saludos!
Hola Luis! Una pregunta, veo que trabajas para Google en Barcelona, te quería preguntar si lo haces en remoto y si es cliente final, ya que no veo que tengan oficinas en la ciudad. Buen video como siempre Un saludo!
Escuchar decir que se debe usar todo código para construir procesos ETL o ELT suena un poco del pasado Cuando hoy en día existen herramientas como Informatica, Alteryx, Azure Data Factory, Google Data Fusion entre muchas otras que son cada vez más usadas por las grandes empresas, creo que existe un consenso en que en el futuro pocas de estas cosas se harán escribiendo código puro ya que es más difícil de mantener y escalar Al principio del video mencionas algunas debilidades de usar estas herramientas gráficas y coincido totalmente en el punto del control de versiones pero es que con el resto de puntos escribiendo todo en código presentas los mismos problemas y cualquier ingeniero de datos moderno podrá mencionar 20 desventajas adicionales de hacerlo todo en código
Muchas gracias, buen video, Saludos!
Muchas gracias, me alegro sea útil!
Uy si totalmente de acuerdo! Ahora todas las transformaciones ahora son en codigo! En su momento, tambien estaba pasando pero a mi lo que me paso es que todas las transformaciones las comenzamos a hacer en Stored Procedures para explotar el poder de los motores de DB
Si pero ojito con cosas propietarias como el PL/SQL de Oracle que luego no hay quien se lo saque de encima jaja
gracias por el tutorial!
Gracias por compartir. En el minuto 32 del video, decidiste comentar el codigo del pipeline, unicamente para reducir el scope del pipeline al solid de dbt. Quizas solo como referencia, puedo agregar que la seccion de playground de Dagit te permite hacer un filtro de los solids que quieres ejecutar en el pipeline, de manera que te ofrece la habilidad de limitar los solids filtrados con una sintaxis peculiar que incluye el nombre del solid y el signo de + o * posicionado como prefijo o sufijo del nombre, como mecanismo de filtro. Asi, no hay necesidad modificar el pipeline, solo el filtro de ejecucion. Saludos!
Muchas gracias, super util! No lo sabia!
muy buen video, la verdad me gusto mucho !, el data stack para en engineering , cambio mucho?
Hola gracias por su explicación, hay versión de dagster para empresas como servicio en GCP?
Hola Luis! Una pregunta, veo que trabajas para Google en Barcelona, te quería preguntar si lo haces en remoto y si es cliente final, ya que no veo que tengan oficinas en la ciudad.
Buen video como siempre
Un saludo!
Estamos en remoto!!
@@fullscan menudo crack! alguna forma de entrar como becario?
Hi, is it possible to do an English version of this tutorial?
Im thinking on generating some English content indeed! Thanks for the feedback!
Escuchar decir que se debe usar todo código para construir procesos ETL o ELT suena un poco del pasado
Cuando hoy en día existen herramientas como Informatica, Alteryx, Azure Data Factory, Google Data Fusion entre muchas otras que son cada vez más usadas por las grandes empresas, creo que existe un consenso en que en el futuro pocas de estas cosas se harán escribiendo código puro ya que es más difícil de mantener y escalar
Al principio del video mencionas algunas debilidades de usar estas herramientas gráficas y coincido totalmente en el punto del control de versiones pero es que con el resto de puntos escribiendo todo en código presentas los mismos problemas y cualquier ingeniero de datos moderno podrá mencionar 20 desventajas adicionales de hacerlo todo en código