The two key components of any data pipeline are data lakes and warehouses. This course highlights use-cases for each type of storage and dives into the available data lake and warehouse solutions on Google Cloud Platform in technical detail. Also, this course describes the role of a data engineer, the benefits of a successful data pipeline to business operations, and examines why data engineering should be done in a cloud environment. Learners will get hands-on experience with data lakes and warehouses on Google Cloud Platform using QwikLabs.
oferecido por
Google Cloud
Informações sobre o curso
100,943 visualizações recentes
Certificados compartilháveis
Tenha o certificado após a conclusão
100% on-line
Comece imediatamente e aprenda em seu próprio cronograma.
Prazos flexíveis
Redefinir os prazos de acordo com sua programação.
Nível intermediário
Aprox. 12 horas para completar
Sugerido: 22 hours/week
Inglês
Legendas: Inglês
oferecido por
Google Cloud
We help millions of organizations empower their employees, serve their customers, and build what’s next for their businesses with innovative technology created in—and for—the cloud. Our products are engineered for security, reliability, and scalability, running the full stack from infrastructure to applications to devices and hardware. Our teams are dedicated to helping customers apply our technologies to create success.
Programa - O que você aprenderá com este curso
7 minutos para concluir
Introduction
This module gives an introduction of the Data Engineering specialization and the course.
7 minutos para concluir
2 vídeos (Total 7 mín.)
2 horas para concluir
Introduction to Data Engineering
This module describes the role of a data engineer and motivates the claim why data engineering should be done in the Cloud
2 horas para concluir
13 vídeos (Total 55 mín.)
13 videos
Analyze data engineering challenges8min
Intro to BigQuery3min
Data Lakes and Data Warehouses5min
Demo: Federated Queries with BigQuery6min
Transactional Databases vs Data Warehouses4min
Partner effectively with other data teams6min
Manage data access and governance2min
Demo: Finding PII in your dataset with DLP API1min
Build production-ready pipelines2min
Review GCP customer case study3min
Recap1min
Lab Intro: Using BigQuery to do Analysis17s
1 exercício prático
Introduction to Data Engineering30min
2 horas para concluir
Building a Data Lake
In this module, we describe what data lake is and how to use Google Cloud Storage as you data lake on GCP
2 horas para concluir
10 vídeos (Total 58 mín.)
10 videos
Data Storage and ETL options on GCP4min
Building a Data Lake using Cloud Storage10min
Demo: Optimizing cost with Google Cloud Storage classes and Cloud Functions7min
Securing Cloud Storage5min
Storing All Sorts of Data Types5min
Demo: Running federated queries on Parquet and ORC files in BigQuery4min
Storing Relational Data in the Cloud1min
Cloud SQL as a relational Data Lake7min
Lab: Loading Taxi Data into Cloud SQL27s
1 exercício prático
Building a Data Lake4min
4 horas para concluir
Building a data warehouse
In this module, we talk about BigQuery as a data warehousing option on GCP
4 horas para concluir
17 vídeos (Total 93 mín.)
17 videos
Intro to BigQuery1min
Demo: Querying TB of Data in seconds7min
Getting Started9min
Loading Data11min
Lab Intro: Loading Data into BigQuery21s
Exploring Schemas24s
Demo: Exploring Schemas10min
Schema Design3min
Nested and Repeated Fields8min
Demo: Nested and Repeated Fields15min
Lab Intro: Working with JSON and Array Data in BigQuery13s
Optimizing with Partitioning and Clustering5min
Demo: Creating Partitioned Tables7min
Demo: Partitioning and Clustering6min
Preview: Transforming Batch and Streaming Data2min
Recap1min
1 exercício prático
Building a Data Warehouse4min
2 minutos para concluir
Summary
This module reviews all the topics covered in the course
2 minutos para concluir
1 vídeo (Total 2 mín.)
1 vídeos
Course Summary1min
Avaliações
Principais avaliações do MODERNIZING DATA LAKES AND DATA WAREHOUSES WITH GCP
por AAFeb 14, 2020
Good introduction and overview of the field of data engineering, data lakes and modern data warehouses and a hands-on walkthrough of all the technologies related to solving these problems on GCP.
por BAFeb 8, 2020
The course offers a nice description of what modern DWH means, which are the differences between classic DWH and cloud DWH. You have the chance to work with the new cloud concept on GCP.
por TGFeb 4, 2020
Course material spends a little too much time promoting the benefits of GCP when it could be focusing on the technical aspects of using GCP
por PUMar 18, 2020
Really good course for beginners this will help them to understand about Data Lakes, Data Warehouses, BigQuery,Google Storage & Cloud SQL.
por SMMar 21, 2020
Very detailed course on using BigQuery. Gives clarity on different services offered in GCP. Need to attend this for detailed understanding
por SBFeb 15, 2020
Very valuable information about data lakes, data warehouses, using Arrays and Structs to store data in BigQuery. Loved the course.
por DZMar 29, 2020
Very informative and good level of detail as I progress through the specialization. The hands-on learning is very appreciated.
por TTFeb 17, 2020
Simply Extraordinary !! The way course took made me finish entire course with a continuous flow.Kudos to course faculty.
por VSApr 1, 2020
Some of the labs were repetition from the first course, but one had to go thru it, to get completion status
por AGMar 1, 2020
Muy bueno, creo que el se puede mejorar los laboratorios, aveces parecen no tener relación con el tema.
por JWJan 22, 2020
Good class and a great intro to data lakes. Nice explanations on how data lakes and warehouses differ.
por HKJan 14, 2020
Excellent presentation, demos and labs. The last lab needs to have a little more time allocated.
Perguntas Frequentes – FAQ
Posso assistir uma prévia do curso antes de me inscrever?
Sim, você pode assistir uma prévia do primeiro vídeo e ver programa do curso antes de se inscrever. Você precisa comprar o curso para ter acesso ao conteúdo não incluído na prévia.
Quando terei acesso às palestras e às tarefas?
Se decidir se inscrever no curso antes da data de início da sessão, terá acesso a todos os vídeos das palestras e leituras do curso. Também poderá enviar tarefas assim que a sessão começar.
O que recebo ao me inscrever?
Uma vez inscrito, e tão logo sua sessão tenha iniciado, você terá acesso a todos os vídeos e outros recursos, incluindo itens de leitura e fórum de discussão do curso. Você poderá ver e enviar tarefas práticas e concluir tarefas com nota atribuída obrigatórias para obter uma nota e um Certificado de Curso.
Quando receberei meu Certificado de Curso?
Se você concluir o curso com êxito, seu Certificado de Curso eletrônico será adicionado à sua página de Participações e você poderá imprimi-lo ou adicioná-lo ao seu perfil no LinkedIn.
Por que não posso assistir este curso como ouvinte?
Este curso é um dos poucos oferecidos pela Coursera que está disponível apenas para alunos que tenham pago ou recebido auxílio financeiro, quando disponível.
Qual é a política de reembolso?
Mais dúvidas? Visite o Central de Ajuda ao Aprendiz.
