No doubt working with huge data volumes is hard, but to move a mountain, you have to deal with a lot of small stones. But why strain yourself? Using Mapreduce and Spark you tackle the issue partially, thus leaving some space for high-level tools. Stop struggling to make your big data workflow productive and efficient, make use of the tools we are offering you.
oferecido por
Big Data Analysis: Hive, Spark SQL, DataFrames and GraphFrames
YandexInformações sobre o curso
39,738 visualizações recentes
Resultados de carreira do aprendiz
25%
comecei uma nova carreira após concluir estes cursos
40%
consegui um benefício significativo de carreira com este curso
Certificados compartilháveis
Tenha o certificado após a conclusão
100% on-line
Comece imediatamente e aprenda em seu próprio cronograma.
Prazos flexíveis
Redefinir os prazos de acordo com sua programação.
Nível avançado
Aprox. 30 horas para completar
Inglês
Legendas: Inglês, Coreano
Habilidades que você terá
GraphsHiveApache HiveApache Spark
Resultados de carreira do aprendiz
25%
comecei uma nova carreira após concluir estes cursos
40%
consegui um benefício significativo de carreira com este curso
Certificados compartilháveis
Tenha o certificado após a conclusão
100% on-line
Comece imediatamente e aprenda em seu próprio cronograma.
Prazos flexíveis
Redefinir os prazos de acordo com sua programação.
Nível avançado
Aprox. 30 horas para completar
Inglês
Legendas: Inglês, Coreano
oferecido por
Yandex
Yandex is a technology company that builds intelligent products and services powered by machine learning. Our goal is to help consumers and businesses better navigate the online and offline world.
Programa - O que você aprenderá com este curso
22 minutos para concluir
Welcome to the Second Course: Big Data Analysis
22 minutos para concluir
8 vídeos (Total 12 mín.), 1 leitura
8 videos
What is BigData Analysis?1min
Tools For BigData Analysis1min
Graph Data Analysis2min
Meet Alexey Dral2min
Meet Pavel Mezentsev37s
Meet Natalia Pritykovskaya40s
Meet Pavel Klemenkov40s
1 leituras
Slack Channel is the quickest way to get answers to your questions10min
3 horas para concluir
Big Data SQL: Hive
3 horas para concluir
15 vídeos (Total 105 mín.)
15 videos
HTTP Web Service: Access Log Format4min
Business Use Cases: Solution with Hive6min
(optional) SQL: likbez10min
Hive Data Definition Language (DDL)11min
Hive Data Manipulation Language (DML)6min
Hive Analytics: RegexSerDe, Views7min
(optional) Regular Expressions, Likbez9min
Hive Analytics: UDF, UDAF, UDTF7min
Hive Streaming4min
Hive PTF (Window Functions)5min
Hive Optimization: Partitioning, Bucketing and Sampling8min
Hive Map-Side Joins: Plain, Bucket, Sort-Merge5min
Hive Optimization: Data Skew4min
Hive Optimization: Row-Columnar File Formats, Compression8min
3 exercícios práticos
Hive: SQL over Hadoop MapReduce20min
Hive Analytics with UDF and Streaming20min
Hive final20min
6 horas para concluir
Big Data SQL: Hive (practice week)
6 horas para concluir
3 vídeos (Total 14 mín.), 4 leituras, 5 testes
3 videos
How to Install Docker on Windows 7, 8, 104min
How to submit your first Hive assignment6min
4 leituras
Grading System: Instructions and Common Problems10min
Docker Installation Guide10min
Assignments. General requirements10min
Hive assignment. Intro and instructions10min
2 horas para concluir
Spark SQL and Spark Dataframe
2 horas para concluir
14 vídeos (Total 82 mín.)
14 videos
What is Pandas DataFrame and how to create it4min
How to process a DataFrame as SQL4min
Working with Hive4min
Reading and Writing Files7min
RDD vs. DF vs. SQL3min
Projection and Filtering5min
Functions5min
Aggregates6min
Join8min
User Defined Functions8min
Time Processing4min
Window Functions7min
Two-Dimensional Distributions4min
2 exercícios práticos
Introducing DataFrame and SQL16min
Spark SQL and Spark Dataframe18min
4 horas para concluir
Graph Analysis from Big Data Perspective
4 horas para concluir
13 vídeos (Total 83 mín.)
13 videos
Graph examples4min
Graph representation7min
Counting common friends. Part I2min
Counting common friends. Part II10min
Counting common friends. Part III5min
GraphFrames: Introduction6min
Motif Finding: DSL6min
Motif Finding: Counting Mutual Friends6min
Motif Finding: Under The Hood. Part 114min
Motif Finding: Under The Hood. Part 24min
Triangles Count: Introduction3min
Triangles Count: Edge Lists6min
Triangles Count: GraphFrame6min
4 exercícios práticos
Graph Representations10min
Motif Finding18min
Triangles Count8min
Graph Analysis from Big Data Perspective20min
Avaliações
Principais avaliações do BIG DATA ANALYSIS: HIVE, SPARK SQL, DATAFRAMES AND GRAPHFRAMES
por SM12 de Nov de 2018
content of the course is remarkable and the way they explained concepts is very lucid. I just want to give suggestions please give link to the data set they are using for illustrating the concepts.
por VI8 de Dez de 2017
Quite a good course, but weeks about graphs I found somewhat poor. Apart from that you learn basics of Hive, details of DataFrame API of Spark and how it internally works.
por MG4 de Dez de 2018
Unfortunately, I often spent more time trying to get my assignments to pass the automatic grader than on solving them. This made the course a bit frustrating at times.
por SS2 de Fev de 2018
I wish I could give more rating than 5 :). Excellent course. Thanks so much for such an excellent course. All the instructors are great.
Perguntas Frequentes – FAQ
Quando terei acesso às palestras e às tarefas?
O acesso a palestras e tarefas depende do tipo de inscrição. Se você participar de um curso como ouvinte, você poderá ver quase todo o conteúdo do curso gratuitamente. Para acessar tarefas valendo nota e obter um Certificado, você precisará adquirir a experiência do Certificado, durante ou após a participação como ouvinte. Se você não vir a opção de participar como ouvinte:
- o curso pode não oferecer essa opção. Você pode experimentar um teste gratuito ou solicitar o auxílio financeiro.
- Em vez disso, o curso pode oferecer 'Curso completo, sem Certificado'. Com esta opção, é possível ver todo o conteúdo do curso, enviar as avaliações necessárias e obter uma nota final. Isso também significa que você não poderá comprar uma experiência de Certificado.
O que recebo ao adquirir o Certificado?
Quando você adquire o Certificado, ganha acesso a todo o material do curso, incluindo avaliações com nota atribuída. Após concluir o curso, seu Certificado eletrônico será adicionado à sua página de Participações e você poderá imprimi-lo ou adicioná-lo ao seu perfil no LinkedIn. Se quiser apenas ler e assistir o conteúdo do curso, você poderá frequentá-lo como ouvinte sem custo.
Qual é a política de reembolso?
Você poderá pedir reembolso total até duas semanas após a data do pagamento, ou (para cursos recém-iniciados) até duas semanas após o início da primeira sessão do curso, o que ocorrer por último. Você não poderá receber reembolso após obter o Certificado de Curso, mesmo que tenha completado o curso dentro do período de duas semanas. Veja nossa política para o reembolso total.
Existe algum auxílio financeiro disponível?
Sim, a Coursera oferece auxílio financeiro aos alunos que não podem pagar a taxa. Faça a solicitação clicando no link Auxílio financeiro, abaixo do botão "Inscreva-se" à esquerda. Você será solicitado a preencher um formulário e será notificado se for aprovado. Saiba mais.
Ganharei créditos universitários por concluir o curso?
Este curso não oferece créditos universitários, mas algumas universidades podem aceitar certificados de cursos que podem ser convertidos em créditos. Entre em contato com sua instituição para saber mais. Com os cursos on-line e os certificados Mastertrack™ do Coursera, é possível ganhar créditos universitários.
Mais dúvidas? Visite o Central de Ajuda ao Aprendiz.
