Databricks e Elasticsearch - Analisando dados como nunca
Unindo dois gigantes do mundo BIG Data em um único curso
What you will learn
Visualização para explorar resultados de consultas de diferentes perspectivas
Construção de gráficos e Dashboards
Unificação de dados em diversos formatos: texto, JSON, PARQUET, dentre outros
Trabalhada por administrador da plataforma, analista de dados, cientista de dados e engenheiro de dados com diversas funcionalidades
Aprendizado processamento distribuído em SPARK
Entendo o que é Databricks File System (DBFS) seu sistema de arquivos
Entendo sobre Cluster
Aprendendo a gerenciar e criar Notebooks em R, SCALA, Python e SQL
Executando scripts multilinguagens
Gerenciando a ingestão de dados e análise de dados, gerando gráficos e dashboards
Construindo na versão comunnity
Trabalhando com a biblioteca dbutils Python
Integrando o Databricks ao Power BI
Elasticsearch sobre o seu mecanismo criado para análise de dados e busca
Entender como é realizada a combinação de muitos tipos de buscas — estruturadas, não estruturadas
Compreender Elasticsearch usa APIs RESTful e JSON padrão
Aprendizado sobre Elasticsearch, Logstash e Kibana
Elasticsearch banco de dados NoSQL
Logstash ferramenta para ingestão de dados
Kibana ferramenta para criação de visualização de dados e Dashboards
Canvas utilizado para criação de infográficos, documentos e projetos gráficos com os dados
Compreender sobre como são armazenados os documentos
Entender a estrutura JSON de armazenamento
Entender sobre índices, tipos de documentos, documentos e campos
Entendimento do que são shards, conhecimento sobre partição de índices, conhecimento sobre réplica de shards
O que é um NÓ
Como utilizar e o que significa um Request Body
Como funciona a busca URI
Trabalhando com as aplicações Discover, Viazualize
Why take this course?
Quando pensamos em projetos que envolvam dados, imaginamos que eles devem ser resolvidos por plataformas que possuam todo o ecossistema para leitura de dados, carga de dados, visualização de dados e controle de scripts em multilingugaens, nao tem como não utilizar o Elasticsearch e o Databricks.
Com o Elasticsearch você pode trabalhar com uma variedade de fontes de dados, incluindo logs, arquivos de dados em texto, e aplicações web. Ele oferece um mecanismo de pesquisa de texto completo distribuído em uma interface web e documentos JSON. Aqui neste curso nós iremos trabalhar com o banco search-engine ElasticSearch , a ferramenta de ingestão de dados conhecida como Logstash e a ferramenta de visualização e construção de painéis chamada Kibana. Você poderá construir dashboards incríveis com um banco de dados ultra rápido.
Já com o Databricks esta é uma poderosa plataforma de colaboração entre os profissionais da área de dados. É um ecossistema fácil de usar para aqueles que desejam executar consultas em diversos conjuntos de dados.
Permite que os analistas e cientistas de dados construam seus scripts nas linguagens Python, SQL, R, Scala, fazendo consulta aos dados. Separados por células em um mesmo notebook.
Com tantos gráficos sendo criados, você pode organizar tudo em dashboards dentro do Databricks.
Então venha aprender a trabalhar com estes gigantes!