Introdução
Várias empresas investiram pesadamente em Big Data nos últimos anos. Esse aumento no uso de análises de big data resultou em uma alta demanda por profissionais de big data treinados.. Embora tenha havido muito debate sobre a utilidade desta despesa, há um claro aumento de empregos em Big Data. Aqui está o que uma pesquisa rápida diz:
Dado o forte aumento na demanda, big data se tornou uma área lucrativa para impulsionar suas habilidades. Apesar disto, se você é alguém como eu, você precisa de uma boa visão geral e compreensão dos benefícios práticos antes de aprender algo de uma maneira mais formal, você provavelmente terá dificuldade em encontrar recursos estruturados como eu fiz há muito tempo.
Existem muitas tecnologias e terminologias associadas ao Big Data, que pode atuar como um obstáculo adicional para começar. Nomes como Hadoop, MapReduce, Fagulha, MongoDB, Colmeia requer algum tempo para se acostumar! Depois de receber uma resposta esmagadora em meu post anterior sobre os melhores vídeos do YouTube sobre aprendizado de máquina, aprendizado profundo, redes neurais e observe a falta de recursos estruturados, A solução era simples! Aqui está outro especial do YouTube para aspirantes a Big Data: Apenas minha opinião sobre como mergulhar em Big Data!!
Isenção de responsabilidade: NÃO temos a intenção de promover nenhuma marca ou serviço por meio deste post.. Os vídeos listados nesta postagem se concentram apenas em sua relevância / útil para o público.
Quem deve se beneficiar mais ao assistir a esses vídeos?
Escrevi esta postagem com a fraternidade de iniciantes de Big Data em mente. Por isso, esta postagem é mais adequada para candidatos que desejam iniciar sua carreira em análise de big data. Se você já é um profissional com experiência em big data, é possível que este post não seja o que você está procurando. Apesar disto, ainda pode consumir “inspiração” das palestras TED listadas abaixo.
A estrutura desta postagem é projetada para fornecer uma descrição completa das várias tecnologias usadas em Big Data Analytics. As palestras TED mostradas no início têm o objetivo de adicionar uma pitada de inspiração à sua jornada de aprendizagem.. Essas palestras oferecem a você imaginar um mundo emocionante impulsionado por números, tecnologias e análises de big data.
TED fala sobre Big Data
1. Introdução ao Big Data por Hilary Mason, Cientista-chefe de dados da Bitly
Duração: 11:30 min
Resumo: Neste pequeno vídeo, Hilary fala sobre o aumento do big data e como isso afetará nosso ambiente de trabalho. Ele também destaca as mudanças pequenas, mas significativas, que o big data traz., incluindo CPU, dados e algoritmos. Mais tarde, examine o perfil de um cientista de dados em seu estilo. Destaca os aplicativos de big data e seu uso no dia a dia.
2. Big Data, Mundo pequeno: Kirk Borne em TEDxGeorgeMasonU
Duração: 22:00 min
Resumo: O médico. Kirk Borne começa falando sobre sua jornada para se tornar um cientista de dados. Mais tarde, cobre algumas das melhores ideias aplicadas por trás da mineração de dados e como ela pode ser aplicada em nossas vidas diárias. Ele também fala sobre o ‘fenômeno do mundo pequeno’ e a 'separação de 6 graus '. Mais tarde, revela algumas estatísticas surpreendentes de big data que garantem que o mundo futuro será orientado por dados.
3. Kenneth Sugar: Big data são melhores dados
Duração: 16:00 min
Resumo: Kenneth está fortemente focado em usar os dados disponíveis em nível granular. Cada byte de dados tem algo a revelar, tudo que você precisa é de um engenheiro para descobrir. Ele acredita que, com a quantidade de informação disponível, podemos encontrar respostas para todas as perguntas que costumavam ser difíceis de pensar. Os dados nos tornaram mais poderosos. Os dados podem ser nosso maior poder se os descartamos intuitivamente.
4. O que fazer com todo esse Big Data?
Duração: 12:29 min
Resumo: Susan acredita ‘Não somos consumidores passivos de dados e tecnologia. Mais bem, nós moldamos os dados e lhes damos significado.‘. Neste pequeno vídeo, compartilha sua perspectiva sobre a ascensão do big data e as diferentes alternativas para usar os dados para seu uso ideal. Dados não criam significado, nós fazemos. Os dados nos fornecem um vasto oceano de informações que devem ser agitadas para extrair informações úteis.
5. Como encontrar o pior lugar para estacionar na cidade de Nova York usando Big Data?
Duração: 11:53 min
Resumo: O título diz tudo. O palestrante usa estatísticas e visualização para inferir o pior lugar para estacionar em Nova York. Certifique-se de não perder nenhuma informação importante, então ele capturou todas as variáveis importantes em suas representações gráficas. Se a qualquer momento você quiser ver o uso de dados em tempo real, a não perder.
Conheça as terminologias de Big Data
Eu recomendo fortemente esses vídeos do YouTube para pessoas que são novas em análises de big data.. Assista a estes vídeos rápidos (~ 3 minutos) fornecem uma visão geral clara das diferentes tecnologias de big data e as relações entre elas.
1. O que é HBase? Duração – 3 minutos
2. O que é Hadoop? Duração – 3:12 min
3. O que é MapReduce? Duração – 2:39 min
4. O que é HDFS? Duração – 2:51 min
5. O que é Flume? Duração – 2:59 min
6. O que é PIG? Duração – 3:01 minutos
7. O que é Hive? Duração – 2:52 min
8. O que é Avro? Duração – 3:00 min
9. O que é Oozie? Duração – 2:28 min
10. O que é Zookeeper? Duração – 3:26 minutos
10 tutoriais sobre análise de Big Data
1. Workshop de curso intensivo de Hadoop
Duração – 55:32 minutos
Resumo: Como o nome sugere, este vídeo cobre tudo sobre o Hadoop e o conceito relacionado em menos de uma hora. O palestrante começa com uma rápida introdução ao Hadoop, seguido por uma explicação detalhada do ecossistema Hadoop e distribuição, HDFS. Mais tarde, Explique vários componentes do Hadoop como Mapreduce, Fio, Compleição usando algumas histórias interessantes. Em conclusão, conclua este curso intensivo revelando algumas das maneiras não tão populares, mas superúteis de acessar dados.
2. Fundamentos de MapReduce
Duração – 32:03 minutos
Resumo: Este é um tutorial completo para aprender os fundamentos do MapReduce. Esta série de tutoriais é dividida em 5 partes, cada um dos quais cobre um módulo MapReduce específico. Este vídeo introdutório ao MapReduce fornece uma descrição detalhada de sua relevância, oportunidades de trabalho associadas, aplicativos e uso. Conforme você navega pelas seguintes partes, irá cobrir os argumentos essenciais do MapReduce. Confira a próxima seção enquanto estiver lá!!
3. Habilitar R no Hadoop
Duração – 40:25 minutos
Resumo: Este tutorial ensina o conhecimento da integração hadoop com R. O alto-falante segue um procedimento passo a passo para instalar o Hadoop em R. Conceitos como RHadoop foram discutidos, RHive e várias bibliotecas R associadas. Ao mesmo tempo, discute ainda o uso variado de R e como a programação R evoluiu ao longo dos anos.
4. Introdução ao aprendizado profundo no Hadoop
Duração – 41: 14minutos
Resumo: O palestrante explica maravilhosamente o conceito de aprendizado profundo usando hadoop. O aprendizado profundo é um dos tópicos mais comentados na comunidade de ciência de dados. Cientistas e pesquisadores estão trabalhando duro para descobrir novos padrões usando aprendizado profundo. O conceito de aprendizagem profunda foi explicado de forma simplista neste vídeo. Além disso, questões como redes de crenças profundas foram discutidas, a implementação do Hadoop / FIO.
5. Introdução ao Apache Cassandra
Duração – 1:15:06 hora
Resumo: Encontrei poucos vídeos sobre o Apache Cassandra, mas isso compensa por tudo. Aqui está uma introdução completa ao Apache Cassandra do zero. A ascensão do Apache Cassandra está chamando a atenção de empresas e profissionais em todos os lugares. Neste vídeo, o palestrante explica os algoritmos usados, suas características essenciais, benefícios e conceito / causa por trás do lançamento do Apache Cassandra ~ 6 anos atrás.
6. Introdução ao PIG
Duração – 30:56 minutos
Resumo: Este é um tutorial completo para aprender sobre PIG. Neste tutorial, o instrutor começa fornecendo uma visão geral do Pig seguida pela comparação entre o Pig e o SQL. Uma vez que ambos são muito semelhantes, faz uma comparação interessante. Ele também explica sobre o uso do Pig latin. Especialmente isso, Além disso, as etapas básicas da instalação do Pig foram ilustradas..
7. Uma visão geral do Apache Spark
Duração – 1:06:14 hora
Resumo: Este tutorial justifica apropriadamente seu título, ensinando sobre a tecnologia Spark e como ela pode ajudar a moldar o mundo.. O guia começa com uma rápida revisão do mapreduce seguido por faísca e a vantagem de usar esta tecnologia. O palestrante explicou maravilhosamente esses conceitos.
8. Introdução ao Hive e HiveQL
Duração – 1:06:19 hora
Resumo: O Hive é construído sobre o hadoop para fornecer gerenciamento, consultas e análise de dados. Este tutorial analisa a arquitetura da colmeia, operações de colmeia e outras funções associadas. Este tutorial não só enriquece você com conhecimento teórico, mas também mostra o aspecto prático e demonstra o mesmo no terminal.
9. Introdução ao NoSQL
Duração – 54:51 minutos
Resumo: Este é um dos melhores vídeos que encontrei em bancos de dados NoSQL. Você encontrará uma introdução aos bancos de dados NoSQL, juntamente com todos os outros conhecimentos essenciais deste conceito que você deve ter. Este tutorial cobre o aplicativo, as vantagens, as desvantagens, compatibilidade, o uso, os recursos e outros recursos essenciais do NoSQL. Vou recomendar este vídeo a todos.
10. Tutorial do MongoDB para iniciantes
Duração – 4:34:47 hora
Resumo: Se em algum momento você desejou aprender MongoDB, aqui você tem o recurso completo. Este tutorial cobre de forma abrangente todos os aspectos dos bancos de dados MongoDB e NoSQL. Apesar disto, parece ser bastante longo (> 4 horas), você pode ver esses tutoriais nos intervalos. Um conhecimento prévio de Javascript seria vantajoso para aprender MongoDB por meio deste tutorial. Este tutorial começa com uma introdução aos bancos de dados NoSQL seguida por uma explicação do mongodb, como executar consultas mongodb, node.js, processamento de dados avançado e método para aprender mongodb no ubuntu na nuvem.
Recurso alternativo: Curso de MongoDB sobre Udacity
Notas finais
Se você assistiu aos vídeos listados acima, você já estará equipado com itens essenciais de Big Data. Neste post, Apresentei os vídeos e palestras TED mais úteis do YouTube que encontrei na internet. Os vídeos listados têm como objetivo desenvolver seus fundamentos de Big Data e facilitar seu caminho de aprendizagem.
Se você deseja obter o máximo de benefícios desses vídeos, Eu insistiria em tomar notas e sujar a mão enquanto assistia a esses vídeos. Caso eu tenha perdido um vídeo importante, sinta-se à vontade para mencioná-lo na seção de comentários abaixo.
