Fala galera, dia 24 e 25 de Setembro/2015 rolou em São Paulo o Microsoft Insights Powered by TechEd.

Eu tive o prazer de apresentar uma sessão sobre as novidades da área de Business Intelligence no SQL Server 2016. Consegui consolidar muita coisa boa que está vindo nesta versão do produto, mas muitas outras ficaram de fora.

Consegui mostrar de forma fluída o uso de pacotes do Integration Services para trabalhar com Azure Blob Storage e HDInsights. Lí dados de diversas fontes com o PowerBI, montei relatórios para dispositivos móveis usando o Datazen. Mostrei o Polibase, a integração nativa do SQL Server para interagir com o Hadoop através de consultas T-SQL e não somente com consultas HiveQL. Também falamos sobre a integração de JSON e R dentro do SQL Server. Foi bastante proveitoso e a sala estava cheia até o final…

Fiquei muito feliz de ter feito esta apresentação e pelas perguntas e comentários da galera que foi até o Ask the Experts, no final.
Caso alguém queira acompanhar os slides, vejam abaixo:

O post TechEd Brasil 2015 – Novidades do SQL Server 2016 para Business Intelligence apareceu primeiro em Diego Nogare.

Nesta apresentação mostrei como criar e iniciar projetos de Big Data com a plataforma Azure da Microsoft, através do HDInsight. Falamos sobre o conceito, algumas áreas de aplicação e por fim mostramos como processar uma pequena quantidade de dados com o Hadoop e Hive.

Apresentação

Vídeo

Bons estudos!

O post Entendendo BigData Através da Plataforma Microsoft apareceu primeiro em Diego Nogare.

Fala galera, neste ano do MVP Showcast, que acontecerá entre 15/Setembro e 9/Outubro, fui convidado para apresentar duas sessões sobre BigData. Uma na trilha de Plataforma de Dados, BI & BigData e outra na de Azure & BigData. Veja abaixo a descrição de cada uma.

A primeira é dia 06/10 às 20h00 e será sobre O Dia a Dia do Cientista de Dados na trilha de Plataforma de Dados, BI & BigData.

Com o novo buzzword de tecnologia Big Data, surgiu uma nova profissão: a do Cientista de Dados. Nesta palestra, o MVP em SQL Server Diego Nogare apresenta o que o mercado (e os outros profissionais) devem esperar de um Cientista de Dados, e como esta nova profissão pode ajudar sua empresa.

A segunda será dia 09/10 às 12h e será sobre Entendendo Big Data Através da Plataforma Microsoft na trilha de Azure & BigData.

Revele novas informações e tome decisões melhores com o HDInsight do Azure, uma solução de Big Data fornecida pela Apache Hadoop. Navegue nessas informações de todos os tipos de dados para usuários empresariais por meio do Microsoft Excel.

Não deixe de aproveitar todas as 64 palestras gratuitas que serão realizadas neste período. Acesse o site e saiba os títulos, horários e palestrantes: http://mvpshowcast.azurewebsites.net/

O post MVP Showcast 2014 – Minhas duas sessões sobre Big Data apareceu primeiro em Diego Nogare.

Tive o prazer de palestrar no evento falando sobre BigData, com a palestra Descobrindo BigData com HDInsight.

Para quem quiser ver os slides, segue abaixo:

Qualquer dúvida, fique a vontade para me pingar através da área de contato. Bons estudos!

O post Lançamento do SQL Server 2014 – Descobrindo BigData com HDInsight apareceu primeiro em Diego Nogare.

Sim, está faltando a apresentação na trilha de BI. Aconteceram alguns problemas na época e não pude fazer a apresentação.

Para quem não pode acompanhar no dia, segue o vídeo e os slides utilizados para a apresentação.

Vídeo:

Slides:

O post Primeiros passos com BigData–MVPShowCast 2013 apareceu primeiro em Diego Nogare.

A primeira coisa a se fazer é conectar ao Portal do Azure: windows.azure.com e aguardar o carregamento completo das funcionalidades. Dentro de alguns segundo, após tudo carregar no portal, você deve procurar o item HDInsight no menu da esquerda.

Vale lembrar que o HDInsight ainda é Preview, então pode ser que não esteja habilitado na sua conta. Caso isso aconteça, procure um botão na Home do Painel Geral do Azure onde você pode solicitar o período de avaliação do HDInsight. Após a Microsoft liberar a funcionalidade, você pode seguir com a criação do servidor. A liberação pode ser rápida, mas não sei hoje qual o tempo real de espera.

Quando o HDInsight abrir, procure no topo da tela e clique em CREATE AN HDINSIGHT CLUSTER. Vai levantar uma barra do rodapé permitindo que seja criado o serviço, já vem selecionado o HDInsight, mas você pode escolher outro serviço para criar na sua conta…

A configuração é bem intuitiva, permitindo que o ambiente seja configurado com poucos cliques. Preencha os dados como o nome do cluster e aguarde a validação para não haver conflito com outros nomes já criados. Esta senha que for inserida na criação do serviço, vai ser utilizada no futuro para se conectar ao serviço com a conta de ADMIN.

A quantidade de nós no cluster (CLUSTER SIZE) vai impactar diretamente no processamento que você terá no ambiente, quanto maior a máquina, mais processamento ela consegue fazer simultaneamente e aumenta a velocidade de resposta, consequentemente aumenta o custo que você irá pagar no final do mês. Cada nó de cluster que você cria, é um processador SixCore que será provisionado para seu ambiente. No caso de deixar um cluster com 4 nós, no Dashboard de Monitoramento você irá encontrar 24 núcleos (24 core) no serviço.

Por enquanto, para se trabalhar com o HDInsight, é exigido que o Storage Account seja do North Europe, os Storages nos EUA não passaram. Bom, para criar esta conta de Storage no norte europeu, vá até o item acima de HDInsight no menu, encontr o ítem de STORAGE, e clique em QUICK CREATE. Preencha os dados e não se esqueça de selecionar North Europe.

Volte para seu cluster, e, após preencher os dados do HDInsight e clicar no ítem CREATE HDINSIGHT CLUSTER, o processo se inicia e você pode acompanhar o andamento através da barra de evolução no rodapé da página. Para acessar esta barra, clique no ítem que parece um gráfico de barras horizontais no rodapé, do lado direito da página, ao lado do botão de dúvidas (?)

Clicando em DETAILS esta barra é atualizada para o contexto do andamento do serviço que você clicou, no caso, o andamento da criação e configuração do servidor.

Quando o Azure terminar o processo, um botão de OK aparece nesta barra de detalhes.

Quando o processo concluir, o servidor já está disponível para se trabalhar com BigData através do HDInsight. É possível visualizar um Dashboard do Azure clicando no nome que foi dado ao seu cluster. Este painel apresenta alguns dados de utilização do seu servidor. Repare que criando o ambiente com 4 nós no cluster, aparecerão 24 núcleos aqui.

Também é possível interagir através dos botões abaixo, no rodapé, seja o CONNECT e/ou MANAGE CLUSTER.

O botão MANAGE CLUSTER possibilita uma algumas interações através do painel web do Azure, inclusive para rodar códigos em JavaScript e/ou Hive.

Já com o botão CONNECT, o HDInsight lhe possibilita conectar diretamente na Máquina Virtual do serviço, através do Remote Desktop. Possibilitando criar pastas de trabalho dentro do servidor, como se faz naturalmente no Windows. Neste momento você precisa passar o user ADMIN e a senha que você inseriu na hora de criar o cluster, aquela senha segura de 10 dígitos com letras, números e caracter especial.

Simples assim, configuramos um ambiente inicial para se trabalhar com o HDInsight. Vamos, em próximos posts, mostrar como movimentar dados para lá, processar e retornar resultados.

O post Criando seu servidor de HDInsight no Azure apareceu primeiro em Diego Nogare.