O evento foi MUITO superior ao que esperava, a estrutura do evento foi impecável. As salas comportaram todos os participantes, workshops e palestras relevantes, interação com os patrocinadores ocorreu naturalmente por serem patrocinadores com importância pro evento e pra nós, participantes. No fim do primeiro dia tivemos um momento pra fazer network (com cerveja na faixa!) no hotel mesmo, e foi interessante conversar com alguns cientistas de dados aqui dos Estados Unidos.

Fiz algumas anotações das palestras/workshops que achei mais interessantes durante o evento, veja abaixo:

Dia 1 – Sábado

Keynote

Brian Granger – Criador do IPython e Project Jupyter

O Jupyter é um compilador/interpretador online para Python (e mais 40 outras linguagens) que permite trabalhar em soluções narrativas com outros profissionais. Parecido com o Knirt (para R), mas ao invés de só renderizar na tela no formato escolhido, ele permite que o script que é escrito seja processador pelo server através do navegador. Jupyter é uma plataforma aberta, desenvolvida pela comunidade e com um time de estrelas por trás, a facilidade do crescimento se dá pelo uso do GitHub como repositório. Empresas como Microsoft, Google, IBM e varias outras estão desenvolvendo soluções para o Jupyter Notebook ou Kernel. JupyterHub permite empresas usar o Jupyter em suas organizações (pelo que entendi, como um repositório privado do github). Num futuro próximo pode ser que mude o nome para Jupyter Workbench, e também estão trabalhando para entregar Real-Time Colaboration, e na tentativa de permitir em uma única janela do navegador ter um console, graficos interativos, e várias outras coisas de UX para os desenvolvedores ficarem só em uma janela e aumentar a produtividade.

O Brian deu um exemplo de dois jornalistas que escrevem sobre ciência no BuzzFeed, que entregam seus experimentos no github e permite que nós possamos reproduzir as pesquisas. Caso queiram ver, este é o link: https://github.com/BuzzFeedNews/everything

Palestras

Claudia Perlich – Big Data matou o click | heróis de métricas não celebrados

40% dos clicks são acidentais ou fraudes! Fraudes são fáceis de gerar através de robos (bots) em eventos de conversão, principalmente nos retargets para aumentar o CTR e o contratante pagar mais pelo serviço. O comportamento de robos são mais fáceis de prever do que humanos, nosso comportamento é quase impossível de prever. Em uma análise focada, quando se analisa um dataset atrás de padrão de comportamento, deve-se conhecer o que procura para eliminar problemas gerados por randomização. Quando se tem uma precisão/acurácia de aproximadamente 50%, isso significa uma randomização. O objetivo é conseguir um valor de limiar acima de 70 ou 80%. Uma técnica que pode ajudar, é coletar para análise alguns registros randomicamente dos 1 ou 2% mais importantes do universo que tem, e analisar o comportamento desta amostra. A chance desta técnica apresentar um padrão de comportamento diferente do comportamento geral é muito grande, e diversos estudos mostram que este comportamento pode ser mais próximo do real do que se imagina.

Richard Socher, PhD – Metamind.io – Deep Learning for Enterprise

Esta foi a palestra mais foda e que eu mais me impressionei. Richard apresentou diversos problemas do mundo e as soluções que sua empresa criou utilizando Deep Learning. Esta palestra me fez mudar a agenda e participar de um Workshop de Deep Learning no segundo dia do evento ao invés de assistir às palestras que tinha me planejado. Não sei como descrever as técnicas que ele apresentou, e não teve quase nenhuma teoria, só que o reconhecimento de voz e de imagem são complexos para se executar com algoritmos convencionais de Data Science. O uso de técnicas de Deep Learning ajuda muito nestas tarefas. Processar isso é muito custos e usa-se o CPU pra procesamento de texto e a GPU pra processar imagens.

Workshop

John Mount / Nina Zumel – Preparando dados para análise usando R: Técnicas avançadas através das básicas

Workshop de 2 horas com diversas técnicas para se trabalhar com dados, limpar e processar as análises. Foi disponibilizado um repositório no github pra gente configurar a máquina antes e acompanhar o workshop com tudo o que foi discutido (repo garfado): https://github.com/diegonogare/PreparingDataWorkshop

Dia 2 – Domingo

Workshop

Markus Beissinger – Intro to Deep Learning with Theano and OpenDeep

Deep Learning segmenta a análise em hierarquia, encontrando item a item treinado separadamente para encontrar o objeto que quer depois. Por exemplo, imagine o reconhecimento de um rosto: em Deep Learning a tecnica começa com uma camada reconhecimento elementos separados, como nariz, orelha, olho, boca, etc; na sequencia a proxima camada reconhece um pouco mais de coisas, como as posições de olhos próximos ao nariz. Boca próximo ao nariz. Orelhas ao lado dos olhos, e assim por diante. Por fim, neste exemplo, ele consegue reconhecer um rosto completo em uma terceira camada de classificação.

O processo interno usa algebra linear, porque tudo dentro de Deep Learning é calculado com matrizes e vetores. Um dos calculos mais básicos ainda é a Regressão Logistica para analisar as probabilidades.

Mesmo a Regressão Logistica sendo a estrutura mais básica, uma das mais usadas é a Rede Neural, que possibilita executar muitas Regressões Logisticas em paralelo e encontrar uma melhor solução para a análise que está fazendo com Deep Learning. Muitas outras técnicas, como Convolutional Nets, por exemplo, devem combinar com as redes neurais artificiais para conseguir fazer o reconhecimento de imagem.

Códigos usados para os exemplos, estão disponíveis nestes dois repositórios garfados https://github.com/diegonogare/odsc e https://github.com/diegonogare/OpenDeep

Fidan Boylu / Muxi Li – How to build and operationalize data science solutions with Cortana Analytics

Fidan apresentou um overview interessante de AzureML utilizando alguns modelos nativos de algoritmos existentes dentro do AzureML, avançou expandindo as possibilidades utilizando R. Um tour guiado para analisar dados que fizemos upload, com certeza todos conseguiram acompanhar. Na sequência Mixu mostrou integração entre AzureML e scripts em Python, analisando tudo nos Workbooks do Jupyter que possui integração com o AzureML. Esta segunda parte eu não acompanhei, e pelo visto, a galera que estava acompanhando também se perdeu.

PS. Não falaram nada de Cortana Analytics!

Dá pra acompanhar depois, passo a passo, com os dados que foram disponibilizados neste repositório garfado: https://github.com/diegonogare/Azure-Machine-Learning-Lab

Ted Kwartler – Introduction to text mining using R

Existem muitos problemas na interpretação de texto: O dado não é estruturado, expressões são individualistas, implicações culturais, e vários outros fatores. É possível trabalhar com Text Mining de duas formas, uma é usando validação sintatica e outra é usando “bag of words”. O foco desta sessão é trabalhar com o bag of words. A análise de sentimentos é sempre lembrada quando se fala de mineração de texto, o Ted ainda está estudando esta disciplina e mostrou algumas coisas utilizando técnicas de Score baseada em dicionários. Em resumo, várias técnicas foram apresentadas, e podem ser acompanhadas no repositório do Github que garfei, não do github do Ted, e sim de uma pasta no Amazon Drive dele: https://github.com/diegonogare/DataScience/tree/master/Text%20Mining

O post Open Data Science Conference – São Francisco/2015 apareceu primeiro em Diego Nogare.

Fala galera, estamos a praticamente 1 semana do SQL PASS Summit 2015, que acontecerá em Seattle dos dias 27 a 30/Outubro. Neste ano, como de praxe, muitas coisas bacanas (e também lançamentos) estão por vir. Eu foquei minhas sessões para ver as coisas de Business Intelligence, Data Science e Big Data… Dê uma olhada no que vou acompanhar lá:

28 de outubro de 2015

10:15 – 11:30 SQL Server 2016 on Flash: Fast Track DW, SOFS, Columnstore, & AlwaysOn

13:30 – 14:45 Integrating SQL Server Analysis Services with Hadoop

15:15 – 16:30 Business Intelligence Updates in SQL Server 2016

16:45 – 18:00 A Concept for Clean Reporting: Information Design Rules for SSRS and R

29 de outubro de 2015

10:45 – 12:00 Data Storytelling with R, Azure Machine Learning, and Power BI

13:30 – 14:45 Cortana Analytics Deep Dive: Information Management

15:15 – 16:30 Advanced Analytics with R in SQL Server 2016

16:45 – 18:00 Deep Dive into Data Preparation, Modeling & Analytics using Power BI Desktop

30 de outubro de 2015

08:00 – 09:15 Cortana Analytics Deep Dive: Perceptual Intelligence

09:30 – 10:45 Using the Cortana Analytics Process for Smart Transportation

11:00 – 12:15 Real-Time Data Integration (in the Cloud or Not)

14:00 – 15:15 Cortana Analytics Deep Dive: Preconfigured Solutions

15:30 – 16:45 Integrating with Power BI Using Developer APIs

Você que também vai ao evento, já montou sua agenda?? Quem sabe a gente se encontra em alguma palestra em comum??

Community Zone

Sem contar as atividades paralelas que tem durante o evento, que integra e proporciona um network fantástico, como por exemplo o Community Zone, onde vamos reunir todos os falantes do idioma português (Brasileiros e Portugueses) por 1 hora (das 11 as 12hs – horário de Seattle!) no dia 28/10 pra trocar experiências e fazer contatos, e claro, ajudar os caras que estão indo a primeira vez ao evento. Inclusive, caso queira ler um pouco sobre “ser calouro” no evento, veja este link: http://www.sqlpass.org/summit/2015/Connect/FirstTimers.aspx

Speaker Idol

Outra forma de interação que temos durante o evento é o Speaker Idol, onde alguns palestrantes se candidatam e fazem uma palestra em inglês. Uma banca examinadora dá feedbacks sobre sua apresentação com o intuito de te ajudar a fazer melhores apresentações. Não são sugestões sobre a parte técnica, e sim sobre a forma de apresentar. Este ano o Luti (blog|twitter) participará, quem puder, compareça à apresentação e dê uma força pro Luti. Veja mais detalhes desta ação no link: http://www.sqlpass.org/summit/2015/Connect/SpeakerIdol.aspx

Kilt Day e Women in Technology

O PASS toma um cuidado muito importante para eliminar qualquer tipo de assédio ou preconceito. Isso é muito importante na nossa área, onde existem muitas diferenças e isso deve ser totalmente irrelevante mediante ao que você entrega. Independente de vc ser homem, mulher, marciano ou lunárico; ser branco, negro, amarelo, azul ou vermelho; ser alto, baixo, mediano. Isso tudo é indiferente quando você faz um trabalho de qualidade. E o PASS incentiva que isso aconteça, tanto que no dia 29/10 acontece o Women in Technology para mostrar projetos importantes capitaneados por mulheres que fazem a diferença. E também, de quebra, é o Kilt Day. Vários participantes vestem seus Kilts e vão pro evento para ajudar, de forma simbólica, a eliminar este preconceito. Sim, eu vou com o meu o/

Expositores

Conhecer os produtos e serviços de vários fornecedores do mundo é interessante. Fazer contato com eles é ainda mais legal. Durante o PASS, a área de expositores pode ser visitada e você pode fazer um network forte com vários fornecedores. Visite e conheça os caras, as vezes você está precisando de um fornecedor e lá tem o que você precisa. Converse, entenda o que ele tem a oferecer, veja se a sua necessidade é coberta pela oferta dele. Aproveite ao máximo!!!

Isso é só um resumo, muito resumido mesmo, do que você pode ter de experiência nestes 3 dias de evento. Nos vemos no PASS, e não se esqueça: Connect, Share and Learn!

O post Conheça algumas atividades do SQL PASS Summit 2015 apareceu primeiro em Diego Nogare.

Fala galera, dia 24 e 25 de Setembro/2015 rolou em São Paulo o Microsoft Insights Powered by TechEd.

Eu tive o prazer de apresentar uma sessão sobre as novidades da área de Business Intelligence no SQL Server 2016. Consegui consolidar muita coisa boa que está vindo nesta versão do produto, mas muitas outras ficaram de fora.

Consegui mostrar de forma fluída o uso de pacotes do Integration Services para trabalhar com Azure Blob Storage e HDInsights. Lí dados de diversas fontes com o PowerBI, montei relatórios para dispositivos móveis usando o Datazen. Mostrei o Polibase, a integração nativa do SQL Server para interagir com o Hadoop através de consultas T-SQL e não somente com consultas HiveQL. Também falamos sobre a integração de JSON e R dentro do SQL Server. Foi bastante proveitoso e a sala estava cheia até o final…

Fiquei muito feliz de ter feito esta apresentação e pelas perguntas e comentários da galera que foi até o Ask the Experts, no final.
Caso alguém queira acompanhar os slides, vejam abaixo:

O post TechEd Brasil 2015 – Novidades do SQL Server 2016 para Business Intelligence apareceu primeiro em Diego Nogare.

Depois de analisar as diversas palestras submetidas, foi difícil definir quais seriam as 7 palestras que entrariam na grade do evento. Bom, pra dar um gostinho do que rolou nesta trilha do evento, vejam as palestras:

10:10 às 11:00 | A “Metamorfose Ambulante” do Postgres – Fábio Telles Rodriguez (twitter|blog)

De “Sistema Gerenciador de Banco de Dados Relacional” até “Plataforma de Persistência Aberta”, ou algo parecido. Acompanhe como as coisas evoluíram de 1970 para cá e fizeram do Postgres uma das mais flexíveis e confiáveis plataformas para persistência de dados, passando pelos bancos “Orientados a Objeto” e pelo NoSQL.

11:10 às 12:00 | O problema não é no banco de dados – Marcos Freccia (twitter|blog)

Nessa sessão junte-se ao MVP em SQL Server Marcos Freccia e vamos debater maneiras de mostrar que o problema não está no banco de dados. Vamos criar baselines e reports utilizando apenas o Database Engine, SSIS e SSRS. Ferramentas essas que você ja paga quando licencia o seu banco de dados.

13:10 às 14:00 | Quer ser um excelente DBA? Pergunte-me como – Vitor Tadeu Fava (twitter|blog)

Nesta seção discutiremos quais as características um excelente administrador de banco de dados necessita no mundo corporativo atual e como adquirir e desenvolver estas habilidades.

14:10 às 15:00 | Novidades do Universo MySQL – Airton Lastori (twitter|blog)

Os engenheiros da Oracle andam ocupados: o MySQL 5.7 já está em estágio de Release Candidate e muitas novidades. Nesta apresentação abordaremos as novidades desta versão e também algumas melhorias do MySQL Cluster, detalhando os novos recursos como: interfaces NoSQL, Memcached API, JSON e HTTP, mais operações online, melhorias de desempenho no InnoDB e Otimizador, replicação multi-source entre outras.

15:40 às 16:30 | Como lidar com dados temporais e intervalos com a linguagem SQL – Mauro Pichiliani (twitter|blog)

A manipulação de dados por meio de intervalos de datas é uma das poucas tarefas na qual a linguagem SQL não é muito útil. O motivo é operações como intersecção , precedência, combinação e operações relacionadas a intervalos de datas requerem a construções de instruções SQL muito complexas e com pouca manutenabilidade. Esta palestra vai apresentar os principais problemas relacionados à pesquisas por intervalos de data e explicar porquê a linguagem SQL não é adequada para lidar com eles. Em seguida a palestra vai se conentrar nas soluções existentes, incluindo as extensões da linguagem SQL para manipulação de data, interfaces para ferramentas OLAP e ferramentas específicas para pesquisas por intervalo.

16:40 às 17:30 | As boas praticas de programação para SQL Server – Marcelo Fernandes (twitter|blog)

Será apresentando as boas praticas de programação de SQL visando o publico de developers, a apresentação seguirá o modelo onde é apresentando um proposta comum de solução e qual seria a maneira mais eficaz e performática para a solução. Será discutidos temas como Índices, Estatísticas, T-SQL, Planos de Execução e inmemory database.

17:40 às 18:30 | Super Hybrid – Murilo Miranda (twitter)

Esta sessão reúne todas as opções existentes, até então, que permitem a integração do SQL Server com o Azure.
Além da teoria, irei abordar e demonstrar esta soluções.

Espero que tenham gostado das palestras do evento, caso queira ver os vídeos, o TDC também oferece as gravações…

Nos vemos novamente em 2016!

O post The Developers Conference 2015 – Trilha de Banco de Dados apareceu primeiro em Diego Nogare.

Bons estudos!

O post Vídeo da minha palestra no CONABI – 1º Congresso Nacional Online de Business Intelligence apareceu primeiro em Diego Nogare.

Se quiserem os slides, segue abaixo:

Bons estudos!

O post SQLSat #284 – Porto Alegre – Conhece o Potencial do SQL Server Analysis Services Tabular Mode? apareceu primeiro em Diego Nogare.

Tive o prazer de palestrar no evento falando sobre BigData, com a palestra Descobrindo BigData com HDInsight.

Para quem quiser ver os slides, segue abaixo:

Qualquer dúvida, fique a vontade para me pingar através da área de contato. Bons estudos!

O post Lançamento do SQL Server 2014 – Descobrindo BigData com HDInsight apareceu primeiro em Diego Nogare.

E você, sabe o que é o SQL Saturday?

SQLSaturday é um evento de capacitação para profissionais de SQL Server, Business Intelligence e aqueles que querem aprender sobre o universo da Plataforma de dados da Microsoft. Este evento será realizado em 27 de setembro de 2014, na UNIP Tatuapé, Rua Antônio Macedo, 505 – Parque São Jorge, Tatuapé – São Paulo – SP, São Paulo, 03087-040, Brasil. A entrada ao evento é gratuita, todos os custos são cobertos por doações e patrocínios. Os lugares são limitados, registre-se para garantir sua vaga, e compartilhe com os outros para que todos possam comparecer.

Para mais informações e registro, acesse: http://www.sqlsaturday.com/325/eventhome.aspx

O SQL Saturday #325 – São Paulo, chega até você através das comunidades:

.

O post SQL Saturday #325 – São Paulo apareceu primeiro em Diego Nogare.

Sim, está faltando a apresentação na trilha de BI. Aconteceram alguns problemas na época e não pude fazer a apresentação.

Para quem não pode acompanhar no dia, segue o vídeo e os slides utilizados para a apresentação.

Vídeo:

Slides:

O post Primeiros passos com BigData–MVPShowCast 2013 apareceu primeiro em Diego Nogare.

Fala galera, estou muito feliz em compartilhar com vocês esta notícia… No final de 2013 recebi o convite para ser Regional Mentor do PASS no Brasil. Então começei a estreitar mais o relacionamento com o Board Global do PASS, para assumir a posição que antes estava com o Luciano [Luti] Moreira (Blog | Twitter). A partir de Janeiro/2014, por um período de 2 anos, assumo esta responsabilidade, junto com o veterano Laerte Junior (Blog | Twitter) de ajudar o desenvolvimento dos capítulos do PASS no Brasil, e também ser uma ponte entre os interessados em participar de comunidades de SQL Server no nosso país e os grupos já existentes.

Ser um Regional Mentor é gratificante demais, principalmente quando olhamos, o que eu acredito ser, “pré-requisitos”. Não diria que são pré-requisitos, diria que são paixões!

> Dedicar-se voluntariamente à comunidade SQL Server e ao PASS, buscando o crescimento de todos envolvidos;

> Entender e acreditar no valor da ajuda altruísta, sem fazer com o intuito de ter algum tipo de retorno;

> Conhecer a missão do PASS, e representar a instituição para os grupos da região que atua. Fazer o caminho inverso também é importante;

> Facilitar o acesso à informação, recursos, eventos, materiais, etc, aos integrantes do PASS independente do chapter (grupo de usuários).

Estes são alguns ítens que acredito serem fundamentais para uma pessoa estar “habilitada” e então ter seu nome especulado pelo Board do PASS, para um dia, assumir a responsabilidade de representá-los como RM.

Acredito que minha missão nestes próximos 2 anos não será fácil, mas conhecendo os Chapter Leaders aqui do Brasil, vejo que meu trabalho será facilitado, e muito. São ótimos profissionais, com bom relacionamento e network na nossa área… Tenho certeza que vamos expandir demais o tamanho da “nossa comunidade”!

Obrigado a todo envolvidos =)

O post SQL PASS Regional Mentor no Brasil apareceu primeiro em Diego Nogare.