Durante os anos empresas aparecem e desaparecem com uma certa frequência, e não apenas pequenas tem desaparecido mas com muita frequência as grandes tem perecido. Para onde foram as ideias? O que aconteceu com o mercado? Estamos fazendo o certo? Estamos tentando controlar o incontrolável o imprevisível? Boa parte destas empresas, que se extinguiram, são fundamentadas em profundas e verticalizadas organizações. Como conseguiremos trabalhar no imprevisível enquanto as decisões apenas dessem estas grandes cachoeiras! Informações e ideias fluem pelas redes, em uma rede cada pessoa…Continue Reading “Technology is not enough! Barry O’Reilly”

Todd Lipcon

Porque devemos nos preocupar? Assim começou o keynote do Todd Lipcon… Talvez porque ao longo dos últimos anos, as empresas têm visto uma explosão no volume, variedade e velocidade dos dados que eles têm de lidar todos os dias. Esta tem sido uma bênção e uma maldição. Ao mesmo tempo que a explosão de dados nos permitiu gerar novos tipos de aplicativos e insights altamente inteligentes, os desenvolvedores descobriram que a geração anterior de ferramentas de gerenciamento de dados e frameworks desmoronavam quando tentando trabalhar e…Continue Reading “Hadoop and the Big Data Ecosystem”

magazine luiza qcon

Big data is like teenage sex: everyone talks about it, nobody really knows how to do it, everyone thinks everyone else is doing it, so everyone claims they are doing it.. As maiores empresas estão tentando descobrir e ajudar a empresa a a interseção entre oque as pessoas querem, e o que a empresa quer que as pessoas comprem. Neste contexto o Andre Fatala e o Renato Pedigoni, trazem um case da Magazine Luiza. Para trabalhar com grafos persistentes foi decidido entre dois o neo4j e TITAN e…Continue Reading “Um Sistema de recomendação de produtos baseado em grafos: Titan, Cassandra, Redis e Hadoop em produção”

Fabiane Nardon QCONSP 2014

Hoje sabemos que temos um monte de dados, e dai descobrimos que estes dados não é só uma caixinha mais várias, você aplica processadores estatísticos, algo de inteligência artificial, e no final temos uma saída com os dados que são esperados. Em 2012 as aplicações da Fabiane eram mais ou menos, um acumulo de dados e que no final estes eram processados em batch com uma saída. Parece que durante muito tempo este processamento ou a necessidade em relacioná-los e processá-los era menor. E com…Continue Reading “Data Science em Tempo Real com Storm”

Aaron Myers

Como Impala e a Cloudera tem ajudado a comunidade nos últimos anos, nada melhor que o Aaron para falar sobre isso commiter do Hadoop, vamos ver como funciona HDFS, impala e como o último tem sido alterado para atender novos requisitos. Quando as pessoas falam sobre Hadoop, uma parte esta atrelada ao HDFS (Hadoop Distributed File System). Este é utilizado apenas como um file-system distribuído, ele foi única e exclusivamente para trabalhar com blocos de dados grandes que precisam ser rápidos para uma boa performance…Continue Reading “How Impala has Pushed HDFS in New Ways”

Jarrod Overson

O keynote do Jarrod Overson começou as 10:58h com um pouco do seu background, ele como um gamer não poderia trabalhar em algo diferente. Com 15 anos “remunerados” como assim pode dizer, chegou ao ponto em que sua empresa tem um grande produto hoje o League of Legends, em que jogadores on-line se degladeiam, enquanto a plataforma se torna ENORME!! Imagine agora seu código, ou o código escrito por Jarrod ou sua equipe para aguentar tantos acessos, agora pense em como a empresa cresce para acompanhar o sucesso…Continue Reading “Scaling League of Legends: managing culture, extreme complexity and 30 million active users”

Explorar o universo gera um conjunto enorme de dados. E quando estamos falando sobre os dados que nos deparamos o tempo todo, estamos falando com um conjunto de satélites que estão processando e enviando dados dia e noite durante todo o dia. As tecnologias de troca de dados assim como as suas fontes são cada vez maiores e diversas, a troca de informações por lasers está quase acontecendo, e como podemos olhar estes dados de perto? Quais mistérios existem neles? Precisamos processá-los rapidamente para entendermos…Continue Reading “Building a Data Science Program at NASA/JPL with Visual Analytics”

QCon São Paulo 2014

  Em sua 5a edição a Qcon começa em São Paulo, no WTC, com novo local, nova infra-estrutura, intervalos maiores para network. Este ano as tracks dos patrocinadores estarão separadas e nomeadas como solutions tracks para que haja transparência sobre oque esperar. A QconSP tem 6 tracks, com programação especifica acompanhavel pelo endereço http://qconsp.com/schedule. Big Data, Data Science e o Poder dos Dados Desempenho e Escalabilidade na Prática Front-end universe: JS, HTML5 e novas fronteiras da UX Java na Crista da Onda Arquiteturas que Você Sempre…Continue Reading “QConSP 2014! Começou!”

Falar sobre abstrações nos dias atuais, é refletir sobre a própria natureza da ciência da computação e da engenharia de software. Soluções escaláveis, problemas rotineiros, todos passam em algum momento pela escolha de como serão visto pelos usuários finais, e é comumente aí em que soterramos sob camadas e mais camadas de abstração as nossas soluções. Pensamos na facilidade de entender, de manter, e até de expandir; mas como lidamos com os problemas que existem nas partes que encobrimos com a abstração? Até que ponto…Continue Reading “Neal Ford – Abstraction Distractions”

O Alê começou se apresentando  e se colocando como indigno de ser keynoter deste grande evento, e começando a definir todos os outros que estão envolvidos no crescimento da comunidade. Para ele um não só é eleito um comitê para representar e lutar pelos interesses de todos uma vez que várias vozes ao mesmo tempo estão clamando. O Agile Brazil tem acontecido bem, e assim acontece quando o interesse deste grupo representa os representados! Acontece que em muitos casos e parece que nossos representantes políticos…Continue Reading “O limbo da demanda latente – Alê Gomes”