Big Data Na Prática
O que você pensa quando pensa em “big data”?
Para muitos, é um termo nebuloso que invoca imagens de grandes fazendas de servidores que se destacam. Ou talvez você pense em receber algum tipo de anúncio personalizado de um varejista.
Mas o big data é muito mais profundo e amplo do que isso. Acredito que existem 10 áreas principais em que o big data está sendo usado com excelente vantagem na prática - mas, nessas áreas, os dados podem ser usados para praticamente qualquer finalidade.
1. Compreendendo e segmentando clientes
Essa é uma das maiores e mais divulgadas áreas de uso de big data atualmente. Aqui, o big data é usado para entender melhor os clientes e seus comportamentos e preferências. As empresas desejam expandir seus conjuntos de dados tradicionais com dados de mídia social, registros do navegador, análise de texto e dados do sensor para obter uma imagem mais completa de seus clientes. O grande objetivo, em muitos casos, é criar modelos preditivos.
Você deve se lembrar do exemplo da varejista americana Target, que agora é capaz de prever com muita precisão quando um de seus clientes espera um bebê. Usando big data, as empresas de telecomunicações agora podem prever melhor a rotatividade de clientes; O Wal-Mart pode prever quais produtos serão vendidos; e as companhias de seguros de automóveis entendem o quão bem seus clientes realmente dirigem.
As estâncias de esqui estão usando dados para entender e direcionar seus clientes. As etiquetas RFID inseridas nos bilhetes do elevador podem reduzir a fraude e os tempos de espera nos elevadores, além de ajudar as estações de esqui a entender os padrões de tráfego, que elevadores e pistas são mais populares em quais horários do dia e até ajudar a rastrear os movimentos de um indivíduo esquiador se ele se perder.
Imagine ser um esquiador ávido e receber convites personalizados do seu resort favorito quando houver pó fresco em sua corrida favorita ou alertas de texto informando quando as linhas de elevação são mais curtas. Eles também levaram os dados para as pessoas, fornecendo sites e aplicativos que exibem as estatísticas do seu dia, de quantas corridas você slalomed a quantos pés verticais você atravessou, que você pode compartilhar nas mídias sociais ou usar para competir com a família e amigos.
Até as campanhas eleitorais do governo podem ser otimizadas usando a análise de big data. Alguns acreditam que a vitória de Obama após a campanha eleitoral de 2012 foi devido à capacidade superior de sua equipe de usar a análise de big data.
2. Compreendendo e otimizando processos de negócios
O big data também é cada vez mais usado para otimizar processos de negócios. Os varejistas podem otimizar seu estoque com base em previsões geradas a partir de dados de mídia social, tendências de pesquisa na web e previsões do tempo.
Um processo comercial específico que está recebendo muitas análises de big data é a otimização da cadeia de suprimentos ou da rota de entrega. Aqui, o posicionamento geográfico e os sensores de identificação por radiofrequência são usados para rastrear mercadorias ou veículos de entrega e otimizar rotas, integrando dados de tráfego ao vivo etc. Os processos de negócios de RH também estão sendo aprimorados usando a análise de big data.
Isso inclui a otimização da aquisição de talentos - estilo Moneyball -, bem como a medição da cultura da empresa e o envolvimento da equipe usando ferramentas de big data. Por exemplo, uma empresa, a Sociometric Solutions, coloca sensores nos crachás dos funcionários que podem detectar a dinâmica social no local de trabalho. Os sensores relatam como os funcionários se movimentam no local de trabalho, com quem falam e até o tom de voz que usam ao se comunicar.
Um dos clientes da empresa, o Bank of America, notou que seus funcionários de melhor desempenho em call centers eram aqueles que faziam intervalos juntos. Eles instituíram políticas de quebra de grupo e o desempenho melhorou 23%.
Você pode ter visto as etiquetas RFID que podem ser anexadas a itens como telefone, chaves ou óculos, que podem ajudá-lo a localizar essas coisas quando elas se perdem inevitavelmente. Mas suponha que você possa levar essa tecnologia para o próximo nível e criar etiquetas inteligentes que possam se apoiar em praticamente qualquer coisa. Além disso, eles podem contar muito mais do que apenas onde está uma coisa; eles podem dizer a temperatura, o nível de umidade, se está em movimento ou não e muito mais.
De repente, isso desbloqueia todo um novo domínio de “pequenos dados”; se o big data estiver analisando grandes quantidades de informações e analisando-o em busca de padrões, então os pequenos dados tratam da observação dos dados de um produto individual - por exemplo, um contêiner de iogurte em uma remessa - e a capacidade de saber se é provável que ocorra antes de chegar à loja.
Essa parte da Internet das Coisas tem uma promessa incrível de melhorar tudo, desde a logística até a assistência médica, e acredito que ainda estamos prestes a entender o que essa tecnologia incrível pode fazer - como quando a eletricidade era usada apenas para alimentar lâmpadas.
3. Quantificação pessoal e otimização de desempenho
O big data não é apenas para empresas e governos, mas também para todos nós individualmente. Agora podemos nos beneficiar dos dados gerados a partir de dispositivos portáteis, como relógios inteligentes ou pulseiras inteligentes. Tome a banda Up do Jawbone como exemplo: a braçadeira coleta dados sobre nosso consumo de calorias, níveis de atividade e padrões de sono. Embora ofereça aos indivíduos insights ricos, o valor real está na análise dos dados coletivos.
No caso de Jawbone, a empresa agora coleta 60 anos de dados do sono todas as noites. A análise desses volumes de dados trará informações totalmente novas que podem ser retornadas a usuários individuais.
A outra área em que nos beneficiamos da análise de big data é encontrar amor - é isso on-line. A maioria dos sites de namoro online aplica ferramentas e algoritmos de big data para encontrar as correspondências mais adequadas.
4. Melhorando a assistência médica e a saúde pública
O poder computacional da análise de big data nos permite decodificar seqüências de DNA inteiras em minutos e nos permitirá encontrar novas curas e entender e prever melhor os padrões de doenças. Pense no que acontece quando todos os dados individuais de relógios inteligentes e dispositivos portáteis podem ser usados para aplicá-los a milhões de pessoas e suas diversas doenças. Os ensaios clínicos do futuro não serão limitados por amostras pequenas, mas podem incluir todos!
O novo aplicativo de saúde da Apple, chamado ResearchKit, transformou efetivamente seu telefone em um dispositivo de pesquisa biomédica. Os pesquisadores agora podem criar estudos através dos quais coletam dados e informações dos telefones dos usuários para compilar dados para estudos em saúde. Seu telefone pode rastrear quantas etapas você executa em um dia ou solicitar que você responda perguntas sobre como você se sente após a quimioterapia ou como a doença de Parkinson está progredindo. Espera-se que tornar o processo mais fácil e mais automático aumente drasticamente o número de participantes que um estudo pode atrair, bem como a fidelidade dos dados.
As técnicas de big data já estão sendo usadas para monitorar bebês em uma unidade especializada em bebês prematuros e doentes. Ao registrar e analisar todos os batimentos cardíacos e padrões respiratórios de todos os bebês, a unidade conseguiu desenvolver algoritmos que agora podem prever infecções 24 horas antes do aparecimento de sintomas físicos. Dessa forma, a equipe pode intervir cedo e salvar bebês frágeis em um ambiente onde cada hora conta.
Além disso, a análise de big data nos permite monitorar e prever o desenvolvimento de epidemias e surtos de doenças. A integração de dados de registros médicos com a análise de mídia social nos permite monitorar surtos de gripe em tempo real, simplesmente ouvindo o que as pessoas estão dizendo, ou seja, “Sentindo lixo hoje - na cama com um resfriado”.
É claro que, embora muito tenha sido feito no passado sobre a capacidade do Google de prever surtos de gripe com base no tráfego de pesquisa, seu modelo não funcionou em 2014. O próprio Google admite isso apenas porque você pesquisa por “sintomas de gripe”, mas não o faz. significa que você está doente.
5. Melhorando o desempenho esportivo
A maioria dos esportes de elite agora adotou a análise de big data. Temos a ferramenta IBM SlamTracker para torneios de tênis; usamos análises de vídeo que acompanham o desempenho de todos os jogadores em um jogo de futebol ou beisebol, e a tecnologia de sensores em equipamentos esportivos, como bolas de basquete ou tacos de golfe, nos permite obter feedback (via smartphones e servidores na nuvem) sobre o nosso jogo e como melhore. Muitas equipes esportivas de elite também acompanham atletas fora do ambiente esportivo - usando tecnologia inteligente para rastrear nutrição e sono, além de conversas nas mídias sociais para monitorar o bem-estar emocional.
A NFL desenvolveu sua própria plataforma de aplicativos para ajudar todas as 32 equipes a tomar as melhores decisões com base em tudo, desde a condição da grama no campo, o clima, as estatísticas sobre o desempenho de um jogador enquanto estiver na universidade. É tudo em nome da estratégia, bem como a redução de lesões nos jogadores.
Uma das coisas novas muito legais que me deparei é um tapete de ioga inteligente: os sensores embutidos no tapete poderão fornecer feedback sobre suas posturas, pontuar sua prática e até guiá-lo através de uma prática em casa.
6. Melhorando a ciência e a pesquisa
Atualmente, a ciência e a pesquisa estão sendo transformadas pelas novas possibilidades que o big data traz. Tomemos, por exemplo, o CERN, o laboratório de física nuclear com seu Large Hadron Collider, o maior e mais poderoso acelerador de partículas do mundo. Experiências para desvendar os segredos do nosso universo - como ele começou e funciona - geram enormes quantidades de dados.
O data center do CERN possui 65.000 processadores para analisar seus 30 petabytes de dados. No entanto, ele usa os poderes de computação de milhares de computadores distribuídos em 150 data centers em todo o mundo para analisar os dados. Tais poderes de computação podem ser aproveitados para transformar tantas outras áreas da ciência e da pesquisa.
O poder computacional do big data também pode ser aplicado a qualquer conjunto de dados, abrindo novas fontes para os cientistas. Os dados do censo e outros dados coletados pelo governo podem ser mais facilmente acessados e analisados pelos pesquisadores para criar imagens maiores e melhores de nossas ciências sociais e da saúde.
7. Otimizando o desempenho de máquinas e dispositivos
A análise de big data ajuda máquinas e dispositivos a se tornarem mais inteligentes e autônomos. Por exemplo, ferramentas de big data são usadas para operar o carro autônomo do Google. O Toyota Prius está equipado com câmeras, GPS, além de computadores e sensores poderosos para dirigir com segurança na estrada sem a intervenção de seres humanos. Podemos até usar ferramentas de big data para otimizar o desempenho de computadores e data warehouses.
A Xcel Energy iniciou um dos primeiros testes de uma “rede inteligente” em Boulder, Colorado, instalando medidores inteligentes nas casas dos clientes, o que lhes permitiria acessar um site e ver seu uso de energia em tempo real. A rede inteligente também permitiria teoricamente às empresas de energia elétrica prever o uso, a fim de planejar as necessidades futuras de infraestrutura e evitar cenários de interrupção. Na Irlanda, a cadeia de supermercados Tescos faz com que os funcionários de seu armazém usem braçadeiras que rastreiam as mercadorias que eles tiram das prateleiras, distribuem tarefas e até prevê o tempo de conclusão de um trabalho.
8. Melhorar a segurança e a aplicação da lei.
O big data é aplicado fortemente na melhoria da segurança e na aplicação da lei. Tenho certeza de que você está ciente das revelações de que a Agência de Segurança Nacional (NSA) dos EUA usa análises de big data para frustrar planos terroristas (e talvez nos espionar). Outros usam técnicas de big data para detectar e prevenir ataques cibernéticos. As forças policiais usam ferramentas de big data para capturar criminosos e até prever atividades criminosas, e as empresas de cartão de crédito usam big data para detectar transações fraudulentas.
Em fevereiro de 2014, o Departamento de Polícia de Chicago enviou policiais uniformizados para fazer visitas de “notificação personalizada” a indivíduos que eles identificaram com probabilidade de cometer um crime por meio de uma lista gerada por computador. A idéia era impedir o crime, fornecendo a certos indivíduos informações sobre programas de treinamento para o emprego, ou informando sobre o aumento de multas para pessoas com determinadas origens. Mas muitos grupos comunitários choraram e chamaram o perfil de prática.
9. Melhorando e otimizando cidades e países
O big data é usado para melhorar muitos aspectos de nossas cidades e países. Por exemplo, ele permite que as cidades otimizem os fluxos de tráfego com base nas informações de tráfego em tempo real, bem como nas mídias sociais e nos dados meteorológicos. Atualmente, várias cidades estão testando a análise de big data com o objetivo de se transformarem em cidades inteligentes, onde a infraestrutura de transporte e os processos de utilidade pública estão todos unidos. Onde um ônibus espera por um trem atrasado e onde os sinais de trânsito preveem os volumes de tráfego e operam para minimizar congestionamentos.
A cidade de Long Beach, Califórnia, está usando medidores inteligentes de água para detectar a rega ilegal em tempo real e tem sido usada para ajudar alguns proprietários a reduzir o uso de água em até 80%. Isso é vital quando o estado está passando pela pior seca da história registrada e o governador decretou as primeiras restrições hídricas em todo o estado.
Los Angeles usa dados de sensores magnéticos de trânsito e câmeras de trânsito para controlar os semáforos e, portanto, o fluxo (ou congestionamento) do tráfego pela cidade. O sistema computadorizado controla 4.500 sinais de trânsito na cidade e reduziu o congestionamento em cerca de 16%.
Uma startup de tecnologia chamada Veniam está testando uma nova maneira de criar pontos de acesso Wi-Fi móveis por toda a cidade no Porto, Portugal. Mais de 600 ônibus e táxis da cidade foram equipados com transmissores wifi, criando o maior ponto de acesso Wi-Fi gratuito do mundo. A Veniam vende os roteadores e serviços para a cidade, que, por sua vez, fornece o acesso Wi-Fi gratuito aos cidadãos, como um serviço público. Em troca, a cidade obtém uma enorme quantidade de dados - com a ideia de que os dados podem ser usados para compensar o custo do wi-fi em outras áreas. Por exemplo, no Porto, os sensores informam o departamento de gerenciamento de resíduos da cidade quando os lixões estão cheios, para que não percam tempo, horas de trabalho ou abastecem esvaziando contêineres que estão apenas parcialmente cheios.
10. Negociação Financeira
Minha categoria final de aplicação de big data vem do comércio financeiro. O comércio de alta frequência (HFT) é uma área em que o big data é muito utilizado atualmente. Aqui, algoritmos de big data são usados para tomar decisões de negociação. Hoje, a maioria do comércio de ações ocorre agora por meio de algoritmos de dados que levam em conta cada vez mais os sinais das redes de mídia social e sites de notícias para tomar, comprar e vender decisões em segundos.
Os computadores são programados com algoritmos complexos que examinam os mercados em busca de um conjunto de condições personalizáveis e buscam oportunidades de negociação. Os programas podem ser projetados para funcionar sem interação humana ou com interação humana, dependendo das necessidades e desejos do cliente.
Os programas mais sofisticados agora também são projetados para mudar conforme os mercados mudam, em vez de serem codificados.
Para mim, as 10 categorias que descrevi aqui representam as áreas nas quais o big data é mais aplicado. É claro que existem muitas outras aplicações de big data e haverá muitas novas categorias à medida que as ferramentas se tornarem mais difundidas.
Você pode também estar interessado em ler minha coleção de estudos de caso mais recente: Coleção de estudos de caso de Big Data: 7 empresas incríveis que realmente obtêm Big Data, bem como meu livro Big Data: Usando Big Data, Analytics e métricas SMART para tomar melhores decisões e melhorar o desempenho
Author: Bernard Marr