RESUMO SOBRE OS DADOS NA NUVEM
o Big Data migra
para a nuvem
A maioria das empresas está empenhada em coletar e analisar seus dados. Mas como e onde isso acontece?
Antes, as soluções estavam limitadas a bancos de dados exclusivamente implantados localmente. Hoje em dia, as empresas precisam navegar por diversos tipos de tecnologias e implantações. De bancos de dados individuais e produtos do Hadoop a implantações na nuvem, locais e híbridas, o panorama é diverso e muda em ritmo acelerado.
O Resumo sobre os dados na nuvem é um projeto contínuo que tem como objetivo quantificar a evolução desse panorama.
Ele explora as conexões de fontes de dados utilizadas globalmente pelo cliente do Tableau Online. Analisar essas conexões nos dá uma ideia de como e onde as empresas estão analisando seus dados atualmente.
Nossa metodologia
O Resumo sobre os dados na nuvem analisa uma amostra de mais de um milhão conexões de dados anônimas
publicadas no Tableau Online por mais de 4.000 clientes. Como se trata de uma ferramenta hospedada na nuvem, os padrões de uso podem representar uma inclinação geral à nuvem.
Os clientes do Tableau Online atuam em praticamente todos os setores do mercado e vão desde pequenas empresas a grandes corporações. Os dados desse relatório refletem essa variedade, e acreditamos que eles sirvam como um indicador preciso das tendências mais amplas do mercado.
O armazenamento de dados está ultrapassando os conceitos tradicionais de bancos de dados
• Os clientes do Tableau Online utilizam um conjunto bastante variado de fontes de dados em suas análises.
Nossos clientes utilizam mais de 40 tipos de fontes de dados, que variam de bancos de dados proprietários
a ferramentas de código-fonte aberto do Hadoop. Dois terços desses tipos de fontes de dados são implantados com mais frequência na nuvem do que localmente.
O centro de gravidade dos dados está se movendo para a nuvem
• As conexões com dados hospedados na nuvem aumentaram em 28% nos últimos 15 meses. Em janeiro de 2015, as conexões com fontes de dados no Tableau Online dividiam-se equilibradamente entre implantações na nuvem e locais. No primeiro trimestre de 2016, essa porcentagem passou para 70% e 30%, respectivamente.
• As fontes de dados nativas na nuvem, como Amazon Redshift e Google BigQuery, estão ganhando espaço no mercado.
No início de 2014, elas representavam apenas 12% de todas as conexões no Tableau Online. No primeiro trimestre de 2016, elas aumentaram para 28% de todas as conexões.
As tecnologias de dados híbridas continuam sendo essenciais para as operações comerciais
• As fontes de dados híbridas, aquelas que podem ser implementadas localmente ou na nuvem, continuam sendo, de longe, o tipo mais comum de conexão usado pelos clientes do Tableau Online. Durante os últimos dois anos, as fontes de dados híbridas nunca representaram menos de 60% de todas as conexões.
• O centro de gravidade das fontes de dados híbridas também está se aproximando da nuvem. Há 15 meses, os clientes do Tableau Online implantavam fontes de dados híbridas, de forma equilibrada, tanto na nuvem quanto localmente. No primeiro trimestre de 2016, as conexões com fontes de dados híbridas implantadas na nuvem aumentaram para 60%.
Quer saber mais?
Continue lendo para obter uma análise visual dos dados e visite o site do Resumo sobre os dados na nuvem para ler a próxima edição sobre o uso real de análises em plataformas na nuvem, como Amazon Web Services, Microsoft Azure e Google Cloud Platform.
O panorama dos dados
é diverso
CONEXÕES COM FONTES DE DADOS
Os usuários do Tableau Online utilizam mais de 40 tipos de fontes de dados.
Mesmo se excluirmos as fontes estruturadas em arquivos, como as
planilhas do Excel, e aplicativos Web específicos de cada empresa, como o Salesforce e o Google Analytics, ainda temos ecossistemas do Hadoop e 32 tipos distintos de bancos de dados representados. Essa diversidade é um indicador do amplo e variado panorama das ferramentas de gerenciamento de dados disponíveis atualmente.
No futuro, esse panorama crescerá ainda mais. A Gartner afirma que os sistemas de gerenciamento de bancos
de dados operacionais estão passando por “um ressurgimento dinâmico, com novos concorrentes que desafiam líderes estabelecidos.” A Gartner também descobriu que as mudanças súbitas no mercado aceleram a inovação de ferramentas de warehousing desenvolvidas especificamente para a análise de dados.
A preferência dos usuários pela nuvem, no lugar de uma implantação local, varia bastante de acordo com os tipos de fontes de dados.
Dois terços das fontes de dados mostradas acima são implantados com mais frequência na nuvem do que localmente.
No entanto, enquanto alguns data warehouses, como Amazon Redshift e Google BigQuery, são implantados exclusivamente na nuvem, outros, como SQL Server e MySQL, são implantados em ambientes de nuvem e locais.
Qual é a tendência geral das preferências de implantação?
O panorama dos dados é diverso
Armazenar dados na
nuvem está se tornando uma
tendência
As conexões com implantações na nuvem estão crescendo.
As fontes de dados implantadas na nuvem representavam 55% de todas as
conexões publicadas no Tableau Online em janeiro de 2015. No primeiro trimestre de 2016, elas chegaram a 70% de todas as conexões. Como um percentual do total, esse crescimento equivale a um aumento de 28% em apenas 15 meses.
CONEXÕES COM FONTES DE DADOS POR IMPLANTAÇÃO
Armazenar dados na nuvem está se tornando uma tendência
O que está proporcionando o aumento das conexões com fontes de dados na nuvem?
Indiscutivelmente, a nuvem ajuda organizações a reduzir custos e a economizar tempo com o provisionamento e a manutenção de suas infraestruturas, mas três outras tendências estão impulsionando o uso de fontes
de dados na nuvem:
• Muitas das novas empresas já “nascem na nuvem”. Essas organizações, que implantam suas infraestruturas de dados na nuvem desde o início, representam uma pequena, mas crescente, fatia do mercado.
• Novas fontes de dados exigem ambientes extremamente escalonáveis. O principal exemplo é a Internet das Coisas (IoT), em que dados gerados por computador fluem continuamente de dispositivos e sensores. As organizações geralmente usam uma infraestrutura de nuvem escalonável para coletar e armazenar esses dados. A empresa de pesquisa Enterprise Management Associates estima que os registros da IoT representem atualmente 33% dos dados em ambientes de nuvem. Além disso, esses cenários estão se tornando comuns em empresas que utilizam os dados da IoT para informar e aprimorar sistemas empresariais.
• Dispositivos como celulares e tablets são cada vez mais usados para atividades profissionais. A pesquisa de mercado Wisdom of Crowds (A sabedoria das massas), realizada em 2015 pela Dresner Advisory Service, revelou que
aproximadamente 70% dos participantes da pesquisa consideravam o suporte a dispositivos móveis “importante, muito importante ou essencial” para iniciativas de business intelligence. As soluções na nuvem que tornam os dados acessíveis a qualquer momento oferecem a base para o acesso a dados empresariais por meio de dispositivos móveis.
Embora alguns bancos de dados sejam exclusivos da nuvem, outras soluções podem ser implantadas localmente ou na nuvem. O que as empresas preferem?
Soluções exclusivas da nuvem crescem, mas as
soluções
híbridas ainda dominam
Este gráfico analisa as conexões de janeiro de 2014 a março de 2016.
As conexões com fontes de dados nativas na
nuvem aumentaram 125% nos últimos dois anos.
No início de 2014, as fontes de dados disponíveis somente na nuvem
representavam apenas 12% de todas as conexões no Tableau Online. Em março de 2016, elas já representavam 27%. Esse crescimento foi proporcionado pelo uso de data warehouses na nuvem, como Amazon Redshift e Google BigQuery, pelos clientes do Tableau Online.
CONEXÕES COM FONTES DE DADOS POR TIPO
Soluções exclusivas da nuvem crescem, mas as soluções híbridas ainda dominam
Mas o tipo de conexão mais comum continua sendo as fontes de dados “híbridas”.
As fontes de dados híbridas, que podem ser implantadas localmente ou na nuvem, representaram 73% de todas as conexões no início de 2014. Em março de 2016, elas representavam 62%. Apesar do pequeno declínio, a categoria híbrida ainda representa a grande maioria de todas as conexões com bancos de dados publicadas pelos usuários do Tableau Online.
Por que as fontes de dados híbridas são tão dominantes? Muitas organizações fazem análises com um conjunto diverso de fontes de dados, e nem todas elas podem ser implantadas na nuvem. Os requisitos de segurança de alguns tipos de dados, como dados financeiros e do setor de saúde, frequentemente exigem que seu armazenamento seja local.
Outras vezes, migrar as operações para a nuvem é um processo gradual realizado ao longo de meses ou anos. A Gartner prevê que, em 2016, as empresas se concentrarão no fornecimento dessas soluções híbridas, que serão o padrão em 2018.
Na categoria híbrida, quais tecnologias de banco de dados individuais os usuários corporativos escolhem implantar e onde?
As
implantações híbridas
estão se
aproximando
da nuvem O centro de gravidade das fontes de dados híbridas mudou para a nuvem.
Em janeiro de 2015, os clientes do Tableau Online conectavam-se com fontes de dados híbridas, de forma equilibrada, tanto na nuvem quanto localmente.* No primeiro trimestre de 2016, o número de conexões com fontes de dados híbridas implantadas na nuvem apresentou um ligeiro aumento, chegando a 60%.
* O Resumo sobre os dados na nuvem utiliza endereços IP anônimos de conexões com fontes de dados híbridas no Tableau Online para determinar se elas foram implantadas localmente ou na nuvem. Há uma pequena margem de erro associada a essa abordagem, mas ela identifica corretamente a maioria dos tipos de implantação.
CONEXÕES COM FONTES DE DADOS HÍBRIDAS
As implantações híbridas estão se aproximando da nuvem
A Gartner prevê que ambientes de planejamento de recursos empresariais (ERP) que incluem implantações de softwares tanto na nuvem quanto localmente serão comuns em 2018. Como a ascensão dos dados híbridos, a divisão quase
equilibrada das implantações de fontes de dados híbridas na nuvem e localmente indica que o mercado, embora esteja claramente pendendo para a nuvem, ainda está em transição.
Os quatro tipos mais comuns de fontes de dados híbridas utilizadas pelos clientes do Tableau Online são:
Microsoft SQL Server, MySQL, PostgreSQL e Oracle.
OS QUATRO TIPOS MAIS COMUNS DE FONTES DE DADOS HÍBRIDAS POR IMPLANTAÇÃO
Desses quatro tipos, o SQL Server e o Oracle são os que têm mais probabilidade de serem implantados localmente.
A implantação local do SQL Server é, em média, duas vezes mais comum do que na nuvem. As conexões com fontes de dados Oracle locais são quatro vezes mais comuns do que com as na nuvem.
O SQL Server e o Oracle são tecnologias comuns anteriores à era da nuvem. Elas foram implantadas localmente por muito tempo, de modo que uma inclinação para a implantação local não é surpresa. No entanto, à medida que a plataforma na nuvem do Microsoft Azure cresce – o relatório State of the Cloud (O estado da nuvem), da Rightscale, descobriu que o uso do Azure dobrou de 2014 para 2015 –, em breve poderemos ver mais implantações na nuvem de empresas que costumavam usar o SQL Server.
Comparativamente, as conexões com o MySQL e PostgreSQL
implantados na nuvem são muito mais comuns do que conexões com suas implantações locais.
O MySQL implantado na nuvem é, em média, cerca de seis vezes mais comum do que o MySQL implantado localmente.
O PostgreSQL implantado na nuvem é cinco vezes mais comum do que o PostgreSQL implantado localmente.
Como tecnologias de código-fonte aberto, a popularidade do MySQL e do PostgreSQL na nuvem se deve à compatibilidade que eles têm com a maioria das plataformas de nuvem, incluindo Amazon Web Services, Microsoft Azure e Google Cloud Platform. A preferência dos clientes do Tableau Online pelo MySQL e pelo PostgreSQL na nuvem também reforça
as tendências mais generalizadas do setor em adotar tecnologias de banco de dados de código-fonte aberto na nuvem.
As implantações híbridas estão
se aproximando da nuvem
O panorama dos dados
de amanhã
As empresas que desejam coletar seus dados e obter informações
deles têm uma infinidade de opções, desde vários tipos de implantação até produtos de banco de dados específicos. Uma solução local, na nuvem ou híbrida? Redshift ou SQL Server? Escolher a melhor solução pode
ser uma tarefa difícil,
Mas, apesar da grande quantidade de opções disponíveis,
uma pesquisa recente feita pela Enterprise Management Associates (EMA) revelou que as empresas estão menos interessadas nos atributos de tecnologias individuais. Elas estão preocupadas é com o tempo
necessário para obter o valor oferecido por uma determinada solução.
Essa mesma pesquisa revelou que 40% das organizações acreditam que seus sistemas de gerenciamento de dados ajudam a estabelecer uma vantagem competitiva.
RESUMO SOBRE OS DADOS NA NUVEM
O panorama dos dados de amanhã
Os softwares hospedados na nuvem são cada vez mais vistos como a melhor forma de obter essa vantagem competitiva.
Para criar uma estratégia de dados bem-sucedida, as organizações precisam entender e estar atentas às mudanças
que estão acontecendo no mundo do Big Data. Analistas do setor, como a Gartner, sugerem que a maioria dos investimentos em TI em breve será direcionado para “modernizar ou expandir aplicativos empresariais antigos ou substituí-los por
aplicativos baseados na nuvem.” O aumento da popularidade das fontes de dados implantadas na nuvem entre os usuários do Tableau Online indica que a nuvem também está conquistando espaço no mundo do Big Data.
Três tendências em especial estão moldando o futuro dos dados usados para análises e visualização:
1. O centro de gravidade dos dados está se movendo para a nuvem.
A gravidade dos dados indica que os dados estão atraindo serviços e aplicativos. Se os seus dados estão situados na nuvem, você provavelmente prefere que suas ferramentas de dados (do processamento à análise) também sejam executadas na nuvem. O centro de gravidade dos dados agora está na nuvem, e essa tendência só aumentará no futuro.
As organizações que estão construindo ecossistemas de dados devem concentrar seus esforços em fluxos de trabalho na nuvem para garantir que seu sistema esteja preparado para essa mudança na gravidade dos dados.
O panorama dos dados de amanhã
2. Na transição para a nuvem, as tecnologias de dados híbridas são fundamentais para as operações comerciais.
Quando nem todos os dados podem ser migrados para a nuvem ou você desejar fazer a migração gradualmente, as opções de dados híbridas oferecem a flexibilidade necessária para criar uma ponte entre seus ambientes locais e aqueles hospedados na nuvem. Segundo uma previsão recente da Gartner, essas ofertas híbridas se tornarão a regra até 2018. Para as empresas que estão em transição para a nuvem, a abordagem híbrida já é a regra.
3. O armazenamento de dados está se expandindo rapidamente para além dos conceitos tradicionais de bancos de dados e warehouse.
Os dados agora estão em tudo e em todos os lados. Consequentemente, o panorama de armazenamento está se ampliando
para atender aos requisitos de fluxos de dados novos e variáveis. As ferramentas de dados hospedadas na nuvem, em particular, estão impulsionando essa expansão com produtos “como um serviço”, como o Snowflake, e com serviços confiáveis,
como o Amazon Relational Database Service. No futuro, esse panorama crescerá ainda mais. Para tirar proveito da velocidade frenética da inovação, empresas estão criando fluxos de trabalho com foco na flexibilidade e na liberdade de escolha
acima de tudo.
Mantenha-se informado sobre a próxima edição do Resumo sobre os dados na nuvem e visite nosso site para obter mais informações sobre como o Tableau funciona com os bancos de dados analisados nesta pesquisa.
do número de sistemas nos quais eles estão armazenados. Conecte, combine, visualize e compartilhe painéis de dados num piscar de olhos com uma experiência integrada do PC ao iPad. Crie e publique painéis
com atualizações de dados automáticas e compartilhe-os com colegas, parceiros ou clientes, sem precisar ter conhecimentos de programação.
WWW.TABLEAU.COM
