O termo Big Data está sendo cada vez mais usado em quase todos os lugares do planeta – online e offline. E não está relacionado apenas a computadores. Ele vem sob um termo genérico chamado Tecnologia da Informação^{(Information Technology)} , que agora faz parte de quase todas as outras tecnologias e campos de estudos e negócios. Big Data não é grande coisa. O hype em torno dele é um grande negócio para confundi-lo. Este artigo analisa o que é Big Data . Também contém um exemplo de como a NetFlix utilizou seus dados, ou melhor, Big Data , para melhor atender às necessidades de seus clientes.

O que é Big Data

Os dados que estavam nos servidores da sua empresa eram apenas dados até ontem – classificados e arquivados. De repente, a gíria Big Data ficou popular, e agora os dados da sua empresa são Big Data . O termo abrange todos os dados que sua organização armazenou até agora. Inclui dados armazenados em nuvens e até mesmo os URLs que você marcou. Sua empresa pode não ter digitalizado todos os dados. Talvez você ainda não tenha estruturado todos os dados. Mas então, todos os dados digitais, papéis, estruturados e não estruturados com sua empresa agora são Big Data .

Em suma, todos os dados – categorizados ou não – presentes em seus servidores são chamados coletivamente de BIG DATA . Todos esses dados podem ser usados ​​para obter resultados diferentes usando diferentes tipos de análise. Não é necessário que todas as análises utilizem todos os dados. As diferentes análises usam diferentes partes do BIG DATA para produzir os resultados e previsões necessários.

Big Data é essencialmente os dados que você analisa para obter resultados que podem ser usados ​​para previsões e outros usos. Ao usar o termo Big Data , de repente sua empresa ou organização está trabalhando com tecnologia da informação^{(Information)} de nível superior para deduzir diferentes tipos de resultados usando os mesmos dados que você armazenou intencionalmente ou não ao longo dos anos.

Quão grande é o Big Data

Essencialmente, todos os dados combinados são Big Data , mas muitos pesquisadores concordam que Big Data – como tal – não pode ser manipulado usando planilhas normais e ferramentas regulares de gerenciamento de banco de dados. Eles precisam de ferramentas de análise especiais como o Hadoop (estudamos isso em um post separado) para que todos os dados possam ser analisados ​​de uma só vez (podem incluir iterações de análise).

Ao contrário do que foi dito acima, embora não seja um especialista no assunto, diria que dados com qualquer organização – grande ou pequena, organizada ou desorganizada – são Big Data para aquela organização e que a organização pode escolher suas próprias ferramentas para analisar o dados.^{(Contrary to the above, though I am not an expert on the subject, I would say that data with any organization – big or small, organized or unorganized – is Big Data for that organization and that the organization may choose its own tools to analyze the data.)}

Normalmente, para analisar dados, as pessoas costumavam criar diferentes conjuntos de dados com base em um ou mais campos comuns para facilitar a análise. No caso de Big Data , não há necessidade de criar subconjuntos para analisá-lo. Agora temos ferramentas que podem analisar dados, independentemente de quão grandes sejam. Provavelmente, essas próprias ferramentas categorizam os dados mesmo enquanto os analisam.

Acho importante citar duas frases do livro “Big Data” de Jimmy Guterman :

“Big Data: when the size and performance requirements for data management become significant design and decision factors for implementing a data management and analysis system.”

-E-

“For some organizations, facing hundreds of gigabytes of data for the first time may trigger a need to reconsider data management options. For others, it may take tens or hundreds of terabytes before data size becomes a significant consideration.”

Então você vê que tanto o volume quanto a análise são uma parte importante do Big Data .

Leia^(Read) : O que é Mineração de Dados?^{(What is Data Mining?)}

Conceitos de Big Data

Este é outro ponto em que a maioria das pessoas não concorda. Alguns especialistas dizem que os Conceitos de Big Data^{(Big Data Concepts)} são três V's:

1. Volume
2. Velocidade
3. Variedade

Alguns outros adicionam mais alguns Vs ao conceito:

1. Visualização
2. Veracidade (Confiabilidade)
3. Variabilidade e
4. Valor

Abordarei conceitos de Big Data em um artigo separado, pois este post já está ficando grande. Na minha opinião, os três primeiros V's são suficientes para explicar o conceito de Big Data .

Exemplo de Big Data – Como o NetFlix^{(Big Data Example – How NetFlix)} o usou para corrigir seus problemas

Em 2008, houve uma interrupção no NetFlix devido ao qual muitos clientes ficaram no escuro. Embora alguns ainda pudessem acessar os serviços de streaming, a maioria não conseguia. Alguns clientes conseguiram obter seus DVDs alugados, enquanto outros falharam. Uma postagem no blog do Wall Street Journal diz que a Netflix havia acabado de iniciar o streaming sob demanda.

A interrupção fez a gestão pensar sobre os possíveis problemas futuros e, portanto; virou-se para Big Data . Ele analisou áreas de alto tráfego, pontos suscetíveis e taxa de transferência de rede, etc. usando esses dados e trabalhou neles para reduzir o tempo de inatividade se surgir um problema futuro à medida que se tornou global. Aqui está o link^{(the link)} para o Blog do Wall Street Journal^{(Wall Street Journal Blog)} , caso você queira conferir os exemplos de Big Data .

O acima resume o que é Big Data na linguagem de um leigo. Você pode chamá-lo de uma introdução muito básica. Pretendo escrever mais alguns artigos sobre fatores associados como – Conceitos^(Concepts) , Análises^(Analysis) , Ferramentas^(Tools) e usos de Big Data^{(uses of Big Data)} , Big Data 3 V’s , etc. Enquanto isso, se você gostaria de acrescentar algo ao acima, por favor comente e compartilhe conosco.

Leia a seguir^{(Read next)} : O que é Web Scraping ?

What is Big Data - A Simple Explanation with Example

The term Big Data is being increasingly used almost everywhere on the planet – online and offline. And it is not related to computers only. It comes under a blanket term called Information Technology, which is now part of almost all other technologies and fields of studies and businesses. Big Data is not a big deal. The hype surrounding it is a sure pretty big deal to confuse you. This article takes a look at what is Big Data. It also contains an example of how NetFlix used its data, or rather, Big Data, to better serve its clients’ needs.

What is Big Data

The data lying in the servers of your company was just data until yesterday – sorted and filed. Suddenly, the slang Big Data got popular, and now the data in your company is Big Data. The term covers each and every piece of data your organization has stored until now. It includes data stored in clouds and even the URLs that you bookmarked. Your company might not have digitized all the data. You may not have structured all the data already. But then, all the digital, papers, structured and non-structured data with your company is now Big Data.

In short, all the data – whether or not categorized – present in your servers are collectively called BIG DATA. All this data can be used to get different results using different types of analysis. It is not necessary that all analyses use all the data. The different analysis uses different parts of the BIG DATA to produce the results and predictions necessary.

Big Data is essentially the data that you analyze for results that you can use for predictions and other uses. When using the term Big Data, suddenly your company or organization is working with top-level Information technology to deduce different types of results using the same data that you stored intentionally or unintentionally over the years.

How big is Big Data

Essentially, all the data combined is Big Data, but many researchers agree that Big Data – as such – cannot be manipulated using normal spreadsheets and regular tools of database management. They need special analysis tools like Hadoop (we’ll study this in a separate post) so that all the data can be analyzed at one go (may include iterations of analysis).

Contrary to the above, though I am not an expert on the subject, I would say that data with any organization – big or small, organized or unorganized – is Big Data for that organization and that the organization may choose its own tools to analyze the data.

Normally, for analyzing data, people used to create different data sets based on one or more common fields so that analysis becomes easy. In the case of Big Data, there is no need to create subsets for analyzing it. We now have tools that can analyze data irrespective of how huge it is. Probably, these tools themselves categorize the data even as they are analyzing it.

I find it important to mention two sentences from the book “Big Data” by Jimmy Guterman:

“Big Data: when the size and performance requirements for data management become significant design and decision factors for implementing a data management and analysis system.”

-And-

“For some organizations, facing hundreds of gigabytes of data for the first time may trigger a need to reconsider data management options. For others, it may take tens or hundreds of terabytes before data size becomes a significant consideration.”

So you see that both volume and analysis are an important part of Big Data.

Read: What is Data Mining?

Big Data Concepts

This is another point where most people don’t agree. Some experts say that the Big Data Concepts are three V’s:

1. Volume
2. Velocity
3. Variety

Some others add few more V’s to the concept:

1. Visualization
2. Veracity (Reliability)
3. Variability and
4. Value

I will cover concepts of Big Data in a separate article as this post is already getting big. In my opinion, the first three V’s are enough to explain the concept of Big Data.

Big Data Example – How NetFlix used it to fix its problems

Towards 2008, there was an outage at NetFlix due to which many customers were left in the dark. While some could still access the streaming services, most of them could not. Some customers managed to get their rented DVDs whereas others failed. A blog post on the Wall Street Journal says Netflix had just started on-demand streaming.

The outage made the management think about the possible future problems and hence; it turned to Big Data. It analyzed high traffic areas, susceptible points, and network throughput, etc. using that data and worked on it to lower the downtime if a future problem arises as it went global. Here is the link to the Wall Street Journal Blog, if you wish to check out the examples of Big Data.

The above summarizes what is Big Data in a layman’s language. You can call it a very basic introduction. I plan to write a few more articles on associated factors such as – Concepts, Analysis, Tools, and uses of Big Data, Big Data 3 V’s, etc. Meanwhile, if you would like to add anything to the above, please comment and share with us.

Read next: What is Web Scraping?

Related posts

• Big Data Consumption. Quais são os usos do Big Data

• O que é Data Analytics e o que é usado para

• Qual é a diferença entre Data and Information

• Como instalar o Drupal usando WAMP no Windows

• Best Software & Hardware Bitcoin Wallets para Windows, iOS, Android

• Os melhores recursos em LibreOffice Calc

• Como fazer Invitation Card em Windows PC

• SMS Organizer: SMS Application Powered by Machine Learning

• O que é Silly Window Syndrome - Explanation and Prevention

• Microsoft Identity Manager: Recursos, Download

• Automate.io é livre automation tool and IFTTT alternativa

• O que é um Magnet link e como Magnet link s abertos em um navegador

• Traga seu próprio Device (BYOD) Advantages, Best Practices, etc

• Whiteboard Fox é um online whiteboard gratuito que permite real-time sharing

• Como fechar o seu Payoneer Account?

• Como criar auto-assinado SSL Certificates em Windows 10

• E-Waste management, Reciclagem, Alienação, Fatos, Problemas, Soluções

• Convert Magnet ligações para dirigir Download links usando Seedr

• Essa conta não está ligada a nenhum Mixer account

• OpenGL aplicativos não rodam em Miracast wireless exibição no Windows 10