Sem resumo de edição |
|||
| (7 revisões intermediárias pelo mesmo usuário não estão sendo mostradas) | |||
| Linha 1: | Linha 1: | ||
= Conceito básico: = | = Conceito básico: = | ||
Big-Data nada mais é que um sistema de banco de dados que armazena grandes quantidades de dados que são posteriormente usados pelo usuário ou por algum outro sistema que tem como objetivo analisar dados e informações para cumprir determinada função. Os big-datas podem conter quantidades absurdamente grandes de dados, como é o caso das grandes empresas que utilizam ou já utilizaram este tipo de sistema, podendo ter uma quantidade avaliada em petabytes, ou seja, 1.000 terabytes de dados. | |||
Big-Data nada mais é que um sistema que armazena grandes quantidades de dados que são usados pelo usuário ou por algum outro sistema que tem como objetivo analisar dados e informações para cumprir determinada função. Os big-datas podem conter quantidades absurdamente grandes de dados, como é o caso das grandes empresas que utilizam ou já utilizaram este tipo de sistema, podendo ter uma quantidade avaliada em petabytes, ou seja, 1.000 terabytes de dados. | |||
O big-data trabalha sob o conceito dos 3 V´s (Em algumas bibliografias podem ser adicionados mais dois, sendo eles: veracidade e valor), eles são: Volume, Velocidade e Variedade. Os 3 V´s definem como deve ser o objetivo de uso e desenvolvimento do big-data, mostrando de forma sutil quais tipos de dados e informações devem ser alocados em um sistema como este, de forma a facilitar o cruzamento de dados por algum sistema ou o uso dos mesmos para a geração de novas informações e pesquisas. | O big-data trabalha sob o conceito dos 3 V´s (Em algumas bibliografias podem ser adicionados mais dois, sendo eles: veracidade e valor), eles são: Volume, Velocidade e Variedade. Os 3 V´s definem como deve ser o objetivo de uso e desenvolvimento do big-data, mostrando de forma sutil quais tipos de dados e informações devem ser alocados em um sistema como este, de forma a facilitar o cruzamento de dados por algum sistema ou o uso dos mesmos para a geração de novas informações e pesquisas. | ||
= Visão = | = Visão = | ||
[[Arquivo:3V.png|600px]] | [[Arquivo:3V.png|600px]] | ||
Descrição dos 3 V´s em um Big-Data. | Descrição dos 3 V´s em um Big-Data. | ||
| Linha 29: | Linha 22: | ||
= Conexões = | = Conexões = | ||
[[Conceito de Mineração de Dados]] | |||
A mineração de dados é um tema relacionado ao big-data devido a grande quantidade de dados gerada pela prática do Data Mining, desta forma a contribuição dos sistemas de mineração de dados para com o conteúdo e as informações contidas em um big-data é muito grande. | |||
[[Conceito de BI]] | |||
O conceito de Business Intelligence pode estar relacionado com a tecnologia dos big-datas, visto que é possível de se ter analise dos dados contidos no mesmo. Sendo assim sistemas que usam o BI podem usar os dados que estão ligados à um big-data para gerar analises relacionadas ao ramo de business, podendo assim ao final gerar estatísticas e novas informações valiosas para um sistema de BI. | |||
[[Conceito de Internet]] | |||
A internet foi o pontapé inicial para o compartilhamento de dados em uma escala global, desta forma contribuindo muito, se não totalmente para a construção do conceito de big-data. A inovação e a evolução tecnológica gerada pela internet, bem como os sistemas de integração da mesma geraram a necessidade da gestão de dados e armazenamento dos mesmos, o que hoje compõe basicamente toda a tecnologia dos big-datas. Sendo assim a facilidade de criação de novos dados trazida pela internet (em [[Conceito de Redes Sociais]], por exemplo) faz com que, nos tempos atuais e no futuro, seja possível de se pensar e criar sistemas para gerenciamento e novos bancos de dados específicos para big-datas. | |||
[[Tecnologia Banco de Dados]] | |||
A tecnologia de banco de dados, assim como a internet foi uma das tecnologias que evoluíram e criaram o ambiente ideal para o surgimento dos big-datas, afinal de contas todo o dado gerado na internet e na mineração de dados citados acima necessitam de um lugar para serem salvados e utilizados no futuro, sendo este o papel dos grandes bancos de dados. | |||
= Sistemas de Informação = | = Sistemas de Informação = | ||
<br> Os sistemas de informações podem fazer o uso do big-data de diversas maneiras. Uma das formas de uso está como banco de dados para obtenção de dados brutos por um sistema de análises de indivíduos, onde o big-data tem armazenadas diversas informações sobre os mesmos (como os interesses destes em uma rede social, os tipos de posts compartilhados por eles nestas mesmas e em outras redes, rastros de informações deixados por bancos de dados de outros sistemas na internet e diversos outros tipos de dados). | |||
Desta forma o big-data trabalha como um imenso banco de dados, com diversos tipos de dados diferentes salvos que podem ser usados por diversos sistemas a fim de gerar novos dados, informações e resultados provenientes de uma grande pesquisa envolvendo diversas fontes de dados unificadas em um único banco ou vários bancos interligados em um só. | |||
---- | = Complementar = | ||
A tecnologia Big-Data pode ser utilizada de diversas formas (remoção do diferentes, evitando redundância) e para atingir diversos objetivos, uma dessas várias maneiras, que anda ganhando destaque, é o conceito de Big-Data Analytics. Neste tipo de análise de dados, os dados que se encontram em um Big-Data são pesquisados e relacionados a fundo por um sistema de busca pré-definido. Esta operação normalmente tem como principal resultado o encontro de padrões de dados inseridos, de forma a se ter um padrão situacional diferente para cada operação. Um exemplo disso é o uso de big-datas para encontrar padrões de dados pesquisados e compartilhados por usuários de uma rede social durante a black friday ou os dias que à antecedem, desta forma, o sistema pode gerar as estatísticas, e, por meio de um outro sistema de B.I., é possível gerar anúncios específicos para os usuários da rede com base nas estatísticas. Desta forma, o Big-Data pode ajudar as empresas em suas vendas e os usuários a encontrarem os produtos que desejam nos preços e definições que desejam. | |||
No entanto, apesar de todas as boas características de um big-data, existe um risco crescente que tem provocado medo nos usuários de redes que salvam dados em um big-data. Este risco é a falta de privacidade que um big-data pode trazer. Devido ao fluxo absurdamente grande de dados, alguns big-datas possuem a característica de terem em seu estoque os dados de diversos usuários e pessoas que transitam pela rede ou usam certo serviço. Desta forma, o uso indevido destes dados pode gerar diversos problemas relativos à privacidade e à segurança das informações. Um exemplo disso é o site: tudosobretodos.se, que se envolveu em diversos problemas judiciais devido a exposição de dados pessoais de várias pessoas e teve seu início em 2015. | |||
= | = Referências bibliográficas = | ||
<br> | <br> | ||
1 - BIG DATA TUTORIAL. Disponível em: <http://videolectures.net/eswc2012_grobelnik_big_data/>. Acesso em: 08 de Setembro de 2017. | |||
2 - TUDO SOBRE BIG-DATA. Disponível em: <http://www.bigdatabusiness.com.br/tudo-sobre-big-data/>. Acesso em: 08 de Setembro de 2017. | |||
3 - BIG DATA TUTORIAL (SLIDES COMPLETOS). Disponível em: <http://videolectures.net/eswc2012_grobelnik_big_data/>. Acesso em: 08 de Setembro de 2017. | |||
< | |||
Edição atual tal como às 04h54min de 22 de setembro de 2017
Conceito básico:
Big-Data nada mais é que um sistema de banco de dados que armazena grandes quantidades de dados que são posteriormente usados pelo usuário ou por algum outro sistema que tem como objetivo analisar dados e informações para cumprir determinada função. Os big-datas podem conter quantidades absurdamente grandes de dados, como é o caso das grandes empresas que utilizam ou já utilizaram este tipo de sistema, podendo ter uma quantidade avaliada em petabytes, ou seja, 1.000 terabytes de dados.
O big-data trabalha sob o conceito dos 3 V´s (Em algumas bibliografias podem ser adicionados mais dois, sendo eles: veracidade e valor), eles são: Volume, Velocidade e Variedade. Os 3 V´s definem como deve ser o objetivo de uso e desenvolvimento do big-data, mostrando de forma sutil quais tipos de dados e informações devem ser alocados em um sistema como este, de forma a facilitar o cruzamento de dados por algum sistema ou o uso dos mesmos para a geração de novas informações e pesquisas.
Visão
Descrição dos 3 V´s em um Big-Data. Fonte: http://videolectures.net (Link na descrição da imagem diretamente para os Slides da Aula) Acessado em: 08/09/2017
Analise das pesquisas sobre Big-Data, Data Mining e Machine Learning do Google Search. Fonte: Google Analytics (Link na descrição da imagem) Acessado em: 08/09/2017
Erro ao criar miniatura: Arquivo não encontrado
Curva de uso e expectativas sobre a tecnologia Big-Data, pesquisa feita em 2012 pela Gartner. Fonte: http://videolectures.net (Link na descrição da imagem diretamente para os Slides da Aula) Acessado em: 08/09/2017
Conexões
Conceito de Mineração de Dados
A mineração de dados é um tema relacionado ao big-data devido a grande quantidade de dados gerada pela prática do Data Mining, desta forma a contribuição dos sistemas de mineração de dados para com o conteúdo e as informações contidas em um big-data é muito grande.
O conceito de Business Intelligence pode estar relacionado com a tecnologia dos big-datas, visto que é possível de se ter analise dos dados contidos no mesmo. Sendo assim sistemas que usam o BI podem usar os dados que estão ligados à um big-data para gerar analises relacionadas ao ramo de business, podendo assim ao final gerar estatísticas e novas informações valiosas para um sistema de BI.
A internet foi o pontapé inicial para o compartilhamento de dados em uma escala global, desta forma contribuindo muito, se não totalmente para a construção do conceito de big-data. A inovação e a evolução tecnológica gerada pela internet, bem como os sistemas de integração da mesma geraram a necessidade da gestão de dados e armazenamento dos mesmos, o que hoje compõe basicamente toda a tecnologia dos big-datas. Sendo assim a facilidade de criação de novos dados trazida pela internet (em Conceito de Redes Sociais, por exemplo) faz com que, nos tempos atuais e no futuro, seja possível de se pensar e criar sistemas para gerenciamento e novos bancos de dados específicos para big-datas.
A tecnologia de banco de dados, assim como a internet foi uma das tecnologias que evoluíram e criaram o ambiente ideal para o surgimento dos big-datas, afinal de contas todo o dado gerado na internet e na mineração de dados citados acima necessitam de um lugar para serem salvados e utilizados no futuro, sendo este o papel dos grandes bancos de dados.
Sistemas de Informação
Os sistemas de informações podem fazer o uso do big-data de diversas maneiras. Uma das formas de uso está como banco de dados para obtenção de dados brutos por um sistema de análises de indivíduos, onde o big-data tem armazenadas diversas informações sobre os mesmos (como os interesses destes em uma rede social, os tipos de posts compartilhados por eles nestas mesmas e em outras redes, rastros de informações deixados por bancos de dados de outros sistemas na internet e diversos outros tipos de dados).
Desta forma o big-data trabalha como um imenso banco de dados, com diversos tipos de dados diferentes salvos que podem ser usados por diversos sistemas a fim de gerar novos dados, informações e resultados provenientes de uma grande pesquisa envolvendo diversas fontes de dados unificadas em um único banco ou vários bancos interligados em um só.
Complementar
A tecnologia Big-Data pode ser utilizada de diversas formas (remoção do diferentes, evitando redundância) e para atingir diversos objetivos, uma dessas várias maneiras, que anda ganhando destaque, é o conceito de Big-Data Analytics. Neste tipo de análise de dados, os dados que se encontram em um Big-Data são pesquisados e relacionados a fundo por um sistema de busca pré-definido. Esta operação normalmente tem como principal resultado o encontro de padrões de dados inseridos, de forma a se ter um padrão situacional diferente para cada operação. Um exemplo disso é o uso de big-datas para encontrar padrões de dados pesquisados e compartilhados por usuários de uma rede social durante a black friday ou os dias que à antecedem, desta forma, o sistema pode gerar as estatísticas, e, por meio de um outro sistema de B.I., é possível gerar anúncios específicos para os usuários da rede com base nas estatísticas. Desta forma, o Big-Data pode ajudar as empresas em suas vendas e os usuários a encontrarem os produtos que desejam nos preços e definições que desejam.
No entanto, apesar de todas as boas características de um big-data, existe um risco crescente que tem provocado medo nos usuários de redes que salvam dados em um big-data. Este risco é a falta de privacidade que um big-data pode trazer. Devido ao fluxo absurdamente grande de dados, alguns big-datas possuem a característica de terem em seu estoque os dados de diversos usuários e pessoas que transitam pela rede ou usam certo serviço. Desta forma, o uso indevido destes dados pode gerar diversos problemas relativos à privacidade e à segurança das informações. Um exemplo disso é o site: tudosobretodos.se, que se envolveu em diversos problemas judiciais devido a exposição de dados pessoais de várias pessoas e teve seu início em 2015.
Referências bibliográficas
1 - BIG DATA TUTORIAL. Disponível em: <http://videolectures.net/eswc2012_grobelnik_big_data/>. Acesso em: 08 de Setembro de 2017.
2 - TUDO SOBRE BIG-DATA. Disponível em: <http://www.bigdatabusiness.com.br/tudo-sobre-big-data/>. Acesso em: 08 de Setembro de 2017.
3 - BIG DATA TUTORIAL (SLIDES COMPLETOS). Disponível em: <http://videolectures.net/eswc2012_grobelnik_big_data/>. Acesso em: 08 de Setembro de 2017.