Etiqueta: visualeditor |
|||
| Linha 1: | Linha 1: | ||
= Conceito básico: = | = Conceito básico: = | ||
Big-Data nada mais é que um sistema que armazena grandes quantidades de dados que são usados pelo usuário ou por algum outro sistema que tem como objetivo analisar dados e informações para cumprir determinada função. Os big-datas podem conter quantidades absurdamente grandes de dados, como é o caso das grandes empresas que utilizam ou já utilizaram este tipo de sistema, podendo ter uma quantidade avaliada em petabytes, ou seja, 1.000 terabytes de dados. | Big-Data nada mais é que um sistema que armazena grandes quantidades de dados que são usados pelo usuário ou por algum outro sistema que tem como objetivo analisar dados e informações para cumprir determinada função. Os big-datas podem conter quantidades absurdamente grandes de dados, como é o caso das grandes empresas que utilizam ou já utilizaram este tipo de sistema, podendo ter uma quantidade avaliada em petabytes, ou seja, 1.000 terabytes de dados. | ||
| Linha 9: | Linha 5: | ||
= Visão = | = Visão = | ||
[[Arquivo:3V.png|600px]] | [[Arquivo:3V.png|600px]] | ||
Descrição dos 3 V´s em um Big-Data. | Descrição dos 3 V´s em um Big-Data. | ||
| Linha 29: | Linha 22: | ||
= Conexões = | = Conexões = | ||
[[Conceito de Mineração de Dados]] | [[Conceito de Mineração de Dados]] | ||
| Linha 52: | Linha 42: | ||
= Sistemas de Informação = | = Sistemas de Informação = | ||
<br> Os sistemas de informações podem fazer o uso do big-data de diversas maneiras. Uma das formas de uso está como banco de dados para obtenção de dados brutos por um sistema de analise de indivíduos, onde o big-data tem armazenadas diversas informações sobre os indivíduos (como os interesses dos indivíduos em uma rede social, os tipos de posts compartilhados por eles nestas mesmas e em outras redes, rastros de informações deixados por bancos de dados de outros sistemas na internet e diversos outros tipos de dados). | <br> Os sistemas de informações podem fazer o uso do big-data de diversas maneiras. Uma das formas de uso está como banco de dados para obtenção de dados brutos por um sistema de analise de indivíduos, onde o big-data tem armazenadas diversas informações sobre os indivíduos (como os interesses dos indivíduos em uma rede social, os tipos de posts compartilhados por eles nestas mesmas e em outras redes, rastros de informações deixados por bancos de dados de outros sistemas na internet e diversos outros tipos de dados). | ||
| Linha 60: | Linha 49: | ||
= Complementar = | = Complementar = | ||
A tecnologia Big-Data pode ser utilizada de diversas formas diferentes e para atingir diversos objetivos, uma dessas varias maneiras que anda ganhando destaque é o conceito de Big-Data Analytics. Neste tipo de analise de dados, os dados ue se encontram em um Big-Data são pesquisados e relacionados a fundo por um sistema de busca pré-definido. Esta operação normalmente tem como principal resultado o encontro de padrões de dados inseridos, de forma a se ter um padrão situacional diferente para cada operação. Um exemplo disso é o uso de big-datas para encontrar padrões de dados pesquisados e compartilhados por usuários de uma [http://www.sourceinnovation.com.br/wiki/Conceito_de_Redes_Sociais rede social] durante a black friday ou os dias que à antecedem, desta forma o sistema pode gerar as estatísticas, e por meio de um outro sistema de [http://www.sourceinnovation.com.br/wiki/Conceito_de_BI B.I.], é possível de se gerar anúncios específicos para os usuários da rede com base nas estatísticas. Desta forma o Big-Data pode ajudar as empresas em suas vendas e os usuários a encontrarem os produtos que desejam nos preços e definições que desejam. | A tecnologia Big-Data pode ser utilizada de diversas formas diferentes e para atingir diversos objetivos, uma dessas varias maneiras que anda ganhando destaque é o conceito de Big-Data Analytics. Neste tipo de analise de dados, os dados ue se encontram em um Big-Data são pesquisados e relacionados a fundo por um sistema de busca pré-definido. Esta operação normalmente tem como principal resultado o encontro de padrões de dados inseridos, de forma a se ter um padrão situacional diferente para cada operação. Um exemplo disso é o uso de big-datas para encontrar padrões de dados pesquisados e compartilhados por usuários de uma [http://www.sourceinnovation.com.br/wiki/Conceito_de_Redes_Sociais rede social] durante a black friday ou os dias que à antecedem, desta forma o sistema pode gerar as estatísticas, e por meio de um outro sistema de [http://www.sourceinnovation.com.br/wiki/Conceito_de_BI B.I.], é possível de se gerar anúncios específicos para os usuários da rede com base nas estatísticas. Desta forma o Big-Data pode ajudar as empresas em suas vendas e os usuários a encontrarem os produtos que desejam nos preços e definições que desejam. | ||
No entanto apesar de todas as boas caracteristicas de um big-data existe um risco crescente que provoca medo nos usuarios de redes que salvam dados em um big-data. Este risco é a falta de privacidade que um big-data pode trazer. Devido ao fluxo absurdamente grande de dados alguns big-datas possuem a caracteristica de terem em seu estoque os dados de diversos usuarios e pessoas que transitam pela rede ou usam certo serviço. Desta forma o uso indevido destes dados pode gerar diversos problemas com a privacidade e a segurança das informações. Um exemplo disso é o site: tudosobretodos.se, que se envolveu em diversos problemas judiciais devido a exposição de dados pessoais de varias pessoas e teve seu inicio em 2015. | No entanto apesar de todas as boas caracteristicas de um big-data existe um risco crescente que provoca medo nos usuarios de redes que salvam dados em um big-data. Este risco é a falta de privacidade que um big-data pode trazer. Devido ao fluxo absurdamente grande de dados alguns big-datas possuem a caracteristica de terem em seu estoque os dados de diversos usuarios e pessoas que transitam pela rede ou usam certo serviço. Desta forma o uso indevido destes dados pode gerar diversos problemas com a privacidade e a segurança das informações. Um exemplo disso é o site: tudosobretodos.se, que se envolveu em diversos problemas judiciais devido a exposição de dados pessoais de varias pessoas e teve seu inicio em 2015. | ||
= Referências | = Referências bibliográficas = | ||
<br>1 - [http://videolectures.net/eswc2012_grobelnik_big_data/ Grobelnik, Marko. Big Data Tutorial, ESWC 2012 Presentation.] | |||
<br> | |||
1 - [http://videolectures.net/eswc2012_grobelnik_big_data/ Grobelnik, Marko. Big Data Tutorial, ESWC 2012 Presentation.] | |||
2 - [http://www.bigdatabusiness.com.br/tudo-sobre-big-data/ Hekima Soluções em Big-Data.] | 2 - [http://www.bigdatabusiness.com.br/tudo-sobre-big-data/ Hekima Soluções em Big-Data.] | ||
3 - [https://www.slideshare.net/markogrobelnik/big-datatutorial-grobelnikfortunamladenicsydneyiswc2013 Marko Grobelnik, Blaz Fortuna, Dunja Mladenic Jozef Stefan Institute. Big Data Tutorial, Slovenia Sydney, Oct 22nd 2013. ] | 3 - [https://www.slideshare.net/markogrobelnik/big-datatutorial-grobelnikfortunamladenicsydneyiswc2013 Marko Grobelnik, Blaz Fortuna, Dunja Mladenic Jozef Stefan Institute. Big Data Tutorial, Slovenia Sydney, Oct 22nd 2013. ] | ||
Edição das 04h29min de 14 de setembro de 2017
Conceito básico:
Big-Data nada mais é que um sistema que armazena grandes quantidades de dados que são usados pelo usuário ou por algum outro sistema que tem como objetivo analisar dados e informações para cumprir determinada função. Os big-datas podem conter quantidades absurdamente grandes de dados, como é o caso das grandes empresas que utilizam ou já utilizaram este tipo de sistema, podendo ter uma quantidade avaliada em petabytes, ou seja, 1.000 terabytes de dados.
O big-data trabalha sob o conceito dos 3 V´s (Em algumas bibliografias podem ser adicionados mais dois, sendo eles: veracidade e valor), eles são: Volume, Velocidade e Variedade. Os 3 V´s definem como deve ser o objetivo de uso e desenvolvimento do big-data, mostrando de forma sutil quais tipos de dados e informações devem ser alocados em um sistema como este, de forma a facilitar o cruzamento de dados por algum sistema ou o uso dos mesmos para a geração de novas informações e pesquisas.
Visão
Descrição dos 3 V´s em um Big-Data. Fonte: http://videolectures.net (Link na descrição da imagem diretamente para os Slides da Aula) Acessado em: 08/09/2017
Analise das pesquisas sobre Big-Data, Data Mining e Machine Learning do Google Search. Fonte: Google Analytics (Link na descrição da imagem) Acessado em: 08/09/2017
Erro ao criar miniatura: Arquivo não encontrado
Curva de uso e expectativas sobre a tecnologia Big-Data, pesquisa feita em 2012 pela Gartner. Fonte: http://videolectures.net (Link na descrição da imagem diretamente para os Slides da Aula) Acessado em: 08/09/2017
Conexões
Conceito de Mineração de Dados
A mineração de dados é um tema relacionado ao big-data devido a grande quantidade de dados gerada pela prática do Data Mining, desta forma a contribuição dos sistemas de mineração de dados para com o conteúdo e as informações contidas em um big-data é muito grande.
O conceito de Business Intelligence pode estar relacionado com a tecnologia dos big-datas, visto que é possível de se ter analise dos dados contidos no mesmo. Sendo assim sistemas que usam o BI podem usar os dados que estão ligados à um big-data para gerar analises relacionadas ao ramo de business, podendo assim ao final gerar estatísticas e novas informações valiosas para um sistema de BI.
A internet foi o pontapé inicial para o compartilhamento de dados em uma escala global, desta forma contribuindo muito se não totalmente para a construção do conceito de big-data, a inovação e evolução tecnológica gerada pela internet e seus sistemas de integração foram os princípios para o começo da gestão de dados e armazenamento dos mesmos, o que hoje compõe basicamente toda a tecnologia dos big-datas. Sendo assim a facilidade de criação de novos dados trazida pela internet (em Conceito de Redes Sociais, por exemplo) faz com que nos tempos atuais e no futuro seja possível de se pensar e criar sistemas de big-data.
A tecnologia de banco de dados assim como a internet foi uma das tecnologias que evoluiram e criaram o ambiente ideal para o surgimento dos big-datas, afinal de contas todo o dado gerado na internet e na mineração de dados citados acima necessitam de um lugar para serem salvados e utilizados no futuro, sendo este o papel dos grandes bancos de dados.
Sistemas de Informação
Os sistemas de informações podem fazer o uso do big-data de diversas maneiras. Uma das formas de uso está como banco de dados para obtenção de dados brutos por um sistema de analise de indivíduos, onde o big-data tem armazenadas diversas informações sobre os indivíduos (como os interesses dos indivíduos em uma rede social, os tipos de posts compartilhados por eles nestas mesmas e em outras redes, rastros de informações deixados por bancos de dados de outros sistemas na internet e diversos outros tipos de dados).
Desta forma o big-data trabalha como um imenso banco de dados, com diversos tipos de dados diferentes salvos que podem ser usado por diversos sistemas a fim de gerar novos dados, informações e resultados provenientes de uma grande pesquisa envolvendo diversas fontes de dados unificadas em um único banco ou vários bancos interligados em um só.
Complementar
A tecnologia Big-Data pode ser utilizada de diversas formas diferentes e para atingir diversos objetivos, uma dessas varias maneiras que anda ganhando destaque é o conceito de Big-Data Analytics. Neste tipo de analise de dados, os dados ue se encontram em um Big-Data são pesquisados e relacionados a fundo por um sistema de busca pré-definido. Esta operação normalmente tem como principal resultado o encontro de padrões de dados inseridos, de forma a se ter um padrão situacional diferente para cada operação. Um exemplo disso é o uso de big-datas para encontrar padrões de dados pesquisados e compartilhados por usuários de uma rede social durante a black friday ou os dias que à antecedem, desta forma o sistema pode gerar as estatísticas, e por meio de um outro sistema de B.I., é possível de se gerar anúncios específicos para os usuários da rede com base nas estatísticas. Desta forma o Big-Data pode ajudar as empresas em suas vendas e os usuários a encontrarem os produtos que desejam nos preços e definições que desejam.
No entanto apesar de todas as boas caracteristicas de um big-data existe um risco crescente que provoca medo nos usuarios de redes que salvam dados em um big-data. Este risco é a falta de privacidade que um big-data pode trazer. Devido ao fluxo absurdamente grande de dados alguns big-datas possuem a caracteristica de terem em seu estoque os dados de diversos usuarios e pessoas que transitam pela rede ou usam certo serviço. Desta forma o uso indevido destes dados pode gerar diversos problemas com a privacidade e a segurança das informações. Um exemplo disso é o site: tudosobretodos.se, que se envolveu em diversos problemas judiciais devido a exposição de dados pessoais de varias pessoas e teve seu inicio em 2015.
Referências bibliográficas
1 - Grobelnik, Marko. Big Data Tutorial, ESWC 2012 Presentation.