Exemplo Observado
Nesse tópico pretendo relatar algumas observações diárias sobre o projeto.
- Relato: Hoje, 08/09/2013, fui até uma loja do Mc Donald's.
Nunca havia observado mas a frase "Bem vindo ao Mc Donald's" quando vamos ao drive thru, sempre se repete de forma padronizada.
Fiz alguns testes, coloquei o carro a frente da máquina de pedidos e assim que escutei a frase, engatei a ré e depois voltei a frente da máquina. A frase se repetiu. Logo fiz o pedido e fui imediatamente a outro drive thru. Observei o chão, pois na loja anterior não consegui ver nenhum sensor na máquina. Logo subentendi que o sensor fosse iguai aos dos radares.
Assim que observei as faixas no chão minha hipótese se confirmou. Entendi que ali havia alguns cálculos de rotatividade, velocidade, tempo e outras possíveis conclusões.
- Falha: O fato da frase ser padronizada, me levou a entender que se tratava de um sistema. Como pesquisador da área, tentei provar minha suposição. Com os testes feitos, talvez tenha gerado alguns erros de cálculo, pois meu carro passou duas vezes pela faixa do sensor sem mesmo ter passado pela última faixa que se localiza no pagamento ou na retirada da mercadoria. Me leva a entender que ocorreu uma inconsistência dos dados.
- Solução: Caso não houvesse a frase padronizada, ninguém jamais pensaria nessa hipótese e o sistema se tornaria mais eficiente.
https://canary.exosite.com/views/3854857131/0861629998
Notícias Relacionadas
A importância de desenvolver um projeto como esse é evitar que nosso país fique vulnerável ao uso da informação.
Se ainda não começamos a desenvolver tais ferramentas, estamos em desvantagem diante das potências, ou seja, estaremos dentro da "caixa preta" e continuaremos correspondendo aos interesses externos e a ditadura dos dados.
- http://g1.globo.com/mundo/noticia/2013/08/maior-foguete-dos-eua-decola-com-satelite-espiao.html
- http://g1.globo.com/economia/pib-o-que-e/platb/
- http://g1.globo.com/politica/noticia/2013/09/dilma-faz-reuniao-de-emergencia-com-ministros-sobre-espionagem.html
- http://g1.globo.com/politica/noticia/2013/09/documentos-da-nsa-apontam-dilma-rousseff-como-alvo-de-espionagem.html
Obs: Publicar notícias somente do g1, deixa a opinião muito tendenciosa. Mas resolvi pegar links desse site, pois quase todos os internautas brasileiros leem ele diariamente.
Dúvidas
Com a quantidade de detalhamento no sistema, esta sendo difícil arquitetar um diagrama que me esclareça todas as visões do negocio. Porém tenho esclarecido que a camada inicial do sistema é o data warehouse e data mart, como são conectados a usuários, entrada e saída de dados. Na modelagem de qual etapa terei que implementar um ETL, um OLAP e data mining. Meu sistema será abastecido por sensores e como eles validaram os dados inseridos por usuários. Estudei que data warehouse por ser um banco da dados amplo, a melhor forma de pesquisar e agilizar o processo, é a utilização de dados redundantes e desnormalizados. As soluções para desenvolver todas esses diagramas de forma coesa e que garanta resultado. Já que um banco de dados relacional exige que os dados sejam normalizados e sem redundância. Porque que data warehouse exige essas alterações. Nas literaturas disponíveis encontrei que data mart pode estar dentro de um data warehouse que presta um serviço OLAP, dos repositórios. Para esse tipo de negocio decidir usar um HOLAP, pois ocupa pouco espaço e utiliza base OLTP apenas quando usuário pede detalhes.
OLTP - São os servidores de banco de dados utilizados comercialmente, que garantem uma arquitetura eficiente na leitura e gravação constante desde dados otimizados. Porém esse tipo de serviço tem dificuldades em gerar dados consolidados em tempo hábil
http://www.uniriotec.br/~tanaka/SAIN/03-OLAP&ModelagemDimensional.pdf
http://www.learndatamodeling.com/
http://www.impinj.com/RFID_Products/
http://www.youtube.com/watch?v=pJMv15ZL0xk
http://docs.oracle.com/cd/B31080_01/doc/owb.102/b28223/concept_basics.htm#CIHCADEH
Anexos
- Arquivo:Pro hadoop.pdf
- Arquivo:Hadoop the definitive guide 3nd edition.pdf
- Arquivo:Scaling mongodb.pdf
- Arquivo:Ethics of big data.pdf
- Arquivo:Big data now 2012 edition.pdf
- https://www.dropbox.com/sh/7hsgt8n0bvlnham/AABhWn67HKI7DHIvdNtfRonca/2014_2/trabalhos%20siscon%20robo2014_1?dl=0#lh:null-IMG_1465.MOV
- https://www.youtube.com/watch?v=SoOs_KYpBfE
- https://www.youtube.com/watch?v=7iIDdvCXIFM
- http://subgroup-ash.blogspot.de/2013/12/a-step-towards-slam-compiling-scavislam.html

- http://hackaday.io/project/2309-sparki-slam
Ferramentas
Windowns
- SSIS (SQL Server Integration Services)
- SSAS (SQL Server Analysis Services)
- SSRS (SQL Server Reporting Services)
Linux
- Oracle Business Intelligence
- Oracle Warehouse Builder
Editar Depois
- Cluster - processamento em paralelo
- Hadoop - Ferramenta open source
- Pentaho - Ferramenta de BI