Agora, na parte 2, aprenderemos como extrair informações do Big Data e as principais ferramentas utilizadas.

Como extrair informações do big data

Para extrair informações do big data são utilizados os chamados Big data analytics, que são softwares poderosos que processam dados transformando-os em informação.

O big data representa uma enorme quantidade de dados e por isso necessita de grande capacidade de processamento computacional.

Dessa maneira, para implementar um projeto com essa tecnologia, as etapas abaixo devem ser seguidas (NeoWay, 2019).

1. Concepção

Antes de tudo, são definidos os objetivos e a estratégia por trás do projeto de análise de dados.

2. Coleta de dados

Em seguida, os dados são coletados de acordo com os critérios definidos na etapa anterior.

3. Pré-processamento

Logo após é feita uma limpeza dos dados. Esta etapa consiste na utilização de métodos estatísticos para encontrar e corrigir discrepâncias e desvios como valores duplicados, nulos ou inconsistentes.

4. Data Mining

Posteriormente, é feito o processamento dos dados. É nesta etapa onde os dados são processados com métodos de Inteligência Artificial para encontrar padrões de acordo com os objetivos traçados para o projeto.

5. Análise de conteúdo

Logo após a mineração dos dados, aplicam-se métodos de análise (como análise descritiva, preditiva e diagnóstica) para embasar a tomada de decisão.

6. Visualização de informações

Os métodos de visualização de dados ajudam a melhorar a compreensão, além de facilitar a interpretação de todos sobre os padrões encontrados ao processar e analisar as informações.

7. Integração de dados

Por fim, é feita a integração dos dados. Essa etapa final representa o amadurecimento da empresa que, ao invés de processar e analisar os dados de maneira pontual, cria processos para que isso seja feito sistematicamente.

Principais ferramentas

1- Import.io

O Import.io oferece um produto SaaS, ou seja, disponibiliza softwares e soluções de tecnologia por meio da internet, como um serviço.

Essa ferramenta permite aos usuários converter a massa de dados de sites em dados estruturados e legíveis, sem a necessidade de codificação.

Ademais, possui uma interface que transforma sites em dados com alguns cliques simples, permitindo que qualquer pessoa obtenha os dados de que precisa.

2- Apache Hadoop

O Apache Hadoop é uma das principais ferramentas de Big Data utilizadas no mercado. Ou seja, é o principal framework utilizado no processamento e armazenamento de grandes conjuntos de dados.

É uma plataforma de software em Java de computação distribuída voltada para clusters e processamento de grandes volumes de dados, com atenção a tolerância a falhas.

A plataforma está disponível nas versões gratuita e paga.

3- Oracle Data Mining

Essa ferramenta apresenta algoritmos de mineração que permitem obter insights, previsões e alavancar investimentos.

Ademais, o ODM também pode criar e aplicar modelos de análise preditiva, identificar padrões de comportamento, oportunidade de vendas e detectar possíveis fraudes e anomalias.

4- Statwing

O Statwing é bastante usado na análise estatística. Seu funcionamento é simples, basta importar uma planilha e os dados contidos nela serão verificados automaticamente.

Dessa maneira, o uso dessa ferramenta permite construir relações entre diferentes dados, fazer análises detalhadas, comparações e descrições dos dados e criar tabelas e gráficos automaticamente.

5- Tableau

A finalidade principal dessa ferramenta é a visualização. Com ela pode-se criar mapas, gráficos, tabelas para facilitar a compreensão das informações obtidas na análise de dados.

Tudo isso é criado de forma rápida e atualizado em tempo real. O Tableau está disponível nas versões gratuitas e pagas com funcionalidades adicionais.

6- Chartio

Essa ferramenta permite a combinação dos dados para a criação de relatórios. Tudo isso feito diretamente no seu navegador.

Além disso, os arquivos podem ser convertidos em formato PDF e enviados por e-mail. Essa ferramenta também está disponível nas versões gratuita e paga.

7- Pentaho

A principal função dessa ferramenta é a integração. Ou seja, ela conecta outras ferramentas como o Tableau (item 5) com as redes sociais da sua empresa.

O Pentaho é gratuito no primeiro mês.

8 – Pesquisas automatizadas

Por fim, as pesquisas automatizadas são utilizadas para a coleta de dados que podem servir de guia na tomada de decisão e estratégias de negócio.

Porém, esse método exige, em muitos casos, a utilização de outras ferramentas, conhecimento em métodos estatísticos, modelos preditivos, programação de algoritmos e outras técnicas.

Na parte 3 iremos conhecer as aplicações do Big Data na engenharia.

The post Big Data: A nova commodity – Parte 2 appeared first on Blog da Engenharia.

Gás Liquefeito de petróleo (GLP)

O GLP, conhecido como gás de cozinha, é uma mistura de gases formada principalmente por butano (C₄H₁₀) e propano (C₃H₈) que são frações leves obtidos por meio do refino do petróleo.

Ambos são hidrocarbonetos de cadeia curta e na forma gasosa são incolores e inodoros. Assim, por ser um produto inodoro por natureza, um composto a base de enxofre (t-butil mercaptana) é adicionado à mistura para dar cheiro e facilitar a detecção de possíveis vazamentos.

Ou seja, aquele odor que você sente quando há vazamento de gás na cozinha não é o cheiro do gás, é tão somente o cheiro de um composto adicionado ao produto.

O GLP é comercializado na forma líquida sob altas pressões em botijões e cilindros. Quando os gases que compõem o GLP são pressurizados, estes se condensam ocupando menos espaço, facilitando seu transporte e comercialização.

Além disso, o GLP é altamente inflamável e sua combustão é praticamente completa. Isso o torna adequado para o uso como combustível em situações que exijam baixos níveis de poluentes como o uso doméstico.

O GLP é mais denso que o ar. Assim, o aumento da concentração desse gás desloca o ar atmosférico. Isso diminui a quantidade de oxigênio disponível no local podendo levar à asfixia em ambientes fechados.

Os sinais e sintomas da exposição são falta de ar, fadiga, diminuição da visão, alteração do humor, dor de cabeça, confusão, decréscimo da atividade motora, estupor, coma e, em casos extremos, morte.

Gás Natural (GN)

O gás natural é uma mistura de hidrocarbonetos leves, principalmente o metano (CH₄). Esse composto, a temperatura e pressão ambientes, permanece no estado gasoso.

Na natureza, assim como o petróleo, ele é originalmente encontrado em reservatórios de rochas porosas no subsolo (terrestre ou marinho). Frequentemente, encontra-se associado e é produzido junto ao óleo.

Assim como ocorre com o GLP, no gás natural também é adicionado um odorizante para que vazamentos possam ser detectados com facilidade, evitando acidentes.

No Brasil, o transporte do GN é realizado por meio de gasodutos e a comercialização feita por distribuidoras concessionárias. Dessa forma, o GN chega aos consumidores por uma rede canalizada.

Por ser um combustível muito versátil, é bastante utilizado nas indústrias petroquímicas, nas usinas termoelétricas e de cogeração de energia, além de veículos motorizados.

Diferenças entre GN e GLP

Uma das principais diferenças entre GN e GLP está na forma de distribuição. Como dito nos tópicos anteriores, o Gás Natural é disponibilizado por uma rede canalizada. Dessa forma, o usuário recebe mensalmente uma conta de consumo.

Por outro lado, o Gás Liquefeito de Petróleo é comercializado em botijões e cilindros ou através do abastecimento por caminhões de um recipiente fixo no local. Dessa forma, o consumidor o repõe conforme a necessidade.

Assim, pode-se afirmar que o GLP é mais acessível por ter seu transporte através de cilindros, podendo ser levado a qualquer lugar. Em contrapartida, o GN necessita de uma estrutura de rede de distribuição, que a maioria das cidades e bairros não possuem (ainda).

Outra grande diferença é a composição. O GN, formado basicamente por metano (CH₄), é mais leve do que o GLP, formado por propano (C₃H₈) e butano (C₄H₁₀). Ademais, diferentemente do GLP, o GN é mais leve que o ar, o que favorece sua dispersão no ambiente em caso de vazamento.

Quanto a emissão de poluentes são muito parecidos. Ambos têm baixo índice de emissão comparado a outros combustíveis como lenha, carvão, querosene, etc.

Por ser disponibilizado em cilindros que são constantemente reutilizados, o GLP por vezes pode acumular a chamada oleína, uma impureza que normalmente fica no fundo do cilindro mas que pode vir a ser trazida junto com a vaporização.

Dessa forma, é necessário o uso de filtros de linha para evitar que esta oleína afete o funcionamento dos aparelhos. O gás natural, por sua vez, não enfrenta esse problema.

Qual utilizar?

Uma dúvida comum entre os consumidores é referente a diferença do GN e do GLP no funcionamento dos aparelhos a gás em sua residência ou indústria.

O GN e o GLP são gases com características e composições diferentes, e possuem variações em suas propriedades (poder calorífico, pressão de operação, etc). Por isso, os aparelhos são produzidos para funcionar com um gás, ou com o outro.

Toda a estrutura dos equipamentos como bicos injetores, calibração e outras funcionalidades, são apropriadas de acordo com o tipo de gás. Isso promove o funcionamento com eficiência e segurança.

Sempre deve ser observado o tipo de gás marcado na embalagem e no próprio produto, e utilizado somente este gás.

Em caso de necessidade (mudança de imóvel, por exemplo), é possível realizar um processo de conversão de gases no aparelho. No entanto, é um serviço que precisa ser feito por profissionais qualificados e utilizando-se de peças originais do fabricante para substituição.

The post Diferença entre gás natural e GLP appeared first on Blog da Engenharia.