Artigo SQL Magazine 10 - Explorando visualmente informações em grandes bases de dados utilizando a ferramenta FMDB

Explorando visualmente informações em grandes bases de dados utilizando a ferramenta FMDB

Um dos objetivos das organizações que utilizam sistemas computacionais é armazenar os dados coletados para que eles sejam utilizados em seus procedimentos. O problema é que muitas empresas acreditam que apenas armazenar esses dados lhes garante toda a informação necessária. Entretanto, muitos dos dados guardados são sub-utilizados, e na maioria das vezes nunca mais serão acessados.

Como modeladores e gerentes de bases de dados, é importante que nós analisemos esse panorama: esforço humano e gasto em armazenamento para coletar e guardar um volume crescente de dados que na maioria não serão utilizados novamente. O problema não está em guardar esses dados, que de fato ocultam muita informação útil mas sim, em não termos mecanismos apropriados para analisá-los. Daí a necessidade de utilização de técnicas automatizadas, ou ao menos semi-automatizadas que possibilitem recuperar informações relevantes.

Algumas análises podem ser obtidas nos sistemas de gerenciamento de bancos de dados (SGBDs) através de consultas SQL. Um exemplo típico é: “Quais são os produtos vendidos em uma concessionária de veículos que realizaram uma margem de lucro acima de 30%?”.

Por outro lado, se o interesse do gerente da concessionária é saber qual o relacionamento entre as vendas de diferentes produtos, outros tipos de consultas deveriam ser feitas. Exemplificando, constatações do tipo: “Quando o cliente troca o filtro de gasolina, existe uma probabilidade de 80% dele também trocar o filtro de ar”, poderiam ser levantadas se as tabelas de dados fossem exploradas por procedimentos estatísticos de análise. Complicando um pouco mais, uma informação realmente estratégica para a empresa seria descobrir quais são todos os pares de produtos que freqüentemente (mas nem sempre) são comprados juntos, ou melhor, com poucos dias de separação entre uma compra e outra. Veja que é possível existir muitos pares que ocorrem com freqüência sem que seja intuitivo descobri-los. Embora essa informação esteja na base de dados, ela está ocultada pelo grande volume de dados armazenados, e desenvolver um procedimento de análise para identificá-la não é uma tarefa trivial.

Neste contexto, esse artigo apresenta uma ferramenta para exploração visual de dados denominada FMDB (FastMap in Databases).

A Ferramenta FMDB

O FMDB é uma ferramenta para exploração visual de dados que utiliza a técnica FastMap para efetuar o mapeamento entre itens de dados quaisquer (espaciais, categóricos ou mesmo métricos) para um espaço euclidiano (ver nota 1). Para isto, é necessário que haja uma função de distância (ver nota 2) definida sobre esses dados. No entanto, nem todo espaço é euclidiano, o que implica na necessidade de mapeamento. Por exemplo, se você estiver numa cidade em que todas as ruas são quarteirões, a distância mais próxima para ir a algum lugar a partir de onde você está não é um caminho reto, mas a soma de cada trecho caminhado. Outro exemplo é quando uma coordenada não tem valores contínuos, mas discretos, como o cargo de funcionários de uma empresa (são atributos categóricos). 

Nota 1

"