Entropia, Informação e Qualidade: De Um Perceptron para Avaliar Similaridade entre Strings até Um Modelo de Campos Conservativos

Informação, enquanto um objeto concreto das ciências exatas e da natureza, tem o trabalho de Claude Shannon, A Mathematical Theory of Communication, como referencial teórico basilar. Essa noção de informação nasceu com uma irmã antípoda: a incerteza - chamada de entropia em razão de sua semelhança formal com a entropia na estatística mecânica. Neste trabalho, utiliza-se medidas de entropia para compor um processo de comparação entre palavras usando um ínico neurônio perceptron como unidade de decisão (um processo de natureza qualitativa modelado quantitativamente). Para produzir a entropia fornecida ao perceptron, o conceito de mitos é desenvolvido - permitindo a contagem de variações de histórias ficcionais e etiológicas sobre diferenças ou similaridades entre as palavras comparadas. Como resultado final, propõe-se a utilização de conceitos clássicos vetoriais - em especial o cálculo de distâncias e de cossenos entre vetores - para comparação funções de probabilidade de uma mesma família.