A autora original é Christiane Rousseau. A tradução para o Português é de Humberto José Bortolossi.
É muito arriscado ficar alterando números demais em relatórios financeiros se você não conhece matemática. De fato, a maioria dos números que aparecem em declarações financeiras seguem uma regra matemática estranha, denominada de Lei de Benford ou Lei do Primeiro Dígito Significativo. Se alguém se esquecer de seguir essa regra, então os números alterados não irão passar em alguns testes estatísticos e provavelmente eles cairão em uma malha fina. A Lei de Benford afirma que se você coletar números de forma aleatória e calcular as frequências de seus primeiros dígitos significativos, então os números com primeiro digito significativo igual a aparecerão cerca de % das vezes, enquanto que os números com primeiro dígito significativo igual a aparecerão somente % das vezes. Esta regra é observada em muitos outros conjuntos de números, como potências de e os números de Fibonacci.
Por quê?
Existem explicações satisfatórias e iremos compartilhá-las com você.
A Lei de Benford trata da distribuição dos primeiros dígitos significativos de números. O primeiro dígito significativo de um número positivo é o dígito não nulo mais à esquerda em sua representação decimal. Por exemplo, o primeiro dígito significativo de é , o de é e o de é . Uma outra maneira de defini-lo (e que será útil para nossa discussão matemática mais adiante) é escrever cada número real positivo como um número vezes uma potência de :
Nesse contexto, o primeiro dígito significativo de é a parte inteira de , que será denotada por . O número é denominado mantissa de . Afirmamos que se você coletar números de forma aleatória e calcular a frequência do primeiro dígito significativo , então o valor de será dado aproximadamente por . Isto nos dá a seguinte tabela de frequências:
Tabela 1: Frequências da Lei de Benford.
Antes de continuarmos, vamos fazer um breve comentário histórico. O fenômeno foi observado pela primeira vez pelo astrônomo Simon Newcombe (1835-1909), que notou que as primeiras páginas das tabelas de logaritmos correspondentes aos primeiros dígitos significativos pareciam menos numerosas se comparadas com as páginas seguintes. A descoberta de Newcombe foi esquecida e a lei foi redescoberta por Frank Benford (1883-1948) por volta de 1938. Frank Benford coletou dezenas de milhares de números de origens diversas, todos seguindo sua lei. O moderno banco de dados de Simon Plouffe que contém milhões de constantes matemáticas também seguem a Lei de Benford.
Muitos conjuntos de números que não são aleatórios também seguem a Lei de Benford. Este é o caso de populações de países, de suas áreas, de comprimento dos rios, etc. Talvez você esteja ficando cético e queira que eu pare… Em quais unidades estes comprimentos e áreas foram coletados? Os comprimentos estão em milhas ou quilômetros? Isto não importa… Se os comprimentos dos rios em quilômetros seguirem a Lei de Benford, então os comprimentos em milhas também seguirão a Lei de Benford! Uma mudança de unidade corresponde a uma mudança de escala. Como veremos, a Lei de Benford é invariante por mudanças de escala. Mais ainda, ela é a única lei de probabilidade que é invariante por mudanças de escala.
Na introdução desse texto eu havia mencionado que os números de Fibonacci seguem a Lei de Benford. Mas, de um certo modo, a Lei de Benford é subjetiva, uma vez que ela depende da base na qual representamos nossos números. Em alguma base com , os dígitos não nulos são os elemento do conjunto , e a Lei de Benford na base diz que a frequência do primeiro dígito significativo é . Bem, os números de Fibonacci seguem a Lei de Benford em qualquer base A Lei de Benford é invariante por mudanças de bases. E é a única lei de probabilidade não trivial que é invariante por mudanças de bases.
Bem, chegou a hora das explicações. Você terá que lembrar alguns conceitos do seu curso de probabilidade. Mas talvez você prefira comprovar a Lei de Benford por si mesmo antes de começar a ler alguma matemática mais séria.
1. Invariância por mudanças de escala
Vamos considerar uma mudança de escala simples obtida multiplicando-se todos os números de um conjunto por . Se considerarmos os números com primeiro dígito significativo igual a , então eles são mudados para números com primeiro dígito significativo ou igual a ou igual a . É fácil verificar que . De fato,
Analogamente, vale que , etc. Mas como faríamos, por exemplo, no caso uma conversão de milhas para quilômetros, isto é, no caso de multiplicarmos os números por ? Do modo que está enunciada, a Lei de Benford é muito restritiva e precisamos generalizá-la. Qual é a definição do primeiro dígito significativo de um número ser igual a ? Resposta: a mantissa de deve pertencer ao intervalo . Assim, a Lei de Benford é uma distribuição de probabilidade parcial da mantissa. A Lei de Benford Generalizada (a qual, por abuso de linguagem, continuaremos chamando de Lei de Benford) é descrita em termos uma função densidade no intervalo . Quando escolhemos aleatoriamente um número, podemos calcular sua mantissa. Isto nos dá uma variável aleatória que valores em . Dizemos que ela segue a Lei de Benford se sua função densidade é dada por
Se representa a probabilidade que , então isto significa dizer que
Isso é realmente uma generalização da Lei de Benford, pois
O que significa dizer que uma variável aleatória em é invariante por mudanças de escala? Reposta: significa dizer que se é um número real positivo e se consideramos a variável aleatória , então a mantissa da variável aleatória tem a mesma função densidade que . Não é difícil mostrar que este é o caso quando segue a Lei de Benford, mas existem vários casos a considerar dependendo do valor de . Veremos um caso aqui e deixaremos os demais casos para você. Podemos escrever , com a mantissa de . Uma vez que a mantissa de é a mesma de , é suficiente considerar o caso em que . Qual é a ferramenta que mostrará isto? Você deve lembrar do seu curso de probabilidade que a função de distribuição (acumulada) é algumas vezes mais útil do que a função densidade para uma variável aleatória contínua. A função de distribuição (acumulada) de uma variável aleatória é definida por
Se segue a Lei de Benford, então sua função de distribuição é dada por
(1)
Agora devemos mostrar que se segue a Lei de Benford e é a mantissa de para , então a função de distribuição de é dada por (1).
Para esse propósito, precisamos calcular para . Note que é a mantissa de a qual toma valores em . Assim, quando e quando O primeiro caso ocorre quando . Para a mantissa de estar em , a única possibilidade é que . Então, a mantissa de é igual a . Portanto,
como esperado. Os outros casos são justificados de maneira análoga.
A recíproca é mais excitante…
2. A Lei de Benford é a única lei de probabilidade sobre a mantissa que é invariante por mudanças de escala
Esse é um enunciado impressionante! Ainda assim, você verá que sua prova não é muito mais complicada do que o argumento dado anteriormente. Seja um variável aleatória representando a mantissa e tomando valores em . Vamos considerar sua função de distribuição , sob a hipótese que ser invariante por mudanças de escala. Assim, precisamos calcular
A função deve satisfazer as condições e . A dificuldade principal da prova está em interpretar o significado de dizer que é invariante por mudanças de escala. Uma vez que e são os mesmos eventos, temos que
(2)
Como antes, vamos considerar o caso em que de modo que ( depende de ). Assim, para , temos que é igual a sua mantissa. Uma vez que é invariante por mudanças de escala, então a mantissa de tem a mesma função de distribuição que . Portanto,
Combinando esse resultado com (2), vemos que satisfaz
(3)
desde que não seja muito grande. Devemos agora encontrar que satisfaz a equação funcional (3). Vamos ver como fazer isso. Se fizermos , então
ou, ainda,
uma vez que . Vamos tomar o limite fazendo . Devemos reconhecer em cada lado um quociente cujo limite é uma derivada. No lado esquerdo, o quociente tem limite igual a e, no lado direito, o quociente tende a . Assim, deve satisfazer a equação diferencial de variáveis separáveis:
cuja solução é . Uma vez que , devemos ter , e uma vez que , então . Portanto, , como queríamos!
3. Por que números coletados de todas as origens seguem a Lei de Benford?
Uma resposta foi dada por Theodore Hill em 1995. Iremos agora discutir brevemente a sua ideia. Naturalmente, nem todo conjunto de números segue a Lei de Benford. Por exemplo, se você considerar a altura de humanos em metros então, com poucas exceções, somente os primeiros dígitos significativos e irão ocorrer, e se você converter a altura em pés (um pé é aproximadamente igual a cm), você mudará a lei de distribuição do primeiro dígito significativo. Assim, esse conjunto de números não é invariante por mudanças de escala. Mas, suponha que consideremos um conjunto grande de números vindo de todas as origens e que queiramos mudar a escala. Existem diferentes subconjuntos com sua própria escala particular. Uma vez que o conjunto é grande e os números vêm de todas as origens, quase todas as escalas diferentes estarão presentes. Se multiplicarmos todos os números do conjunto por uma constante positiva, isso induzirá uma permutação das escalas presentes no novo conjunto. Assim, como um todo, podemos esperar que o conjunto de números se comporte como se ele não tivesse uma escala especial. Portanto, ele seguirá a Lei de Benford.
Essa explicação é boa para conjuntos coletados de todas as origens. Mas ela não explica o porquê de áreas de países, populações de países ou comprimentos de rios seguirem a Lei de Benford. Vamos discutir explicações muito recentes (2008!) para esse caso dadas por Gauvrit, Delahaye e Fewster. Essas explicações também são válidas para conjuntos grandes de números coletados de todas as origens.
4. Conjuntos de números abrangendo várias ordens de magnitude são suscetíveis de seguirem a Lei de Benford!
Estamos trabalhando na base e já vimos que números positivos podem ser escritos na forma , com e . Aqui é a ordem de magnitude. Diremos que existem várias ordens de magnitude se existem vários valores de para nosso conjunto de números. (Note que tal propriedade é invariante por mudanças de escala!) Para simplificar a explicação, suponha que os números estejam no intervalo . Então, os números com primeiro dígito significativo são aqueles que pertencem ao conjunto
com conjuntos análogos para os outros dígitos . É conveniente usarmos o logaritmo na base destes números: . Assim, . Vamos mostrar que se uma variável aleatória em segue a Lei de Benford, então a variável aleatória é simplesmente uniforme em . Para isso, é suficiente mostrarmos que a função de distribuição de é aquela da variável aleatória uniforme em , a saber,
De fato, quando ,
Se pertence ao conjunto , então pertence ao conjunto :
com conjuntos análogos para os outros dígitos . Suponha que escolher um número aleatório em nosso conjunto seja uma variável aleatória que toma valores em . Então toma valores em . Lembre-se que a probabilidade de alguma variável aleatória pertencer a algum conjunto é igual a área sob o gráfico da função densidade restrita a esse conjunto. Se a função densidade de em fosse uniforme como na Figura 3 (a), nada haveria para ser feito. Contudo, nem sempre esse será o caso, como mostra a Figura 3 (b). Mas aqui está a importância do conjunto original de número abranger várias escalas de magnitude. As seções diferentes correspondentes a um dado primeiro dígito significativo espalham-se horizontalmente sobre vários segmentos cuja soma dos comprimentos é da ordem de do comprimento total. Assim, mesmo que a altura de não seja a mesma de um segmento para outro, podemos esperar que a altura média seja da mesma ordem de magnitude para os dígitos diferentes. Quando isso ocorre, então os dados seguem a Lei de Benford.
5. Como testar se um conjunto de números segue a Lei de Benford?
Se você fez um curso de estatística, então você provavelmente estudou o teste . Este teste permite verificar se algum conjunto de dados segue alguma distribuição de probabilidade. Suponha que você queira fazer o teste com um conjunto de números. Você precisa apenas construir uma tabela, na qual representa o número de números em seu conjunto que possuem primeiro dígito significativo igual a . Naturalmente, . Na Tabela 2, representa o número de números que teriam primeiro dígito significativo igual a se seu conjunto seguisse a Lei de Benford, a saber, .
Tabela 2: A tabela para o teste .
Feito isto, basta então calcular
e verificar na tabela pela linha correspondente a graus de liberdade. Caso você queira fazer um teste com % de erro, então você aceitará que o seu conjunto de dados satisfaz a Lei de Benford se e rejeitará esse fato caso contrário. Esta é uma receita rápida, mas caso você faça tais testes junto com seus estudantes, então gaste algum tempo para que eles se familiarizem com os detalhes do teste e o seu significado.
6. Invariância da Lei de Benford por mudanças de base
Isto pode ser modelado de maneira análoga ao que foi feito para a invariância por mudanças de escala. Contudo, a situação é mais delicada, uma vez que não podemos nos limitar a trabalhar apenas com a mantissa. De fato, se , então a parte também precisa ser convertida para a nova base. E, certamente, a dificuldade principal é expressar em termos matemáticos o que significa uma variável aleatória ser independente por mudanças de base. Não faremos isso aqui.
7. Conclusão
A Lei de Benford é fascinante: ela desafia nossa intuição e é algo que você pode testar por si mesmo como adaptá-la em uma atividade em sala de aula. Pode parecer uma mera curiosidade, mas ela é agora usada como uma ferramenta para e detectar fraudes. Naturalmente, mais e mais sonegadores de impostos aprendem sobre ela. Mas, preste atenção: o primeiro dígito significativo não é a única coisa com a qual se é preciso preocupar. A Lei de Benford Generalizada permite obter uma lei para o segundo dígito significativo, para o terceiro dígito significativo, etc. Você pode tentar descobri-la sozinho: pense em quais uniões de intervalos a mantissa de um número deveria estar para que o seu segundo dígito significativo seja .
Este post está disponível em: Inglês, Francês, Alemão, Italiano, Espanhol, Árabe, Khmer
Há um equívoco no que diz respeito à origem da observação do fenômeno objeto deste texto. Este afirma que “O fenômeno foi observado pela primeira vez pelo astrônomo Simon Newcombe (1835-1909), que notou que as primeiras páginas das tabelas de logaritmos correspondentes aos primeiros dígitos significativos pareciam menos numerosas se comparadas com as páginas seguintes.”
Na realidade, o que ocorreu foi coisa diversa. Simon Newcombe percebeu que as tabelas de logaritmos apresentavam páginas mais desgastadas e sujas justamente nos primeiros números, por serem mais manuseadas nesta porção. Isto mostrou que o número 1 era o mais consultado, ao passo que o número 9 era o menos consultado pelas pessoas. Ora, sendo assim, era de se supor que os números menores estatisticamente apareciam mais vezes que os maiores por ocasião de fenômenos observados por quem utilizava a tabela, o que acabou sendo matematicamente confirmado incontáveis vezes.