Ir para o conteúdo

Supervisão humana em inteligência artificial: do princípio declarado à medição

O artigo 14.º do Regulamento Europeu de Inteligência Artificial exige que os sistemas de risco elevado permitam uma supervisão humana efetiva. A maioria das organizações sabe descrever o seu procedimento de supervisão. Muito poucas conseguem mostrar evidência de que essa supervisão aconteceu. Esta página explica a diferença e como se mede.

Página de referência mantida pela Humanning Lab · Beatriz López López

O que exige o artigo 14.º

O Regulamento (UE) 2024/1689, conhecido como AI Act, entrou em vigor a 1 de agosto de 2024 e as suas obrigações aplicam-se de forma faseada. As que afetam os sistemas classificados como de risco elevado entram em vigor entre 2026 e 2027, consoante a categoria do sistema.

O artigo 14.º estabelece que os sistemas de IA de risco elevado devem ser concebidos e desenvolvidos de modo a poderem ser efetivamente supervisionados por pessoas singulares durante o período em que estejam em utilização. Não basta existir uma pessoa nominalmente responsável: a norma pede que essa pessoa possa compreender as capacidades e os limites do sistema, detetar anomalias, interpretar corretamente o resultado, decidir não o utilizar e, quando aplicável, interromper o seu funcionamento.

O texto nomeia também explicitamente o enviesamento de automatização: a tendência para confiar automaticamente no resultado de um sistema, sobretudo quando esse sistema produz recomendações com aparência de precisão. A norma pede que a organização esteja consciente disso e atue sobre esse ponto.

É aí que surge o problema prático. O enviesamento de automatização não é um procedimento: é uma conduta. E uma conduta não se comprova com um documento de política interna, comprova-se observando-a.

Supervisão declarada e supervisão medida

Quando uma entidade descreve a sua governança de IA, apresenta normalmente três coisas: um organograma com papéis atribuídos, um procedimento escrito de revisão e uma formação registada. As três são necessárias. Nenhuma das três demonstra que a supervisão aconteceu.

A supervisão declarada responde à pergunta: o que deveria acontecer quando o sistema emite uma recomendação? A supervisão medida responde a outra: o que aconteceu realmente quando o sistema emitiu a recomendação?

A distância entre ambas é onde o risco se acumula. Uma pessoa que aprova 99 % das recomendações do modelo em quarenta segundos está a cumprir o procedimento e, ao mesmo tempo, não está a supervisionar. O processo estará completo. A supervisão efetiva, não.

Esta distinção atravessa todo o trabalho da Humanning Lab nos restantes domínios: medimos o que se vive, não o que se declara.

Como se mede a supervisão humana

A supervisão humana é observável porque deixa rasto comportamental. Mede-se sobre as decisões que já ocorrem na operação, sem alterar o modelo nem interferir no fluxo de trabalho.

O que se observa são regularidades: em que proporção dos casos a pessoa se afasta da recomendação do sistema e em que condições; quanto varia esse comportamento entre equipas, turnos e níveis de carga; que tipos de caso concentram a aceitação automática; o que distingue as decisões em que a pessoa efetivamente interveio; e se essa intervenção se mantém no tempo ou decai após a entrada em produção.

O resultado não é uma pontuação de maturidade nem uma autoavaliação. É um conjunto de indicadores comportamentais, datados e rastreáveis, que descrevem como a supervisão está a ser exercida naquela organização concreta, com aquele sistema concreto.

É esse conjunto que uma entidade pode apresentar a um supervisor ou a um auditor quando lhe pedirem para demonstrar, e não afirmar, que a supervisão humana é efetiva.

De onde vem o instrumento

O instrumento não vem da consultoria de conformidade, mas da biologia da cognição desenvolvida por Humberto Maturana e Francisco Varela.

Esse quadro fornece uma premissa operativa: a conduta de uma pessoa não se explica pela instrução que recebe, mas pela estrutura a partir da qual a recebe. Uma norma não determina um comportamento; desencadeia-o, e o que acontece depois depende da estrutura de quem a recebe e do contexto em que opera.

Aplicado à governança de IA, isto explica porque políticas de supervisão bem redigidas produzem resultados tão diferentes entre organizações, e porque a única forma séria de saber o que está a acontecer é observar a conduta no seu contexto de operação.

Onde se aplica: banca, seguros, saúde e recrutamento

O Regulamento classifica como de risco elevado, entre outros, os sistemas que intervêm em decisões com impacto direto sobre direitos e oportunidades das pessoas. Estes são os quatro contextos onde o instrumento se aplica com maior clareza.

Banca

O analista recebe uma recomendação do modelo e decide. A pergunta que um supervisor pode formular é quantas dessas decisões foram efetivamente revistas e o que distingue as que se afastaram do modelo. Sem medição comportamental, a resposta é uma estimativa.

Seguros

O mesmo padrão, com um agravante: os modelos atuariais estão incorporados na prática profissional há décadas, pelo que a confiança no seu resultado está mais naturalizada e o enviesamento de automatização é mais difícil de detetar por dentro.

Saúde

A supervisão humana é aqui particularmente sensível porque o profissional trabalha sob pressão de tempo. Medir em que condições a revisão se mantém e em quais se degrada é informação de segurança, não apenas de conformidade.

Recrutamento

É um dos usos explicitamente listados como de risco elevado. O volume de candidaturas empurra para a aceitação automática do filtro, precisamente onde o impacto sobre as pessoas é direto e onde a rastreabilidade da decisão humana é exigível.

Este é um quadro de referência geral, não aconselhamento jurídico. A classificação de um sistema concreto depende da sua finalidade e do seu enquadramento nos anexos do Regulamento, e deve ser determinada pela entidade com o seu apoio jurídico.

Perguntas frequentes

Quem é responsável pela supervisão humana: quem desenvolve o sistema ou quem o utiliza?
O Regulamento reparte obrigações. O fornecedor deve conceber o sistema de modo a tornar possível a supervisão humana, e o responsável pela implementação deve atribuir essa supervisão a pessoas com a competência, a formação e a autoridade necessárias, garantindo que a possam exercer. A medição comportamental interessa sobretudo a quem implementa, porque é aí que a supervisão acontece ou não acontece.
O que pede exatamente um auditor ou um supervisor?
Pede poder verificar. A diferença entre uma política de supervisão e uma medição da supervisão é que a segunda é comprovável de forma independente: indicadores datados, sobre decisões reais, com uma metodologia descrita e reproduzível.
Isto obriga a modificar o modelo ou o sistema de IA?
Não. Meço a conduta de decisão, não o modelo. Não é preciso intervir no sistema nem alterar o fluxo de trabalho das equipas.
Qual a diferença face a uma auditoria algorítmica ou a um teste de enviesamento do modelo?
Uma auditoria algorítmica examina o sistema: os seus dados, o seu desempenho, os seus enviesamentos estatísticos. Esta medição examina o humano que decide sobre o resultado do sistema. São complementares e respondem a artigos distintos do Regulamento.
Isto avalia as pessoas que revêem?
Não. O que se mede é o regime da implementação: se quem decide tem tempo, poder e consequências para o fazer de verdade. Os registos chegam anonimizados pela própria organização e cada revisor aparece como um código, nunca como um nome.
Como começa uma organização?
Com um piloto delimitado sobre uma implementação concreta. O âmbito, o período e o volume de decisões são acordados antes de começar. Os indicadores não: estão fixados pelo método e são os mesmos para todos. Essa é a condição para que o resultado signifique alguma coisa.

Referências e trabalho publicado

Propor um piloto

Se a sua entidade opera sistemas de IA em algum destes contextos e precisa de demonstrar supervisão humana efetiva, o primeiro passo é uma conversa sobre o caso de uso concreto. Não vendo um parecer de conformidade: meço conduta de decisão e entrego os indicadores que a descrevem.

Escrever para propor um piloto