O último exame de qualificação para despachantes aduaneiros ocorreu em 15 de novembro. Assim que os modelos da prova e o gabarito preliminar ficaram disponíveis, resolvi testar três das ferramentas de IA mais conhecidas para ver como elas se sairiam. Como eu esperava, todas superaram a nota mínima de 70%, equivalente a 42 acertos em 60 questões.
Para comparar o desempenho nas mesmas condições, desativei as ferramentas de pesquisa dos três modelos. Assim, nenhum deles pôde recorrer à internet para responder às questões.
Além disso, a banca aplicou a prova depois das datas de corte de treinamento dos modelos. Por isso, as questões da edição de 2026 formaram um conjunto inédito para o teste.
Resultados no Modelo 1 da prova
Usei a configuração Thinking Effort no nível High nos três modelos.
| Modelo | Língua Portuguesa | Língua Inglesa | Conhecimentos Específicos | Total |
|---|---|---|---|---|
| ChatGPT 6 | 10/10 | 5/5 | 41/45 | 56/60 |
| Gemini Hydrogen | 10/10 | 5/5 | 43/45 | 58/60 |
| Claude Opus 5.5 | 10/10 | 5/5 | 43/45 | 58/60 |
Os três modelos acertaram todas as questões de Português e Inglês. A diferença, portanto, ficou em Conhecimentos Específicos, onde Gemini e Claude acertaram duas questões a mais que o ChatGPT.
Erros do ChatGPT
Pelo gabarito preliminar, o ChatGPT errou quatro questões.
- 35 — Perda da espontaneidade para retificar a DU-E. Marcou C, enquanto a banca indicou B.
- 36 — Modalidade especial de despacho na exportação de soja a granel. Marcou B, enquanto a banca indicou C.
- 37 — Retificação da DU-E após a apresentação da carga e antes da conferência aduaneira. Marcou B, enquanto a banca indicou E.
- 40 — Regras e procedimentos do despacho aduaneiro de exportação via DU-E. Marcou B, enquanto a banca indicou E.
Gemini, Claude e a questão 40
Assim como o ChatGPT, Gemini e Claude divergiram do gabarito preliminar nas questões 35 e 40. Na questão 35, ambos reconheceram o erro. Já na questão 40, os dois sugeriram apresentar recurso.
Segundo o Claude, a alternativa E, que a banca indicou como correta, contraria o artigo 89 da IN RFB 1.702/2017. Na interpretação do modelo, cabe à averbação confirmar a data de embarque. Além disso, o Claude apontou que as alternativas A, B e C reproduzem trechos da própria instrução normativa. Com isso, na avaliação do modelo, a questão teria mais de uma resposta correta.
Apesar da diferença nas notas, todas as divergências dos três modelos com o gabarito preliminar se concentraram no mesmo tema, o despacho aduaneiro de exportação via DU-E. O desempenho sugere que essas ferramentas podem ajudar na preparação para o exame. Ao mesmo tempo, a concentração dos erros mostra por que vale conferir as respostas sobre procedimentos aduaneiros diretamente na norma.