Como foi treinadoHow it was trained
BERTimbau com fine-tuning numa GPU do Google Colab, 3 épocas, a melhor escolhida na validação. O teste foi usado uma única vez. As frases de teste também estavam no corpus de treino, então elas e suas duplicatas (371 linhas) foram removidas antes do treino.BERTimbau fine-tuned on a Google Colab GPU, 3 epochs, the best picked on validation. The test set was used once. Test sentences also appeared in the training corpus, so they and their duplicates (371 rows) were removed before training.
QuantizaçãoQuantization
A quantização int8 padrão derrubou a acurácia para 79,3%. Pesos int8 com sinal saturam em CPUs x86 sem VNNI. Com uint8 por canal, o modelo cai de 436 MB para 110 MB e perde só 1,8 ponto.Default int8 quantization dropped accuracy to 79.3%. Signed int8 weights saturate on x86 CPUs without VNNI. With per-channel uint8, the model shrinks from 436 MB to 110 MB and loses only 1.8 points.
LimitaçõesLimitations
Teste pequeno (333 frases), então os intervalos de confiança são largos. O modelo deixa passar cerca de 3 em cada 10 casos positivos. Treinado com comentários de redes sociais, que carregam vieses de quem anotou.Small test set (333 sentences), so confidence intervals are wide. The model misses about 3 in 10 positive cases. Trained on social media comments, which carry their annotators' biases.