Como o algoritmo Byte Pair Encoding (BPE) impacta ...

Q: Como o algoritmo Byte Pair Encoding (BPE) impacta o processo de aprendizagem de Large Language Models (LLMs), e qual é a principal vantagem de sua aplicação?

A) O BPE reduz o vocabulário ao mínimo, eliminando palavras raras, o que impede que o modelo aprenda a lidar com termos de baixa frequência. | B) O BPE codifica todas as palavras em números inteiros fixos, eliminando a necessidade de embeddings e simplificando o treinamento. | C) O BPE usa pares de palavras inteiras em frases fixas durante o pré-processamento, o que aumenta a velocidade de inferência, mas limita a flexibilidade de aprendizado do modelo. | D) O BPE cria tokens de subpalavras que permitem que o modelo processe palavras desconhecidas ou raras, reduzindo a necessidade de vocabulários muito grandes e melhorando a generalização.

457941202014838

Ano: 2025Banca: FCPCOrganização: UFCDisciplina: Engenharia de SoftwareTemas: Inteligência Artificial

Como o algoritmo Byte Pair Encoding (BPE) impacta o processo de aprendizagem de Large Language Models (LLMs), e qual é a principal vantagem de sua aplicação?

Gabarito comentado

Anotações

Marcar para revisão

Como o algoritmo Byte Pair Encoding (BPE) impacta o processo de apr...

Questões relacionadas para praticar

Como o algoritmo Byte Pair Encoding (BPE) impacta o processo de apr...

Questões relacionadas para praticar