AWS Builder Center
Benchmark Real: 5 Estrategias de Chunking en Amazon Bedrock Knowledge Bases - Parte II

Benchmark Real: 5 Estrategias de Chunking en Amazon Bedrock Knowledge Bases - Parte II

Un benchmark reproducible con 25 preguntas, Sonnet 4.6 como generador y Nova Pro como juez cross-family. Más los 7 problemas que encontré al desplegar esto con Terraform. Abril 2026.

Series: AgentCore (11 articles)

  1. …
  2. 5
    Benchmark Real: 5 Estrategias de Chunking en Amazon Bedrock Knowledge Bases - Parte II This article

Gotcha #7: ¿Por qué Bedrock Evaluations dice "does not have permission to call the KB API" aunque las policies parezcan correctas?

Ultimo gotcha. Con todo lo anterior resuelto, los eval jobs seguían fallando:
The provided role does not have permission to call the KB API.
El mensaje te hace pensar que es un problema de permissions policy. En realidad son dos cosas:
  1. Trust policy: el  aws:SourceArn  debe incluir el pattern de evaluation jobs:
"Condition": {
"StringLike": {
"aws:SourceArn": "arn:aws:bedrock:us-east-1:<account>:evaluation-job/*"
}
}
  1. Permission policy: los ARNs de las KBs que el job va a consultar deben estar específicos, no con wildcard:
"Resource": [
"arn:aws:bedrock:us-east-1:<account>:knowledge-base/<kb-id-1>",
...
]
Cualquiera de las dos ausente produce el mismo error genérico. Te manda a buscar el bug en el lugar equivocado.
🔍 ProTip #9: Cuando Bedrock Evaluations te diga "does not have permission to call the KB API", siempre revisa ambos lados del IAM: trust policy Y permission policy. No es lo mismo que cuando otros servicios AWS dan ese error.

Series: AgentCore (11 articles)

  1. …
  2. 5
    Benchmark Real: 5 Estrategias de Chunking en Amazon Bedrock Knowledge Bases - Parte II This article
Any opinions in this article are those of the individual author and may not reflect the opinions of AWS.
Enjoyed reading this content? Let the author know!

Your likes, comments, shares, and saves help creators reach more builders.

Loading recommendations

Loading article