Errore 404

[MaxZak72]

Caricando un documento ottengo il seguente errore quando la coda cerca di estrarre gli embeddings:

info: Microsoft.KernelMemory.Pipeline.Queue.DevTools.SimpleQueues[0]
Message received
warn: Microsoft.KernelMemory.Pipeline.Queue.DevTools.SimpleQueues[0]
Message '20241005.141825.2280480.f37c9cecbd5844c3a4a63755541e81c3' processing failed with exception, putting message back in the queue. Message content: {"index":"default","document_id":"fff3fd41a3424b92b1737d6a3c151851202410050218229219342","execution_id":"d44ad8e82e8146d4bb5869e908f4df6e","steps":["extract","partition","gen_embeddings","save_records"]}
Microsoft.SemanticKernel.HttpOperationException: HTTP 404 (404)

  Resource not found
   ---> System.ClientModel.ClientResultException: HTTP 404 (404)

  Resource not found
     at Azure.AI.OpenAI.ClientPipelineExtensions.ProcessMessageAsync(ClientPipeline pipeline, PipelineMessage message, RequestOptions options)
     at Azure.AI.OpenAI.Embeddings.AzureEmbeddingClient.GenerateEmbeddingsAsync(BinaryContent content, RequestOptions options)
     at OpenAI.Embeddings.EmbeddingClient.GenerateEmbeddingsAsync(IEnumerable`1 inputs, EmbeddingGenerationOptions options, CancellationToken cancellationToken)
     at Microsoft.SemanticKernel.Connectors.OpenAI.ClientCore.RunRequestAsync[T](Func`1 request)
     --- End of inner exception stack trace ---
     at Microsoft.SemanticKernel.Connectors.OpenAI.ClientCore.RunRequestAsync[T](Func`1 request)
     at Microsoft.SemanticKernel.Connectors.OpenAI.ClientCore.GetEmbeddingsAsync(String targetModel, IList`1 data, Kernel kernel, Nullable`1 dimensions, CancellationToken cancellationToken)
     at Microsoft.KernelMemory.AI.AzureOpenAI.AzureOpenAITextEmbeddingGenerator.GenerateEmbeddingBatchAsync(IEnumerable`1 textList, CancellationToken cancellationToken)
     at Microsoft.KernelMemory.Handlers.GenerateEmbeddingsHandler.GenerateEmbeddingsWithBatchingAsync(DataPipeline pipeline, ITextEmbeddingBatchGenerator generator, Int32 batchSize, List`1 partitions, CancellationToken cancellationToken)
     at Microsoft.KernelMemory.Handlers.GenerateEmbeddingsHandler.InvokeAsync(DataPipeline pipeline, CancellationToken cancellationToken)
     at Microsoft.KernelMemory.Pipeline.DistributedPipelineOrchestrator.RunPipelineStepAsync(DataPipeline pipeline, IPipelineStepHandler handler, CancellationToken cancellationToken)
     at Microsoft.KernelMemory.Pipeline.DistributedPipelineOrchestrator.<>c__DisplayClass5_0.<<AddHandlerAsync>b__0>d.MoveNext()
  --- End of stack trace from previous location ---
     at Microsoft.KernelMemory.Pipeline.Queue.DevTools.SimpleQueues.<>c__DisplayClass19_0.<<OnDequeue>b__0>d.MoveNext()

Evidentemente non ho configurato correttamente le chiavi dei servizi di Azure, ma interrogando gli endpoint che ho indicato in appsettings con la Api-Key relativa, da Postman ottengo una risposta quindi suppongo che i servizi su Azure siano pubblicati correttamente: mi sfugge qualcosa?

Grazie

[marcominerva]

Guardando l'eccezione e lo Stack Trave, sembra proprio un errore di configurazione. In particolare, Resource Not Found potrebbe essere dovuto ad un errato endpoint e/o nome del deployment.

Se controlli i valori eseguendo l'applicazione in debug, risultano corretti?

[MaxZak72]

Stranamente, però, analizzando il traffico di rete on Fiddler non vedo chiamate che escono verso quell'host, mentre la chiamata di Postman la vedo

[marcominerva]

E la configurazione dell'appsettings.json quale è?

[MaxZak72]

{
"AzureOpenAI": {
"Embedding": {
"Endpoint": "https://testkernelmemory.openai.azure.com/openai/deployments/text-embedding-ada-002/embeddings?api-version=2023-05-15",
"Deployment": "text-embedding-ada-002",
"ApiKey": "XXXXX",
"MaxTokens": 32768
},
"ChatCompletion": {
"Endpoint": "https://testkernelmemory.openai.azure.com/openai/deployments/gpt-35-turbo/chat/completions?api-version=2024-08-01-preview",
"Deployment": "gpt-35-turbo",
"ApiKey": "XXXXX",
"MaxTokens": 8191
}
},
"AppSettings": {
"MessageLimit": 20,
"MessageExpiration": "00:05:00",
"StoragePath": "D:\Tmp\Storage",
"VectorDbPath": "D:\Tmp\VectorDb",
"QueuePath": "D:\Tmp\Queue"
},

"Logging": {
"LogLevel": {
"Default": "Information",
"Microsoft.AspNetCore": "Warning"
}
},
"AllowedHosts": "*"
}

[marcominerva]

In Endpoint devi mettere solo https://testkernelmemory.openai.azure.com/

Warning

Ho modificato il tuo ultimo messaggio cancellando l'ApiKey. Ti consiglio comunque di rigenerare la chiave, per evitare problemi di "furto" (questo è un repository pubblico, per cui chiunque può averla vista).

[MaxZak72]

Grazie mille! ora funziona