mirror of
https://github.com/diegosouzapw/OmniRoute.git
synced 2026-07-26 09:52:11 +03:00
4.5 KiB
4.5 KiB
Tutorial Qdrant no OmniRoute (Guia para vídeo)
1) O que é o Qdrant no OmniRoute
O Qdrant é o banco vetorial usado para memória semântica.
No OmniRoute, ele ajuda a:
- Encontrar contexto por significado (não só palavra exata).
- Reaproveitar memórias antigas com mais precisão.
- Melhorar respostas com base em histórico relevante.
- Escalar melhor quando a base de memória cresce.
2) Quando o OmniRoute envia dados para o Qdrant
Com Qdrant habilitado e modelo de embedding configurado, o sistema envia vetores quando:
- Memórias são salvas (upsert de memória).
- Fluxos de chat recuperam contexto semântico/híbrido.
- Testes de busca no painel geram embedding e consultam a coleção.
Resumo prático:
- Sem Qdrant: busca mais limitada (texto/chave).
- Com Qdrant: busca por similaridade semântica (mais inteligente).
3) Pré-requisitos
Você precisa de:
- Instância Qdrant acessível (porta 6333).
- Coleção criada (ex.:
omniroute_memory). - Modelo de embedding válido (ex.: OpenRouter).
- Credencial do provider do embedding configurada no OmniRoute.
Exemplo de modelo OpenRouter:
openrouter/nvidia/llama-nemotron-embed-v1-1b-v2:free
Importante:
- O texto do modelo deve estar em formato
provider/model. - Se usar modelo com dimensão diferente da coleção, a busca falha.
4) Como configurar no painel do OmniRoute
No menu:
Admin > Settings > Qdrant (Memória vetorial)
Preencha:
Ativar Qdrant: ligado.Host: IP ou URL do servidor Qdrant (sem porta no campo Host).Porta:6333.Collection:omniroute_memory(ou nome que você criou).Modelo de embedding: selecione da lista ou digite manualmente.API Key: opcional (preencha se seu Qdrant exigir).
Depois:
- Clique em
Salvar. - Clique em
Testar conexão. - No
Teste de busca, digite um texto e clique emBuscar.
5) Como criar a coleção no Dashboard do Qdrant (sem comando)
No Qdrant Dashboard:
- Clique em
Create collection. - Escolha
Global search. - Em tipo de busca, use
Custom. - Configure vetor:
- Vector name:
omniao(padrão esperado pelo OmniRoute atualmente). - Size: dimensão do seu modelo de embedding (ex.: 2048 em alguns modelos NVIDIA).
- Distance:
Cosine.
- Vector name:
- Salve a coleção com nome
omniroute_memory.
Se já tinha coleção com dimensão errada:
- Recrie a coleção com dimensão correta.
6) Como validar se está funcionando
Checklist rápido:
Testar conexãono OmniRoute retorna OK.- Busca no painel retorna resultados (não “Sem resultados”).
- No Qdrant Dashboard, aparecem pontos na coleção (payload + vector).
- Resultados de chat passam a recuperar contexto mais relevante.
Sinal clássico de problema:
- Dados entram no Qdrant, mas busca do painel não retorna nada.
Causas comuns:
- Dimensão do vetor incompatível.
- Nome do vetor diferente do esperado (
omniao). - Modelo inválido/incompleto no campo de embedding.
- Provider sem credencial ativa.
7) O que melhorou com esta atualização
Nesta melhoria do OmniRoute:
- Suporte a embeddings de qualquer provider compatível (não só OpenAI fixo).
- Endpoint para carregar modelos de embedding na tela de configurações.
- Campo manual para modelo custom quando não aparecer na lista.
- Ajuda visual (
?) com passo rápido de configuração Qdrant + OpenRouter.
8) Roteiro curto para seu vídeo
Sugestão de demo (3-5 minutos):
- Mostrar problema sem Qdrant (busca simples).
- Abrir Settings e habilitar Qdrant.
- Configurar host/porta/collection/modelo.
- Salvar + testar conexão.
- Fazer
Teste de buscano painel. - Abrir Qdrant Dashboard e mostrar ponto salvo + vetor.
- Rodar um chat e mostrar melhoria de recuperação semântica.
Mensagem final para a galera:
- "Qdrant no OmniRoute transforma memória de palavra-chave em memória por significado."
9) Referências de código (para equipe técnica)
- UI de configuração Qdrant:
src/app/(dashboard)/dashboard/settings/components/MemorySkillsTab.tsx
- Endpoint de modelos de embedding para Qdrant:
src/app/api/settings/qdrant/embedding-models/route.ts
- Integração backend com Qdrant (health, upsert, search, cleanup):
src/lib/memory/qdrant.ts
- Recuperação de memórias no fluxo de chat:
src/lib/memory/retrieval.tsopen-sse/handlers/chatCore.ts
10) Observação importante de segurança
Nunca exponha em vídeo:
- API key completa do OpenRouter.
- Tokens reais de produção.
- Endpoints internos sem proteção.
Use chaves mascaradas e ambiente de demonstração.