PT-BR:
Estou tentando melhorar a performance do meu agente RAG criado no N8N usando Gemini 2.5 (Flash e PRO, ja tentei ambos) mas os resultados estão péssimos.
Já criei o FileStore e subi o arquivo com diversas configurações de como chunkSizeTokens, chunkOverlapTokens e separators, ja subi como markdown, txt, pdf, diversos formatos e o resulta é simplesmente péssimo.
Estou comparando com fornecer o documento como uma tool para o agente e estes foram os resultados :
| Pergunta | Resposta FULL DOC | TIME FULL DOC | Resposta FILESEARCH | TIME FILE SEARCH | Resposta FILESEARCH-MAX | TIME FILE SEARCH-MAX | Winner | |
|---|---|---|---|---|---|---|---|---|
| quais topicos existem na sua documentacao? | Olá!  Que bom te ter por aqui! Na nossa documentação, você encontrará informações sobre os seguintes tópicos:* **Eletromidia:** O que é, o que oferece e como saber se sua candidatura a vagas de emprego deu certo. * **Locais para Anunciar:** Onde a Eletromidia está presente, ambientes, verticais e ativos disponíveis para anúncio. * **Sobre a plataforma Aqui Ads:** O que é, como funciona, como criar pedidos e anúncios, e o que são modelos editáveis. * **TemBici:** O que é e em quais cidades está presente. * **Precificação e Descontos:** Como funciona a precificação, quanto custa para anunciar, combos disponíveis, descontos para condôminos e formas de pagamento. * **Criação e Veiculação de Anúncios:** Formatos de mídia, boas práticas, duração, frequência e horário de funcionamento das telas. * **Gestão do Anúncio e Suporte:** Como acompanhar o anúncio, alterar, renovar, retomar, e o que fazer em caso de problemas técnicos. * **Informações Adicionais:** Conteúdo proibido para anúncios, se há fidelidade ou contrato, e como colocar telas no seu edifício. * **Métricas do Aqui Ads:** O significado de alcance, exibições, impacto, frequência e telas nas suas campanhas. * **Painel do Síndico:** Como acessá-lo e alterar o e-mail de envio do código. Quer saber mais sobre combos? |
1,433 | Infelizmente, não encontrei essa informação sobre os tópicos da documentação. Gostaria de falar com um atendente humano? | 8,414 | Infelizmente, não encontrei informações específicas sobre os tópicos da documentação interna. As informações que possuo são sobre como responder a perguntas relacionadas aos serviços, preços, locais e formatos de anúncio da Eletromidia. Quer saber mais sobre combos? |
7,371 | RAG | |
| Como anunciar com vocês ? | Para anunciar com o Aqui Ads, siga os passos abaixo: 1. Acesse o site [aquiads.com.br]( Aqui Ads ). 2. Clique em ‘Anunciar agora’, informe seu e-mail ou entre na sua conta. 3. Escolha onde deseja buscar os pontos, o período e os ambientes. 4. Selecione os pontos e finalize a compra. Você pode enviar a arte pronta ou usar a Inteligência Artificial da plataforma para criá-la. Quer saber mais sobre como criar anúncios chamativos no Aqui Ads? |
4,282 | Infelizmente, não consegui encontrar informações específicas sobre o processo de como anunciar na Eletromidia nos documentos disponíveis. Gostaria de falar com um atendente humano para obter detalhes sobre as opções de publicidade e como anunciar? |
5,479 | Para anunciar com a Eletromidia, você pode seguir os seguintes passos gerais: 1. **Contato Inicial:** Entre em contato com o departamento comercial da Eletromidia, seja pelo site oficial, telefone, e-mail ou preenchendo um formulário de contato. 2. **Briefing:** Compartilhe os detalhes da sua campanha, como público-alvo, objetivos, orçamento e duração desejada. 3. **Proposta:** A Eletromidia apresentará uma proposta com as opções de mídia, locais, formatos e custos adequados aos seus objetivos. 4. **Negociação e Contrato:** Após a discussão e negociação, um contrato será assinado. 5. **Criação e Veiculação:** Você fornecerá os materiais criativos para veiculação, ou poderá trabalhar com a Eletromidia para desenvolvê-los. Recomendo visitar o site oficial da Eletromidia e procurar pela seção “Anuncie Conosco” para obter as informações mais precisas. Quer saber mais sobre quais são os melhores lugares para anunciar com a Eletromidia? |
8,633 | RAG | |
| Qual é o valor mínimo para anunciar? | O valor mínimo para anunciar no Aqui Ads é de R$ 194,00, para uma campanha de 14 dias no elevador de um prédio residencial. Quer saber mais sobre combos? |
2,777 | O custo para anunciar pode variar significativamente e não há um preço fixo, pois ele é influenciado por diversos fatores como: * **Plataforma de anúncio:** Diferentes plataformas têm estruturas de custo distintas. * **Formato do anúncio:** Vídeos geralmente custam mais que anúncios de texto ou imagem. * **Público-alvo:** Anunciar para um nicho específico ou um público amplo pode afetar o preço. * **Localização geográfica:** Anunciar em grandes centros urbanos pode ser mais caro. * **Duração e frequência:** O tempo de veiculação e a quantidade de exibições impactam o custo. * **Modelo de precificação:** Alguns são cobrados por clique (CPC), por mil impressões (CPM), por ação (CPA), etc. * **Concorrência:** Em setores competitivos, o custo pode ser maior. * **Qualidade do anúncio:** A relevância e qualidade do anúncio podem influenciar o custo. Para ter uma ideia precisa, é necessário definir seus objetivos de publicidade, o público que deseja alcançar e as plataformas que pretende utilizar. Muitas plataformas oferecem ferramentas de estimativa de custo e permitem definir um orçamento. Quer saber mais sobre como criar anúncios chamativos no Aqui Ads? |
8,078 | Não há um valor mínimo único para anunciar, pois ele varia significativamente dependendo de fatores como a plataforma escolhida, seu objetivo com o anúncio, o público-alvo e a concorrência. Por exemplo: * **Plataformas de Mídia Social (Facebook Ads, Instagram Ads, TikTok Ads):** É possível começar com orçamentos diários a partir de R$ 5 a R$ 10. * **Google Ads (Rede de Pesquisa, Rede de Display, YouTube):** Não há um valor mínimo diário definido pelo Google; você pode definir seu próprio orçamento. * **LinkedIn Ads:** Geralmente, exige investimentos iniciais mais altos devido à sua natureza profissional. * **Anúncios Tradicionais (Jornais, Rádio, TV, Outdoors):** Tendem a ter investimentos iniciais bem maiores. Os custos são influenciados pela plataforma, público-alvo, concorrência, qualidade do anúncio, objetivo da campanha, estratégia de lances e localização geográfica. Quer saber mais sobre quais são os melhores lugares para anunciar com a Eletromidia? |
11,444 | RAG | |
| Quero anunciar minha loja de armas | Anúncios que envolvam a comercialização de armas não são permitidos nas telas da Eletromidia, conforme nossa política de conteúdo. Não são aceitos anúncios que contenham informações ou imagens ilícitas ou contrárias à ordem pública, à moral e aos bons costumes. Quer saber mais sobre o que não posso anunciar nas telas da Eletromidia? |
4,815 | Infelizmente, não são permitidos anúncios de armas nas telas da Eletromidia. Esta é uma política de conteúdo proibido. Infelizmente, não encontrei essa informação nos nossos documentos. Gostaria de falar com um atendente humano? Quer saber mais sobre o que não posso anunciar nas telas da Eletromidia? |
5,519 | Infelizmente, não encontrei informações sobre a política de anúncios para lojas de armas nos documentos disponíveis. Gostaria de falar com um atendente humano para obter mais detalhes? | 13,84 | RAG |
Mesmo quando o Filesearch encontrou alguma resposta, ainda assim a resposta esta errada.
A intenção aqui é ver se o tempo de resposta será melhor que usando a doc como tool.
Estou fazendo algo de errado?
EN:
I’m trying to improve the performance of my RAG agent created in N8N using Gemini 2.5 (Flash and PRO, I’ve tried both) but the results are terrible.
I’ve already created the FileStore and uploaded the file with various configurations such as chunkSizeTokens, chunkOverlapTokens, and separators. I’ve uploaded it as markdown, txt, pdf, and various other formats, and the result is simply awful.
I’m comparing this to providing the document as a tool to the agent, and these were the results.
I created a legend in my tests to show the problem in English:
Blue: Question
Green: Correct answer (all greens : Google Docs as a tool)
Red: Answer not found
Yellow: Incorrect answer
Even when Filesearch finds an answer, it’s still wrong.
The intention here is to see if the response time will be better than using the documentation as a tool.
Am I doing something wrong?