”工欲善其事,必先利其器。“—孔子《论语.录灵公》
首页 > 编程 > 通过 Web 搜索功能增强您的 RAG 应用程序!

通过 Web 搜索功能增强您的 RAG 应用程序!

发布于2024-11-08
浏览:506

Enhance Your RAG Application With Web Searching Capability!

介绍

当使用检索增强生成(RAG)应用程序构建有趣的项目时,我们经常面临浏览限制等限制,这使得很难获取最新信息或当前数据,例如天气更新(我希望有更有趣的东西)。为了解决这个问题,我们可以为 RAG 应用程序配备搜索互联网的工具。让我们开始吧!

 我们的工具台

  • LangChain(使用大型语言模型构建应用程序的框架)
  • SearXNG(免费元搜索引擎)
  • CPython(C 语言包装器 :> )
  • Docker(一个拿着凉面包的男人)

设置

首先我们从 SearXNG 安装开始。

1 -) 获取 SearXNG-docker

git 克隆 https://github.com/searxng/searxng-docker.git

2 -) 编辑 .env 文件以设置主机名和电子邮件

3 -) 生成密钥



sed -i "s|ultrasecretkey|$(openssl rand -hex 32)|g" searxng/settings.yml


sed -i"" -e "s|ultrasecretkey|$(openssl rand -hex 32)|g" searxng/settings.yml 


$randomBytes = New-Object byte[] 32
(New-Object Security.Cryptography.RNGCryptoServiceProvider).GetBytes($randomBytes)
$secretKey = -join ($randomBytes | ForEach-Object { "{0:x2}" -f $_ })
(Get-Content searxng/settings.yml) -replace 'ultrasecretkey', $secretKey | Set-Content searxng/settings.yml

4 -) 更新searxng/settings.yml以启用可用的搜索格式并禁用我们的LangChain实例的限制器:

use_default_settings: true
server:
  # base_url is defined in the SEARXNG_BASE_URL environment variable, see .env and docker-compose.yml
  secret_key: ""  # change this!
  limiter: false
  image_proxy: true
ui:
  static_use_hash: true
redis:
  url: redis://redis:6379/0

search:
    formats:
        - html
        - json

5-) 运行 SearXNG 实例

docker 组成

检查 Docker 中的 SearXNG 部署。如果一切看起来都不错,您就可以继续了。

 演示应用程序

1 -) 创建虚拟环境并激活

python3 -m venv .venv
source .venv/bin/activate

2 -) 安装Langchain

pip install langchain langchain-community

3 -) 创建main.py

## Simple Get Results
from langchain_community.utilities import SearxSearchWrapper
import pprint

s = SearxSearchWrapper(searx_host="http://localhost:8080",)
result = s.results("What is RAG?", num_results=10, engines=["google"])
pprint.pprint(result)

## Github Tool

from langchain_community.tools.searx_search.tool import SearxSearchResults

wrapper = SearxSearchWrapper(searx_host="**")
github_tool = SearxSearchResults(name="Github", wrapper=wrapper,
                            kwargs = {
                                "engines": ["github"],
                                })

这就是你得到的!您的 RAG 应用程序现在具有搜索功能。本指南没有介绍任何新内容,而是旨在汇总向 RAG 应用程序添加 Web 搜索功能的步骤。希望对您有帮助!

版本声明 本文转载于:https://dev.to/iamnotagentleman/enhance-your-rag-application-with-web-searching-capability-lnn?1如有侵犯,请联系[email protected]删除
最新教程 更多>

免责声明: 提供的所有资源部分来自互联网,如果有侵犯您的版权或其他权益,请说明详细缘由并提供版权或权益证明然后发到邮箱:[email protected] 我们会第一时间内为您处理。

Copyright© 2022 湘ICP备2022001581号-3