使用蚂蚁的KAG框架打造更加智能的知识库系统
bigegpt 2025-07-07 14:39 8 浏览
最近一直在研究知识库的产品,包括maxkb、fastgpt、dify等,发现一些共性;这些产品对知识库的索引能力太差; 基本都是 向量检索、全文检索、混合检索这三种;
但是这三种方式往往获取的内容比较割裂,都是片段内容; 真正的知识内容是 相互关联的 是个网状结构;
比如我想检索 中午吃点啥? 单纯的向量或者全文检索,是没有什么内容的;必须通过 知识图谱 来分析:我的位置、我的喜好、周围餐厅等,才能产生有效的信息推荐;
今天来讲一个比较不错的框架:知识增强生成(KAG:Knowledge Augmented Generation)
这个框架充分利用了知识图谱和向量检索的优势,解决了我上面说的场景;它是蚂蚁开源的框架,github地址是:
https://github.com/OpenSPG/KAG
官方对硬件要求如下:
CPU ≥ 8 cores; RAM ≥ 32 GB; Disk ≥ 100 GB;
Linux 用户:CentOS 7 / Ubuntu 20.04 或更新版本 (windows 和mac 也可以,参考官方文档)
要求不是太高,楼主用的 4090 服务器,完全够用
1、安装框架
安装比较简单,用docker安装即可:
curl -sSL https://raw.githubusercontent.com/OpenSPG/openspg/refs/heads/master/dev/release/docker-compose.yml -o docker-compose.yml
docker compose -f docker-compose.yml up -d
可以看到,安装了以下几个产品:
release-openspg-server、release-openspg-mysql、release-openspg-neo4j、release-openspg-minio
安装完成后,通过浏览器输入 http://你的ip:8887, 可访问openspg-kag 产品了。
刚开始是空白的,纯技术思维的产品,配置起来有点复杂;
2、配置一个知识库
点击创建知识库:
出来这个东西,高级配置里面,是要输入json字符,只能看文档,我把官方文档拷贝出来给大家看下:
由于最近deepseek 接口不稳定,在模型配置里面我用的是 千问,参考配置:
{"api_key":"sk-xxxxx","base_url":"https://dashscope.aliyuncs.com/compatible-mode/v1","model":"qwen-plus","client_type":"maas"}
3、上传文档
由于不支持word格式,我把word的转成了pdf上传,文档是 操作教程,大概 2M大小;分成 24个功能介绍;点击下一步后,就看他一步步处理文档了:
提示:过程缓慢、需要耐心
4、验证结果
等了大概 10分钟后,终于处理完了,可以在列表 点击 “抽取结果”,会发现文档被图形化了
离散的功能点被串联成了知识图谱;这样内容和内容之间就产生了关系;
我们去测试回答情况:
当我问 如何增加 知识库 时,对方的回答就非常全面,不仅告诉我了在哪里操作,还有些扩展的内容,比如 如何修改、如何优化; 这个回复内容就非常有价值了;
这个框架什么都好,就是慢; 也许是做了更多分析的缘故,适用于“不着急”回复的场景;后续研读下源码,看如何调优;
相关推荐
- Go语言泛型-泛型约束与实践(go1.7泛型)
-
来源:械说在Go语言中,Go泛型-泛型约束与实践部分主要探讨如何定义和使用泛型约束(Constraints),以及如何在实际开发中利用泛型进行更灵活的编程。以下是详细内容:一、什么是泛型约束?**泛型...
- golang总结(golang实战教程)
-
基础部分Go语言有哪些优势?1简单易学:语法简洁,减少了代码的冗余。高效并发:内置强大的goroutine和channel,使并发编程更加高效且易于管理。内存管理:拥有自动垃圾回收机制,减少内...
- Go 官宣:新版 Protobuf API(go pro版本)
-
原文作者:JoeTsai,DamienNeil和HerbieOng原文链接:https://blog.golang.org/a-new-go-api-for-protocol-buffer...
- Golang开发的一些注意事项(一)(golang入门项目)
-
1.channel关闭后读的问题当channel关闭之后再去读取它,虽然不会引发panic,但会直接得到零值,而且ok的值为false。packagemainimport"...
- golang 托盘菜单应用及打开系统默认浏览器
-
之前看到一个应用,用go语言编写,说是某某程序的windows图形化客户端,体验一下发现只是一个托盘,然后托盘菜单的控制面板功能直接打开本地浏览器访问程序启动的webserver网页完成gui相关功...
- golang标准库每日一库之 io/ioutil
-
一、核心函数概览函数作用描述替代方案(Go1.16+)ioutil.ReadFile(filename)一次性读取整个文件内容(返回[]byte)os.ReadFileioutil.WriteFi...
- 文件类型更改器——GoLang 中的 CLI 工具
-
我是如何为一项琐碎的工作任务创建一个简单的工具的,你也可以上周我开始玩GoLang,它是一种由Google制作的类C编译语言,非常轻量和快速,事实上它经常在Techempower的基准测...
- Go (Golang) 中的 Channels 简介(golang channel长度和容量)
-
这篇文章重点介绍Channels(通道)在Go中的工作方式,以及如何在代码中使用它们。在Go中,Channels是一种编程结构,它允许我们在代码的不同部分之间移动数据,通常来自不同的goro...
- Golang引入泛型:Go将Interface「」替换为“Any”
-
现在Go将拥有泛型:Go将Interface{}替换为“Any”,这是一个类型别名:typeany=interface{}这会引入了泛型作好准备,实际上,带有泛型的Go1.18Beta...
- 一文带你看懂Golang最新特性(golang2.0特性)
-
作者:腾讯PCG代码委员会经过十余年的迭代,Go语言逐渐成为云计算时代主流的编程语言。下到云计算基础设施,上到微服务,越来越多的流行产品使用Go语言编写。可见其影响力已经非常强大。一、Go语言发展历史...
- Go 每日一库之 java 转 go 遇到 Apollo?让 agollo 来平滑迁移
-
以下文章来源于GoOfficialBlog,作者GoOfficialBlogIntroductionagollo是Apollo的Golang客户端Apollo(阿波罗)是携程框架部门研...
- Golang使用grpc详解(golang gcc)
-
gRPC是Google开源的一种高性能、跨语言的远程过程调用(RPC)框架,它使用ProtocolBuffers作为序列化工具,支持多种编程语言,如C++,Java,Python,Go等。gR...
- Etcd服务注册与发现封装实现--golang
-
服务注册register.gopackageregisterimport("fmt""time"etcd3"github.com/cor...
- Golang:将日志以Json格式输出到Kafka
-
在上一篇文章中我实现了一个支持Debug、Info、Error等多个级别的日志库,并将日志写到了磁盘文件中,代码比较简单,适合练手。有兴趣的可以通过这个链接前往:https://github.com/...
- 如何从 PHP 过渡到 Golang?(php转golang)
-
我是PHP开发者,转Go两个月了吧,记录一下使用Golang怎么一步步开发新项目。本着有坑填坑,有错改错的宗旨,从零开始,开始学习。因为我司没有专门的Golang大牛,所以我也只能一步步自己去...
- 一周热门
- 最近发表
- 标签列表
-
- mybatiscollection (79)
- mqtt服务器 (88)
- keyerror (78)
- c#map (65)
- xftp6 (83)
- bt搜索 (75)
- c#var (76)
- xcode-select (66)
- mysql授权 (74)
- 下载测试 (70)
- linuxlink (65)
- pythonwget (67)
- androidinclude (65)
- libcrypto.so (74)
- linux安装minio (74)
- ubuntuunzip (67)
- vscode使用技巧 (83)
- secure-file-priv (67)
- vue阻止冒泡 (67)
- jquery跨域 (68)
- php写入文件 (73)
- kafkatools (66)
- mysql导出数据库 (66)
- jquery鼠标移入移出 (71)
- 取小数点后两位的函数 (73)