
GURPREETKAURJETHRA/Medical-RAG-using-Bio-Mistral-7B
📦 开源项目GURPREETKAURJETHRA
基于 BioMistral 7B 和 Qdrant 的开源医疗领域检索增强生成 (RAG) 系统。
该仓库为构建领域特定的 RAG 应用提供了完整的蓝图。通过使用 BioMistral 7B,模型在医疗推理和知识检索方面得到了优化。架构集成了 PubMedBERT,以确保从医疗数据集中获得高质量的语义搜索结果。系统采用 Qdrant 作为向量存储引擎,提供高效的索引和检索能力。编排工作由 LangChain 处理,而 Llama CPP 则实现了大模型的高效本地推理。该项目专为生产环境设计,具备基于 FastAPI 的 REST API 和 Docker 容器化功能,是开发者部署注重隐私、开源医疗 AI 解决方案的绝佳参考。
💡核心亮点
- ├─BioMistral 7B 医疗专用大模型
- ├─PubMedBERT 高性能嵌入模型
- └─Qdrant 自托管向量数据库
🎯适用人群
- ├─AI 工程师
- ├─医疗研究人员
- └─医疗软件开发者