# Dr.Helper

**Repository Path**: wu-zhihaoZHIHAO/DialogicMed-AI

## Basic Information

- **Project Name**: Dr.Helper
- **Description**: Dr.Helper:对话式AI医疗辅助诊断系统
- **Primary Language**: Python
- **License**: MulanPSL-2.0
- **Default Branch**: master
- **Homepage**: None
- **GVP Project**: No

## Statistics

- **Stars**: 5
- **Forks**: 0
- **Created**: 2025-03-27
- **Last Updated**: 2025-09-19

## Categories & Tags

**Categories**: Uncategorized

**Tags**: Flask, Python, PyTorch

## README

# 🩺Dr.Helper:对话式 AI 医疗辅助诊断系统

## 📌 项目简介

**Dr.Helper** 是一款基于多模态人工智能技术构建的医疗辅助诊断系统，致力于**提升医生诊断效率**、**增强患者就医体验**，同时缓解当前医疗资源紧张、医患沟通效率低下等现实问题。系统融合语音识别、自然语言处理、命名实体识别、摘要生成等多个模型，打通了从“患者自述 → 医患对话 → 智能分析 → 诊断建议”的完整闭环。

与传统医疗系统不同，Dr.Helper 最大的亮点在于：

- 🧠 **“听得懂”医生与患者的真实对话** —— 支持语音输入，自动转写为文本；
- 🧾 **“看得懂”医学语言** —— 能从复杂的医学描述中提取病症、药品、检查项目等关键信息；
- 📋 **“写得出”辅助诊断报告** —— 自动生成结构化医疗摘要，供医生参考、患者查看；
- 🔁 **“用得上”的双端交互平台** —— 医生和患者各自拥有专属功能，提供智能医疗服务。

无论你是医院管理者、初级医生、医学生，还是在家自助问诊的普通用户，Dr.Helper 都将为你提供一份可靠、高效、便捷的医疗辅助体验。

---

## 🚀 项目亮点与创新点
![输入图片说明](flaskProject/static/image/%E6%8A%80%E6%9C%AF%E6%B5%81%E7%A8%8B.png)
- **🔀 双向服务架构**：分别为医生和患者量身打造操作界面，实现问诊数据的高效流转。
- **🧩 多模型融合**：
  - 🎤 FunASR：实时语音转写，提升医患沟通效率；
  - 📌 BERT-NER + MTL-SLI：精准提取医疗实体与症状；
  - 📝 T5-Pegasus：生成结构化诊断摘要；
  - 📝 星火大模型：生成可疑病症列表；
- **📦 可视化平台部署**：基于 Flask + HTML 构建交互式网页，支持语音识别、报告展示与下载；
- **🔐 高质量数据处理流程**：多重预处理机制，提升模型泛化能力和鲁棒性；
- **🧬 医学知识融合 AI 技术**：结合 IMCS 医患对话数据集，打造具备医学理解能力的对话系统。

---

## 💡 系统架构与技术方案
![项目技术研究路线](flaskProject/static/image/%E9%A1%B9%E7%9B%AE%E7%BB%93%E6%9E%84.jpg)
![项目技术实现流程](flaskProject/static/image/%E6%8A%80%E6%9C%AF%E6%B5%81%E7%A8%8B.png)

---

## 🖥️ 系统界面展示

![系统首页](flaskProject/static/image/%E9%A6%96%E9%A1%B5.png)
![患者自述](flaskProject/static/image/%E6%82%A3%E8%80%85.png)
![医患对话](flaskProject/static/image/%E5%8C%BB%E6%82%A3%E5%AF%B9%E8%AF%9D.png)
![辅助诊断](flaskProject/static/image/%E8%BE%85%E5%8A%A9%E8%AF%8A%E6%96%AD.png)
![疾病列表](flaskProject/static/image/%E7%9B%B8%E5%85%B3%E5%9F%BA%E6%9C%AC%E5%88%97%E8%A1%A8.png)