简介

OculiChatDA 是一个眼科问诊的大模型,用户可以对眼睛相关的疾病进行问诊,获取专业的医学建议。同时模型拥有读图的能力,可通过眼底图判断是否为青光眼或糖尿病视网膜病变患者。 OculiChatDA的问诊数据集包含了眼科问诊的常见问题,可以进行多轮对话,支持多种对话场景,包括问诊、咨询、闲聊等。

开源不易,如果本项目帮到大家,可以右上角帮我点个 star~ ⭐⭐ , 您的 star ⭐是我们最大的鼓励,谢谢各位!

介绍

据估算,中国的医生和患者比例仅为西方国家的1/6。尽管国家在医疗卫生事业投入不断增加,医院数量和规模也大幅提升,但医生数量和质量仍然存在瓶颈。与此同时,城乡医疗资源的不均衡分布给农村和偏远地区的居民带来了极大的就医不便。

本项目基于以上现状,设计了一款低成本,先进的对话问诊系统,通过对话的方式,帮助患者迅速进行初步的诊断,并且给出合理的建议,同时,该模型已经初步具有“望闻问切”的一半能力,即。这一低成本、高效率的解决方案致力于填补医疗资源不足的空缺,为更多患者提供及时、便捷的医疗服务。

演示

 

Demo访问地址: OculiChatDA

效果展示:

模型

 

模型 基座 数据量 OpenXLab
OculiChatDA-chat-7b InternLM2-chat-7b 60K个对话 Open in OpenXLab

环境安装

 

conda create -n OculiChatDA python=3.10 # 不建议安装3.11以及以上版本, xtuner最新版只支持3.8~3.10
conda activate OculiChatDA
pip install -r requirements.txt

数据集

 

问诊数据集

 

  1. 眼科专业书籍
  2. 眼科习题
  3. 中医眼科
  4. MedDialog数据集

样例如下:

{
  "conversation": [
    {
      "system": "你是一名眼科专家,你需要解答患者的疑问,提供准确的回答,必要时,提醒患者及时挂号就医。\n当患者对症状描述不清时,你需要循序渐进的引导患者,询问患者的症状,以便给出准确的诊断。\n当患者上传眼底图时,你需调用Agent判断眼底图中是否存在青光眼和糖尿病视网膜病变,若存在,需要提醒患者及时就医。\n",
      "input": "什么是单纯疤疹病毒性角膜炎?",
      "output": "单纯疤疹病毒性角膜炎是由单纯疤疹病毒(HSV)引起的角膜感染,是一种常见的眼部疾病,也是致盲性角膜病的主要原因之一。它的特点是反复发作,多次发作会导致角膜逐渐混浊并最终可能导致失明。"
    }
  ]
}

训练细节

 

见 details.md

Web Demo

 

streamlit run web_demo.py --server.address=0.0.0.0 --server.port 7860 --server.enableStaticServing True

眼底病变诊断模型

 

目前支持青光眼分类、糖尿病视网膜病变分级、病理性近视分类,年龄相关性黄斑变性分类。

Action代码 fundus_diagnosis.py

模型训练代码详见: JieGenius/GlauClsDRGrading

项目参与人员

 

  1. 杨亚杰,组长,中国人民大学硕士毕业,现在某公司做算法工程师
  2. 李爽,职业算法工程师,主要从事于医疗算法的研发与研究。
  3. 江天松,南京理工大学计算机科学与工程学院硕士研究生。
  4. 李俊杰,中国人民大学研究生毕业,主要从事数据挖掘、数据分析建模相关工作。
  5. 徐翼萌,本科毕业于山东大学(威海),目前在中科院深圳先进技术研究院合成所做科研助理。

仓库地址

GitHub:https://github.com/JieGenius/OculiChatDA

网站免责声明
一、资源来源与版权

本网站所有资源及文章均源自互联网,经过我们的收集整理后呈现给用户。我们明确声明,本网站不直接参与任何资源的创作或制作过程,仅作为信息的传递者。若您发现本网站上的任何内容侵犯了您的合法权益(包括但不限于版权、商标权、专利权等),请立即通过以下联系方式与我们取得联系。在收到您的反馈并核实情况后,我们将迅速采取相应措施,包括但不限于删除侵权内容,以确保您的合法权益得到及时保护。

二、资源使用与责任

资源鉴别:本网站发布的资源可能包含水印、广告链接或其他引流信息,这是由资源原始来源决定的。我们提醒用户在使用这些资源时,应保持警惕,自行鉴别信息的真实性和适用性,避免受到不必要的干扰或误导。 非商业用途:本网站提供的资源仅供学习、研究及非商业性交流使用。我们鼓励用户尊重原创,支持正版。若您计划将本站资源用于商业目的,请务必先获得合法授权,否则因此产生的一切法律后果将由下载用户自行承担。

三、联系方式

为了更好地服务用户,解决您在使用本网站过程中可能遇到的问题或反馈侵权信息,我们提供了以下联系方式(请将“#”替换为“@”后使用): 联系方式:contact#kukaylib.com

四、免责条款

本网站致力于为用户提供高质量的信息服务,但对于因网络状况、第三方干扰、不可抗力等因素导致的服务中断、数据丢失、信息错误等问题,本网站不承担任何责任。同时,本网站对于用户在使用本站资源过程中可能产生的任何直接、间接、偶然、特殊或惩罚性损失,也不承担任何法律责任。 请用户在使用本网站时,务必遵守相关法律法规及道德准则,自行承担因使用本站资源而产生的所有风险和后果。

五、更新与修订

本网站有权随时更新或修订本免责声明,更新或修订后的免责声明一经发布即具有法律效力。用户应定期访问本页面以了解最新的免责声明内容。 感谢您对本网站的理解与支持!我们将继续努力,为用户提供更加优质、便捷的信息服务。