项目经历
探索前沿技术,创造实用解决方案
校企联合项目
智能会议室系统
智能会议室系统
开发基于ASR、LLM的本地化智能会议系统,涵盖语音识别、说话人识别、智能总结会议、提取任务清单等功能。
- 基于FunASR实现流式ASR,加入LLM Refine模块纠正识别错误字
- 基于CAM++与聚类算法实现说话人识别,结合降噪模块实现实验环境下100%准确率与实际场景94%识别准确率
- 基于Dify/LangGraph实现会议总结,达到内部测试93%格式遵从度与95%内容准确度
已完成
校企联合项目
智能家装报价助手
智能家装报价助手
智能家装报价助手,接收设计师家装CAD图,遵循报价规则,实现CAD解析->实体识别->报价计算->LLM写入系统。
- 负责整体技术框架设计与MVP版本实现
- 负责后端,使用FastAPI、Pydantic、SQLAlchemy、Alembic、Docker Compose实现。使用上下文管理与依赖注入实现数据库连接管理、身份认证、权限管理
- 协助前端完成ERP系统内助手悬浮球设计
- 协助完成CAD解析程序,实现区域划分、新旧墙识别等功能
- 完成ERP系统Clinet MCP开发。基于FastMCP开发ERP系统客户端,供LLM报价助手实现自动写入系统,实现数据审查、错误处理、流程控制
已完成一期试点
实习项目
智能语音情绪识别助手
智能语音情绪识别助手
混合音频、文本两种模态进行情绪分析,使用SenceVoice与Qwen2.5-7b-FP8搭建情绪分析工作流,在客服场景下实现实时分析用户情绪,知识库资料查询,建议回复生成等功能。
- 在团队内担任技术领导,带领队员在一个月内提前完成任务
- 规范git流程,使用APIfox管理、自动化测试后端接口
已完成
本科毕设
智能旅游助手
基于LLM与数字人的智能旅游助手
实现了一个LLM驱动的数字人,结合导游话术知识库实现珠海地区旅游助手。
- 使用Qwen2.5-4b在RK3588开发板进行模型部署
- 使用wav2lip与Unity实现数字人交互
已完成