Avatar

林子杨

AI软件开发工程师

深圳智软通科技有限公司

个人简介

我是深圳智软通科技有限公司的AI软件开发工程师,专注于RAG技术应用和基于多模态语音模型的实时对话智能体应用开发。我于2022年7月获得谢菲尔德大学计算机科学与人工智能学士学位,在那里我完成了题为"GLOM for Automatic Speech Recognition"的毕业论文项目(在自动语音识别领域参考GLOM架构理念,设计开发拥有更佳可解释性的表征学习模型),该项目由Anton Ragni博士指导。

兴趣爱好

  • 大型语言模型与应用开发
  • 检索增强生成技术(RAG)
  • 多模态学习
  • 语音处理
  • 机器学习基础

教育经历

  • 计算机科学与人工智能学士学位, 2018-2022

    谢菲尔德大学

最近文章

LLM Agent多轮对话技术解析:架构设计与实现策略

本文深入剖析了LLM Agent在多轮对话中面临的核心挑战,详细讲解了从ReAct架构到有限状态机的技术演进,以及各类记忆系统的实现方案,为构建高效、可靠的智能对话系统提供全面指南。

检索增强生成(RAG)技术全解析

本文深入剖析了检索增强生成(RAG)技术的核心架构、工作原理和前沿应用,从索引构建到检索策略,再到评估体系,全面解读这一连接大语言模型与外部知识的关键桥梁。

模型上下文协议(MCP):AI能力扩展的标准化框架

本文深入解析模型上下文协议(MCP)的核心架构、通信机制和实现方法,详细阐述了这一标准化协议如何实现LLM与外部工具的无缝对接,为构建可扩展、可互操作的AI生态系统奠定基础。

LLM工具调用:打破AI能力边界的关键技术

本文深入解析LLM工具调用的核心原理、技术实现、代码示例及最佳实践,详细阐述如何通过工具调用机制让大语言模型突破知识边界,实现与外部世界的交互。

TensorRT深度解析:高性能深度学习推理引擎

本文深入介绍了NVIDIA TensorRT的核心概念、关键特性、工作流程以及TensorRT-LLM,帮助开发者充分利用GPU加速深度学习推理,实现低延迟高吞吐量的模型部署。

RAG数据增强技术详解:突破语义鸿沟的关键方法

本文深入剖析了RAG系统中的数据增强/泛化技术,详细介绍了如何利用LLM生成多样化的虚拟查询来填补语义鸿沟,提高检索效果,并提供了实现细节、评估方法和最佳实践。

SIP与VoIP通信技术详解:从原理到实践的全面指南

本文深入剖析了SIP协议与VoIP技术的核心原理、关键组件和实现细节,包括信令流程、媒体传输、NAT穿越和安全机制,为读者提供全面的网络语音通信技术参考。

现代ASR技术解析:从传统模型到大语言模型驱动的新范式

本文深入分析了现代自动语音识别(ASR)技术的发展趋势,对比了Whisper和SenseVoice等先进模型的设计理念、技术特点、优势与局限性,为语音识别技术选型和应用提供全面参考。

现代TTS模型架构对比:十大语音合成模型深度剖析

本文对比分析了十种现代TTS模型架构的设计理念、技术特点、优势与局限性,包括Kokoro、CosyVoice、ChatTTS等主流模型,为语音合成技术选型和应用提供全面参考。

语音合成技术演进:从传统TTS到多模态语音模型

本文深入探讨了语音合成技术的发展历程,从传统TTS模型的局限性到大语言模型的融入,详细分析了音频编码器与神经编解码器的技术原理,以及现代TTS系统如何实现上下文感知的对话式语音合成。

项目

2020 评估编辑新闻标题的幽默程度

该项目旨在开发评估编辑新闻标题幽默程度的潜在解决方案

经历

 
 
 
 
 

AI软件开发工程师

深圳智软通科技有限公司

2024年3月 – 现在 深圳
工作职责包括:

  • 基于检索增强生成(RAG)技术设计和开发智能系统
  • 参与高级提示工程实践,提高大语言模型应用效果
  • 开发金融数据分析和政务问答智能体
  • 参与公司专有的多模态低延迟实时语音对话智能体开发
  • 基于vLLM和llama.cpp优化部署大型语言模型和嵌入模型
 
 
 
 
 

软件开发工程师

深圳市计量质量检测研究院

2022年11月 – 2024年3月 深圳
工作职责包括:

  • 开发电动汽车充电站验证平台网站
  • 电子元件CT在线检测项目开发
  • 基于计算机视觉技术开发工业相机应用
  • 参与基于Qt框架的跨平台应用开发
 
 
 
 
 

活动组织负责人

谢菲尔德大学人工智能社团

2020年9月 – 2021年7月 谢菲尔德,英国
负责在学期期间主持和组织AI相关学习项目(规划研讨会或校友讲座)。
 
 
 
 
 

暑期研习生

伦敦帝国理工学院

2020年6月 – 2020年7月 线上
参与由Lucia Specia教授指导的2020年NLP在线研究夏季项目,开发回归和分类模型来评估编辑后新闻标题的幽默程度。

专业知识

大型语言模型

Transformer架构、注意力机制、自监督学习、微调技术

提示工程

少样本学习、思维链、ReAct框架、提示模板设计

检索增强生成

向量检索、混合检索策略、文档分块、上下文优化

多模态学习

跨模态信息融合、多模态表示学习、对齐技术

机器学习基础

深度学习、强化学习、自然语言处理、计算机视觉

数学基础

线性代数、多变量微积分、概率论

联系方式