Hi~ ByteDance !

秦洋 / Bob

Agentic Engineering Multimodality AIGC

"人生就是一个字:Passion!!!"

趣丸科技
多模态 · Agent · 高级算法工程师
光魔科技
AIGC · 算法工程师
澳门科技大学
理学硕士 · 应用数学与数据科学
佛山大学
工学学士 · 数据科学与大数据技术
SCROLL

光魔科技(深圳)有限公司

白日梦AI/MagicLightAI · 算法工程师

AIGC产品全流程研发

参与海内外 AI 长视频生成产品全流程算法研发,覆盖 文本 → 图像 → 视频 全链路,深入理解 AIGC 业务流与算法落地。

大模型效果与成本优化

重构故事转剧本 LLM;优化影视内容提示词工程;调用成本降低 40%;FLUX 提示词扩写优化。

人脸一致性 / 换脸

从零构建人脸处理模块:人物重定位 + InstantID / PuLID 一致性 + 人脸融合,达到消费级图像质量。

区域提示词控制

基于 Kolors 实现 Attention 层区域隔离 + IPAdapter,实现生成内容与人物的区域控制。

软硬结合的区域控制

Inpainting + Pose + IPAdapter 方案,缓解区域间干扰,减少人物动作畸形。

人物对口型

Audio2Lips + FaceDriven 融合方案,短耗时低开销,提升人脸动态效果与对口型精准度。

图生视频 / 动作驱动

开源 DynamiCrafter / CogVideoX / Wan2.1;闭源 Pika / RunWay / MiniMax API 对接与优化。

广州趣丸网络科技有限公司

All Voice Lab 事业部 · 高级算法工程师

多模态视频理解与内容感知

视频字幕 OCR

优化视频字幕 OCR 系统架构与难样本训练,效果 98% / 性能提升 85%;微调 VLM-based OCR 达 99%+ 准确率、80IPS;构建含 3 类指标 15 个模型的 Benchmark。

多模态说话人分割

V1: 3D-Speaker + 唇动检测 + 人脸追踪 + 改进聚类,相对纯声纹提升 10 个点
V2: 多模态大模型匹配(ASR + OCR + 多轮对话 + 全局角色管理)。

多模态影视数据标注

基于 Gemini 为长视频(2h+)做细粒度多维度数据标注,覆盖 对话、场景、镜头、角色 等类别,支撑下游模型训练。

Agent 探索与应用

Agent 系统优化

  • 构建分层分级、自然学习与衰退的 记忆系统,节省 80% 记忆 token 加载
  • 优化 compact 机制,提升长任务的可持续性与上下文知识沉淀
  • 构建个性化 skill(know each-other),初始化并持续优化 Agent 行为风格与用户画像

智能营销 Agent

  • 从 0 到 1 设计与构建营销 Agent 系统
  • 基于 LangGraph 设计 常驻 / 业务 / 执行 三个 Node 层级
  • 设计人机交互、多任务协同、目标持久化、知识沉淀等特性
  • 与市场团队共建 AI Native 团队,实现营销业务闭环与新范式探索

AutoResearch on OCR

  • 基于 AutoResearch 范式框架进行 OCR 模型的推理速度优化
  • 探索 12 个模型的性能极限,并沉淀具体算法场景使用经验

Agent for Node-based workflow

  • 牵头完成团队内部原子能力的 Node 化与 Skill 化
  • 协助内部画布流产品进行 Agent 化改造与workflow生成

期待与团队一起探索AI领域的边界