• 博客园logo
  • 会员
  • 周边
  • 新闻
  • 博问
  • 闪存
  • 赞助商
  • Chat2DB
    • 搜索
      所有博客
    • 搜索
      当前博客
  • 写随笔 我的博客 短消息 简洁模式
    用户头像
    我的博客 我的园子 账号设置 会员中心 简洁模式 ... 退出登录
    注册 登录

security-hyacinth

  • 博客园
  • 联系
  • 订阅
  • 管理

公告

上一页 1 ··· 14 15 16 17 18 19 20 21 22 ··· 36 下一页

2026年2月10日

63: 如何参与 vLLM 社区贡献:代码风格与 Lint

摘要: 作者:HOS(安全风信子) 日期:2026-01-21 来源平台:GitHub 摘要: 本文深入探讨 vLLM 社区的代码风格规范与 Lint 机制,详细介绍了 Black、Flake8、MyPy 等工具的配置和使用方法。通过真实案例和代码示例,帮助开发者掌握 vLLM 的代码风格要求,避免常见的风 阅读全文

posted @ 2026-02-10 23:39 安全风信子 阅读(36) 评论(0) 推荐(0)

62: 如何参与 vLLM 社区贡献:PR 提交流程

摘要: 作者:HOS(安全风信子) 日期:2026-01-21 来源平台:GitHub 摘要: 本文深入剖析 vLLM 社区的 Pull Request (PR) 提交流程,从 Fork 仓库到代码审查,再到最终合并,提供了一套完整的实践指南。通过真实案例、代码示例和最佳实践,帮助开发者掌握高效贡献 vLL 阅读全文

posted @ 2026-02-10 23:39 安全风信子 阅读(69) 评论(0) 推荐(0)

61: 如何参与 vLLM 社区贡献:Issue 识别

摘要: 作者:HOS(安全风信子) 日期:2026-01-21 来源平台:GitHub 摘要: 本文深入探讨如何有效参与 vLLM 社区贡献中的 Issue 识别环节,从 Issue 的重要性、分类、搜索策略到复现验证,全面覆盖 Issue 生命周期的各个阶段。通过详细的步骤指南、实用工具推荐、真实案例分析 阅读全文

posted @ 2026-02-10 23:38 安全风信子 阅读(35) 评论(0) 推荐(0)

2026年2月9日

60: vLLM 核心模块逐文件:utils.py

摘要: 作者:HOS(安全风信子) 日期:2026-01-21 来源平台:GitHub 摘要: 本文深入剖析 vLLM 核心工具模块 utils.py,揭示其在整个系统中的关键支撑作用。通过源码精读、架构分析与设计模式视角,详细讲解工具函数的实现机制、设计原则、与其他模块的交互关系以及在生产环境中的实际应用 阅读全文

posted @ 2026-02-09 12:59 安全风信子 阅读(23) 评论(0) 推荐(0)

59: vLLM 核心模块逐文件:ray_utils.py

摘要: 作者:HOS(安全风信子) 日期:2026-01-21 来源平台:GitHub 摘要: 本文深入剖析 vLLM 核心分布式模块 ray_utils.py,揭示其在大规模分布式推理中的关键作用。通过源码精读、架构分析与性能优化视角,详细讲解 Ray 分布式框架的集成机制、Actor 模型封装、资源管理 阅读全文

posted @ 2026-02-09 12:58 安全风信子 阅读(37) 评论(0) 推荐(0)

58: vLLM 核心模块逐文件:kv_cache.py

摘要: 作者:HOS(安全风信子) 日期:2026-01-21 来源平台:GitHub 摘要: 本文深入剖析 vLLM 核心缓存模块 kv_cache.py,揭示其在大模型推理中的关键作用。通过源码精读、架构分析与性能优化视角,详细讲解 Paged KVCache 的实现机制、内存管理策略、与主流框架的差异 阅读全文

posted @ 2026-02-09 12:57 安全风信子 阅读(118) 评论(0) 推荐(0)

57: vLLM 核心模块逐文件:sampling.py

摘要: 作者:HOS(安全风信子) 日期:2026-01-21 来源平台:GitHub 摘要: 本文深入剖析 vLLM 核心采样模块 sampling.py,揭示其在生成高质量文本过程中的关键作用。通过源码精读、架构分析与性能优化视角,详细讲解采样策略的实现机制、与主流框架的差异以及在生产环境中的实际应用。 阅读全文

posted @ 2026-02-09 12:56 安全风信子 阅读(35) 评论(0) 推荐(0)

56. vLLM 核心模块逐文件:api_server.py

摘要: 作者:HOS(安全风信子) 日期:2026-01-21 来源平台:GitHub 摘要: 本文深入剖析vLLM推理引擎中的api_server.py模块,作为vLLM的服务层核心,api_server.py负责处理外部请求、管理推理任务和返回生成结果。通过对其源码的精读,揭示vLLM API服务器的架 阅读全文

posted @ 2026-02-09 12:56 安全风信子 阅读(48) 评论(0) 推荐(0)

2026年2月8日

55. vLLM 核心模块逐文件:worker.py

摘要: 作者:HOS(安全风信子) 日期:2026-01-21 来源平台:GitHub 摘要: 本文深入剖析vLLM推理引擎中的Worker模块,作为分布式推理架构的核心执行单元,Worker负责模型加载、前向计算、采样生成等关键任务。通过对worker.py的源码级分析,揭示其在分布式推理中的设计思想、实 阅读全文

posted @ 2026-02-08 23:33 安全风信子 阅读(36) 评论(0) 推荐(0)

54. vLLM 核心模块逐文件:model_runner.py

摘要: 作者:HOS(安全风信子) 日期:2026-01-21 来源平台:GitHub 摘要: 本文深入解析vLLM核心模块model_runner.py,揭示其在大模型推理系统中的关键作用。文章从模型加载、前向计算、采样生成到分布式执行,全面剖析model_runner.py的工作原理。结合真实代码案例与 阅读全文

posted @ 2026-02-08 23:33 安全风信子 阅读(33) 评论(0) 推荐(0)

上一页 1 ··· 14 15 16 17 18 19 20 21 22 ··· 36 下一页
 
博客园  ©  2004-2026
浙公网安备 33010602011771号 浙ICP备2021040463号-3