Hexo

前言

本文主要介绍个人 Agent 框架 cc_agent 的设计与实现,包括用户管理、会话管理、模型配置、Skill、MCP 工具调用以及完整的对话流程。

阅读全文 »

前言

在弄一些花时间的东西,太久没写了。将前段时间学的渗透总结分享下。

阅读全文 »

前言

在 2.LLM模型及训练 中,我曾介绍过 Transformer 的三类主要架构。不过当时刚开始系统学习 LLM,关注点主要集中在 Decoder 结构,对 Encoder 和 Encoder-Decoder 的理解还不够深入。

最近在学习记忆压缩相关方法时,需要重新梳理 Encoder 和 Encoder-Decoder 架构,也因此发现了之前文章中一些理解上的疏漏。因此,这次重新整理并撰写这篇文章,对decoder简单介绍,着重于其他两种结构。

阅读全文 »
0%
|