你好,我是 Kakarot

把好奇心,做成能用的东西。

我在做 AI Agent、开发工具和内容产品。喜欢把一个模糊的想法,慢慢变成真正能帮上忙的项目,也把过程写下来,和更多人分享。

AI Agent工具开发内容创作
看看我正在做什么↘

01Around the web

Links / 07
  1. AI 发展史 · 第 5 篇 · 约 11 分钟Transformer 剩下的零件:残差、层归一化和前馈网络一层 Transformer 里除了注意力,还有残差连接、层归一化和前馈网络。看这三样各自解决什么问题,再把它们拼成一层,叠出 96 层的 GPT-3。
  2. AI 发展史 · 第 4 篇 · 约 7 分钟Transformer 怎么知道词的顺序:位置编码注意力的计算里没有一步用到「这个词排在第几个」。看 Transformer 怎么把座位号写进词向量,从原论文的一排钟讲到现在大模型用的 RoPE。
  3. AI 发展史 · 第 3 篇 · 约 6 分钟多头注意力:为什么要分好几组 Q、K、V一组 Q、K、V 只能把一件事看清楚。看 Transformer 怎么让好几个头分头去看,再把结果拼起来,而且计算量几乎不变。
  4. AI 发展史 · 第 2 篇 · 约 7 分钟注意力分数是怎么算出来的:Q、K、V用搜索来类比,一步步看注意力怎么打分、怎么把分数变成百分比、怎么用百分比取信息,以及为什么要分成 Q、K、V 三个角色。

03Live from GitHub

Loading / 09
Kakarot 的头像

Kakarot

AI Agent Developer · Creator of Kakarot AI

@Zhangs-11 ↗
公开仓库
—
内容平台
7
~/Zhangs-11 — zsh

❯

正在读取公开项目……

04Selected work

全部作品 ↗
AI

01 / 智能应用

把复杂流程
变成自然对话

探索 AI Agent 如何连接真实数据、工具和动作,让工作从一次提问开始完成。

→

02 / 开发工具

让信息
顺畅地流动

记录我做过的脚本、工作流和自动化工具,把重复步骤变成可靠的协作过程。

字字字
字

03 / 内容与研究

把实践
写成可分享的内容

在公众号、博客和社区持续记录技术实践,也保留对产品与生活的独立判断。

05作品与服务

商业合作 ↗

把实际做过的东西整理在这里,看看它能怎样帮上忙。

大班科学活动《会变的影子》课件封面,小兔和小熊一起观察影子

教学材料 · 制作与修改

幼儿园教案
与配套课件

按班级、主题和格式要求制作。教案写清目标与活动,课件用大图和简短提问,引导幼儿观察、操作和交流。

Word 教案PPT 课件教师备注
查看案例与交付内容

06Say hello

有想法,
就聊聊。

zshuo0828@gmail.com↗
Kakarot 的个人微信二维码
扫码加我微信