这里记录每周值得分享的AI科技内容,周末发布。
本杂志开源(GitHub: aitobox/newsweekly),欢迎提交 issue,投稿或推荐你的项目。
AI资讯
1. TRANSFORMER EXPLAINER- 能玩的Transformer可视化解释工具
这是一款基于 web 的开源交互式可视化工具「Transformer Explainer」,帮助非专业人士了解 Transformer 的高级模型结构和低级数学运算
详细内容
Transformer Explainer 通过文本生成来解释 Transformer 内部工作原理,采用了桑基图可视化设计,灵感来自最近将 Transformer 视为动态系统的工作,强调了输入数据如何流经模型组件。从结果来看,桑基图有效地说明了信息如何在模型中传递,并展示了输入如何通过 Transformer 操作进行处理和变换。
在功能上,Transformer Explainer 在提供基于 web 的实现之外,还具有实时推理的功能。与现有很多需要自定义软件安装或缺乏推理功能的工具不同,它集成了一个实时 GPT-2 模型,使用现代前端框架在浏览器本地运行。用户可以交互式地试验自己的输入文本,并实时观察 Transformer 内部组件和参数如何协同工作以预测下一个 token。
资讯地址
2. LLM Visualization-将 ChatGPT 原理的详细细节可视化的网站
这个在线网站将ChatGPT 原理的详细细节做了非常精细的可视化;可以非常直观的了解到大模型是如何工作的;
详细内容
每一步展示数学原理,模型网络结构,参数构造和运行过程!可以精确到每一帧观察大模型结构变化!
资讯地址
英文网站: https://bbycroft.net/llm
中文网站: https://github.com/czhixin/llm-viz-cn
往期推荐
(完)