三个月手搓一台掌上 AI 终端,从烧板到跑通 RPG 全程实录
OpenClaw in Your Hand: Building a Physical AI Terminal - Lech Kalinowski, Callstack · Lech Kalinowski
全片 25 分钟·真正值得盯屏约 6 分钟·2 个必看点
- 0:02 – 4:04听
从地下室的神秘终端说起
讲者用一台想象中的老式终端引出问题:如果设备天生就是为和大模型对话而生,它该长什么样。随后交代自己在孵化器里三个月做出实物的背景。
和大模型交互的第一性形态是文字,不是语音和摄像头。
这一段基本是讲者站着讲故事和铺设动机,画面停在标题页,闭着眼睛听不损失信息。▶ 跳到 0:02讲者 · Lech Kalinowski - 4:07 – 7:05略
双屏分工:动态层与稳定层
介绍这台设备最核心的交互设计——单色 OLED 承载正在输入、正在变化的内容,回车确认后再把结果渲染到电子纸上长时间停留。并说明固件用固定静态缓冲区和内存里的单比特位图直接画页面,没有排版引擎、不做动态内存分配。
用两块屏各司其职,绕开电子纸刷新慢的死穴,同时把功耗压到极低。
讲者靠一张交互示意图讲清两块屏的职责划分,图看懂了就够,中间大段是对固件精简程度的口头补充,可以快进着听。▶ 跳到 4:07讲者 · Lech Kalinowski - 7:06 – 9:46略
硬件清单与被烧掉的原型
拆解整机构成:ESP32 双核主控加 OLED、键盘、旋转编码器和独立供电单元。重点讲电源为什么是最难的一环——电流电压不稳和稳压器故障烧掉过原型和屏幕,配件重新采购等了好几周。
自制硬件的坑八成在供电和元件品质上,不在你以为的软件部分。
这里配的是元件清单和接线示意,扫一眼就能对上讲者在说哪块板子;烧板经历本身是口述,不必逐帧看。▶ 跳到 7:06讲者 · Lech Kalinowski - 9:51 – 13:20听
接口兼容性与真实代理任务
讲开源模型并不都遵循同一套接口约定,实际接入时撞了不少墙,解法是让代理层统一对外暴露一致的调用格式。随后展示终端下达「写一段 Java 示例并存到本地机器」这类命令是如何被真正执行的。
推理必须放在后端,端侧只当轻终端——目前没有能塞进这类微控制器的模型。
内容是接口踩坑的经验之谈,画面只是讲者本人和几行文字,听比看有效率。▶ 跳到 9:51讲者 · Lech Kalinowski - 13:20 – 16:54听
被忽视的「安静设备」缺口
讲者提出整个行业都在扎堆做带麦克风和摄像头的 AI 硬件,而「安静环境下不打扰任何人、只用来读和写纯文字」的设备几乎没人做,他已就此提交了临时专利。
全场最值钱的观点:市场空白不在算力,在使用场景的安静程度。
纯粹的观点输出,没有可看的东西,适合放着当播客听。▶ 跳到 13:20讲者 · Lech Kalinowski - 16:54 – 19:58看
上手演示:开机、教程、代理执行
先归纳几条核心心得,然后拿出实物演示:上电、连接本地 Wi-Fi、进入欢迎屏,敲 help 列出全部能力,走一遍内置的设备教程和游戏教程,最后让 OpenClaw 代理查询后端主机的磁盘空间。
一台真的能用的完整设备,不是渲染图也不是概念稿。
全程盯着那块小屏——开机自检、命令回显、代理返回的磁盘数据都在屏上一行行出现,错过画面就等于没看这场演讲。▶ 跳到 16:54讲者 · Lech Kalinowski - 20:12 – 23:12看
四个模型生成的 RPG 世界
演示 RPG 模式:Aldergan、Neon Abyss、the Hollows、Void Reach 四个世界任选,进入后 NPC 的性格、记忆、地图、技能乃至场景插画全部现场生成,插画还被转成单比特位图交给微控制器渲染。
整套游戏内容没有一行是预制的,全由模型端到端产出。
选世界、进场景、黑白点阵插画在小屏上一点点刷出来——这段的说服力完全来自屏幕上正在发生的事,文字描述替代不了。▶ 跳到 20:12讲者 · Lech Kalinowski - 23:15 – 24:33听
文字游戏背后的顶级算力
收尾点题:这个看起来朴素的文字游戏,背后跑的是后端主机上的开源大模型;讲者把整台设备定位成「一台用来玩大模型的 Game Boy」。
真正决定体验的是上下文,不是参数量那个数字。
结语和定位陈述,画面回到收尾页,听完这一分钟就完整了。▶ 跳到 23:15讲者 · Lech Kalinowski