花叔做了一组对照测试,同一个任务只改一句话,15 个名字各跑两次,又拿去画图、剪视频上试。「写得简洁一点」几乎没变化,名字越具体差别越大,借作家的名字还会把不想要的东西一起带进来。文末两段提示词能直接拿去,帮你找到属于自己的那个词。
写在前面
大家好,我是宋超。
你跟 CodeX 说过多少次「写得简洁一点」「做得高级一点」「更有质感一点」?说完以后,它交回来的东西真的变了吗?很多时候是没怎么变的,因为这些词太宽了,AI 只能猜一个它觉得对的方向。
今天推荐花叔的一次实验。他把同一个任务交给 AI,只改一句话,换了 15 种说法各跑两次,后来又换到画图和剪视频上测。结论很好记:泛泛的形容词几乎不起作用,一个具体的名字反而能把整篇东西改头换面。 他还顺手踩到一个坑,借名字会把你不想要的东西也带进来。读完你能带走两段可以直接发给 CodeX 的话,一段用来做对照测试,一段帮你从自己喜欢的文字里找到那个词。
AI 圈很有名的研究者 Andrej Karpathy 前几天发了条帖子,讲 AI 输出越来越多、越来越快,人怎么才能更容易看懂。他给的办法里有一个特别出圈:让 AI 用 ASD-STE100 来写解释。
ASD-STE100 是一套最早给航空维修手册用的「受控英语」规范,哪些词能用、一句话最多几个词,都规定得死死的。比如 ensure、prior to 这类词不在它的批准词表里,词典会直接给出该换成什么。
帖子火了以后,很多人当天就把这个词抄进了自己的全局配置里,好像捡到了一本秘籍。花叔提醒的就是这一点:AGENTS.md 这类配置文件每次开对话都会加载,写进去的词会把你所有的活都往一个方向拽。 你写周报、写公众号、写代码,AI 都在往航空维修手册的方向靠。Karpathy 拿它只是为了读懂一段解释,换个任务、换个模型,效果就不一定了。
咱们第四周装过 Skill、写过配置,这个提醒很实在:别人好用的词,不一定是你该长期挂着的词。
花叔的想法是,ASD-STE100 这种名字可能是「被压缩过的要求」,一个名字背后已经有一整套规则和作品,比「高级」「简洁」这种词指向更集中。这只是猜测,所以他动手测了一下。
测法就是控制变量:同一个任务,只改一句话,其他一个字不动;每个说法开一个全新的对话,互相看不到对方写了什么,自己电脑上的配置也都关掉。任务是给没学过机器学习的人解释一个概念,400 字以内。
他一共挑了 15 个名字,从写作结构、文章体裁到具体某位作家都有,每个跑两次,看同一个名字效果稳不稳。 用的提示词是这样的,任务和名字都能换成你自己的:
给经常用AI、但没有机器学习背景的读者,用中文解释RSI(Recursive Self-Improvement,递归自我改进,指AI参与改进AI)。用「{你想测的名字}」的写法来写。400字以内。只输出正文,不要说明你用了什么写法。
最意外的是「写得简洁一点」那组,几乎看不出变化。 花叔原本以为至少会短一点,可能现在的模型不用提醒也写得挺简洁了。
名字越具体,差别越大。用 ASD-STE100 的两次,都是小标题加编号步骤,「人」和「AI」从头到尾就这两个叫法,不换说法。换成体裁,整篇的样子都变了:用「药品说明书」的两次,都从【通用名称】写起,其中一版的【不良反应】一栏里,还顺手列了三条风险。
他按想要的效果给了一份参考:
用王小波名字的那组,两次 AI 都用第一人称讲了一段「我年轻时在云南插队」的经历,一次是修拖拉机的师傅,一次是打锤子的老铁匠。王小波年轻时确实在云南当过知青,但这两段故事全是 AI 编的。
这就是借名字的代价:你借一个人的名字,AI 会把这个人身上的东西一起搬进来,包括你不想要的那部分。 写公众号、写给客户的材料时尤其要当心,一段编出来的「亲身经历」混进去,读的人是分辨不出来的。所以用了名字以后,一定要跟不加要求的版本对着看一遍,看它到底改了什么、多出了什么。
后面这一半是训练营学员的内容。你要是学员,用手机号登录就能接着往下看。
登录后可以评论和点赞
还没有人说话,来做第一个