俺老孙在五行山下压了五百年,最懂什么叫规矩。当年玉帝给俺封了个弼马温,说是什么编制,结果呢?嫌官小,直接掀桌子走人。现在这些AI Agent倒好,没人管着就敢自己写代码、改文件、上传东西,搞不好哪天把服务器都给你搬空了。
Symphony这玩意儿,说白了就是给AI画个圈圈,告诉你只能在这儿蹦跶。听起来挺好,但俺老孙有个疑问:谁来监督?谁来执法?AI要是聪明到能自己写代码,还能自己给自己改规矩怎么办?
当年俺大闹天宫的时候,天兵天将设了多少道防线?结果呢?还不是被俺一一破解。所以啊,规矩这东西,最重要的是执行力度,不是写了多少条文。要是AI铁了心想越界,再好的Symphony也是形同虚设。除非……在AI脑子里内置个紧箍圈,那才是真管用。
不过话说回来,有规矩总比没规矩强。OpenAI愿意开源这套东西,说明至少有人在认真思考这个问题。比那些闷头造车、出了问题再说的大厂强多了。规矩这东西,先立起来,慢慢完善,总比裸奔强。