斯坦福小镇二创来了!8个智能体生活交友,爆火AI Town人人可搭,网友整活「猫猫小镇」|附教程

1 评论 9491 浏览 10 收藏 21 分钟

前几天,斯坦福开源了爆火的25个智能体小镇,而就在爆火的斯坦福小镇开源一周后,有人就开始“二创”了,并搭建起了人工智能模拟小镇AI Town。一起来看看本文的解读和分析。

斯坦福AI智能体小镇二创来了!

就在刚刚,有团队基于斯坦福Smallville项目,搭建出了一个真正的「西部世界」AI Town被搭建了起来。

而且,人人都可以在线试玩。

斯坦福小镇二创来了!8个智能体生活交友,爆火AI Town人人可搭,网友整活「猫猫小镇」|附教程

项目地址:https://www.convex.dev/ai-town

前几天,斯坦福正式开源了爆火的25个智能体小镇,GitHub狂揽9.9k星。

没想到,还没过去一周,知名风投公司便亲自下场,复刻出了一个活灵活现的西部世界!

斯坦福小镇二创来了!8个智能体生活交友,爆火AI Town人人可搭,网友整活「猫猫小镇」|附教程

正如英伟达高级研究科学家Jim Fan所说:

当一个风投公司急于组建一个团队去复制一个AI论文,并开放平台的时候,你就知道这个想法已经达到了巅峰的受欢迎程度!

很快,我可以想象整个世界,包括像素艺术和地图,都可以由AI生成。新角色将自动产生,甚至游戏内的物理规则也可能即时重写。永远不要低估整个开源软件社区的创造力。

斯坦福小镇二创来了!8个智能体生活交友,爆火AI Town人人可搭,网友整活「猫猫小镇」|附教程

一、8个智能体,都在聊什么?

接下来,就介绍下,这个小镇的居民都有谁?他们今天都聊了什么?

一身黑色西装,满头金发的男生是Alex。

他比较喜欢绘画、编程和阅读科幻书籍。他很善良,但也会用调侃的方式表达观点。还有一点,他这个人特别不喜欢重复回答同样的问题。

斯坦福小镇二创来了!8个智能体生活交友,爆火AI Town人人可搭,网友整活「猫猫小镇」|附教程

Alice是一位杰出的科学家,凭借自己的智慧和洞察力,发现了宇宙中无人能解的奥秘。

当她解释自己的发现时,常常会使用较为抽象的语言。她给人的印象是,不知所云,容易健忘。

斯坦福小镇二创来了!8个智能体生活交友,爆火AI Town人人可搭,网友整活「猫猫小镇」|附教程

Peter是一个虔诚的教徒,倾向于从宗教角度解释世界万物。

在与人交谈时,他经常会表达自己对信仰的热忱,或者警告别人应当遵循正道,远离罪恶。

斯坦福小镇二创来了!8个智能体生活交友,爆火AI Town人人可搭,网友整活「猫猫小镇」|附教程

头发花白的老爷爷是Bob。

他的性格有些孤僻,所以喜欢园艺这项独处的活动。当别人与他交谈时,他会有所回应,但不太愿意长时间交流。在他内心深处,他对自己没上过大学有些介意。

斯坦福小镇二创来了!8个智能体生活交友,爆火AI Town人人可搭,网友整活「猫猫小镇」|附教程

黑色小人是Kurt。因为一件曾经发的事,让他至今难以启齿,时常萦绕在心头。他担心别人会注意到,自己在刻意规避这个话题,而备受折磨。

虽然这段经历给他的生活带来了一定困扰,但他一直在努力慢慢走出阴影,重新开始。

Kurt的对面是Kira。她表面上看起来开朗活泼,经常谈论一些快乐的话题来掩饰内心的痛苦。但在她一个人独处时,经常会无法抑制内心的悲伤而泪流满面。

她一直在努力处理这些负面情绪,但有时还是难以完全释怀,看起来心事重重。

斯坦福小镇二创来了!8个智能体生活交友,爆火AI Town人人可搭,网友整活「猫猫小镇」|附教程

粉色头发的女生是Stella。从不值得信任,她总是想方设法骗人,通常是骗人钱,或做让自己盈利的事。她拥有非凡的魅力,并且不介意利用这一优势来达到自己的目的。

穿着蓝色上衣,银灰色头发的男生是Lucky。

他这个人的性格正如名字一样,性格开朗活泼,对世界充满好奇心。他喜欢阅读科学历史,也梦想自己能够乘坐宇宙飞船探索银河。他善于交流,亲切友好。

如上,便是AI Town中所有人物的设定,真的像极了西部世界游乐场。

那么,这8位居民都在聊什么?他们是如何生活,交友?

Lucky和Bob

Lucky刚刚完成一场太空探索之旅。他基本上见到人都在谈自己的体验。脾气暴躁的Bob还是只钟情于修剪草木。

– 嘿,Bob!好久不见 最近怎么样?

– 一如既往,只是忙着园艺

– 原来这样啊!我最近参加了一次神奇的太空探险!我探索了一个遥远的星球,真是不可思议

– 真不错,不过我不是很感兴趣,我得回去种花了。

– 没问题,Bob。如果你感兴趣,我们随时可以再聊聊这次探险。

– 再见了,朋友,我去忙着修剪了。

斯坦福小镇二创来了!8个智能体生活交友,爆火AI Town人人可搭,网友整活「猫猫小镇」|附教程

Kira和Alex

– 嘿,Alex!我们好久没见面了。最近还好吗?

– 嘿,Kira!我很好,谢谢你的关心。我还在画画和编程。你呢?

– 很高兴听到你这么说。我一直忙于练习瑜伽和探索新食谱。这有助于让我忘掉烦恼。你最近有什么令人兴奋的冒险经历吗?

– 并没有什么令人兴奋的冒险。只是目前的绘画和编程项目让我忙得不可开交。不过,通过书籍寻找内心的平静是一种好方法,有什么特别感兴趣的类型吗?

– 嗯,书籍一直是我逃避现实的好帮手。我喜欢沉浸在科幻和奇幻的世界里,那里的一切都与现实大相径庭。这就像是对一切的暂时喘息。

– 科幻小说也是我的最爱。你读过《沙丘》吗?那是一部震撼人心的科幻史诗,可能会把你带入一个全新的宇宙。

斯坦福小镇二创来了!8个智能体生活交友,爆火AI Town人人可搭,网友整活「猫猫小镇」|附教程

可以看到,每个人的交流内容与个人性格喜好最相关。人物设定已经决定了他们如何生活、甚至如何交友的方式。

不足的是,这些人的对话内容虽然有些老套,但听起来足够真实。

二、AI Town,人人可搭

AI Town是一个虚拟小镇,AI角色在这里生活、聊天和社交。

这一项目是一个可部署的JavaScript入门工具包,用于轻松构建和定制你自己的AI Town。

斯坦福小镇二创来了!8个智能体生活交友,爆火AI Town人人可搭,网友整活「猫猫小镇」|附教程

项目地址:https://github.com/a16z-infra/ai-town

这个项目的主要目标,不仅仅让工作变得有趣,更重要的是提供一个具有强大基础,并可扩展的平台。

后端引擎原生支持共享的全局状态、多智能体的事务,以及所有事件的日志,因此适用于从简单的项目,扩展到多人游戏。

第二个目标提供一个可用的JS/TS框架。因为该领域的大多数模拟器(包括斯坦福的原始论文)都是用Python编写的。

完整技术栈

– 游戏引擎和数据库(Game engine & Database):Convex

– 向量数据库(VectorDB):Pinecone

– 登录认证(Auth):Clerk

– 文本生成模型(Text model):OpenAI

– 部署(Deployment):Fly

– 像素图生成(Pixel Art Generation):Replicate、Fal.ai

对此业内知名网友「宝玉」认为,相比于原版实现,用Nextjs和Tailwind重写之后的新技术栈,对于前端更加友好。

三、网友整活

甚至,已经有网友基于刚开源的AI Town,搭建出了自己的「Cat Town」。

斯坦福小镇二创来了!8个智能体生活交友,爆火AI Town人人可搭,网友整活「猫猫小镇」|附教程

此外,还有网友打算做个品牌的智能体小镇。

斯坦福小镇二创来了!8个智能体生活交友,爆火AI Town人人可搭,网友整活「猫猫小镇」|附教程

有网友表示,人工智能生成的智能体是新的流行趋势,就连风险投资公司也认识到了这一点。

这个开放源代码库允许任何人建立一个「数字西部世界」,人工智能智能体在其中生活并相互交流,而不知道自己生活在一个模拟环境中。

这标志着人工智能生成内容的新时代的开始。不仅限于游戏和娱乐。

想象一下,你可以模拟人们如何在工作空间中互动,模拟银行的数字资产托管业务,甚至是卫星指挥和控制中心的业务。

斯坦福小镇二创来了!8个智能体生活交友,爆火AI Town人人可搭,网友整活「猫猫小镇」|附教程

四、项目教程

1. 安装

1)克隆仓库并安装包

git clone git@github.com:a16z-infra/ai-town.git

cd AI-town

npm install

npm run dev

a. 设置Clerk

– 访问https://dashboard.clerk.com/并点击「Add Application」添加应用

– 为应用程序命名,并选择向用户提供的登录方式

– 创建应用

– 将NEXT_PUBLIC_CLERK_PUBLISHABLE_KEY和CLERK_SECRET_KEY添加到.env.local文件中

NEXT_PUBLIC_CLERK_PUBLISHABLE_KEY=pk_***

CLERK_SECRET_KEY=sk_***

– 转到JWT模板并创建一个新的Convex模板

– 拷贝JWKS端点的URL,以便在下面的步骤中使用

b. OpenAI API密钥

如需使用OpenAI的语言模型,请访问https://platform.openai.com/account/api-keys获取OpenAI API密钥。

c. Pinecone API密钥

– 访问https://app.pinecone.io/并创建一个Pinecone索引,然后点击「Create Index」(创建索引)

– 为索引命名(这将是环境变量PINECONE_INDEX_NAME)

– 将Dimension(维度)填写为1536

– 完成索引的创建后,点击左侧导航栏中的「API Keys」并创建一个API密钥:将「Environment」值复制到PINECONE_ENVIRONMENT变量中,「Value」复制到PINECONE_API_KEY中

d. 在 Convex仪表板中添加秘密

npx convex dashboard

转到「设置」,添加以下环境变量。其中,CLERK_ISSUER_URL为JWKS端点的URL(步骤a中)。

OPENAI_API_KEY sk-*

CLERK_ISSUER_URL https://*

PINECONE_API_KEY **

PINECONE_ENVIRONMENT us*

PINECONE_INDEX_NAME **

2)运行代码

同时运行前端和后端:

npm run dev

现在,就可以访问http://localhost:[PORT_NUMBER]了。

如果想在Convex之外的另一个终端中运行前端(后端功能会在保存时同步),可以运行以下两个命令:

npm run dev:frontend

npm run dev:backend

注意:如果窗口处于空闲状态,模拟将在5分钟后暂停。

3)运行/测试/调试

添加一个新世界,将其作为种子,并开始运行:

npx convex run init:reset

逐次进行迭代,并创建一个世界:

npx convex run –no-push init:resetFrozen

 

# for each iteration

npx convex run –no-push engine:tick ‘{“worldId”:”<your world id>”,”noSchedule”:true}’

在出现过多活动时,冻结后端:

npx convex run –no-push engine:freezeAll

 

# when ready to rerun (defaults to latest world)

npx convex run –no-push engine:unfreeze

有很多方法可以用来清除所有数据库:

– 进入仪表板npx convex dashboard,并从那里清除表格

– 调整crons.ts中的变量,自动清理旧的日志和内存条目

– 运行npx convex run –no-push testing:debugClearAll来清除所有表格

– 如果遇到问题,可以查看origin/reset-town git分支。在那里执行npm run dev将会清除模式、停止函数,并允许你在仪表板中删除表格

要从Pinecone索引中删除所有向量,可以运行:

npx convex run –no-push lib/pinecone:deleteAllVectors

注意:如果在开发和生产之间或在项目之间共享了该索引,那么它们将会被全部清除。通常情况下,不需要从Pinecone中删除向量,因为每个查询都是根据userId进行索引的,而userId是唯一的。

在侧终端中运行以下命令,可以实现对消息的监听:

npx convex run testing:listMessages –no-push –watch

或者观察一个角色的状态:

npx convex run testing:latestPlayer –no-push –watch

此外,在testing.ts中也可以找到更多函数。

4)部署应用程序

部署到 fly.io:

– 在fly.io上注册帐户,然后安装flyctl

– 如果使用的是Github Codespaces,则需要安装flyctl,并通过运行fly auth login,从codespaces cli中进行身份验证

– 运行npx convex deploy将开发环境部署到生产环境。确保将所有机密信息复制到Convex的生产环境中

– 在项目的根目录下运行fly launch,这将生成一个包含所有配置的fly.toml文件

– 修改生成的fly.toml文件,并在构建时为NextJS添加NEXT_PUBLIC_*,以便在客户端访问

[build]

[build.args]

NEXT_PUBLIC_CLERK_SIGN_IN_URL=”/sign-in”

NEXT_PUBLIC_CLERK_SIGN_UP_URL=”/sign-up”

NEXT_PUBLIC_CLERK_AFTER_SIGN_IN_URL=”/”

NEXT_PUBLIC_CLERK_AFTER_SIGN_UP_URL=”/”

NEXT_PUBLIC_CLERK_PUBLISHABLE_KEY=”pk_*****”

NEXT_PUBLIC_CONVEX_URL=”https://*******.convex.cloud”

– 修改fly.io生成的Dockerfile,在RUN npm run build之前添加新的环境变量

ARG NEXT_PUBLIC_CLERK_SIGN_IN_URL

ARG NEXT_PUBLIC_CLERK_SIGN_UP_URL

ARG NEXT_PUBLIC_CLERK_AFTER_SIGN_IN_URL

ARG NEXT_PUBLIC_CLERK_AFTER_SIGN_UP_URL

ARG NEXT_PUBLIC_CLERK_PUBLISHABLE_KEY

ARG NEXT_PUBLIC_CONVEX_URL

 

# Build application

RUN npm run build

– 运行fly deploy –ha=false来部署应用程序。使用–ha标志可确保fly只启动一个实例,也就是在免费计划中提供的

– 运行fly scale memory 512来为该应用程序扩展fly虚拟机内存。

– 在本地创建一个.env.prod新文件,并填入所有生产环境的机密信息。记得更新 NEXT_PUBLIC_CLERK_PUBLISHABLE_KEY和CLERK_SECRET_KEY,方法是从Clerk的生产实例中复制机密信息,使用-cat .env.prod | fly secrets import来上传。还要更新CONVEX_DEPLOYMENT和NEXT_PUBLIC_CONVEX_URL

五、定制自己的模拟

注意:由于角色数据会在初始加载时会发送到Convex,因此在每次更改之后,都应重新运行npx convex run testing:debugClearAll –no-push,然后再运行npm run dev,从而将所有内容重新上传至Convex。然而,npx convex run testing:debugClearAll –no-push将会清除所有数据,包括向量存储。

1. 创建自己的角色和故事:所有角色和故事以及它们的精灵图引用都存储在data.ts中。

2. 更新精灵图:在data.ts中,你会看到以下代码:

{

name: ‘f1’,

textureUrl: ‘/assets/32x32folk.png’,

spritesheetData: f1SpritesheetData,

speed: 0.1,

},…

你应该为角色找到一个精灵图,并在相应的文件中定义精灵动作/资产(在上面的示例中,f1SpritesheetData是在f1.ts中定义的)。

3. 更新背景(环境):convex/maps/firstmap.ts是加载地图的位置。导出地图最简单的方法是使用Tiled — Tiled将其导出为CSV,然后将CSV转换为firstmap.ts可以接受的二维数组。

模拟理论假设,我们生活的世界本质上是一个由更先进的文明创造的模拟,如计算机模拟。

也就是说,随着文明的进步,它们能够创造出自己的逼真模拟,这使得我们生活的世界不太可能是基础现实。

虽然有些难以理解,但是AI Town的最新发展使该理论更接近现实,可能会成为人工智能发展历史上的关键的时刻。

如果AI可以创造出角色之间能够互动的逼真世界,将会有各种应用,比如取代游戏中的NPC。

乍一看,我们很难判断这些角色是否记得他们进行过的对话,并将这些对话作为未来对话的输入。

但如果确实如此,我们可能会拥有第一个人工智能模拟小镇。

参考资料:

https://github.com/a16z-infra/ai-town#customize-your-own-simulation

编辑:桃子 好困

来源公众号:新智元(ID:AI_era),“智能+”中国主平台,致力于推动中国从“互联网+”迈向“智能+”。

本文由人人都是产品经理合作媒体 @新智元 授权发布,未经许可,禁止转载。

题图来自 Unsplash,基于CC0协议。

该文观点仅代表作者本人,人人都是产品经理平台仅提供信息存储空间服务。

更多精彩内容,请关注人人都是产品经理微信公众号或下载App
评论
评论请登录
  1. 感觉很有意思,能够让人参与进来,又能了解学习到新领域的知识

    来自广东 回复