项目地址:https://github.com/moeru-ai/airi/她可以干什么实时语音陪玩游戏在Discord和Telegram上聊天使用Mineflayer玩《我的世界》结合YOLO视觉识别在
Voyager使用的是一个流行的Javascript Minecraft 操作库 (Mineflayer)。
使用Mineflayer提供的对Minecraft中基本动作的封装,作者将文本/图像形式的想象输入给GPT-4(V),要求生成代码调用Mineflayer的接口、在游戏中创造相应建筑。
模拟环境建立在 MineDojo 的基础上,并利用 Mineflayer 的 JavaScript APIs 进行电机控制。
例如,Voyager通过调用Mineflayer API接口来获取各种技能并探索世界。 研究人员在Minecraft等模拟环境中探索代理的行为,以解决物理世界机器人操作员和数据集稀缺的问题。
例如,VOYAGER利用GPT-4的代码生成能力,通过与流行的Mineflayer API交互来玩《我的世界》(Mojang工作室,2011)。