Agent-OS：用AI掌控你的电脑！！这个 AI 代理可以控制你的电脑并做任何事情！（生成应用程序、代码、RAG 等）

Python编程杰哥

于 2024-09-28 20:12:00 发布

阅读量441

点赞数 13

文章标签：人工智能算法机器学习 github ui

本文链接：https://blog.csdn.net/xx_nm98/article/details/142620914

版权

介绍Open interpreter最佳功能之一：OS 模式，如果不太了解这个开源项目，让我给你一个快速概述：

Open interpreter 是一个 AI 代理，它几乎可以做任何你想做的事情，你只需给它一个提示，它就可以使用各种工具执行各种任务。

它使用 LLMS 运行Python、JavaScript、Shell 和其他更多本地代码，从而能够完成你需要的几乎任何任务。

OS 模式允许开放解释器查看屏幕上的内容并控制计算机输入、然后通过鼠标和键盘直观地控制操作系统，它提供了一个多模式 LLM ，如 GPT 4V。

它会尝试使用最直接的方法来实现其目标，例如在 Mac 上使用 Spotlight 打开应用程序，使用 URL 中的查询参数打开包含附加信息的网站，这样它基本上就可以控制你的电脑并做很多很酷的事情。

Open interpreter捕捉你的屏幕，并将其提供给 LLM 来确定屏幕上发生了什么，并决定下一步的操作 —— 这可能是AI控制整个操作的有效工作流程系统。

但由于它目前处于实验模式，可能会出错，所以无论如何请谨慎使用，现在让我们尝试一下，看看它是否真的可以实现它的目标。

首先，我们需要安装开放解释器，要安装它，只需打开你的终端并运行此命令 pip install open-interpreter。

在这里插入图片描述

OS 模式，我们想尝试一下

使用它只需运行带有 OS 标志的 Interpreter 命令，它将在 OS 模式下启动，第一次运行它时，它会要求安装一些软件包并请求权限。

只需批准它，它就会启动，你还需要输入 OpenAI API 密钥。

在这里插入图片描述

你没有OpenAI Key？没关系这个其实很好解决（但是有些没视觉）：

国内很多模型比如Kimi、智谱（GLM-4-Flash 免费今天了）等等大模型都兼容OpenAI格式，你只需要把你运行open-interpreter项目环境里的openai包的base_url改掉就行，

除此以外使用One-API也可以把其他大模型转为Openai格式，

当然，还有许多免费的Chatgpt API项目，都可以。

配置好之后，现在你可以要求它做任何事情，所以让我们要求它做一些简单的事情，让我们要求它打开 vs code，让我们发送提示，

在这里插入图片描述

你可以看到 vs code 已经打开了，它首先编写了一个苹果脚本来打开应用程序，然后截取屏幕截图，将其提供给 llm，llm 确认它已经打开，

一旦它验证了这一点，它就会将任务标记为已完成（上面他最终输出已完成），这很棒，因为它不只是假设任务已经完成，它确保了这一点。

现在让我们让它做一些更复杂的事情，让我们让它打开 Safari 浏览器，去谷歌搜索 Groq：

在这里插入图片描述

他完成了，相当酷。

现在让我们尝试一些更具挑战性的事情，让我们要求它从互联网上获取一些数据，比如苹果股票的当前价格，你可以看到它100%正确，这意味着它在这方面也做得很好：

让我们再要求它创建一个新的项目目录并在 vs code 中打开它，这将帮助我们了解它是否可以处理文件管理和其他任务。

你可以看到它有能力做到这一点，这也非常令人印象深刻。

我认为它几乎可以做任何事情，是的，它可能会消耗大量的代币，但我认为人工智能可以控制你的整个电脑真是太疯狂了！

它比过时的代理如 Agent Zero 或 Agent K 要好得多，我认为Open interpreter可能是最好的人工智能代理之一，因为它工作得很好，速度极快，它在一分钟内完成任务，这真的很酷。

如何学习大模型 AI ？

由于新岗位的生产效率，要优于被取代岗位的生产效率，所以实际上整个社会的生产效率是提升的。

但是具体到个人，只能说是：

“最先掌握AI的人，将会比较晚掌握AI的人有竞争优势”。

这句话，放在计算机、互联网、移动互联网的开局时期，都是一样的道理。

我在一线互联网企业工作十余年里，指导过不少同行后辈。帮助很多人得到了学习和成长。

我意识到有很多经验和知识值得分享给大家，也可以通过我们的能力和经验解答大家在人工智能学习中的很多困惑，所以在工作繁忙的情况下还是坚持各种整理和分享。但苦于知识传播途径有限，很多互联网行业朋友无法获得正确的资料得到学习提升，故此将并将重要的AI大模型资料包括AI大模型入门学习思维导图、精品AI大模型学习书籍手册、视频教程、实战学习等录播视频免费分享出来。

在这里插入图片描述