你有没有在会议上走神,错过领导的重要指示?或者想知道自己一天的电脑时间都花在哪了?现在,有一款神器可以帮你解决这些烦恼!
screenpipe,一款开源的、全天候运行的 AI 屏幕和麦克风捕捉应用程序。它可以24小时不间断地捕捉你的屏幕和音频。相当于给自己在电脑上装了个私人秘书!
当你走神时,它帮你回顾刚才发生了什么;
当你想提升效率时,它让你清楚知道时间都用在了哪里。
想象一下,有了 screenpipe,你再也不用担心错过任何重要信息,也能更好地管理自己的工作时间。是不是很心动?让我们一起来了解这款强大的工具吧!
一、screenpipe是什么?
它是一个可以7x24小时捕捉你电脑屏幕和麦克风的工具,并且把记录下来的内容用Ai做分析,你可以利用它来驱动属于自己的个性化Ai助理。
screenpipe是用Rust语言打造的,可以运行在Windows、Mac以及Linux等操作系统上,并且捕捉到的电脑活动存储在本地,你对自己的数据有绝对的控制权,隐私方面还是挺棒的!
二、开箱试用
2.1 官方示例:
用户:告诉我我在上午9:30做了什么,给我看一个视频
screenpipe:将上午9.30的录屏返回了回来,可以看到自己在该时间段,自己在电脑上操作了什么。
2.2 场景示例
2.2.1 场景一:每日摘要
工作流程:
- 24/7屏幕监控:screenpipe全天捕捉您的屏幕活动。
- ai分析:llama 3.2(或其他ai模型)处理并分析捕获的屏幕数据。
- 摘要生成:人工智能生成您日常活动的全面摘要。
- 电子邮件传递:每天结束时都会向您发送包含摘要的自动电子邮件。
优势:
- 了解日常工作效率和时间分配。
- 追踪和审查您的工作进度。
- 找出日常生活中需要改进的地方,做一个时间管理大师。
2.2.2 场景二:私人秘书
工作流程:
- 会议捕获:screenpipe 记录您的会议的音频和视频。
- 本地转录:solar pro 22b(在 ollama 上运行)在您的 macbook 上本地转录会议音频。
- 摘要生成:人工智能模型生成会议内容的简洁摘要。
- 安全存储:转录和摘要存储在本地,确保隐私和数据安全。
优势:
- 可以在本地运行,保证隐私
- 无需依赖云服务即可生成准确的转录和摘要,可以使用ollma本地大模型
- 通过自动化会议文档流程来节省时间,相当于多了个秘书
2.3 支持wokeflow工作流:
可以配置工作流的管道,自动化的去进行操作
管道的主要特点:
- 自定义工作流程:自动执行重复性任务,例如标记屏幕活动或总结音频转录。
- 实时处理:管道可以实时处理捕获的数据。
- 集成能力:通过将处理后的数据发送到第三方应用程序来扩展功能。
用例示例:
- ai 活动标记:根据 ai 模型自动标记屏幕或音频活动。
- 会议摘要:使用组合屏幕和音频数据生成会议讨论摘要。
三、运行原理:
- 输入:屏幕和音频数据
- 处理:ocr、stt、转录、多模态整合
- 存储:sqlite数据库
- 插件:自定义工作流
- 集成:ollama、deepgram、notion、whatsapp 等。
四、吐槽一下:
之前官方有关于Mac M系列芯片的教程,后来撤销了,推出了180美元的客户端套餐。吃相有点难看。
官方网站:[https://screenpi.pe/]
安装教程:[https://docs.screenpi.pe/docs/getting-started]