BK7258接入AI大模型方案探讨

一.芯片介绍

BK7258 是博通集成电路（上海）股份有限公司推出的一款高集成度音视频 Wi-Fi SoC 芯片，以下是其详细介绍：

主要特性

• 无线连接2：支持 1x1 单波段 2.4GHz Wi-Fi 6（802.11b/g/n/ax）和蓝牙 5.4 低能耗（LE）组合，支持下行多用户多输入多输出（DL MU - MIMO）、正交频分多址接入（OFDMA），TX 功率最高可达 + 21dBm，支持具有多达 16 个天线的天线阵列以进行精确定位。
• 处理能力：集成 32 位 ARMv8 - M Star（M33F）单片机，频率高达 480MHz，带有双精度浮点运算单元（FPU），支持具有 SIMD 的 DSP 指令，具备强大的处理能力，可满足复杂的应用需求2。
• 音视频处理：支持 JPEG Codec、Rotation、Scaling 等图像处理功能，可提升显示画质和帧率；支持 H.264 功能，满足高清流畅视频传输；支持 LVGL 图像库，离在线语音识别，人脸识别；集成音视频外设及接口，支持 UVC 和 DVP 摄像头，支持 720p 25fps 图像采集，MJPEG 编码支持 720p 25fps 实时传输，1080p/12fps，支持 RGB888，16bit RGB 屏驱动接口，双麦克风支持环境噪声抑制，还具备音频回声消除、降噪算法135。
• 存储：内置 8M 的 Flash，还可外接 8M/16M 的 PSRAM，以及 800KB 嵌入式 RAM，为数据存储和程序运行提供了充足的空间58。
• 安全特性：满足 PSA Level 2 安全标准，集成物联网平台安全套件（IPSS），嵌入全面而强大的安全功能，包括安全启动、存储和生命周期管理，物理内存保护和分级权限控制，支持安全与非安全应用隔离，符合各类物联网产品安全需求125。
• 低功耗：采用先进的设计技术和超低功耗工艺技术，业务保活功耗极低，如路由器连接保活情况下功耗低于 150uA，能大幅延长设备电池使用时间24。

应用领域1

• 智能门锁：凭借其低功耗特性和安全功能，可实现长时间稳定运行，同时保障门锁的安全性和可靠性，支持可视猫眼功能，提供清晰的视频图像和音频通话。
• 低功耗门铃 / IPC：能够满足门铃和网络摄像头的音视频传输需求，实现高清视频监控和实时语音通话，低功耗特性使其适合电池供电的设备，减少充电或更换电池的频率。
• 中控面板：可用于控制家电、灯光等设备的中控面板，提供丰富的人机交互功能，如触摸操作、语音控制和图像显示。
• 运动相机：支持高清视频录制和图像传输，可通过 Wi-Fi 将拍摄的照片和视频快速传输到手机或其他设备上，方便用户分享和编辑。
• 大小家电：如智能冰箱、智能洗衣机等家电产品，可实现家电的智能化控制和远程监控，提供更好的用户体验。
• 智能眼镜：如芯中芯科技研发的 AI 眼镜，具备 AI 大模型语音对话、图像拍照、视频录制、实时翻译显示、蓝牙播放等功能。

二.接入方式探讨

        2.1  端侧直接接入

                BK7258端侧可以本地实现语音AEC、vnd、本地asr算法从而实现端侧的语音采集，端侧直接通过websoket对应大模型（豆包、deepseek等等）。这种方式license成本低，具有竞争力。

        2.2 采用第三方rtc流式接入 

                BK7258端侧对接第三方RTC平台，例如声网，通过声网的云云对接大模型（豆包、deepseek等等）。这种方式，云端aec,vnd检测效果好，响应灵敏速度快，实现ms级别的响应和延时。