字节开源了一个由 AI 驱动的自动化 SDK—Midscene.js

Midscene.js 是一个由 AI 驱动的自动化 SDK,能够使用自然语言对网页进行操作、验证,并提取 JSON 格式的数据。Midscene.js 采用了多模态大语言模型(LLM),能够直观地“理解”你的用户界面并执行必要的操作。你只需描述交互步骤或期望的数据格式,AI 就能为你完成任务。官方还提供了一个浏览器插件,可以快速体验其核心功能。通过这个插件,用户可以用自然语言与任意网页联动,调用交互、提取、断言三种接口,无需搭建代码项目,极大地简化了测试流程。

特性

  • 自然语言互动 👆:只需描述你的步骤,Midscene 会为你规划和操作用户界面
  • 理解UI、JSON格式回答 🔍:你可以提出关于数据格式的要求,然后得到 JSON 格式的预期回应。
  • 直观断言 🤔:用自然语言表达你的断言,AI 会理解并处理。
  • 开箱即用的LLM 🪓:支持使用公开的多模态大语言模型( 如 GPT-4o ),无需任何定制训练。
  • 可视化报告 🎞️:通过我们的测试报告和 Playground,你可以轻松理解和调试整个过程。
  • 全新体验 🔥:体验全新的自动化开发世界,尽情享受吧!
0

评论0

没有账号?注册  忘记密码?