Philipp Schmid(@_philschmid)

Yesterday we launched computer use in Gemini 3.5 Flash with browser, mobile, and desktop environment...

8.5内容质量
Yesterday we launched computer use in Gemini 3.5 Flash with browser, mobile, and desktop environment...

TL;DR · AI 摘要

Gemini 3.5 Flash 支持通过截图控制 Android 和 iOS 设备，使用 ADB 和 simctl 实现自动化操作。

核心要点

  • Gemini 3.5 Flash 可通过截图生成点击坐标指令，如 click(y=300, x=500)。
  • 使用 ADB 和 `adb connect <ip>:5555` 可远程控制 Android 设备。
  • iOS 设备可通过 simctl 实现类似操作，支持跨平台自动化。

结构提纲

按章节快速跳转。

  1. §Gemini 3.5 Flash 的计算机使用功能

    Gemini 3.5 Flash 支持通过截图生成设备操作指令。

  2. ·Android 控制方法

    使用 ADB 和终端脚本实现 Android 设备的自动化控制。

  3. ·iOS 控制方法

    通过 simctl 实现 iOS 设备的自动化操作，与 Android 方法类似。

  4. ›远程连接

    使用 `adb connect <ip>:5555` 可远程连接 Android 设备进行控制。

思维导图

用一张图看清主题之间的关系。

查看大纲文本（无障碍 / 无 JS 友好）
  • Gemini 3.5 Flash 控制设备
    • Android 控制
      • ADB 指令
      • 终端脚本安装
    • iOS 控制
      • simctl 指令
    • 远程连接
      • adb connect <ip>:5555

金句 / Highlights

值得收藏与分享的关键句。

#Gemini#ADB#Android#iOS#自动化
打开原文

Philipp Schmid 在 X 上的发言："昨天我们推出了 Gemini 3.5 Flash 的计算机使用功能，支持浏览器、移动设备和桌面环境。我整理了一个快速入门指南，介绍如何控制 Android 手机。1. 一个脚本即可从终端安装模拟器。2. 使用 `adb` 通过互动 API 实现基本的代理循环，以控制手机。https://t.co/UahdBJmLbT" / X

Philipp Schmid

@_philschmid

昨天我们推出了 Gemini 3.5 Flash 的计算机使用功能，支持浏览器、移动设备和桌面环境。我整理了一个快速入门指南，介绍如何控制 Android 手机。1. 一个脚本即可从终端安装模拟器。2. 使用 adb 通过互动 API 实现基本的代理循环，以控制手机。3. 还可以连接远程设备（例如：adb connect <ip>:5555）。4. 同样的模式也适用于 iOS，例如使用 simctl。

00:00

9h

文章

使用 Gemini 3.5 Flash 计算机使用功能控制 Android 手机

Gemini 3.5 Flash 内置了计算机使用功能。模型会查看截图，决定要执行的操作，并返回一个函数调用，例如 click(y=300, x=500)。您可以通过 ADB 在设备上执行该操作,...

2026 年 6 月 25 日 下午 4:07

13.5K

浏览量

7

1

17

5

157

2

122

阅读 7 条回复