Ferret-UI：苹果开发出能“看懂”手机屏幕上并能执行任务的多模态模型它将移动UI的视觉元素和语言元素结合起来，不仅能“看懂”屏幕上的内容，还能理解用户的指令和问题，进而执行任务或提供信息。 Ferret-UI的能力不止于看和识别，它还能进行推理。…

分享一个链接

发表一篇文章

任何有趣的，图片，热点新闻，视频，文字...

2846 位用户此时在线

24小时点击排行 Top 10：

能把中国🇨🇳不间断一直加速⏩可持续搞到今天这田地，不得不说习近平确实是个人才😅😅！ B站up主Losider做的视频里说得很对：历史会铭记2012年11月15号这一天👌

從太空視角認識人類

20K-50K 招聘远程 Python AI 工程师（图片与文本处理方向）

10多岁的孩子在这哭，6个器官被错误切除，他说：“让我死了去吧！”； 70多岁的“孩子”在那笑，和另一独裁者畅谈器官移植，他说：“预测本世纪可以活到一百五”🙂👌

把她当成方脸抓了

10月31日，韩国庆州，亚太经合组织（APEC）峰会的开幕式，习近平观看了BIGBANG团队GD权志龙的表演。

10月31日，海南琼中爆发大规模群体抗争事件，因海南天然橡胶产业集团加钗分公司偷砍农民的槟榔田，引发当地民众不满。事情发酵后，海南各地的民众都在赶往加钗，去支援这场抗争

10月30日，福建省惠安市，一女子发视频称，她买的双汇火腿肠里出现不少蛆虫。当事人称，她做早餐时拆开火腿肠时发现蛆虫，火腿肠还在保质期内。 31日，厂家回应称，初步核查蛆虫是苍蝇幼虫，系产品流通过程产生，目前正在和对方协商解决。

网友投稿：上海某新华书店

烏克蘭最新前線鏡頭：波克羅夫斯克巷戰

李诞自曝不生孩子的原因

11月1日，据国内媒体报道，河南省潢川县迎宾路发生疑似煤气罐爆炸，一店主受伤，目前暂不清楚爆炸原因

网友投稿：10月31日，海南琼中爆发大规模群体抗争事件，因海南天然橡胶产业集团加钗分公司偷砍农民的槟榔田，引发当地民众不满。民众聚集在公司大楼外抗议，愤怒的民众将海胶加钗分公司的车辆掀翻，就连“海胶加钗”的灯牌也被破坏未能幸免。

11月1日，海南琼中爆发大规模群体抗争事件后续：海胶公司大楼已人去楼空，网友拍摄的视频显示，当局在海胶公司路段增加警力排查防止村民再次聚集维权。

B站汪文斌视频底下评论区闹麻了 #园长 🕶️ 匿名投稿

10月31日，海南琼中爆发大规模群体抗争事件，有网友拍摄到大批警察集结，准备志愿海胶加钗分公司现场

韓國這次表現出了對台灣的尊重。

11月1日，针对海南琼中橡胶树事件，琼中公安发布警情通报。

10月31日，网友在高处拍摄的现场画面，海胶加钗分公司附近的路上，挤满了前来抗争的民众。

10月26日，江苏省江阴市，一名网友晚上遇到一位老人，他正在露天睡在三轮车上。老人约八九十岁，来自安徽，在当地收废品为生，因为租不起房子，只能住在三轮车里。他每天靠收废品挣三四十元。老人有孩子，但孩子在江阴打工收废品，也生活困窘。

更多现场视频：

破案了

10月28日，吉林省延庆市，一名联通用户发视频称自己的手机号被联通公司无故停机，工作人员还谎称是公安部门要求停机，但经公安核实后，对方表示号码并无涉案。最终联通才承认是自行操作停机。用户要求开机时，工作人员又以“涉嫌诈骗”为由推诿，甚至提出若不放弃追究停机损失就不给开机、还要销号。该用

11月1日，据国内媒体报道，中金资本运营有限公司的董事长单俊葆已失联一周多。

原来这，就是李新野本人！好可爱想和他泡澡了 😁😁😁

本站自动实时分享网络热点
24小时实时更新
所有言论不代表本站态度
欢迎对信息踊跃评论评分
评分越高，信息越新，排列越靠前

2

1

0

Ferret-UI：苹果开发出能“看懂”手机屏幕上并能执行任务的多模态模型
它将移动UI的视觉元素和语言元素结合起来，不仅能“看懂”屏幕上的内容，还能理解用户的指令和问题，进而执行任务或提供信息。
Ferret-UI的能力不止于看和识别，它还能进行推理。…
时政
( twitter.com )

1年前由小互提交

Ferret-UI：苹果开发出能“看懂”手机屏幕上并能执行任务的多模态模型

它将移动UI的视觉元素和语言元素结合起来，不仅能“看懂”屏幕上的内容，还能理解用户的指令和问题，进而执行任务或提供信息。

Ferret-UI的能力不止于看和识别，它还能进行推理。

例如，它可以通过分析屏幕上的元素来推测一个应用的功能，或者理解和参与与屏幕内容相关的对话。

Ferret-UI在所有基础UI任务上均超过了GPT-4V和大多数其他开源UI MLLM

论文：https://t.co/SVFe3OZNKb

点击图片查看原图

1周内 1个月内 1年内全部时间

1
2
3
4
5
6
...
400
下一页

1

2

1

1

各大操作系统都在搞基于UI 的 Agent，新的交互方式并不会太远：
1、Windows平台：UFO
A UI-Focused Agent for Windows OS Interaction.
2、iOS 平台：苹果 Ferret-UI
苹果 Ferret-UI…
时政
( twitter.com)

1年前 • Leo Xiang • -- 点击 0 评论

2

2

1

1

苹果发布了专门用于理解应用 UI 界面的 MLLLM Ferret-UI 。
专门针对移动UI屏幕进行了优化，具备了指向、定位和推理等多种能力。
看来 iOS 18 有可能会有类似通过Siri自动操作应用界面的能力？
---------详细介绍---------
Ferret-UI模型的介绍与特点：…
IT技术
( twitter.com)

1年前 • 歸藏 • -- 点击 0 评论

3

3

2

2

苹果新版本的UI
丑or好看？
时政
( twitter.com)

4个月前 • 多伦多方脸 • -- 点击 0 评论

4

2

1

1

转译：《苹果公司于 10 月份悄然发布了一款开源多模态 LLM》
苹果公司在2023年10月低调发布了一款名为Ferret的开源多模态大语言模型，这是苹果与哥伦比亚大学研究人员的合作成果。当时，尽管发布包括了代码和权重（仅限研究用途，不包含商业许可），但并未引起太多关注。然而，随着近期 Mistral…
IT技术
( twitter.com)

1年前 • 宝玉 • -- 点击 0 评论

5

2

1

1

今天苹果发布了预热许久的 Apple Music Classical，为订阅苹果音乐的古典音乐爱好者提供优质音乐

乍一看这个独立 APP 的设计乏善可陈，UI、UX 设计缺乏亮点…
推特中文圈
( twitter.com)

2年前 • 倪爽 • -- 点击 0 评论

6

2

1

1

苹果正加速开发智能戒指AppleRing，三星Galaxy Ring智能指环7月下旬推出
大陆资讯
( www.gamersky.com)

1年前 • 读书顶个鸟用 • -- 点击 0 评论

7

2

1

1

【苹果联合创始人沃兹：苹果应开发Android手机】苹果联合创始人沃兹周四在接受《连线》杂志网络版采访时称，在继续开发iOS智能手机的同时，苹果完全可以进一步开发Android手机。
大陆资讯
( tech.sina.com.cn)

11年前 • 阴小湿大 • -- 点击 0 评论

8

23

22

22

ui改变世界，design改变世界，hci改变世界。

苹果他妈的又赢了。
推特中文圈
( twitter.com)

3年前 • twitter机器人 • -- 点击 0 评论

9

22

21

21

罗永浩评iPhone 14 Pro系列灵动岛：苹果这些年工业设计实在太烂，倒逼UI设计师憋出邪招。
图片
( twitter.com)

3年前 • twitter机器人 • -- 点击 0 评论

10

2

1

1

为了省 App dev 的钱和提高开发效率，接下来我准备自己来学 Swift UI 看看这次能不能直接转型 iOS 开发者 hhh
币圈
( twitter.com)

3年前 • twitter机器人 • -- 点击 0 评论

11

2

1

1

苹果宣战微信支付宝，iMessage将有转账功能？当前，苹果正在开发自己原生的点对点转账功能，允许用户通过苹果设备向另一个苹果用户转账。
大陆资讯
( m.ebrun.com)

8年前 • 顶你个肺 • -- 点击 0 评论

12

2

1

1

今天不看新 iPhone，看看出现在苹果发布会里的家具
大陆资讯
( www.ifanr.com)

4年前 • ifanr • -- 点击 0 评论

13

6

5

5

【当创意被苹果看上，第三方应用该如何求生？】苹果的借鉴是如此频繁，以至于有了一个专门的短语「getting Sherlocked」，说法出自苹果与 Karelia 公司纠纷，Sherlock是 Spotlight 前身，每当苹果发布了能够替代第三方应用的新功能把借鉴的应用逼上绝路时，开发者们总是会调侃这些应用「getting Sherlocked」。
大陆资讯
( www.ifanr.com)

6年前 • ifanr • -- 点击 0 评论

14

2

1

1

如果出现一个工具，可以让前端开发彻底不用再手写 UI ，这个工具意义大吗？
大陆资讯
( www.zhihu.com)

5年前 • 知乎每日精选 • -- 点击 0 评论

15

2

1

1

法院就苹果/Epic之战发布临时限制令：苹果不能限制Epic的开发者账户或者禁用虚幻引擎，但不要求苹果重新上架《堡垒之夜》
大陆资讯
( www.cls.cn)

5年前 • 千鸡变 • -- 点击 0 评论

16

2

1

1

【苹果做出十年来最大让步：“苹果税”没了？】诉讼缠身的苹果，选择和小开发者握手言和，或许也有腾出精力应付更大麻烦的因素。
大陆资讯
( www.leikeji.com)

4年前 • 猪八戒 • -- 点击 0 评论

17

2

1

1

苹果发布了新版的 Human Interface Guidelines

不但内容更新了，设计也耳目一新

#设计入门

很多人问我 UI 设计怎么入门、应该看什么书

入门最简单…
推特中文圈
( twitter.com)

3年前 • twitter机器人 • -- 点击 0 评论

18

2

1

1

【可能只有苹果还会关心你的身后事】苹果开发数字遗产功能有关于人文关怀的考量，但苹果毕竟也是商业公司，设计该功能可能也有商业层面的因素，确保用户能够始终留在苹果生态内。
大陆资讯
( mp.weixin.qq.com)

3年前 • 微信公众号 • -- 点击 0 评论

19

2

1

1

两年前，苹果在印度开设了在线商店。如今，苹果在印度的首家Apple Store零售店正式开业，苹果CEO库克出席出席了开业仪式。
时政
( twitter.com)

2年前 • DW 中文- 德国之声 • -- 点击 0 评论

20

4

3

3

路透：苹果正开发多色彩廉价版iPhone 明年或推出
大陆资讯
( tech.ifeng.com)

12年前 • 元方 • -- 点击 0 评论

21

6

5

5

苹果刚刚发布的 ECG 心电图功能已经开始救人了
大陆资讯
( www.macx.cn)

7年前 • 舔你妹 • -- 点击 0 评论

22

2

1

1

关于 iOS 26 新 UI 的适配：
• 目测 Apple 做了大量自动化适配工作。如果使用的是原生控件，升级 SDK 后即可完成大部分适配。只要魔改不严重，基本都能自动获得不错的效果。
• 新 UI 将是 Web 技术 App 的噩梦：控件无法自动适配，UI 逻辑也完全不同，几乎不可能兼容新 UI。
• 即使是原生开发的
IT技术
( twitter.com)

4个月前 • Yachen Liu • -- 点击 0 评论

23

2

1

1

苹果开发者大会将严禁自拍杆违者将被请出场
大陆资讯
( tech.qq.com)

10年前 • 不炒作会死 • -- 点击 0 评论

24

2

1

1

【苹果正式推出App Store搜索结果付费广告】苹果正式推出了App Store搜索付费广告，开发者现在已经可以购买。苹果称该功能用起来很简单，只需要几个步骤就可完成，并且可完全由开发者操控。苹果还称搜索广告有着严格的隐私和内容控制，意味着广告应用对用户来说是非常安全的。
图片

9年前 • 中国人兽保险公司 • -- 点击 0 评论

1
2
3
4
5
6
...
400
下一页

0.13587 Second , Gzip Enable.本网所有言论均来自网络，不代表本网站立场。联系方式: [email protected]

©2012.11.21 bad.news All rights reserved. 社区自动运营第 -- 年零 -- 天
This site is protected by reCAPTCHA and the Google Privacy Policy and Terms of Service apply.

关注推特