网易首页 > 网易号 > 正文 申请入驻

Elorian首款AI模型:让图像参与推理而非仅被描述

0
分享至


Elorian是一家总部位于帕洛阿尔托的AI初创公司,在推出产品之前就已完成了5500万美元的种子轮融资,估值达到3亿美元。TechCrunch独家获悉,该公司于本周五发布了其首款模型。

这款名为Glimpse的模型目前以研究预览的形式发布,提供API访问权限,而聊天界面仍需排队等待,因此现阶段外界能看到的主要是一份结果对比表和一套理念阐述。这套理念的核心是:如今的AI模型即便在语言和代码方面表现出色,依然无法真正"看懂"图像。

多模态模型

大多数多模态模型对图像的处理方式是:只看一次,将其转换为Token,然后基于文本进行推理——这就像凭记忆描述一张照片。而Glimpse的做法是不断回溯原始图像本身。在推理过程中,它可以裁剪放大某个区域,从视频中提取特定帧,或者运行代码来测量、比较所观察到的内容,Elorian将这一机制称为"视觉草稿空间"。这就好比有人在手机照片上用手指放大画面,以确认自己刚才看到的究竟是什么。

对于Elorian首席执行官、前谷歌DeepMind研究员安德鲁·戴(Andrew Dai)来说,一个最能说明AI仍无法真正"看懂"图像的例子发生在一次游戏夜。

去年,他给刚和朋友们玩完的一款桌游拍了张照片,然后问一个前沿模型谁赢了。模型答不出来。他告诉TechCrunch,桌游"各自有自己的视觉语言,各自有自己的图标体系和符号系统"。"对成年人来说,即便文字说明很少,也能很容易理解游戏进展,但这些模型却无法领会这些符号的含义。"

"人类看着没有任何文字说明的宜家家具图纸就能组装起来,对吧?为什么AI模型做不到?"他说。

这种方法并非完全是新鲜事物——OpenAI在2025年就为其o系列模型的推理过程加入了裁剪缩放功能——但Elorian的独特之处在于,它是围绕这一机制从零打造了整个模型,而且成本低廉。该公司表示,一个小团队仅用数百块GPU就训练出了Glimpse,而且这款模型的规模远小于与其进行基准对比的前沿系统。

Glimpse的定价为每百万输入Token 0.60美元、每百万输出Token 3美元——比Sonnet、Sol等中端模型便宜,但比Haiku、Luna等轻量级模型更贵。

但根据Elorian自身的评测结果,Glimpse在科学图表推理和短视频字幕生成方面的表现甚至超过了GPT-6 Astra,在其他视觉推理任务上也取得了具有竞争力的成绩。

Elorian六个月前结束隐身状态公开亮相,当时完成的融资轮由Striker Venture Partners、Menlo Ventures和Altimeter Capital联合领投,英伟达和谷歌首席科学家杰夫·迪恩(Jeff Dean)也参与了投资。

公司最初的目标客户是那些拥有大量视频数据的企业:机器人公司、科研实验室、媒体机构和创意型企业。从长远来看,Elorian希望从"看懂"迈向"行动"。这意味着要基于场景构建模型,并利用该模型来选择行动方案,包括直接控制机器人。戴表示,明年公司的目标是打造出"全球最佳的视觉推理模型"——一款在所有视觉推理测试中都能领先的模型。

Q&A

Q1:Glimpse模型是什么?它和其他AI模型有什么不同?

A:Glimpse是Elorian公司发布的首款AI模型,与大多数多模态模型只看一次图像就转为文本推理不同,Glimpse在推理过程中会不断回溯原始图像,可以裁剪放大、提取视频帧或运行代码来核实观察内容,这一机制被称为"视觉草稿空间"。

Q2:Glimpse的训练成本和定价是多少?

A:据Elorian介绍,一个小团队仅用数百块GPU就训练出了Glimpse,模型规模远小于对比的前沿系统。定价为每百万输入Token 0.60美元、每百万输出Token 3美元,比Sonnet、Sol等中端模型便宜,但比Haiku、Luna等轻量级模型贵。

Q3:Elorian公司未来的发展目标是什么?

A:Elorian目前的主要客户是机器人公司、科研实验室、媒体和创意企业等拥有大量视频数据的机构。公司长期目标是从"看懂"图像迈向"行动",包括直接控制机器人,并计划明年打造全球最佳的视觉推理模型。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
凌晨3点皇马出战欧冠:2人反戈 穆帅3处变招 姆巴佩冲击5连斩

凌晨3点皇马出战欧冠:2人反戈 穆帅3处变招 姆巴佩冲击5连斩

叶青足球世界
2026-10-21 08:04:41
官宣复出,这一次,她彻底赢了!

官宣复出,这一次,她彻底赢了!

黎兜兜
2026-10-20 08:13:43
CBA:新赛季首位被裁外援出炉,广东男篮两连败成广东老三,杨鸣批崔永熙在场毫无作用

CBA:新赛季首位被裁外援出炉,广东男篮两连败成广东老三,杨鸣批崔永熙在场毫无作用

凯丰侃球
2026-10-21 09:22:03
美国高速几乎以水泥为主,中国为何宁选沥青,也不大规模用水泥?

美国高速几乎以水泥为主,中国为何宁选沥青,也不大规模用水泥?

抽象派大师
2026-10-10 01:01:59
当好商品越来越容易买到,山姆的260元会员费还意味着什么?

当好商品越来越容易买到,山姆的260元会员费还意味着什么?

胖鲸头条
2026-10-20 19:28:19
王诗龄一幅桃子画进卢浮宫拍出145万,第二天就被扒了:展厅,花钱就能进

王诗龄一幅桃子画进卢浮宫拍出145万,第二天就被扒了:展厅,花钱就能进

黎兜兜
2026-10-19 14:06:47
律师圈太疯狂了!灰色拓客方式浮出水面:广东一律所伙同看守所合同工,非法获取在押人员信息

律师圈太疯狂了!灰色拓客方式浮出水面:广东一律所伙同看守所合同工,非法获取在押人员信息

火山詩话
2026-10-21 07:30:11
乒乓亚锦赛:10月21日赛程公布!国乒5项出击,多位主力将登场

乒乓亚锦赛:10月21日赛程公布!国乒5项出击,多位主力将登场

宝哥精彩赛事
2026-10-21 08:33:35
鲁比奥:特朗普不满乌克兰在俄乌冲突中的立场,美乌关系非常紧张;泽连斯基:乌克兰选举面临无人机和导弹威胁,希望美国不要干涉

鲁比奥:特朗普不满乌克兰在俄乌冲突中的立场,美乌关系非常紧张;泽连斯基:乌克兰选举面临无人机和导弹威胁,希望美国不要干涉

每日经济新闻
2026-10-21 03:10:50
汽车圈深夜爆瓜!600万商单层层转包,20万草草打发博主引发不爽,网友:说明10万就能办

汽车圈深夜爆瓜!600万商单层层转包,20万草草打发博主引发不爽,网友:说明10万就能办

火山詩话
2026-10-20 10:22:19
《我的前半生》重聚:许娣胖了,马伊琍骨相显嫩,雷佳音长发邋遢

《我的前半生》重聚:许娣胖了,马伊琍骨相显嫩,雷佳音长发邋遢

古事寻踪记
2026-10-21 09:51:50
演员祖峰亮相刘芳菲直播间,头发花白引网友热议

演员祖峰亮相刘芳菲直播间,头发花白引网友热议

韩小娱
2026-10-20 12:08:12
泽连斯基顾问公开表示:俄罗斯袭击乌克兰,美国在开打前1分钟才告知我们,这很危险,并且美国对我们使用星链的限制仍在继续

泽连斯基顾问公开表示:俄罗斯袭击乌克兰,美国在开打前1分钟才告知我们,这很危险,并且美国对我们使用星链的限制仍在继续

吉刻新闻
2026-10-20 07:48:38
造成23人遇难、其中包括17名中国公民,韩国华城电池厂火灾案,终审判了

造成23人遇难、其中包括17名中国公民,韩国华城电池厂火灾案,终审判了

澎湃新闻
2026-10-20 10:54:06
76人106-100尼克斯迎开门红,詹姆斯14+9+7,马克西28分,布伦森19中6

76人106-100尼克斯迎开门红,詹姆斯14+9+7,马克西28分,布伦森19中6

懂球帝
2026-10-21 10:16:55
广东男篮两连败,两个“小尴尬”摆上桌面,怎么解决?

广东男篮两连败,两个“小尴尬”摆上桌面,怎么解决?

丑芜
2026-10-21 09:49:08
外媒:为解决土地纠纷,菲律宾两农民参加传统挑战,潜入水下憋气双双溺亡

外媒:为解决土地纠纷,菲律宾两农民参加传统挑战,潜入水下憋气双双溺亡

环球网资讯
2026-10-19 18:44:25
在美国破防的袁老师

在美国破防的袁老师

求实处
2026-10-19 00:09:46
电动车熟透、“去宁”运动来了,宁王这次真废了?

电动车熟透、“去宁”运动来了,宁王这次真废了?

海豚投研
2026-10-21 00:44:54
社保的本质是什么?

社保的本质是什么?

流苏晚晴
2026-10-17 17:53:59
2026-10-21 10:35:00
至顶科技 incentive-icons
至顶科技
科技产业媒体与 AI 产业服务机构
22710文章数 49737关注度
往期回顾 全部

科技要闻

马斯克确认SpaceX与特斯拉讨论合并

头条要闻

牛弹琴:菲政客嚣张炒作要驱逐中国大使 中方没有客气

头条要闻

牛弹琴:菲政客嚣张炒作要驱逐中国大使 中方没有客气

体育要闻

巴拉克:天生亚军与漫长极夜

娱乐要闻

李连杰回应抛妻弃女传闻,透露四个女儿关系

财经要闻

日赚近5亿的长鑫,股价却跌掉了15000亿

汽车要闻

黑科技一次看全 2026奇瑞全球创新大会干货汇总

态度原创

教育
本地
健康
房产
游戏

教育要闻

四年级简便计算:88÷28×77

本地新闻

一场垂直登高赛跑出了"山城"的真正内核

痘痘能根治吗?皮肤科医生说实话

房产要闻

488亩,两大豪宅级项目爆出!清水湾,要杀回来了!

牢大修火车(万圣节加班版)鬼修女复活,这次真要命

无障碍浏览 进入关怀版