网易首页 > 网易号 > 正文 申请入驻

Elorian首款AI模型:让图像参与推理而非仅被描述

0
分享至


Elorian是一家总部位于帕洛阿尔托的AI初创公司,在推出产品之前就已完成了5500万美元的种子轮融资,估值达到3亿美元。TechCrunch独家获悉,该公司于本周五发布了其首款模型。

这款名为Glimpse的模型目前以研究预览的形式发布,提供API访问权限,而聊天界面仍需排队等待,因此现阶段外界能看到的主要是一份结果对比表和一套理念阐述。这套理念的核心是:如今的AI模型即便在语言和代码方面表现出色,依然无法真正"看懂"图像。

多模态模型

大多数多模态模型对图像的处理方式是:只看一次,将其转换为Token,然后基于文本进行推理——这就像凭记忆描述一张照片。而Glimpse的做法是不断回溯原始图像本身。在推理过程中,它可以裁剪放大某个区域,从视频中提取特定帧,或者运行代码来测量、比较所观察到的内容,Elorian将这一机制称为"视觉草稿空间"。这就好比有人在手机照片上用手指放大画面,以确认自己刚才看到的究竟是什么。

对于Elorian首席执行官、前谷歌DeepMind研究员安德鲁·戴(Andrew Dai)来说,一个最能说明AI仍无法真正"看懂"图像的例子发生在一次游戏夜。

去年,他给刚和朋友们玩完的一款桌游拍了张照片,然后问一个前沿模型谁赢了。模型答不出来。他告诉TechCrunch,桌游"各自有自己的视觉语言,各自有自己的图标体系和符号系统"。"对成年人来说,即便文字说明很少,也能很容易理解游戏进展,但这些模型却无法领会这些符号的含义。"

"人类看着没有任何文字说明的宜家家具图纸就能组装起来,对吧?为什么AI模型做不到?"他说。

这种方法并非完全是新鲜事物——OpenAI在2025年就为其o系列模型的推理过程加入了裁剪缩放功能——但Elorian的独特之处在于,它是围绕这一机制从零打造了整个模型,而且成本低廉。该公司表示,一个小团队仅用数百块GPU就训练出了Glimpse,而且这款模型的规模远小于与其进行基准对比的前沿系统。

Glimpse的定价为每百万输入Token 0.60美元、每百万输出Token 3美元——比Sonnet、Sol等中端模型便宜,但比Haiku、Luna等轻量级模型更贵。

但根据Elorian自身的评测结果,Glimpse在科学图表推理和短视频字幕生成方面的表现甚至超过了GPT-6 Astra,在其他视觉推理任务上也取得了具有竞争力的成绩。

Elorian六个月前结束隐身状态公开亮相,当时完成的融资轮由Striker Venture Partners、Menlo Ventures和Altimeter Capital联合领投,英伟达和谷歌首席科学家杰夫·迪恩(Jeff Dean)也参与了投资。

公司最初的目标客户是那些拥有大量视频数据的企业:机器人公司、科研实验室、媒体机构和创意型企业。从长远来看,Elorian希望从"看懂"迈向"行动"。这意味着要基于场景构建模型,并利用该模型来选择行动方案,包括直接控制机器人。戴表示,明年公司的目标是打造出"全球最佳的视觉推理模型"——一款在所有视觉推理测试中都能领先的模型。

Q&A

Q1:Glimpse模型是什么?它和其他AI模型有什么不同?

A:Glimpse是Elorian公司发布的首款AI模型,与大多数多模态模型只看一次图像就转为文本推理不同,Glimpse在推理过程中会不断回溯原始图像,可以裁剪放大、提取视频帧或运行代码来核实观察内容,这一机制被称为"视觉草稿空间"。

Q2:Glimpse的训练成本和定价是多少?

A:据Elorian介绍,一个小团队仅用数百块GPU就训练出了Glimpse,模型规模远小于对比的前沿系统。定价为每百万输入Token 0.60美元、每百万输出Token 3美元,比Sonnet、Sol等中端模型便宜,但比Haiku、Luna等轻量级模型贵。

Q3:Elorian公司未来的发展目标是什么?

A:Elorian目前的主要客户是机器人公司、科研实验室、媒体和创意企业等拥有大量视频数据的机构。公司长期目标是从"看懂"图像迈向"行动",包括直接控制机器人,并计划明年打造全球最佳的视觉推理模型。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
1992年专家黄万里三次上书中央,反对三峡工程,直言恐泥沙堵港

1992年专家黄万里三次上书中央,反对三峡工程,直言恐泥沙堵港

唠叨说历史
2026-03-10 17:59:37
央媒怒批、祸害老百姓!劣迹斑斑的四大相声演员,个个难以原谅

央媒怒批、祸害老百姓!劣迹斑斑的四大相声演员,个个难以原谅

叹为观止易
2026-10-21 10:47:36
上海“大巨蛋”选址引发热议,官方名称为上海国际演艺中心

上海“大巨蛋”选址引发热议,官方名称为上海国际演艺中心

王二哥老搞笑
2026-10-21 06:41:39
邀请杜锋出山?CBA冠军外援自荐加盟,广东队一胜难求!‍‍

邀请杜锋出山?CBA冠军外援自荐加盟,广东队一胜难求!‍‍

绯雨儿
2026-10-21 12:41:40
大S大姐儿子米谷拍广告出圈!19岁身高180+撞脸年轻金城武

大S大姐儿子米谷拍广告出圈!19岁身高180+撞脸年轻金城武

草莓解说体育
2026-10-21 03:40:17
著名演员李立群含泪发视频!表示家被儿子给抄,82年百万级珍藏茅台被喝精光,评论区炸锅

著名演员李立群含泪发视频!表示家被儿子给抄,82年百万级珍藏茅台被喝精光,评论区炸锅

火山詩话
2026-08-10 17:01:43
“精日”陈宇昕已被开除、遣返,军方警方团中央发声谴责

“精日”陈宇昕已被开除、遣返,军方警方团中央发声谴责

韬闻
2026-10-20 08:03:38
“小宝探花”案件回顾:疯狂约会上百名女性,一人拍摄,一人贩卖

“小宝探花”案件回顾:疯狂约会上百名女性,一人拍摄,一人贩卖

就一点
2025-12-30 21:32:02
《伟大的长征》开播才几天便掀起讨论,国家一级演员被骂上热搜,广大观众对剧集的感受各不相同评价褒贬不一

《伟大的长征》开播才几天便掀起讨论,国家一级演员被骂上热搜,广大观众对剧集的感受各不相同评价褒贬不一

灵魂漂流瓶
2026-10-20 18:53:46
男子酒后按摩睡死,醒来被女技师拉住:“做了加钱的按摩得补钱!”刚出门就被按倒罚款500

男子酒后按摩睡死,醒来被女技师拉住:“做了加钱的按摩得补钱!”刚出门就被按倒罚款500

一丝不苟的法律人
2026-10-19 17:06:09
79年,张国焘冻死于老人院,许世友:除了毛泽东,谁也不是他对手

79年,张国焘冻死于老人院,许世友:除了毛泽东,谁也不是他对手

雍亲王府
2026-08-18 17:55:03
小白狗叼着榴莲壳暴揍其他狗,围观的狗都看懵了……不是说好的人与动物的区别,就是人会使用工具吗?

小白狗叼着榴莲壳暴揍其他狗,围观的狗都看懵了……不是说好的人与动物的区别,就是人会使用工具吗?

爱宠物
2026-10-16 23:43:13
向鹏:亚锦赛打出中国队气势!国乒男单2连胜,有望挑战松岛辉空

向鹏:亚锦赛打出中国队气势!国乒男单2连胜,有望挑战松岛辉空

排球黄金眼
2026-10-20 23:46:19
从跨年度47连败到开局两连胜,四川队的大变脸,是中国篮球的笑话

从跨年度47连败到开局两连胜,四川队的大变脸,是中国篮球的笑话

姜大叔侃球
2026-10-20 21:58:52
苏州“发明”的招工骗局:一套被全国复制的“人肉套利”模式

苏州“发明”的招工骗局:一套被全国复制的“人肉套利”模式

社会日日鲜
2026-10-20 12:46:19
董宇辉直播卖大闸蟹翻车,连开两个都不达标,当场翻脸要求换商家

董宇辉直播卖大闸蟹翻车,连开两个都不达标,当场翻脸要求换商家

新游戏大妹子
2026-10-19 12:12:30
32岁女生自述得艾滋病过程,原因是见了一次网友,如今十分后悔

32岁女生自述得艾滋病过程,原因是见了一次网友,如今十分后悔

千秋文化
2026-03-29 20:59:49
中国每年屠宰470万匹马,国内很少人吃,马肉都去哪了?

中国每年屠宰470万匹马,国内很少人吃,马肉都去哪了?

阿天爱旅行
2026-10-17 07:28:07
体操世锦赛:中国女队0.467分险胜美国 头名晋级女团决赛

体操世锦赛:中国女队0.467分险胜美国 头名晋级女团决赛

环球体坛啄木鸟
2026-10-20 22:16:44
河北冬天最冷的3个县,听说比北极还冷,真是出人意料

河北冬天最冷的3个县,听说比北极还冷,真是出人意料

刘哥谈体育
2026-10-20 17:39:53
2026-10-21 13:32:49
至顶科技 incentive-icons
至顶科技
科技产业媒体与 AI 产业服务机构
22710文章数 49737关注度
往期回顾 全部

科技要闻

SpaceX收入暴涨!马斯克:这事"不再不可能"

头条要闻

55岁月嫂因脑干出血去世 亲人整理遗物发现器官捐献卡

头条要闻

55岁月嫂因脑干出血去世 亲人整理遗物发现器官捐献卡

体育要闻

“我,对得起天津足球!”

娱乐要闻

刘恺威官宣女友,和杨幂一个天一个地

财经要闻

日赚近5亿的长鑫,股价却跌掉了15000亿

汽车要闻

黑科技一次看全 2026奇瑞全球创新大会干货汇总

态度原创

旅游
手机
艺术
公开课
军事航空

旅游要闻

边陲古寨蜕变记:古村落活起来 青年人留下来

手机要闻

REDMI K100万级续航配置给足 打造满分游戏体验

艺术要闻

《萨夫拉索夫》新画册,俄罗斯抒情风景画册

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

特朗普狠批泽连斯基"不想结束战争" 泽连斯基强硬回怼

无障碍浏览 进入关怀版