券商之家
全国站

科技新风向:揭秘国际巨头在端侧AI领域的布局战略

来源:西南证券
2024-08-22 20:09:19
摘要
1.1.1苹果AI:模型侧:MM13月苹果正式公布自家的多模态大模型MM1,MM1是一个具有最高300亿参数的多模态LLM系列。MM1由密集模型和混合专家(MoE)变体组成,具有300亿、70亿、30亿参数等多个版本。MM1不仅在预训练指标中实现最优性...

1.1.1苹果AI:模型侧:MM1

3月苹果正式公布自家的多模态大模型MM1,MM1是一个具有最高300亿参数的多模态LLM系列。MM1由密集模型和混合专家(MoE)变体组成,具有300亿、70亿、30亿参数等多个版本。MM1不仅在预训练指标中实现最优性能SOTA,在一系列已有多模态基准上监督微调后也能保持有竞争力的性能。

得益于大规模多模态预训练,MM1模型在上下文预测、多图像和思维链推理等方面表现不错。MM1模型在指令调优后展现出强大的少样本学习能力。在几乎所有基准测试中,苹果的MoE模型比密集模型取得更好的性能,显示MoE进一步扩展的巨大潜力。

1.1.2苹果AI:模型侧:OpenELM

4月26日,苹果宣布了更大的端侧AI推进,推出全新的开源大语言模型OpenELM。OpenELM包含2.7亿、4.5亿、11亿和30亿个参数的四种版本,定位于超小规模模型,运行成本更低,可在手机和笔记本电脑等设备上运行文本生成任务。同时,公司开源了OpenELM模型权重和推理代码、数据集、训练日志、神经网络库CoreNet。

OpenELM使用了“分层缩放”策略,来有效分配Transformer模型每一层参数,从而提升准确率。在约10亿参数规模下,OpenELM与OLMo相比,准确率提高了2.36%,同时需要的预训练token数量减少了50%。

OpenELM的基准测试(数据类型BFloat16)在工作站(配备英特尔i9-13900KFCPU、RTX4090GPU,24GBDDR5内存),以及M2MaxMacBookPro(64GB内存)运行。

1.1.3苹果AI:模型侧:Ferret-UI

4月8日,苹果展示了多模态模型Ferret-UI。Ferret-UI系统可以理解手机屏幕上的应用程序内容,专为增强对移动端UI屏幕的理解而定制,其配备了引用(referring)、定位(grounding)和推理(reasoning)功能。Ferret-UI具备了解决现有大部分通用多模态大模型所缺乏的理解用户界面(UI)屏幕并与其有效交互的能力。Ferret-UI与OpenAI近期发布的GPT-4o、谷歌近期发布的Gemini1.5Pro在功能上异曲同工。

Ferret-UI可执行从基本到复杂任务等11种任务。它能在移动UI屏幕上使用灵活的输入格式(点、框、涂鸦)执行指代任务(例如控件分类、图标识别、OCR)和定位任务(例如查找控件、查找图标、查找文本、控件列表)。这些基本任务为模型提供了丰富的视觉和空间知识,使其能在粗略和精细级别(例如各种图标或文本元素之间)区分UI类型。这些基础知识对于执行更高级的任务至关重要。具体来说,Ferret-UI不仅能在详细描述和感知对话中讨论视觉元素,还可在交互对话中提出面向目标的动作,并通过功能推理推断出屏幕的整体功能。

  【点击查看研报:PDF原文】

免责声明
本站所有收录的券商、游资及发布的图片、内容,均收集整理自互联网或自媒体,仅供参考。目的在于促进信息交流,不作为任何投资和交易的根据,据此操作风险自担。我们尊重作者版权,版权归属于原作者,不保证该信息的准确性、真实性、完整性、有效性、及时性、原创性等。

大家都在看

券商董事长遭公开谴责,四大事由,也已向多位高管追责

券商董事长遭公开谴责,四大事由,也已向多位高管追责

  今年以来,华林证券已多次收到罚单,但不同以往的是,董事长被罚并遭公开谴责则为个例。   8月20日,西藏证监局对华林证券开出罚单。经查,公司存在以下4项违规情形:   一是月度风险控制指标监管报表填报不准...
2024-08-21
赤峰黄金:汇率波动对公司整体业绩影响较小

赤峰黄金:汇率波动对公司整体业绩影响较小

  每经AI快讯,有投资者在投资者互动平台提问:人民币升值,美元贬值,对于主要金矿在国外的赤峰黄金,有什么影响,请回答。  赤峰黄金(600988.SH)8月21日在投资者互动平台表示,尊敬的投资者您好,公司境外矿山采
2024-08-21
增速约9.6% 数字经济“量质双升” !受益产业链名单出炉

增速约9.6% 数字经济“量质双升” !受益产业链名单出炉

  我国数字经济产业规模持续增长,相关公司有望长期受益。  8月20日,工业和信息化部部长金壮龙在《人民日报》撰文,提出要认真学习、深刻领会、准确把握,切实抓好贯彻落实党的二十届三中全会通过的《中共中央关...
2024-08-22
【动态】香港、新加坡及马来西亚三地警方展开反诈骗联合行动

【动态】香港、新加坡及马来西亚三地警方展开反诈骗联合行动

中新社香港6月14日电 (记者 韩星童)香港警务处14日召开记者会公布,日前与新加坡及马来西亚警方展开反诈骗联合行动,打击一个以马来西亚为基地的跨国跨境诈骗集团。行动中,香港警方以“串谋诈骗”及“洗黑钱”等罪拘捕...
2024-08-21
锡装股份:目前公司来自核电领域的订单占在手订单量的比例较低

锡装股份:目前公司来自核电领域的订单占在手订单量的比例较低

  每经AI快讯,有投资者在投资者互动平台提问:目前公司在核电领域的订单是否充足?  锡装股份(001332.SZ)8月21日在投资者互动平台表示,目前公司来自核电领域的订单占在手订单量的比例较低,且公司来自核电领域的
2024-08-21
云数据平台Snowflake美股盘后跌超7% 此前公布第二财季报告

云数据平台Snowflake美股盘后跌超7% 此前公布第二财季报告

  每经AI快讯,云数据平台Snowflake美股盘后跌超7%,此前公布第二财季报告。(文章来源:每日经济新闻)...
2024-08-22
混合现实概念走强 恒信东方、天娱数科涨停

混合现实概念走强 恒信东方、天娱数科涨停

  证券时报e公司讯,混合现实概念走强,截至发稿,恒信东方、天娱数科涨停,丝路视觉、岭南股份、凌云光、华如科技等涨幅居前。(文章来源:证券时报网)...
2024-08-22
【案例】40万元被成功追回!反诈老范用一个细节反杀“杀猪盘”

【案例】40万元被成功追回!反诈老范用一个细节反杀“杀猪盘”

“杀猪盘”是诈骗分子对交友婚恋类网络诈骗的一种俗称,指的是利用网络交友骗取受害人钱财的一种电信诈骗手段。   近日,大栅栏街道百顺社区发生一起“杀猪盘”诈骗案,涉及金额高达40万。就在受害居民绝望之际...
2024-08-21
【警方提示】多地警方发布预警!警惕高风险!关于对“MCN优品商城”电商平台风险预警提示

【警方提示】多地警方发布预警!警惕高风险!关于对“MCN优品商城”电商平台风险预警提示

近期,公安机关在工作中发现,一个名为“MCN优品商城”的电商平台以高额返利吸引群众发展代理,部分群众盲目参与投资,存在较大金融风险隐患。运作方式据了解,“MCN优品商城”的电商平台,从最初的万合(2022年6月,注
2024-08-21
【案例】“不用考试,全网可查”?铜陵警方打掉一“考证”诈骗团伙

【案例】“不用考试,全网可查”?铜陵警方打掉一“考证”诈骗团伙

近日铜陵市公安局义安分局打掉一个以办理全网可查、全国通用的证书为由实施诈骗的犯罪团伙在湖北省武汉市抓获犯罪嫌疑人13人缴获各类假证200余本作案工具电脑、手机40余台涉案价值110余万元事情还要从今年年初说起当晚
2024-08-21