豆包大模型家族全面升级,重磅发布视觉理解模型

12月18日,2024火山引擎FORCE原动力大会·冬在上海举办,火山引擎带来豆包大模型家族全新升级。豆包大模型12月日均tokens使用量超过4万亿,较5月发布时期增长超过33倍。

okens调用规模化增长的同时,豆包大模型在不同场景中都在快速增长、全面开花。比如信息处理场景,最近3个月豆包大模型调用量增长了39倍,帮助企业更好的分析和处理内外部数据;在客服与销售场景,调用量增长16倍,帮助企业更好的服务客户,扩大销售;在硬件终端场景,增长13倍,AI工具增长9倍。

不断增加的调用量和多场景覆盖,让豆包大模型越来越全面,迎来重磅升级。

豆包·视觉理解模型发布,拓宽大模型场景边界

视觉,是人类理解这个世界最重要的手段。对于大模型来说也是如此,只有做好视觉理解,才能让模型有能力处理好真实世界的信息,辅助人类完成一系列复杂工作。本次大会正式发布了豆包·视觉理解模型,用户可以同时输入文本和图像相关的问题。模型能够综合理解并给出准确的回答。这将极大地简化应用的开发流程,解锁更多的大模型价值场景。

更强的内容识别能力:不仅可以识别出图像中的物体类别、形状等基本要素,还能理解物体之间的关系、空间布局以及场景的整体含义。

更强的理解和推理能力:不仅能更好地识别内容,还能根据所识别的文字和图像信息进行复杂的逻辑计算。

更细腻的视觉描述能力:可以基于图像信息,更细腻地描述图像呈现的内容,还能进行多种文体的创作。

基于以上能力,豆包·视觉理解模型在教育、旅游、电商等场景有着非常广泛的应用。在教育场景中,为学生优化作文、科普知识;在旅游场景中,帮助游客看外文菜单、讲解照片中建筑的背景知识;在电商营销场景中,帮助商家充分描述商品细节,高效发布种草广告等等。视觉理解能力将极大拓展大模型的场景边界,为大模型的场景使用打开天花板,在金融、医疗、建筑、地理、体育、物流等诸多行业还有非常广阔的应用前景。

豆包·视觉理解的输入价格为每千tokens 0.003元,比行业平均价格降低85%,相当于一块钱可以处理284张720P的图片,视觉理解模型正式走进厘时代。同时火山引擎还将提供更高的初始流量,RPM达到了15,000次,TPM达到120万,让企业和开发者用好视觉理解模型,找到更多创新场景。

豆包大模型家族再进化,豆包通用模型pro迭代新版本

在本次大会中,火山引擎除了推出视觉理解模型之外,还发布、升级了多个其他模型。大模型家族成员更丰富,大模型能力再提升。

豆包通用模型pro完成新版本迭代:综合任务处理能力较5月份提升32%,在推理上提升13%,在指令遵循上提升9%,在代码上提升58%,在数学上提升43%,在专业知识领域能力提升54%。

豆包·音乐模型4.0发布:从 “高光片段” 走向 “完整歌曲”,支持包括前奏、主歌、副歌、间奏、过渡段的3分钟全曲创作;歌词局部修改,仍能适配原有旋律;全曲风格、情感和音乐逻辑保持一致,曲风连贯。

豆包·文生图模型2.1发布:支持“一键P图”,可以高精度指令理解,对中英文、专有名词“来者不拒”;高质量编辑效果,聚焦目标,不“误伤”原图;高效率创新模型,可实现多元风格,美观自然。支持“一键海报”,中文精准生成,高质量精准生成中文;图文精妙融合,字体与图片内容巧妙融合;极速海报生成,模型最快做到6秒出图。

veOmniverse+豆包·3D生成模型发布:veOmniverse支持高保真视觉渲染、大规模渲染算力池、物理&传感精确模拟、即开即用的3D编辑器。豆包·3D生成模型,支持文生3D、图生3D及多模态生成,1min生成高保真、高质量3D资产,复杂物品、物品组合大规模场景生成,支持多模态3D资产编辑。

此外,豆包·视频生成模型将在2025年1月正式对外开放服务,用户可在火山引擎官网预约正式服务。

全域搜索、高效记忆为模型落地加速

为了帮助企业轻松应对信息获取和搜索推荐的挑战,火山引擎推出全域AI搜索,通过场景化搜索推荐一体化服务、企业私域信息整合服务、联网问答服务,将企业的信息、业务和用户需求紧密结合,帮助企业实现“发现更多,推荐更准,搜索无限可能”。

火山引擎AI搜推引擎基于基于豆包大模型家族的融合增强技术驱动;搜索推荐一体,有强大的推荐能力、结果精准、深度个性化;支持多模态,文本、图像、音频、视频全能理解;电商、信息检索、娱乐场景通通适用;性能强,支持百亿内容规模、超大规模吞吐、亳秒级检索。联网问答Agent基于抖音集团海量优质实时内容更丰富;秒级呈现,依据问题提供时效性热点答案更高效;图片、语音、文字等多模态可视化创新交互更创新,帮助企业实现全域信息一触即达。

记忆对大模型是非常重要的,记忆未来会是大模型必备的能力。火山引擎融合了更好的上下文缓存技术和RAG技术,发布大模型记忆方案,将通过更快的响应速度、更低的使用成本、更精准的效果、以及亿级别的记忆片段,帮助客户构建更有效的记忆方案。

扣子升级1.5版本,让AI离应用更近一步:

开发者生态逐渐完善:超过100万活跃开发者,发布超过200万个智能体。

全新的AI应用开发环境:支持GUI搭建界面,并且可以一键发布为小程序 、H5、API等多种应用形态。

更强的多模态能力:提供音视频对话能力,端到端延迟响应低至1秒,低成本SDK快速接入各类硬件。

海量的精品模板:涵盖多业务场景,一键复制使用

HiAgent升级1.5版本,帮助企业敏捷构建企业级 AI 原生应用的能力中心:

更懂AI转型:提供观测&评测体系,保障效果生产可用;提供100+行业应用模板,企业可开箱即用;提供配套AI咨询,帮助企业找到AI落地路径。

更深业务适配:提供丰富的企业级插件、灵活的应用集成机制;GraphRAG构建知识图谱,提供细粒度的知识资产管理;生成式画布融合CUI和GUI,打造智能交互引擎。

更强安全保障:支持 RAG 知识库和大模型全栈私有化部署。

模型落地加速将为企业带来更多机遇,助力多行业加速智能化转型。在汽车领域,过去7个月,豆包大模型汽车行业日均tokens消耗增长了50倍,目前已服务国内市场近八成汽车品牌,稳坐汽车行业大模型服务商第一梯队。在智能终端领域,豆包大模型服务了终端行业客户50+AI应用场景,覆盖超过了3亿个终端设备,为消费者带来更加智能的生活与工作体验,来自智能终端的豆包大模型日均tokens调用量从5月到12月增长了100倍。

技术架构面向AI全面转型AI云与基础设施持续创新

火山引擎在基础架构、数据分析等层面带来新服务,为企业打造更便捷、更高效、更安全的AI体验。

火山引擎认为下一个十年,计算范式应该从云原生,进入到AI云原生的新时代。AI云原生,将以GPU为核心重新来优化计算、存储与网络架构,GPU可以直接访问存储和数据库,来显著的降低IO延迟。同时,全系统提供更高规模的高速互联,和端到端的安全保护。基于AI云原生的理念,火山引擎推出新一代计算、网络、存储和和安全产品。在计算层面,新一代的火山引擎GPU实例,通过vRDMA网络,支持大规模并行计算和P/D分离推理架构,显著提升训练和推理效率,降低成本。存储上,新推出的EIC弹性极速缓存,能够实现GPU直连,使大模型推理时延降低1/50;成本降低20%。在安全层面,火山将推出PCC私密云服务,构建大模型的可信应用体系。

此外,火山引擎还升级了数据飞轮2.0,全链路AI开启数智生产力新时代。所有的数据分析产品,包括cdp、BI、用户行为分析、AB测试等,都推出了基于大模型的智能化新功能。同时,推出全模态数据湖解决方案,让企业可以统一的管理好结构化数据和非结构化数据,并结合传统ETL和大模型进行综合分析。

未来,火山引擎将持续提升模型能力,优化模型服务,推动 AI 在各行业的深度融合与创新应用。更强能力、更低价格、更易落地的豆包大模型将助力开启更智能、高效、便捷的 AI 未来。未来,火山引擎将持续提升模型能力,优化模型服务,推动 AI 在各行业的深度融合与创新应用。“更强模型、更低价格、更易落地”的豆包大模型将助力开启更智能、高效、便捷的AI未来。

THE END
0.AI价格屠夫来了!字节豆包超便宜,体验如何?豆包大模型经过近一年的迭代和市场验证,今日终于正式开启对外服务。在2024春季火山引擎Force原动力大会上,字节跳动揭开了豆包大模型神秘的面纱,据介绍,豆包大模型包括通用模型pro、通用模型lite、语音识别模型、语音合成模型、文生图模型等九款模型。 图源:字节跳动 jvzq<84yyy4489iqe0ipo8hqpvkov87612;27874198:2==84a724<9348>:0|mvon
1.火山引擎火山引擎是字节跳动旗下的云与AI服务平台。在AI时代,聚焦豆包大模型和AI云原生技术,为企业提供从 Agent 开发到部署的一站式服务,助力企业AI转型与创新发展。jvzquC41yy}/xxqegpmjpn3ep1
2.字节跳动发布豆包视觉理解3D生成等新模型,加速多模态应用落地12月18日,在火山引擎 Force 大会上,字节跳动正式发布发布豆包视觉理解模型,为企业提供极具性价比的多模态大模型能力。豆包视觉理解模型千tokens输入价格仅为3厘,一元钱就可处理284张720P的图片,以更低成本推动AI技术普惠和应用发展。 豆包大模型全面升级 jvzq<84yyy4ykwmwcpku0lto1vkdj87246733A4e9h>cd@>227k5h
3.豆包能生成视频吗?该怎么弄呢?豆包·视频生成模型确实能生成视频,用户需访问火山引擎官网选择豆包模型版本,输入文本指令或上传图片作为素材,选择视频风格和比例,点击生成按钮后模型会生成视频片段,预览并下载,最后进行编辑和导出。 豆包·视频生成模型详解 1.操作流程 要使用豆包·视频生成模型生成视频,用户需要先访问火山引擎的官方网站或相关平台。在平jvzquC41o0ouoxu0eqs0c{ykenk05;>520nuou
4.火山引擎发布豆包大模型系列新版本在今日举行的FORCE LINK AI创新巡展武汉站上,火山引擎推出四款豆包大模型新品。豆包大模型1.6升级版原生支持四种思考长度,兼顾效果、时延与成本,输出Tokens减少77.5%,思考时间下降84.6%。同步发布的豆包大模型1.6 lite,在0-32k输入区间综合成本较前代降低53.3%,性能提升14%。语音合成与声音复刻模型2.0具备更强情感表现力,可精准朗读复杂公式,准确率达90%,并支持通过自然语言调jvzquC41yy}/fxsgyu4dqv4pgyy0fnyckn591?6:68;10qyon
5.基于豆包大模型,火山引擎飞连首发大模型IT赋能平台钛媒体App 10月16日消息,火山引擎在上海举办飞连新品发布会,推出行业首个大模型IT赋能平台。该平台接入豆包大模型,通过All in One产品架构统管身份、网络、终端、数据等IT的核心要素,在多场景落地AI应用,助力企业提升IT管理效率和员工办公体验。据了解,飞连从2021年开始通过火山引擎对外开放服务。从字节跳动内部大规jvzquC41yy}/vvyrquz/exr1pkiuc}nqp1=3:@:760nuou
6.比行业低99%!字节跳动豆包大模型价格清单公布:25元起字节跳动火山引擎官网更新了豆包大模型的定价详情,全面展示豆包通用模型不同版本、不同规格的价格信息,售价25元起。 在定价上,豆包通用模型展现了极高的性价比,其模型推理定价远低于行业平均水平。特别是豆包主力模型pro-32k,其价格相较于同行业降低了99%,而其TPM(每分钟处理Tokens数量)限额更是高达同规格模型的2.7jvzq<84yyy4d3:90eqs/ew4ck1;46;4c34<44B<0jvsm
7.2024火山引擎视频云技术大会,一起来“智启新视界”近日,火山引擎 AI 创新巡展深圳站带来重大突破,豆包大模型发布两款视频生成模型,令人瞩目的是首次实现了多主体互动。AI 视频时代已悄然来临。近日,火山引擎 AI 创新巡展深圳站带来重大突破,豆包大模型发布两款视频生成模型,令人瞩目的是首次实现了多主体互动。一时间,视频数据迅速增长,讲述着一个个生动的故事,引领着jvzquC41yy}/7:hvq0ipo8ftvkimg8<;::780qyon