<?xml version="1.0" encoding="UTF-8"?><rss version="2.0"
	xmlns:content="http://purl.org/rss/1.0/modules/content/"
	xmlns:wfw="http://wellformedweb.org/CommentAPI/"
	xmlns:dc="http://purl.org/dc/elements/1.1/"
	xmlns:atom="http://www.w3.org/2005/Atom"
	xmlns:sy="http://purl.org/rss/1.0/modules/syndication/"
	xmlns:slash="http://purl.org/rss/1.0/modules/slash/"
	>

<channel>
	<title>多模态AI &#8211; mylogs.cn</title>
	<atom:link href="https://mylogs.cn/tag/%e5%a4%9a%e6%a8%a1%e6%80%81ai/feed/" rel="self" type="application/rss+xml" />
	<link>https://mylogs.cn</link>
	<description>发现、记录、分享</description>
	<lastBuildDate>Sat, 10 Oct 2026 10:42:24 +0000</lastBuildDate>
	<language>zh-Hans</language>
	<sy:updatePeriod>
	hourly	</sy:updatePeriod>
	<sy:updateFrequency>
	1	</sy:updateFrequency>
	
	<item>
		<title>Cloudflare 推 Clef-omni：一个模型读懂音视频</title>
		<link>https://mylogs.cn/cloudflare-%e6%8e%a8-clef-omni%ef%bc%9a%e4%b8%80%e4%b8%aa%e6%a8%a1%e5%9e%8b%e8%af%bb%e6%87%82%e9%9f%b3%e8%a7%86%e9%a2%91/</link>
		
		<dc:creator><![CDATA[steve, zhang]]></dc:creator>
		<pubDate>Sat, 10 Oct 2026 10:42:24 +0000</pubDate>
				<category><![CDATA[科技]]></category>
		<category><![CDATA[Clef-omni]]></category>
		<category><![CDATA[Cloudflare]]></category>
		<category><![CDATA[Qwen3-Omni]]></category>
		<category><![CDATA[决策模型]]></category>
		<category><![CDATA[多模态AI]]></category>
		<category><![CDATA[开放权重模型]]></category>
		<guid isPermaLink="false">https://mylogs.cn/cloudflare-%e6%8e%a8-clef-omni%ef%bc%9a%e4%b8%80%e4%b8%aa%e6%a8%a1%e5%9e%8b%e8%af%bb%e6%87%82%e9%9f%b3%e8%a7%86%e9%a2%91/</guid>

					<description><![CDATA[10 月 9 日，Cloudflare 发布开放权重决策模型 Clef-omni，支持通过单次 API 调用同 [&#8230;]]]></description>
										<content:encoded><![CDATA[<figure data-wp-context="{&quot;imageId&quot;:&quot;6aca281e369ef&quot;}" data-wp-interactive="core/image" data-wp-key="6aca281e369ef" class="wp-block-image wp-lightbox-container"><img decoding="async" data-wp-class--hide="state.isContentHidden" data-wp-class--show="state.isContentVisible" data-wp-init="callbacks.setButtonStyles" data-wp-on--click="actions.showLightbox" data-wp-on--load="callbacks.setButtonStyles" data-wp-on--pointerdown="actions.preloadImage" data-wp-on--pointerenter="actions.preloadImageWithDelay" data-wp-on--pointerleave="actions.cancelPreload" data-wp-on-window--resize="callbacks.setButtonStyles" src="https://mylogs.cn/wp-content/uploads/2026/10/784fa71aafa89d1d43fa422fba429a53_header.webp" alt="Cloudflare Clef-omni 多模态决策模型概念图" title="图片来源：IT之家" style="max-width:100%;height:auto;"/><button
			class="lightbox-trigger"
			type="button"
			aria-haspopup="dialog"
			data-wp-bind--aria-label="state.thisImage.triggerButtonAriaLabel"
			data-wp-init="callbacks.initTriggerButton"
			data-wp-on--click="actions.showLightbox"
			data-wp-style--right="state.thisImage.buttonRight"
			data-wp-style--top="state.thisImage.buttonTop"
		>
			<svg xmlns="http://www.w3.org/2000/svg" width="12" height="12" fill="none" viewBox="0 0 12 12">
				<path fill="#fff" d="M2 0a2 2 0 0 0-2 2v2h1.5V2a.5.5 0 0 1 .5-.5h2V0H2Zm2 10.5H2a.5.5 0 0 1-.5-.5V8H0v2a2 2 0 0 0 2 2h2v-1.5ZM8 12v-1.5h2a.5.5 0 0 0 .5-.5V8H12v2a2 2 0 0 1-2 2H8Zm2-12a2 2 0 0 1 2 2v2h-1.5V2a.5.5 0 0 0-.5-.5H8V0h2Z" />
			</svg>
		</button></figure>
<p class="wp-block-paragraph">10 月 9 日，Cloudflare 发布开放权重决策模型 Clef-omni，支持通过单次 API 调用同时处理文本、图像、音频和视频。这是 Clef 系列模型在 10 月初接连推出 Clef 与 Clef-flash 之后，面向多模态决策场景的又一次扩展，模型权重已在 Hugging Face 以 Apache 2.0 协议开放。</p>
<h2 class="wp-block-heading">从文本到音视频：一次调用处理全部模态</h2>
<p class="wp-block-paragraph">在 Clef-omni 之前，Clef 已支持文本、图像，以及从视频中按时间抽取的连续静态画面。Clef-omni 在此基础上新增了音频与完整视频输入，支持 wav、mp3、mp4 和 webm 格式。Cloudflare 表示，开发者无需再自行搭建语音转写、音视频拆分等前置流程，用一个模型即可对多种输入做出判断。</p>
<p class="wp-block-paragraph">技术实现上，Clef-omni 基于 Qwen3-Omni-30B-A3B-Instruct 构建，采用 30B 参数的混合专家（MoE）架构、活跃参数约 3B，并保留了原模型的主要理解能力。它面向结构化决策任务，不生成常规文本输出，而是在单次前向计算中直接对所有允许的答案选项打分。</p>
<h2 class="wp-block-heading">性能与基准表现</h2>
<p class="wp-block-paragraph">根据 Cloudflare 公布的测试数据，纯文本请求的中位响应时间约为 130 毫秒，图像约 150 毫秒；一段带声音的 21 秒视频约 1.5 秒即可完成评分。在基准测试中，Clef-omni 取得 BFCL 精确匹配率 98.2、API-Bank 准确率 92.7、BANKING77 宏平均 F1 94.8、CLINC150+OOS 宏平均 F1 97.7 的成绩，在家用电器任务上的精确匹配率为 69.3。</p>
<h2 class="wp-block-heading">定价下调，托管版上下文窗口收窄</h2>
<p class="wp-block-paragraph">伴随此次发布，Cloudflare 同步下调了 Clef-flash 的价格：输入价从每百万 Token 0.09 美元（约合 0.6 元人民币）降至 0.038 美元（约合 0.25 元），降幅约 58%，使其低于同类决策模型 Jev；不过托管版上下文窗口也从 64k 缩小至 24k。Clef-omni 本身的定价为输入每百万 Token 0.15 美元（约 1 元）、输出 0.60 美元（约 4 元）。</p>
<p class="wp-block-paragraph">典型应用包括设备巡检：将一台设备的照片、运行录音与风扇视频一并提交给同一个模型，即可判断铭牌是否清晰、运转声音是否正常、风扇是否在转，无需串联多个专用模型。对于希望把多模态判断嵌入工作流、又不愿自行维护级联管线的开发者而言，这类开放权重决策模型提供了更直接的落地路径。</p>]]></content:encoded>
					
		
		
			</item>
	</channel>
</rss>
