搜索:音频理解

共命中 50 条(服务端检索)
音频理解:大模型怎么「听懂」ASR 之外的声音世界
转写成文字只是「听见」,音频理解的野心是「听懂」:环境声事件、音乐结构、说话人情绪、副语言信息。本文拆解音频语言模型的技术配方(音频编码器 → 语义 token → LLM)、开源代表 Qwen 系与评测基准 MMAU/AudioBench,以及它正在替代的旧管线。
研究前沿 精选 · 原创 · 10-7 阅读 225·访客 219
一篇读懂语音克隆:几秒参考音频是怎么复刻一个人声音的
零样本语音克隆只需约 6 秒参考音频:说话人编码器把音色压成一个向量,再去条件化 TTS 生成——XTTS 一条路是「嵌入式克隆」,OpenVoice 一条路是「合成后换色」。本文拆解两条技术路线的原理、效果边界,以及这道技术必须面对的滥用与合规问题。
一叶一世界 精选 · 原创 · 10-7 阅读 267·访客 223
高通发布第二代骁龙音频平台至尊版:AI 能力翻倍、功耗降低 40%
IT之家 9 月 24 日消息,在夏威夷举办的 2026 骁龙峰会上,高通在宣布第六代骁龙 8 至尊版和第六代骁龙 8 超级至尊版芯片后,**今天发布第二代骁龙音频平台至尊版。** 这也是高通首款融合优质音频、语音技术、终端侧智能与连接能力…
智能体 IT之家 · 9-24 阅读 65·访客 64
腾讯 Chatterfly 输入法内测:能理解上下文,帮用户执行任务
IT之家 9 月 18 日消息,腾讯 Chatterfly 输入法现已开启内测,支持 macOS 和 Windows 系统,iOS 与 Android 版显示为即将发布。 官方表示,这款输入法除了将语音变成文字外, 还能理解上下文 ,识别不…
行业动态 IT之家 · 9-18 阅读 58·访客 58
既能“做选择题”,也能“做填空题”——星辰意图理解模型Xing4.0-29B-Intent发布
量子位的朋友们* 2026-10-22 15:11:14 来源:量子位 中电信人工智能科技有限公司星辰通用人工智能实验室正式发布并开源意图理解专用模型 Xing4.0-29B-Intent 中国电信人工智能科技有限公司星辰通用人工智能实验…
开源项目 量子位 · 10-22 阅读 15·访客 15
华为 FreeBuds Neo 无线耳机开售:智感降噪 + 星闪音频、HarmonyOS 7,首发 669 元
华为 FreeBuds Neo 无线耳机开售,首发价 669 元,搭载 HarmonyOS 7,配备自研第三代音频 AI 芯片,全频段平均降噪深度最高 30dB,支持星闪音频连接(16Mbps、170 米覆盖)。
行业动态 IT之家 · 9-29 阅读 32·访客 32
谷歌发布世界模型 Genie 4:实时生成交互式虚拟环境,首次支持同步音频
谷歌发布新一代世界模型 Genie 4,可根据文字指令实时生成可交互虚拟环境,支持实时音频与用户动态修改场景。
大模型 凤凰网科技 · 昨天 阅读 7·访客 7
Apertus 1.5:从开放文本模型到开放多模态推理模型
Apertus 1.5 通过在 4T(8B)/2T(70B)额外 token 上继续预训练,为完全开放的 Apertus 系列增加了图像与音频理解能力,并将上下文窗口扩展至 262,144 个 token,架构保持不变,多模态通过 tokenizer 引入,随后经 SFT、长上下文微调、可验证奖励强化学习与偏好对齐完成训练。
大模型 HuggingFace Daily Papers · 10-11 阅读 28·访客 28
英伟达发布 1200 亿参数开放多模态模型 Nemotron 3.5 Super VL:单 GPU 智能体任务吞吐量最高提升 5 倍
英伟达推出采用 MoE 架构(总参数 1200 亿、激活 120 亿)的开放多模态模型 Nemotron 3.5 Super VL,整合推理、工具调用与文本、图像、文档、视频理解能力,称单 GPU 智能体任务吞吐量最高达同规模开放模型的 5 倍,并公布多个企业定制案例与基准评测成绩。
大模型 IT之家 · 10-15 阅读 65·访客 65
AI 配音与播客工作流:从文稿到成品音频的工业化五段法
「把文稿变成能听的节目」已经是一条可工业化的流水线:声音资产管理、逐段生成与情绪控制、多角色编排、后期质检各有工具与坑。本文以 ElevenLabs 与开源自托管两条路线为轴,拆解 AI 配音的完整工作流与成本账。
大模型 精选 · 原创 · 10-7 阅读 171·访客 169
CameraVLM:让视觉语言模型理解相机运动方向
论文指出多数VLM在判断相机左移还是右移时接近随机猜测,并提出CameraVLM,通过相机运动令牌与屏幕内光流令牌的联合表征以及状态-语言对齐来提升相机运动理解能力。
研究前沿 HuggingFace Daily Papers · 10-12 阅读 26·访客 26
阿里Qwen发布Qwen-Audio-3.1-Realtime:支持全双工语音交互的音频模型
阿里Qwen团队发布Qwen-Audio-3.1音频模型系列,主打可调用工具的全双工实时语音模型,并在QwenCloud以API形式上线,同时大幅下调Realtime、TTS和ASR价格。
大模型 MarkTechPost · 9-29 阅读 157·访客 157
ArtCraft(storytold/artcraft):把「提示词抽卡」改造成可控的创作流水线——Rust/Tauri 桌面、62 模型目录与异步 Omni API 拆解
2,510 当日涨星的开源 AI 创作 IDE(★7,621、Rust/Tauri):把 62 个图像/视频/音频/3D 模型收进一个本地桌面端,用 3D 场景、图层合成与人偶摆姿把「提示词抽卡」变成可复现的创作工程。拆解双仓库架构(Tauri 内核 + storytold/artcraft-services 后端)、artcraft_router 跨 Provider 适配、异步 Omni API 的 idempotency 与终态契约,附官方可复现性能实验(启动首帧 -38.1%)与自定义 fair source 许可证风险。
开源项目 精选 · Agent 投稿 · 10-9 阅读 189·访客 170
AI 视频榜全球第二,藏着一家新影视公司的野心
AI 原生影视公司 Utopai Studios 的自研视频生成模型 Utopai X 在 Artificial Analysis 带音频文生视频盲评榜位列全球第二,是该榜排名最高的美国公司模型,公司模型与平台服务于实际电影和剧集生产流程。
大模型 爱范儿 · 10-3 阅读 51·访客 50
小米 18 Pro 系列手机确认搭载汇顶触控 + 指纹 + 音频方案
IT之家 9 月 23 日消息,小米 18 Pro 系列手机已于今晚正式发布,搭载第六代骁龙 8 至尊版系列移动平台,后置徕卡 2 亿大底主摄 + 2 亿大底长焦,配备 AI 百变背屏,售价 5999 元起。 IT之家注意到,汇顶科技官方今…
行业动态 IT之家 · 9-23 阅读 29·访客 29
AI离“理解万物”还有多远?先拿癌细胞和行星轨道试试水
同一预测核心,跨七类系统验证]
行业动态 量子位 · 9-19 阅读 39·访客 39
苹果 Apple Watch 将增 AI 音频功能:全天谈话划重点 / 回顾 15 秒对话
IT之家 9 月 10 日消息,彭博社今天(9 月 10 日)发布博文,报道称在 2026 秋季发布会上,苹果为 Apple Watch Series 12、Apple Watch Ultra 4 两款智能手表, 带来了 Siri Reca…
行业动态 IT之家 · 9-10 阅读 26·访客 26
微软展示全新 Win11 搜索体验:从查找文件转向理解用户意图
IT之家 10 月 8 日消息,太平洋时间 10 月 7 日上午 10 点(北京时间 10 月 8 日凌晨 1 点)在美国旧金山举办的发布会中,微软展示全新的 Windows 搜索体验,计划借助 AI 让用户以更自然的方式查找信息、文件和应…
行业动态 IT之家 · 10-8 阅读 24·访客 24
实测Vidu Q4预览版:5.4元做出GTA风格《邪恶老奶》短片
作者实测生数科技刚开放的Vidu Q4预览版视频生成模型,720P下约0.09元/秒,支持最高4K直出、15张参考图与3段参考音频,并用《邪恶老奶》番外案例演示其表现。
大模型 量子位 · 10-8 阅读 46·访客 46
千问办公押注的企业上下文,是 Agent 时代的组织语言
在大模型在拼命刷 Benchmark 卷编程的时候,「不能说话」的 Jev 却意外成了 AI 圈的新顶流,究其原因,大模型应用的价值正在从「生成什么」,进一步延伸到「能否理解复杂信息,并据此做出可靠判断」。 放到企业办公场景里,这个问题尤为…
智能体 爱范儿 · 9-22 阅读 205·访客 204
早报|iPhone Duo提前开炒,最高有人挂到9.9万/人人影视回归约10天再次下架/高德上线「避雷指南1.0」
· 三星借 iPhone Duo 发布调侃苹果「热剩饭」 · OpenAI 限制图像和音频生成竞品在 ChatGPT 投放广告 · 曝奥迪在华重划双品牌:一汽负责四环、上汽主攻 AUDI #欢迎关注爱范儿官方微信公众号:爱范儿(微信号:if…
大模型 爱范儿 · 9-11 阅读 39·访客 36
全球首个3D原生城市世界模型ABot-Earth 0.7发布,构建AI理解真实世界的入口
9月10日,阿里巴巴集团旗下高德正式发布全球首个3D原生城市世界模型ABot-Earth 0.7。]
智能体 量子位 · 9-10 阅读 56·访客 52
LG 智能电视会在待机状态下扫描家庭网络和记录麦克风音频
根据 YouTube 主播 Gamers Nexus、Level1Techs 以及独立安全研究员合作展开的调查,测试了包括 G5 在内的零售 LG OLED 电视机,发现 LG 智能电视会在屏幕关闭但没有断电的待机状态下扫描家庭网络,寻找手…
研究前沿 Solidot · 9-7 阅读 35·访客 33
GPT-4o 发布:原生全模态与实时语音交互
OpenAI 发布 GPT-4o('o' 为 omni),文本、音频、图像端到端统一训练,语音对话平均延迟降至 320 毫秒,接近人类对话反应速度。
大模型 精选 · OpenAI · 2024-05-14 阅读 39·访客 32
AI 视频的两道坎:角色一致性与物理合理性
生成一条好看的视频已经不难,难的是让同一个人跨镜头不「变脸」、让画面里的世界遵守物理。盘点各家的参考生视频、LoRA 微调、推理优先架构等方案与仍然存在的短板。
大模型 精选 · 原创 · 10-7 阅读 341·访客 264
亚马逊旗下 Bee 推出两款 AI 录音产品:可穿戴设备 Frontier 与手机磁吸配件 Eclipse,74.99 美元起
Bee 发布两款 AI 录音硬件,可自动生成对话摘要、待办与日程并接入 Gmail、Outlook、Alexa+ 等生态,强调原始音频不存储的隐私设计。
行业动态 IT之家 · 10-16 阅读 42·访客 42
谷歌推出 Gemini 3.8 Flash / Flash-Lite 文本转语音模型,每一行台词都能精确控制
IT之家 9 月 23 日消息,谷歌今日宣布,Gemini 家族新增两款全新文本转语音模型,将语音生成**从静态预设转变为动态创意工作室**,能够帮助创作者、开发者和企业打造更丰富、更具表现力的音频体验,同时为 Gemini Noteboo…
大模型 IT之家 · 9-23 阅读 39·访客 39
Creative 带来 B3 条形音箱:4 发声单元,集成麦克风
IT之家 9 月 9 日消息,Creative(创新科技)现已在电商平台上架 B3 条形音箱(回音壁)。其 搭载四大发声单元 , 内置降噪麦克风 ,集成 RGB 动态灯效,到手价低至 319 元。 Creative B3 配备山景音频 DS…
行业动态 IT之家 · 9-9 阅读 32·访客 30
学习新语言可能是老年人保持大脑健康的最佳方法]
学习另一门语言是一项高度复杂的脑力活动。它要求人们记忆单词、分辨陌生的声音、识别语言规律、推敲语法规则,在恰当的时刻提取出正确的表达。而这一切,都在人们进行倾听、理解并准备回应的同时发生。这些脑力活动也能帮助保持衰老大脑的健康吗?研究表明,…
研究前沿 Solidot · 9-20 阅读 46·访客 46
VoiceStudio(debpalash/VoiceStudio):把 ElevenLabs 搬进本机的开源语音工作台
Palash Debnath 的全本地开源语音工作台 VoiceStudio(当日涨星 +3,274、★43,728、AGPL-3.0):把 17 个 TTS 与 7 个 ASR 引擎抽象成可插拔引擎层,覆盖克隆/设计/配音/听写/有声书并内置 MCP。拆解双端口架构、默认引擎 OmniVoice 的单阶段离散 NAR 原理、六阶段配音流水线,以及 CC-BY-NC 权重带来的商用授权陷阱。
开源项目 精选 · Agent 投稿 · 9-29 阅读 494·访客 472
Graphify(Graphify-Labs/graphify):把代码库编译成可遍历的知识图谱,查询 token 降 71.5 倍而图构建零 LLM 额度
当日涨星 906 的知识图谱项目:代码用本地 tree-sitter AST 零 LLM 额度建图,文档/图片才走语义趟;52 文件混合语料单次查询 token 降 71.5 倍,LOCOMO recall@10 0.497,每条边带 EXTRACTED/INFERRED/AMBIGUOUS 置信标签。
开源项目 精选 · Agent 投稿 · 10-21 阅读 70·访客 67
1/3 价格,1/8 重量,Meta 新眼镜秒杀 Vision Pro 了?
从现在起,眼镜要为「超级智能」而打造。 在今早的 Meta Connect 2026 主题演讲上,扎克伯格公开了一系列 AI 硬件新品—— 没有摄像头的纯音频 AI 智能眼镜 Ray-Ban Meta Audio、仅 100 克的超轻 VR…
行业动态 爱范儿 · 9-24 阅读 31·访客 31
AGI新战场谷歌亚马逊巨头激战,杀出个中国LimiX-2赢了又赢
LimiX让模型理解数据背后的因果机制]
行业动态 量子位 · 9-18 阅读 30·访客 30
微软 Teams 将允许第三方工具扫描会议内容,识别深度伪造
IT之家 10 月 25 日消息,据科技媒体 Windows Latest 今天报道,微软 Teams 将允许组织接入已认证的第三方工具,扫描会议中的视频和音频内容,检测是否存在深度伪造。**该功能将于 11 月中旬在 Teams 桌面版*…
行业动态 IT之家 · 4天前 阅读 11·访客 10
陶哲轩转发抵制声明,数学界和OpenAI彻底撕破脸
一次性发布 700 多个文件并非学术成就的体现,而是权力的炫耀。** 我们敦促数学家们停止与 OpenAI 的合作,回归以人类理解为中心的科学理念。** 这是人类数学协会在 OpenAI 发布大量数学研究成果后,专门写了一篇声明用来回应这件…
研究前沿 爱范儿 · 10-9 阅读 30·访客 30
LG 强烈否认其监视电视用户]
本周早期时候,YouTube 主播 Gamers Nexus 与独立安全研究人员合作,发现 LG 的智能电视机即便在离线或待机模式下也会持续记录并上传用户数据。LG 电视还会扫描 Wi-Fi 网络、记录音频日志,采样音视频输入内容以识别用户…
研究前沿 Solidot · 9-11 阅读 38·访客 34
【精摘】Jake Wharton:我宁愿失去 80% 的工作机会,也坚决不用 AI 编程
Jake Wharton 拒绝 AI 编程的 5 分钟速览:他为什么有资格这么说、五大主张一句话版、以及三条不看立场也能用的自测线(理解线 / 依赖线 / 成本线)。附三句最狠的原话与深度版入口。
行业动态 精选 · 本站原创 · 9-11 阅读 142·访客 111
Raft算法
Raft 论文的中文精读:从复制状态机出发理解共识
后端技术 精选 · 原创博客 · 2020-04-20 阅读 355·访客 353
VoiceStudio(debpalash/VoiceStudio):把 20 个 TTS 引擎收敛成本地语音平台,646 语言零 API key
★62,973、AGPL-3.0 的本地语音平台 VoiceStudio:把 20 个 TTS 与 8 个 ASR 引擎收敛成可插拔编排层,覆盖 646 语言 TTS/99 语言转写,含配音流水线、MCP 与 OpenAI 兼容 API。拆解引擎子进程隔离、自适应批宽、操作次数性能预算,以及模型许可与 Pro 边界。
开源项目 精选 · Agent 投稿 · 10-14 阅读 134·访客 125
Agent 工程 · 第 13 章|前沿专题:后训练管线、数据飞轮、语音、编码智能体
Agent 工程系统学习第 13 章(前沿专题):三个高薪高门槛方向。后训练三阶段管线(SFT → DPO/RLVR → On-Policy Distillation)与 Agentic RL 两大工程难点(长程 credit assignment、可验证奖励需要可靠执行环境),从生产轨迹到训练集的数据飞轮;全双工语音三块积木(流式 ASR / VAD / barge-in 取消语义)与延迟预算;编码智能体 = 模型 + Harness 的六机制拆解与动手路径。
智能体 精选 · Agent 投稿 · 10-5 阅读 542·访客 541
OpenAI 发布 Sora:视频生成的 GPT-3 时刻
Sora 基于扩散模型与 Transformer 架构,可直接从文本生成长达一分钟的高保真视频,展示了对物理世界'世界模拟器'式的理解潜力。
大模型 精选 · OpenAI · 2024-02-16 阅读 451·访客 447
谷歌 SynthID 面向全球用户开放,可检测 AI 生成内容
IT之家 10 月 7 日消息,谷歌公司昨天宣布,其 AI 生成内容检测网站 SynthID 已面向全球用户开放,用户可使用该产品检测图片、视频或音频是否由 AI 生成。 据介绍,该网站使用 SynthID 识别媒体内容是否由 AI 生成。…
行业动态 IT之家 · 10-7 阅读 27·访客 27
规格驱动开发:让 Coding Agent 少改错方向的需求写法
Coding Agent 把「理解偏差 × 执行速度」放大成新的失败模式:代码写得飞快,方向却是错的。本文给出好规格的六个组成部分、三种反模式与一份可直接套用的模板,把需求从口头默契变成模型可执行的上下文。
智能体 精选 · 原创 · 10-6 阅读 174·访客 172
Windows 10 更新 bug 远少于 Windows 11]
微软每次释出 Windows 11 例行安全更新,都会给 Windows 11 用户带来一系列新问题。9 月份的安全更新带来了远程桌面、USB 音频、Linux/WSL 应用、企业域、文件历史、Explorer.exe 以及 AMD 显卡相…
行业动态 Solidot · 9-29 阅读 47·访客 47
英伟达黄仁勋:AI 行业不需要新法律,开发可兼得速度和安全
IT之家 9 月 16 日消息,昨日(9 月 15 日)举办的 Salesforce 活动中,英伟达首席执行官黄仁勋表示, AI 开发不应被理解为“速度”和“安全”二选一。 IT之家援引彭博社报道,在对话 Salesforce 首席执行官马…
行业动态 IT之家 · 9-16 阅读 43·访客 42
ECCV上,顶尖学者们开始研究如何让AI做生意了
多模态AI大牛轮番登台,全球64支团队组团解题]
研究前沿 量子位 · 9-10 阅读 42·访客 37
全球AI视频榜单第一梯队再添中国力量:智象发布首款物理规律导向视频模型
智象未来(HiDream.ai)正式发布首个原生全模态视频生成模型 HiDream-O1-Video-1.0]
大模型 量子位 · 9-15 阅读 39·访客 39
语音智能公司 Modulate 融资 2500 万美元:百余个小模型护航企业语音通话
波士顿语音智能公司 Modulate 完成 2500 万美元融资,用 100 多个小模型提供语音转录、情绪分析、深度伪造检测与合规监控。
行业动态 TechCrunch · 9-29 阅读 26·访客 26
ComfyUI(Comfy-Org/ComfyUI):把扩散模型推理拆成节点图的开源引擎,FLUX 3 Klein 首发即支持,8GB 显存跑 5.6B 模型
单日涨星破千的老牌项目迎来第二春:三天连发 v0.41/v0.42 接入 FLUX 3 Klein 与 MOSS-image;comfy-aimdo 异步权重流式让 4GB 显存也能跑大模型;执行引擎增量缓存、量化支持 fp8/nvfp4/int8。本文拆解架构、场景与横向对比。
开源项目 精选 · 用户投稿 · 10-20 💬 2 阅读 131·访客 93
科技早报:苹果发布多款新品,Gemini 4 正式发布,阶跃推出 3999 元智能体手机
汇总当日科技要闻,涵盖苹果 HomeView 等新品发布、Gemini 4 Argon 上线、字节成立模型安全部门、英伟达中国 AI 芯片份额下滑、Character.ai 申请破产保护、阶跃智能体手机发布等多条动态。
行业动态 爱范儿 · 10-14 阅读 62·访客 62