当前位置: 首页> 科技资讯 >微软与MIT携手,引领AI推理新时代:精炼6700万参数模型,挑战GPT-4顶尖地位

微软与MIT携手,引领AI推理新时代:精炼6700万参数模型,挑战GPT-4顶尖地位

时间:2024-10-14 09:45:50

编辑:波波资源网

阅读:2

近日,在这个信息爆炸的时代,智能设备如何理解“因为下雨,所以要带伞”这类因果关系,实际上涉及到人工智能领域的一个重要分支——因果推理(Causal Inference)。

微软与MIT携手,引领AI推理新时代:精炼6700万参数模型,挑战GPT-4顶尖地位

一群来自微软和麻省理工学院等知名学术机构的研究人员,共同开发了一种突破性的机器学习训练策略。这项策略不仅克服了大型机器学习模型在逻辑推理方面的不足,还通过以下步骤实现了显著的进步:

独特的训练方法:研究人员采用了一种新颖的训练方法,这可能与常规的机器学习训练技术有所区别。

逻辑推理的改进:他们的方法显著提升了大型模型的逻辑推理能力,解决了先前存在的挑战。

利用因果关系构建训练集:研究团队利用因果关系模型来构建训练数据集,这种模型能够揭示变量间的因果联系,有助于训练出能够理解数据背后因果逻辑的模型。

教授模型基础公理:他们直接向模型传授逻辑和数学中的基础前提,帮助模型更好地进行逻辑推理。

小型Transformer模型的惊人表现:尽管模型参数仅有6700万,但通过这种方法训练出的Transformer模型,在推理能力上竟能与GPT-4相媲美。

因果推理,听起来像是哲学家的专利,但其实它早已渗透到我们生活的方方面面。对于人工智能来说,掌握因果推理,就像是学会了用“因为...所以...”来解释世界。但AI不是天生就会这个的,它们需要学习,而这学习的过程,就是这篇论文要说的故事。

公理训练方法:

想象一下,你有一个非常聪明的学生,但它对世界的因果关系一无所知。你要怎么教它呢?研究人员就想出了一个办法——公理训练。这就像是给AI一本“因果关系手册”,让它通过这本手册,学会如何识别和应用因果规则。

研究人员用变换器模型做了实验,结果发现,这种训练方法真的有效!AI不仅学会了在小规模的图上识别因果关系,而且还能把这些知识应用到更大的图上,即使它以前没见过这么大的图。

这项研究的贡献在于,它提供了一种新的方法,让AI能够从被动数据中学习因果推理。这就像是给了AI一种新的“思考”方式,让它能够更好地理解和解释世界。

这项研究不仅让我们看到了AI学习因果推理的可能性,也为我们打开了一扇门,让我们看到了AI在未来可能的应用场景。也许在不久的将来,我们的智能助手不仅能回答问题,还能告诉我们为什么会这样。

微软Win11内核或将迎来重大变革,以Rust重构防堵850万台PC蓝屏悲剧重演

7月30日消息,微软正着手调整其内核安全策略,以应对近期CrowdStrike驱动程序引发的中断事件,确保类似问题不再发生,从而增强系统的稳定性和安全性。

微软Win11内核或将迎来重大变革,以Rust重构防堵850万台PC蓝屏悲剧重演

在7月22日报道,CrowdStrike 故障导致全球约 850 万台 Windows 电脑蓝屏死机,美国研究机构安德森经济集团首席执行官帕特里克·安德森估计,此次技术故障事件造成的经济损失很容易就会超过 10 亿美元(当前约 72.79 亿元人民币)。

微软为了避免重蹈覆辙,计划变革 Windows 的内核系统,通过设置访问权限限制第三方应用程序。

微软还考虑进行其它的调整,包括:

限制 CrowdStrike 等安全公司访问 Windows 的主要部分。

推动用户使用 Windows 自带的安全功能。

要求安全公司更加谨慎,想方设法保护计算机,避免出现如此大的崩溃风险。

正计划与一些公司合作,寻找测试和发布更新的安全方法。

正在考虑采用更安全、更可靠的新 Windows 安全技术。

大力推广一种 Rust 编程语言重构内核,防止某些类型的计算机错误方面。

这里简单介绍下 Rust 语言:Rust 是由 Mozilla 主导开发的通用、编译型编程语言。设计准则为“安全、并发、实用”,支持函数式、并发式、过程式以及面向对象的编程风格。Rust 语言原本是 Mozilla 员工 Graydon Hoare 的个人项目,而 Mozilla 于 2009 年开始赞助这个项目,并且在 2010 年首次公开。

微软Surface Pro 9 5G迎来九月更新:蓝屏故障修复,稳定性再升级

近日消息,微软正式推送了Surface Pro 9 5G设备的全新固件更新,此更新针对性地解决了可能引发USB-C端口功能失效的问题,并且对系统稳定性进行了显著优化,大幅度降低了系统蓝屏发生的频次,确保用户享有更加流畅无阻的使用体验。

微软Surface Pro 9 5G迎来九月更新:蓝屏故障修复,稳定性再升级

此更新适用于运行 Windows 11 22H2 或更高版本的 Surface Pro 9(SQ3 处理器)设备,不适用于英特尔处理器版本 Surface Pro 9,英特尔版本有其自己的固件更新。

Surface Pro 9 5G 可通过“设置”>“Windows 更新”获取最新固件更新。除此之外,也可以从官网下载离线安装包。

微软 Surface Pro 9 5G 于 2022 年 10 月 25 日推出,生命周期为六年,将于 2028 年 10 月 25 日停止支持。

本文导航
最新上架

联系方式:boosccom@163.com

版权所有2023 boosc.com AII版权所有备案号 渝ICP备20008086号-38 渝公网安备50010702506211号