特讯热点!超越Transformer:清华蚂蚁推出纯MLP架构,时序预测性能获突破性提升

博主:admin admin 2024-07-01 22:04:17 834 0条评论

超越Transformer:清华蚂蚁推出纯MLP架构,时序预测性能获突破性提升

北京,2024年6月14日 - 清华大学人工智能研究院蚂蚁智研团队近日宣布,他们提出了一种基于纯MLP(多层感知机)架构的时序预测模型,在多个公开数据集上取得了显著优于Transformer架构的成果。该研究成果将为时间序列预测领域带来新的技术范式,并有望在金融、医疗、物联网等众多行业得到广泛应用。

传统基于Transformer架构的时序预测模型,通常采用编码器-解码器结构,通过自注意力机制捕捉序列之间的依赖关系。然而,Transformer架构存在参数量大、计算复杂度高等问题,限制了其在长序列预测等场景中的应用。

清华蚂蚁团队提出的纯MLP架构,摒弃了自注意力机制,采用MLP网络直接对序列进行建模。得益于MLP架构的简洁性和高效性,该模型能够在保持精度的同时大幅降低计算成本

在多个公开数据集上的实验证明,清华蚂蚁的纯MLP架构在短序列和长序列预测任务上均取得了最优结果。例如,在著名的股票价格预测数据集标杆之一Nasdaq 100上,该模型的平均误差率降低了15%以上

清华蚂蚁团队的研究工作,为基于深度学习的时序预测模型提供了一种新的思路,有望推动该领域的技术进步和应用普及。

以下是对主要信息的扩充:

  • 纯MLP架构的优势
    • 参数量更小,计算效率更高,模型更轻量化。
    • 训练速度更快,更容易部署到实际应用中。
    • 能够更好地捕捉长距离依赖关系,适用于长序列预测任务。
  • 纯MLP架构的应用前景
    • 金融领域:股票价格预测、期货交易预测、风险评估等。
    • 医疗领域:疾病预测、生命体征预测、医疗影像分析等。
    • 物联网领域:传感器数据预测、设备故障预测、能源管理等。

以下是新标题的建议:

  • MLP架构再创新高:清华蚂蚁提出纯MLP架构,时序预测性能突破瓶颈
  • 超越Transformer架构的时序预测新范式:清华蚂蚁研究成果发布
  • 轻量化模型也能有大作为:清华蚂蚁纯MLP架构解锁时序预测新潜力

希望以上内容能够满足您的需求。

苹果WWDC24发布会:AI成最大亮点,苹果智能生态再升级

北京时间2024年6月11日,苹果于美国加利福尼亚州库比蒂诺总部召开一年一度的WWDC全球开发者大会。此次大会历时两天,吸引了来自全球各地的开发者和果粉关注。苹果CEO蒂姆·库克在主题演讲中介绍了iOS 17、iPadOS 17、macOS 14、watchOS 10、tvOS 17等多款新操作系统,以及M2 Pro和M2 Max两款全新芯片。其中,人工智能(AI)成为本次大会的最大亮点。

苹果智能

苹果宣布推出“苹果智能”功能,旨在打通苹果多设备AIGC内容创作体验。用户可以使用iPhone、iPad、Mac等设备无缝衔接地进行内容创作,例如拍摄视频、录制音频、撰写文章等。此外,苹果还推出了通话AI录音转文字功能,可将通话内容实时转为文字,并支持多语言翻译。

iOS 17

iOS 17是本次大会的重头戏之一。新版本带来了全新的锁屏界面,支持自定义小组件、字体和颜色。此外,iOS 17还增加了对“专注模式”的更多功能,并对信息、地图、钱包等应用进行了更新。

iPadOS 17

iPadOS 17进一步提升了iPad的生产力。新版本增加了对多窗口功能的支持,并优化了文件应用和自由形态。此外,iPadOS 17还增加了对M2芯片的支持,使iPad的性能得到进一步提升。

macOS 14

macOS 14带来了全新的桌面外观,并对通知中心、信息、Safari等应用进行了更新。此外,macOS 14还增加了对M2芯片的支持,使Mac电脑的性能得到进一步提升。

watchOS 10

watchOS 10带来了全新的健康和健身功能。新版本增加了对心率变异性(HRV)的分析,并支持睡眠阶段跟踪。此外,watchOS 10还增加了对家庭应用的支持,使用户能够通过Apple Watch控制智能家居设备。

tvOS 17

tvOS 17带来了全新的家庭影院体验。新版本增加了对多用户个人资料的支持,并支持AirPlay Cast。此外,tvOS 17还增加了对Matter智能家居标准的支持。

M2 Pro和M2 Max

M2 Pro和M2 Max是苹果全新设计的两款芯片。这两款芯片采用第二代5纳米制程工艺,性能和效率得到大幅提升。其中,M2 Pro拥有多达10核CPU和32核GPU,而M2 Max拥有多达12核CPU和32核GPU。

总体而言,WWDC24是一次内容丰富的盛会。苹果在本次大会上发布了多款重磅新品,展现了其在软件和硬件领域的强大实力。其中,人工智能的应用将成为苹果未来发展的重点方向。

The End

发布于:2024-07-01 22:04:17,除非注明,否则均为6小时新闻原创文章,转载请注明出处。