特讯热点!超越Transformer:清华蚂蚁推出纯MLP架构,时序预测性能获突破性提升

博主:admin admin 2024-07-08 03:45:47 15 0条评论

超越Transformer:清华蚂蚁推出纯MLP架构,时序预测性能获突破性提升

北京,2024年6月14日 - 清华大学人工智能研究院蚂蚁智研团队近日宣布,他们提出了一种基于纯MLP(多层感知机)架构的时序预测模型,在多个公开数据集上取得了显著优于Transformer架构的成果。该研究成果将为时间序列预测领域带来新的技术范式,并有望在金融、医疗、物联网等众多行业得到广泛应用。

传统基于Transformer架构的时序预测模型,通常采用编码器-解码器结构,通过自注意力机制捕捉序列之间的依赖关系。然而,Transformer架构存在参数量大、计算复杂度高等问题,限制了其在长序列预测等场景中的应用。

清华蚂蚁团队提出的纯MLP架构,摒弃了自注意力机制,采用MLP网络直接对序列进行建模。得益于MLP架构的简洁性和高效性,该模型能够在保持精度的同时大幅降低计算成本

在多个公开数据集上的实验证明,清华蚂蚁的纯MLP架构在短序列和长序列预测任务上均取得了最优结果。例如,在著名的股票价格预测数据集标杆之一Nasdaq 100上,该模型的平均误差率降低了15%以上

清华蚂蚁团队的研究工作,为基于深度学习的时序预测模型提供了一种新的思路,有望推动该领域的技术进步和应用普及。

以下是对主要信息的扩充:

  • 纯MLP架构的优势
    • 参数量更小,计算效率更高,模型更轻量化。
    • 训练速度更快,更容易部署到实际应用中。
    • 能够更好地捕捉长距离依赖关系,适用于长序列预测任务。
  • 纯MLP架构的应用前景
    • 金融领域:股票价格预测、期货交易预测、风险评估等。
    • 医疗领域:疾病预测、生命体征预测、医疗影像分析等。
    • 物联网领域:传感器数据预测、设备故障预测、能源管理等。

以下是新标题的建议:

  • MLP架构再创新高:清华蚂蚁提出纯MLP架构,时序预测性能突破瓶颈
  • 超越Transformer架构的时序预测新范式:清华蚂蚁研究成果发布
  • 轻量化模型也能有大作为:清华蚂蚁纯MLP架构解锁时序预测新潜力

希望以上内容能够满足您的需求。

天兵科技再获超15亿融资 助力天龙三号火箭腾飞

北京 - 2024年6月6日,天兵科技宣布完成超15亿元C+轮新增融资,本轮融资由多家知名机构共同完成,包括梁溪科创产业母基金(博华资本管理)、无锡产发、央视基金、国裕高华、德岳投资、乾瞻投资、中信建投投资、君度投资、鸿富资产、合肥瑞城、苏州资管、首发展创投、国投泰康、秉鸿资本、中财腾华等。

这笔融资将主要用于天龙三号大型液体运载火箭的首飞与批量化生产、天龙三号可回收状态产品研制,以及天龙二号中型液体火箭的批量化生产。

天龙三号大型液体运载火箭是我国首款民营运载火箭,也是目前国内运力最大的民营运载火箭。该火箭直径3.8米,起飞质量590吨,近地轨道(LEO)运力达17吨,太阳同步轨道(SSO)运力也达到14吨。凭借大推力、可复用液体火箭发动机的优势,天龙三号将充分满足卫星互联网“低成本、高可靠、高频次”的发射需求,率先实现国内一箭30星以上的群打能力。

天龙三号火箭的成功研制,标志着我国商业航天液体火箭开启新纪元。天兵科技也将继续加大研发投入,加快天龙三号火箭的商业化步伐,为我国航天事业发展贡献力量。

关于天兵科技

天兵科技是一家致力于自主研制下一代常温绿色液体推进剂及极简式宇航推进系统的航天科技企业。公司成立于2019年,总部位于江苏省无锡市。公司拥有经验丰富的技术研发团队和完善的生产制造基地,已建成国内一流的液体火箭发动机研制试验中心。

天兵科技始终坚持自主创新,不断突破技术瓶颈,先后研制成功了110吨、220吨、350吨液体氧煤油火箭发动机,并成功应用于多型运载火箭。公司还积极布局商业航天领域,研制了天龙二号、天龙三号大型液体运载火箭,为卫星互联网星座建设提供有力支撑。

天兵科技的愿景是成为世界领先的航天科技企业,为人类探索宇宙、开发太空事业贡献力量。

The End

发布于:2024-07-08 03:45:47,除非注明,否则均为心宜新闻网原创文章,转载请注明出处。