Ray 2.0 发布,OpenAI 背后的机器学习技术


Ray 是一个统一的框架,用于扩展人工智能和 Python 应用程序。Ray 由一个核心的分布式运行时和一个用于加速 ML 工作负载的工具包(Ray AIR)组成。

Ray 2.0 是 Ray 的大幅度更新版本,对 Ray 生态中的所有库都进行了增强。通过这个重要的版本,Ray 朝着使分布式计算可扩展、统一和开放的目标大步迈进。

为了实现这些目标,Ray 2.0 具有统一机器学习(ML)生态的新功能、改善了 Ray 的生产支持,并使 ML 从业者比以往更容易使用 Ray 的库。

此次更新值得关注的重要内容包括:

  • Ray AIR:是一个可扩展的、统一的 ML 应用工具包,现在是 Beta 版
    • 简化了 ML 应用程序开发,提高了开发人员的速度,可与其他框架(如 Tensorflow、PyTorch、Hugging Face 等)进行互操作。
  • Ray 现在支持使用 Ray Datasets 库对 100TB 或更多的数据进行本地 shuffle
  • KubeRay:是一个用于在 Kubernetes 上运行 Ray 的工具包,现在是 Beta 版。它取代了传统的基于 Python 的 Ray operator。
  • Ray Serve 的 Deployment Graph API 是建立、测试和部署部署推理图的一种新的、更简单的方法,在 2.0 中作为 Beta 版发布。

更多详情可查看:https://github.com/ray-project/ray/releases/tag/ray-2.0.0

 


相關推薦

2023-02-12

于加速 ML 工作负载的工具包(Ray AIR)组成。 Ray 2.2 正式发布,该版本增强了可观察性、提高了数据密集型人工智能应用的性能、提高了稳定性,并为 RLlib 提供了更好的用户体验。 改善整个 Ray 生态的可观察性 Ray Jobs API 现在

2023-07-07

OpenAI 宣布正在组建一个由其联合创始人兼首席科学家 Ilya Sutskever 和 Alignment 负责人 Jan Leike 共同领导的新团队,以开发引导和控制超智能人工智能(Superintelligent AI)系统的方法。“我们需要科学和技术突破来引导和控制比我们

2022-08-11

父 Juergen Schmidhuber 创办的人工智能公司 NNAISENSE 宣布正式发布其 EvoTorch 开源进化算法库。根据介绍,这是同类中的首个开源平台,为工业界提供了一个进化算法包 (evolutionary algorithm,EA);当与机器学习专业知识相结合时,可以在

2023-06-28

器人。Hassabis 一月份透露称,他们考虑将在今年某个时候发布 Sparrow 的私人测试版;但目前上不清楚这些计划是否仍在按计划进行。 除了推动谷歌的 AI 工作进展外,Hassabis 同时也身兼管理未知和潜在严重风险的责任。针对最近

2023-03-28

5000万元人民币。   在 OSCHINA 和 Gitee 今年联合发布的《2022 中国开源开发者报告》中,我们也有幸邀请到了袁进辉在 “前沿开源技术领域解读” 栏目就“开源 AI”进行深度剖析。他提到,开源模式使得 AI 标准化和规

2023-03-16

PyTorch 2.0 现已发布! 新版本包括稳定版的 Accelerated Transformers(以前称为 Better Transformers);Beta 功能包括: 使用 torch.compile 作为 PyTorch 2.0 的主要 API(有关 torch.compile 的全面介绍和技术概述,请访问 2.0 入门页面。) scaled_d

2024-07-16

进一步优化 AI 模型的性能。这类似于斯坦福大学 2022 年发布的「自学推理」(Self-Taught Reasoner, STaR),都是通过训练数据的迭代来提升水平。 OpenAI 还计划让 Strawberry 有能力执行「长线任务」(long-horizon tasks, LHT),即需要提前

2023-07-25

可能考虑将其用于客户支持。 上周,外媒报道称,随着OpenAI旗下AI聊天机器人ChatGPT和谷歌旗下AI聊天机器人Bard的兴起,苹果也在开发自己的聊天机器人,这款机器人在该公司内部称之为“Apple GPT”。 今日,一位长期关注苹果

2023-10-21

施,实现超高性能、无缝访问和便捷管理。” 此次新版发布后,Alluxio 即从一种产品扩展到两种产品组合——Alluxio Enterprise AI 和 Alluxio Enterprise Data,全面满足分析和 AI 的多样化需求。Alluxio Enterprise AI 作为一款全新产品,建立

2024-03-02

频,实现生成视频,还能基于视频扩展视频,Sora延续了OpenAI的规模法则,即“大力出奇迹”。正是这种学习模拟能力,使得Sora看起来是一个“文生视频”的工具,本质是一个通用的“物理世界模拟器”。 无论什么大模型,贴

2023-03-20

OpenAI 刚发布了 GPT-4,百度预热已久的人工智能生成式对话产品也终于亮相了。昨天下午,文心一言 (ERNIE Bot)—— 百度全新一代知识增强大语言模型、文心大模型家族的新成员,正式在百度总部 “挥手点江山” 会议室里发布

2022-11-01

以及数学一起工作。结果是在 1955 年 11 月,进行了一场机器翻译演示。 除了为第一台机器构建硬件外,她还为 ARC2 和 SEC 机器编写了所有软件,在此过程中发明了她所谓的“Contracted Notation”,后来被称为汇编语言。她还发表了

2023-02-09

亿美元的微软就做出了回应。在今天凌晨举行的一场小型发布会上,微软展示了必应(Bing)中由 AI 驱动的新搜索功能,以及内置了相同 AI 技术的新版本 Edge 浏览器。 微软认为通过使用 AI 技术,全新的 Bing 和 Edge 可以重塑网

2023-03-16

OpenAI 刚刚宣布正式推出 GPT-4。GPT-4 是 Generative Pre-trained Transformer 4 的缩写,即生成型预训练变换模型 4。 公告写道,GPT-4 是一个多模态大型语言模型(支持接受图像和文本输入,以文本形式输出),也是 OpenAI 努力扩展深度学