机器学习小组组成了Python数据API标准联盟以减少碎片

时间：2020-08-21 12:52:29来源：互联网

深度学习框架Apache MXNet和开放神经网络交换(ONNX)今天启动了Python数据API标准联盟，以提高使用Python生态系统中任何框架，库或工具的机器学习从业者和数据科学家的互操作性。

ONNX本身由Facebook和Microsoft于2017年成立，旨在鼓励框架和工具之间的互操作性。如今，ONNX包括将近40个在AI和数据科学领域具有影响力的组织，包括AWS，百度和IBM，以及Arm，Intel和Qualcomm等硬件制造商。

新的联盟将为数据帧和数组或张量制定标准，希望解决近年来影响数据生态系统的碎片化问题。Python编程语言用于Pandas，PySpark和Apache Arrow等Python数据框。其他主要框架包括TensorFlow，PyTorch和NumPy。Facebook公司发言人在接受VentureBeat采访时表示，该财团将不包括PyTorch，PyTorch是当今使用的最受欢迎的机器学习框架之一。

“目前，数组和数据帧库都具有相似的API，但是有足够的差异，因此实际上不可能互换使用，”财团成员在今天的博客中说。“我们的目标是将这个财团发展成为一个组织，在该组织中，会在API，数据交换机制和其他此类主题上进行跨项目和跨生态系统的协调。这些主题比技术创新需要更大范围的协调和沟通。我们的目标是为前者提供便利，同时将创新工作留给当前和将来的个人图书馆。”

财团的首要任务是建立工作组并制定初始标准。然后，该小组将要求阵列和数据框库维护者提供反馈，并在使标准版本可用之前进行必要的迭代。该小组还发布了用于比较数组或张量并跟踪数据帧库的某些主要功能的工具。第一次反馈会议将从下个月开始。