首页 >> 动态 >

Databricks开源机器学习平台MLflow以标準格式打破工具平台的界线

2021-02-28 20:04:32 来源: 用户: 

由Apache Spark技术团队所创立的Databricks释出开源机器学习平台MLflow,不只对社群开放原始码,进一步使用开放介面,要支援既有的机器学习函式库、演算法以及工具,同时Databricks也提供MLflow的託管服务,不过,MLflow仍在早期的测试阶段,想尝鲜的开发者可以在GitHub上取得专案程式码。

MLflow包含三大部分,追蹤(Tracking)、专案(Projects)以及模型(Models)。MLflow追蹤是用于日誌参数、程式码版本、指标以及输出档案的API和使用者介面,使用者以脚本或是笔记本档案纪录日誌结果,可以选择储存在本地端或是伺服器上,之后可以使用网页介面读取来比较不同的执行结果。

而MLflow专案提供可重複使用的科学程式码标準格式,每个专案都单独为一个目录或是Git程式码储存库,并由YAML档案来定义MLproject。MLflow专案可以在套件管理器Conda环境中建立相依性,而MLflow会自动设定适合的环境执行专案,而且当专案有使用MLflow追蹤API,MLflow还会记录专案的版本以及相关参数,开发者可以随时重新执行完全相同的程式码。MLflow专案提供了良好的重现性、可扩展性以及实验性,让企业或是开源社群都可以更容易地共享资料科学应用。

MLflow的第三部分模型,MLflow的机器模型包称为MLmodel,其中可以包含任意档案以及一个MLmodel描述文件。MLflow提供输出工具,可以把常用的模型格式部署到不同平台上,官方提到,开发者可以将支援Python_function的模型部署到基于Docker的REST伺服器,也可以选择部署到各种云端平台,像是Azure ML或AWS SageMaker,或是在Apache Spark提供的批次或是串流推测中,作为用户自订义功能。

Databricks不只开源MLflow的程式码,也选择使用开放介面,官方表示,MLflow是设计来搭配任何的机器学习函式库、演算法、开发语言以及工具,以REST API以及提供简单资料格式做为设计理念,开发者可以把MLflow的模型看做是一个Lambda函式,能被不同的工具使用,因此Databricks提到,MLflow好处就是可以立刻增加到既存的机器学习程式码中,开发者马上就能执行使用。

之所以会有MLflow这个专案,官方提到,现在市面上的机器学习工具千百种,但是除了不容易追蹤机器学习的实验外,还很难重现相同的结果,而且也缺乏搬迁模型的标準,因此机器学习的应用常会被工具以及环境绑住,开发者害怕移植后会有不可预期的问题,而开源机器学习平台MLflow的出现,便是要试图解决这些问题。

  免责声明:本文由用户上传,与本网站立场无关。财经信息仅供读者参考,并不构成投资建议。投资者据此操作,风险自担。 如有侵权请联系删除!

 
分享:
最新文章
  • 【金鱼水霉病怎么治最快】金鱼水霉病是一种常见的真菌性疾病,主要由水霉菌(如水霉属、绵霉属等)引起。这种...浏览全文>>
  • 【金鱼寿命有多长】金鱼作为一种常见的观赏鱼类,深受许多养鱼爱好者的喜爱。然而,关于金鱼的寿命问题,很多...浏览全文>>
  • 【金鱼身上长白点了怎么办】金鱼是许多养鱼爱好者喜爱的观赏鱼类,但有时候它们会出现一些异常现象,比如“身...浏览全文>>
  • 【金鱼起源于哪】金鱼,作为人们最为熟悉的观赏鱼类之一,深受全球养鱼爱好者的喜爱。然而,许多人并不清楚金...浏览全文>>
  • 【金鱼能食用吗】金鱼作为一种常见的观赏鱼类,通常被人们养在鱼缸或水池中,用于观赏而非食用。然而,关于“...浏览全文>>
  • 【金鱼能活几年】金鱼是一种非常受欢迎的观赏鱼类,因其色彩鲜艳、形态可爱而深受人们喜爱。然而,许多人对金...浏览全文>>
  • 【金鱼每天要喂多少啊】金鱼是许多家庭中常见的观赏鱼类,它们不仅色彩鲜艳,而且饲养相对简单。然而,很多养...浏览全文>>
  • 【金鱼卵怎么孵化】金鱼卵怎么孵化table,tr{width: 100%;text-align: center;color: 333;font-size: 16px;line-height: 1 8em;margin 浏览全文>>
  • 【金鱼卵多久可以出小鱼】金鱼卵孵化成小鱼的时间,取决于多种因素,如水温、水质、金鱼品种以及孵化环境等。...浏览全文>>
  • 【金鱼鳞片掉了能否再长】金鱼作为观赏性鱼类,其美丽的鳞片是吸引养鱼爱好者的重要因素。但有时,由于水质问...浏览全文>>