机器学习模型的生命周期

动动发财的小手,点个赞吧!

alt

您的模型如何变化?Source[1]

诞生

当我们构建、训练、拟合或估计我们的模型时,这些数字工具就诞生了。这个阶段几乎从拥有分析目标、数据、计算机、算法以及数据科学家现在已经非常了解的其他一切开始。无论您收集什么其他工具,永远不要忘记分析或科学目标,以便您的最终模型有意义并满足特定需求。你的模特什么时候出生的?当您完成培训并将其保存以供就业/部署时,该工具的生命周期就开始了。

alt

这个新生儿有什么前途?这将取决于分析目标,因此我们在构建它时不能忘记这部分。该模型可以服务于预测任务、指标解释或假设情景模拟,以及许多其他选择。这个工具将用于某些事情。可以是简单快速的事情,也可以是复杂、耗时和长期的事情。这种使用将决定该模型的剩余寿命。如果该模型用于参数的一次性解释,那么生命就没有多少了。但是,如果该模型用于预测,并且旨在为具有在线数据收集的系统提供服务,那么生命就在这个新生儿面前。接下来是什么?

维护

随着我们继续使用该模型,支持模型训练的数据条件将开始发生变化。就在那个变化的时候,模型也开始经历变化。如果我们在训练时建立一个预测精度高的流失预测模型,那么在不久或遥远的将来,要预测的客户的条件或行为就会开始发生变化。这种变化挑战了我们学习模型的预测性能。当这些变化发生时,我们的模型进入一个新阶段,我们称之为维护。

在维护阶段,我们可能需要新数据。有了它,我们可以更新模型的规格。这与使用另一台机器(例如汽车)并在机器无法正常工作时调整零件没有什么不同。我们不会深入探讨执行模型维护的策略或解决方案,但一般来说,我们的模型需要经历一个调整过程才能使它们恢复到令人满意的性能。

alt

维护机器学习模型与重新训练模型并不完全相同。有些模型可能非常简单,以至于用更新的数据重新训练它们也同样简单。这可能是线性架构或具有很少层和神经元的网络的情况。但是当模型如此复杂且具有大型和深层架构时,维护阶段需要比重新训练模型的费用简单得多。这是当今机器学习领域最重要的主题之一,因为这些工具非常强大,但从长远来看维护起来却非常昂贵。

调整或更新模型后,它就可以恢复使用了,因此模型正在服务的任何进程都可以继续使用更新后的版本。我们的机器可以继续使用。尽管如此,这台机器已经发生了变化。如果你愿意的话,它已经被使用、消耗,并且已经转变为与原始状态略有不同的东西。就像铅笔一样,我们的模型会遇到我们需要削尖它们的尖端以保护它们以便我们可以继续使用它们的时刻。

迁移

在机器学习的道路上,我们可能需要走一个出口:转移。当我第一次看到有人调换他们的汽车轮胎在结冰的路上行驶时,我曾经访问过令人惊叹的冰岛。然后当他们回到城市时,他们又换回了普通轮胎。当我开始研究迁移学习时,这个概念变得如此清晰,同时还记得冰岛汽车轮胎的转换。当新的环境/领域开始发挥作用时,我们的模型会进入一个称为迁移的新阶段。

alt

正如同一辆汽车可以通过更换轮胎而无需购买另一辆单独的汽车来适应不同的地面一样,我们可以添加或调整我们模型的某些部分以服务于新领域的新目的,而无需构建新模型。迁移学习是机器学习文献中的另一个研究子领域,旨在优化模型的调整以简化新环境下训练模型的工作。流行的例子是图像识别模型。我们用某些类别的图像训练它们,然后其他人转移这些模型以识别新类别的图像。许多企业现在使用 RegNet、VGG、Inception 或 AlexNet 等模型来调整它们以满足自己的需求。

当我们转移一个模型时,在某种程度上,一个新模型诞生了,它有自己的生命周期,与原来的模型分开。它将像原始模型一样需要维护。有了这个,我们已经从拥有一个初始实体到可能创建一整套模型。毫无疑问,这些数字工具背后确实存在生命周期。

alt

我们的模型会死吗?

简短的回答是:是的。例如,当它们的分析性能在系统上不尽如人意,或者当它们变得如此庞大和如此不同以至于原始模型已成为过去时,它们确实可以停止存在。正如我们在开始时所说,岩石、铅笔和汽车在某个时候都会停止存在。在这方面,模型与这些东西没有什么不同。

尽管该模型可能会灭绝,但直到今天,对它们何时达到这一点的问题的答案是我们在机器学习研究社区中想要回答的最大问题。监控机器学习和模型维护性能的许多发展都与模型何时不再起作用的问题有关。

这个答案不是微不足道的原因之一是因为我们不断需要标签来量化性能的满意度。但机器和统计学习最大的悖论恰恰是标签不可用,而我们构建这些工具来预测它们。另一个原因是,定义性能变化的接受限度可能非常主观。虽然科学家可以提出一些限制,但企业可能有不同的容忍度。

以下是数据科学家在回答这个问题(当前未解决的问题)时也可以考虑的一些要点:

  • 训练数据是否过时? (什么是“太过时了”)
  • 当前版本与模型的原始版本有多相似? (什么是“相似”?)
  • 输入特征的可变性和与目标变量的关系是否完全漂移了? (协变量和概念漂移,机器学习维护研究中的两个最大课题)。
  • 部署模型的物理进程是否还在使用?如果物理基础设施不再支持模型的部署,这无疑标志着其生命周期的结束。

不再为模特而活并不一定是消极的事情,更像是她们的一条进化之路。我们需要了解它的生命周期,以使我们的物理和数字系统保持最新状态并具有令人满意的性能。

Reference

[1]

Source: https://towardsdatascience.com/the-lifetime-of-a-machine-learning-model-392e1fadf84a

本文由 mdnice 多平台发布

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://xiahunao.cn/news/250943.html

如若内容造成侵权/违法违规/事实不符,请联系瞎胡闹网进行投诉反馈,一经查实,立即删除!

相关文章

PHP 微信小程序 WebSocket MySQL Redis实现聊天功能

1.Mysql 实现离线消息池。如果一个用户不在线,则其他用户发送给他的消息暂时存储在mysql。待该用户上线时,再从离线消息池取出发送。 2.Redis 实现每个连接websocket的服务都唯一绑定一个用户。通过用户账号 fd 存到redis中。 微信小程序:…

python实现简单的聊天小程序

概要 这是一个使用python实现一个简单的聊天室的功能,里面包含群聊,私聊两种聊天方式.实现的方式是使用套接字编程的一个使用TCP协议 c/s结构的聊天室 实现思路 x01 服务端的建立 首先,在服务端,使用socket进行消息的接受,每接受一个socket的请求,就开启一个新的线程来管理…

小程序即时聊天服务器wss,Socket/WS/WSS和小程序

Socket 通信 Socket 不属于网络协议范畴,而是在应用层和传输层之间的一个抽象层,它把 TCP/IP 层复杂的操作抽象为几个简单的接口供应用层调用。通过调用 Socket 使得程序员可以更方便地使用 TCP/IP 协议栈。 Socket 连接是长连接,理论上客户端和服务器端一旦建立连接将不会主…

用Python写一个模拟qq聊天小程序的代码实例

前言 今天小编就为大家分享一篇关于用Python写一个模拟qq聊天小程序的代码实例,小编觉得内容挺不错的,现在分享给大家,具有很好的参考价值,需要的朋友一起跟随小编来看看吧 Python 超简单的聊天程序 客户端: 服务器: 模拟qq聊…

支付宝小程序平台的IM聊天插件

文章目录 前言一、用户端1.基本展示2.难处理的点二、另一用户端1.前端websocket的整合2.手机息屏websocket断线问题2.websocket服务端配置3.后端整合websocket作为服务端,传输消息给前端 总结 前言 最近工作需求来了个项目,前景为在支付宝平台上发布一个…

微信小程序——聊天小程序(从搭建到结束)

具体效果展示: 微信小程序——聊天功能(一、环境搭建) 微信小程序——聊天功能(一、环境搭建)_星^0^星的博客-CSDN博客 微信小程序——聊天功能(二、账号的注册与登录) 微信聊天小程序——&a…

Java-多人聊天小程序

上图啦!!! 首先运行: Server.java 然后启动: Client.java 最后退出客户端: 代码实现 Client package chat;import javax.swing.*;public class Client {public static void main(String[] args) {// 使用…

7步搞懂手写数字识别Mnist

大家好啊,我是董董灿。 图像识别有很多入门项目,其中Mnist 手写数字识别绝对是最受欢迎的。 该项目以数据集小、神经网络简单、任务简单为优势,并且集合了CNN网络中该有的东西,可谓麻雀虽小,五脏俱全。 非常适合新手…

二开项目权限应用全流程-按钮级控制

二开项目权限应用全流程-按钮级控制 员工A和员工B都可以访问同一个页面(以员工管理为例),但是员工A可以导出excel,员工B就不可以导出excel(看不到按钮) 思路 用户登陆成功后,用户可以访问的按钮级别权限保存在point…

VISIO使用技巧汇总

0.连接线拐弯或者连接不合适 0-0.Goal ​​​​​​​ 0-1. Automatic connection 0-3.Resolvent 0-3-0.ALTF9选项,取消粘附位置调整 0-3-1.选中线段-选中中心点-shift增加直角调整合适位置

Microsoft Visio 直线连接线

Microsoft Visio 直线连接线 1. 连接线 2. 直线连接线 3. 直线连接线图 References https://yongqiang.blog.csdn.net/

visio画太极图

步骤一 添加两个圆,且大圆的半径是小圆的2倍。 步骤二 往小圆添加一条直线作为直径 步骤三 选中小圆和直径,依次点击开发工具–操作–连接,然后选中连接后的小圆,再依次点击开发工具–操作–修建,可以分离出如下所示的两个…

visio 2007 画直线和矩形

visio 2007 画直线和矩形 1.问题描述 在一些图形中如果直接用连接线,会直接连到一些不理想的位置,而2007中不像2013及其以后那些版本中,有侧边栏能够直接画直线。 2.解决方式 直接选择工具栏中的红圈中的图标 能够生成红圈中的工具栏 然…

Visio对mysql怎么画er图_怎么用Visio画ER图

展开全部 画法如下: 1、由于Visio 2003默认的绘图模板并没有32313133353236313431303231363533e4b893e5b19e31333339653661E-R图这一项,但是画E-R图必须的基本图形Visio 2003还是有的,所以就得先把必要的图形添加到“我的模板”。以添加椭圆和…

Visio2010中设置线为直线

Visio2010中设置线为直线 在Visio2010中默认的线不是直线而是曲线,在画图中需要使用直线时要进行设置,下面介绍Visio2010中设置直线的方法。 1、打开Visio2010,然后点击设计: 2、点击调整大小下面的三角: 3、进入页面…

visio绘制流程图连接线总拐弯

描述 如图所示绘制流程图的连接线总拐弯 很让我强迫症发作 可以看到垂直的连接线总是会自动拐个弯 相关技巧 有说连接线中间点可以控制和增加中间点 或者按住shift 进行调整 这个还没研究明白咋操作不过没解决本质问题 此外还可以右键修改连接线属性 还可以在设计中进行调…

visio插入箭头_visio流程图中画箭头

visio流程图中画箭头 随着社会和经济的发展,电脑visio 2019软件已经成为我们生活中必不可少的一部分。visio 2019软件常常被我们使用于流程图的制作,很多第一次接触的朋友们不知道怎么在visio 2019软件制作流程图,接下来就让小编来教你们吧。 具体如下: 1. 第一步,打开电脑…

visio绘图小技巧

1.如何在图框的任意位置添加点? 先选中x点指令,再按住ctrl键,即可在任意位置画点 2.如何画出锯齿形线段? visio里面好像没有现成的锯齿形线段,所以可以利用直线反复折画,但是这里有个小技巧,就…

Visio简单画图使用方法

Visio使用方法 相信有很多初学者跟我一样,只会使用Word进行简单的画图。本章主要讲述如何使用Visio来画图(版本为2010) 一、系统流程图、数据流程图、ER图画法 1.打开Visio软件,创建简单模板 2.根据需求点击左侧"基本流程…

设计模式之~外观模式

定义: 为子系统中的一组接口提供一个一致的界面,此模式定义了一个高层接口,这个接口使得这一子系统更加容易使用。 结构图: 区分中介模式: 门面模式对外提供一个接口 中介模式对内提供一个接口 优点: 松耦…