时间序列数据特征提取TsFresh

文章目录

      • 1. 源码和数据地址
      • 2. TsFresh安装
      • 3. 代码部分说明
        • 3.1 数据下载
        • 3.2 从文件读取数据
      • 4. 特征拓展
        • 4.1 默认参数
        • 4.2 ComprehensiveFCParameters参数
        • 4.3 EfficientFCParameters参数
        • 4.4 MinimalFCParameters参数
      • 5. 特征过滤
        • 5.1 默认参数
        • 5.2 ComprehensiveFCParameters参数
        • 5.3 EfficientFCParameters参数
        • 5.4 MinimalFCParameters参数
      • 6. 特征拓展和过滤同时进行
        • 6.1 默认参数
        • 6.2 ComprehensiveFCParameters参数
        • 6.3 EfficientFCParameters参数
        • 6.4 MinimalFCParameters参数
      • 7. 结论

tsfresh用于从时间序列中提取特征。本篇主要介绍时间序列时间特征的拓展和过滤。编程环境jupyter notebook。

1. 源码和数据地址

链接:https://pan.baidu.com/s/1VjHgdcIx9WY3VigHMkBCKw
提取码:gqs1

2. TsFresh安装

pip install tsfresh

3. 代码部分说明

3.1 数据下载

from tsfresh.examples.robot_execution_failures import download_robot_execution_failures, load_robot_execution_failures
download_robot_execution_failures()
timeseries, y = load_robot_execution_failures()

数据展示:

timeseries.describe()

在这里插入图片描述

y.head()

在这里插入图片描述

3.2 从文件读取数据

import pandas as pd
import numpy as np
timeseries_csv = pd.read_csv('load_robot_execution_failures_timeseries.csv')
timeseries_csv.describe()

在这里插入图片描述

y_csv = pd.read_csv('load_robot_execution_failures_y.csv',usecols = ['index','value'])
y_csv= pd.Series(np.array(y_csv['value']).tolist(),index =np.array(y_csv['index']).tolist())
y_csv.head()

在这里插入图片描述

4. 特征拓展

4.1 默认参数

from tsfresh.feature_extraction import extract_features
extracted_features_0 = extract_features(timeseries, column_id="id", column_sort="time")
extracted_features_0.shape

在这里插入图片描述

4.2 ComprehensiveFCParameters参数

from tsfresh.feature_extraction import extract_features, ComprehensiveFCParameters
settings = ComprehensiveFCParameters()
extracted_features_1 = extract_features(timeseries, column_id="id", column_sort="time",default_fc_parameters=settings)
extracted_features_1.shape

在这里插入图片描述

4.3 EfficientFCParameters参数

from tsfresh.feature_extraction import extract_features, EfficientFCParameters
settings = EfficientFCParameters()
extracted_features_2 = extract_features(timeseries, column_id="id", column_sort="time",default_fc_parameters=settings)
extracted_features_2.shape

在这里插入图片描述

4.4 MinimalFCParameters参数

from tsfresh.feature_extraction import extract_features, MinimalFCParameters
settings = MinimalFCParameters()
extracted_features_3 = extract_features(timeseries, column_id="id", column_sort="time",default_fc_parameters=settings)
extracted_features_3.shape

在这里插入图片描述

5. 特征过滤

5.1 默认参数

from tsfresh import select_features
from tsfresh.utilities.dataframe_functions import impute
impute(extracted_features_0)
features_filtered_0 = select_features(extracted_features_0, y) #特征选择
features_filtered_0.shape

在这里插入图片描述

5.2 ComprehensiveFCParameters参数

from tsfresh import select_features
from tsfresh.utilities.dataframe_functions import impute
impute(extracted_features_1)
features_filtered_1 = select_features(extracted_features_1, y) #特征选择
features_filtered_1.shape

在这里插入图片描述

5.3 EfficientFCParameters参数

from tsfresh import select_features
from tsfresh.utilities.dataframe_functions import impute
impute(extracted_features_2)
features_filtered_2 = select_features(extracted_features_2, y) #特征选择
features_filtered_2.shape

在这里插入图片描述

5.4 MinimalFCParameters参数

from tsfresh import select_features
from tsfresh.utilities.dataframe_functions import impute
impute(extracted_features_3)
features_filtered_3 = select_features(extracted_features_3, y) #特征选择
features_filtered_3.shape

在这里插入图片描述

6. 特征拓展和过滤同时进行

6.1 默认参数

from tsfresh import extract_relevant_features
features_filtered_direct_0 = extract_relevant_features(timeseries,y, column_id="id", column_sort="time")
features_filtered_direct_0.shape

在这里插入图片描述

6.2 ComprehensiveFCParameters参数

from tsfresh.feature_extraction import ComprehensiveFCParameters
from tsfresh import extract_relevant_features
settings = ComprehensiveFCParameters()
features_filtered_direct_1 = extract_relevant_features(timeseries,y, column_id="id", column_sort="time",default_fc_parameters=settings)
features_filtered_direct_1.shape

在这里插入图片描述

6.3 EfficientFCParameters参数

from tsfresh.feature_extraction import EfficientFCParameters
from tsfresh import extract_relevant_features
settings = EfficientFCParameters()
features_filtered_direct_2 = extract_relevant_features(timeseries,y, column_id="id", column_sort="time",default_fc_parameters=settings)
features_filtered_direct_2.shape

在这里插入图片描述

6.4 MinimalFCParameters参数

from tsfresh.feature_extraction import MinimalFCParameters
from tsfresh import extract_relevant_features
settings = MinimalFCParameters()
features_filtered_direct_3 = extract_relevant_features(timeseries,y, column_id="id", column_sort="time",default_fc_parameters=settings)
features_filtered_direct_3.shape

在这里插入图片描述

7. 结论

通过拓展+滤波,和直接一次性滤波效果一致。

【参考资料】:
【1】 tsfresh官网:https://tsfresh.readthedocs.io/en/latest/text/introduction.html
【2】时序数据处理工具-时间序列数据特征提取TsFresh:https://blog.csdn.net/qq_22290797/article/details/108637240

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://xiahunao.cn/news/255728.html

如若内容造成侵权/违法违规/事实不符,请联系瞎胡闹网进行投诉反馈,一经查实,立即删除!

相关文章

Python数据获取——图片数据提取

图片数据提取 一、利用exifread提取图片的EXIF信息二、循环遍历图片信息 比如我随便从手机上传一张图片到我的电脑里,通过python可以获取这张照片的所有信息。如果是数码相机拍摄的照片,我们在属性里可以找到照片拍摄的时间,拍摄的经纬度&…

SQL数据分析之数据提取、数据查询、数据清洗【MySQL速查】

文章目录 一、数据提取二、数据查询1、选取数据(select)2、筛选(where)3、范围匹配(IN)4、排序(order by)5、条件筛选(case when) 三、数据清洗四、数据分组五…

jmteter 参数提取器-使用正则表达式来提取数据

应用场景: 在实际运用过程中,我们经常需要会遇到B请求需要使用A请求返回的数据,将上一个请求响应的结果作为下一个请求的参数,例如token,这个时候我们就要用到提取器来提取数据,Jmeter工具自带了Json提取器…

JSON 提取器

大家好啊,我是大田。 Json提取器专门用来提取Json结构的数据。 位置:取样器->添加->后置处理器->Json提取器 各字段解释: Name of created variables:保存的变量 JSON Path expression:JSON 表达式&#xf…

人工智能 (特征数据提取)

特征工程数据提取 : 机器学习(Machine Learning, ML)是一门多领域交叉学科,涉及概率论、统计学、逼近论、凸分析、算法复杂度理论等多门学科。专门研究计算机怎样模拟或实现人类的学习行为,以获取新的知识或技能,重新组织已有的知…

jmeter-json提取器提取数据

背景 现在很多接口的登录是返回一个json数据,token值在返回的json里面,在jmeter里面也可以直接提取json里面的值。 上一个接口返回的token作为下个接口的入参。 1.案例场景: 我现在有一个登陆接口A,登陆成功后返回一个token值。有一个重置支付…

jmeter的json提取器提取数据

在接口测试中有一个这样的场景:登录之后,返回一个json数据,token值在返回的json里面,在jmeter里面也可以直接提取json里面的值,应用在下一个接口,怎么实现? 1、一个变量获取一个数据 登录请求…

如何从网站提取数据?

网络抓取与网络爬取 在当今时代,根据数据情况来制定业务决策是许多公司的头等大事。为了推动这些决策,公司全天候跟踪,监视和记录相关数据。幸运的是,很多网站的服务器上存储了大量公共数据,可以帮助企业在竞争激烈的市…

时间序列数据的特征提取

CDA数据分析师 出品 当你想对时间序列数据做分类时,有两种选择,一个是用时间序列特定的方法,比如说说LSTM模型。另外一种方法就是来从时间序列中提取特征从而将这些特征用在有监督的模型上。在这篇文章中,我们来看下如何使用tsfre…

提取数据_提取图表曲线数据的方法

采用计算机模拟预测电池性能时,一般都需要利用实验数据验证模型的准确性。如果自己无法获取实验数据,那就只能利用文献报道的数据来校正模型。本文介绍从图表曲线中提取数据的小软件及其操作步骤。 操作步骤介绍 (1)软件介绍:Engauge是一款开源软件,用于从文献曲线图或地图…

python如何提取数据_python提取数据的常用方法

在我们要对某一种情况进行分析时,需要大批量的数据材料作为分析的基础,在使用python爬取时,就会涉及到不同的抓取方法。在抓取数据的类型时,又会分为不同的情况进行讨论,本篇整理了三种提取数据方法:正则表达式、BeautifulSoup、lxml。下面就这些方法进行详解。 假设我们…

Tableau数据连接与加载(数据提取)

文章目录 一、实时连接与数据加载二、创建数据提取三、刷新数据提取四、向数据提取添加数据 一、实时连接与数据加载 1、区别 Tableau加载数据有两种基本方式,一种是实时连接,即Tableau从数据源获取查询结果,本身不存储源数据;另…

数据提取-数据提取软件

数据提取,数据提取主要是用来收集数据。这也是数据提取最直接和最常见的用途。由于数据提取是一个工具是一个软件,程序运行速度极快,而且不会因为做重复的事情而感到疲劳,所以使用数据提取来获取大量的数据就变得非常容易和快速。…

科研神器----数据提取软件WebPlotDigitizer的使用

今天介绍一款在写论文时很有帮助的数据提取软件WebPlotDigitizer,在我们查阅参考文献的时候,经常会看到文献中相关的数据图,而这类图通常是只有图形没有具体数据的。为了进一步进行分析处理,我们往往需要获取到图表原始的数据&…

大学四年,因为这8个网站,我成为同学眼中的学霸

「作者简介」:CSDN top100、阿里云博客专家、华为云享专家、网络安全领域优质创作者 「推荐专栏」:对网络安全感兴趣的小伙伴可以关注专栏《网络安全入门到精通》 大学期间,几乎每一个教过我的老师都反应,我的学习态度不好&#x…

chatgpt赋能python:Python:输出0-9的数字

Python:输出0-9的数字 Python是一种简单易用的编程语言,也是一种高级、解释性、交互式和面向对象的动态编程语言。在这篇文章中,我们将介绍如何使用Python编写代码来输出0-9的数字。 安装Python 在使用Python之前,首先要安装它…

2023 简约ChatGPT网页全开源源码

全开源的,很简约,密钥在chat.php里面输入就可以用了,分享给大家自己拿去玩玩,对接的是gpt3.5的版本。 。。。

查看网页源代码 / 查看框架源代码

网页源代码---是父级网页的代码,可在页面内右击或使用快捷键CtrlU 也可以在你想要查看的网页地址栏前面加上入view-source: 框架源代码---网页中有一种节点叫iframe,相当于网页的子页面,他的结构和外部网页的结构完全一致,框架源代…

谷歌浏览器查看网页源代码

Mac OS 苹果系统: optionU 快捷键 Windows系统: 方法一:在谷歌浏览器的任一页面上右键,查看源代码,即可看到该页面的html代码。 方法二:在谷歌浏览器的任一页面中按下快捷键ctrlU,即可看到该页面的html代…

【html代码】Windows网页版界面源码

介绍: Windows12 源码模拟网页win12 ,无需安装,打开start.html即可,功能可以自行增加或者二开等等。 程序下载:https://qumaw.lanzoul.com/i9cMX0dlxygd