NILM非侵入式负荷识别（papers with code、data）带代码的论文整理——(公开数据集、工具、和性能指标篇) 全网最全

已于 2024-01-22 21:48:46 修改
阅读量6.8k 收藏 108
点赞数 13
分类专栏： nilm 文章标签： 深度学习 人工智能
于 2023-01-10 22:24:22 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/aa2962985/article/details/128636991
版权

FAQ（阅前必读）：

Q1：文章里面没有附上代码链接的文章是不是没有源码？

A1：是，没有贴代码链接就是没有，需要代码建议直接发邮件给论文作者的邮箱。

Q2：xxx数据集找不到，xxx代码网址打不开了，博主能不能发我一份？

A2：不能。工作之后就不再保存任何数据集和代码了，因为目前工作与此毫无关联，所以

此类私信一律不回。

说在最前面

这篇文章主要介绍用于非侵入式负荷识别领域目前的公开数据集、工具和其它等，如果需要看论文及具体代码实现，看我上一篇的文章。

其外，不是所有数据集我都用过，我只用过UK-DALE,所以其它数据集你问我怎么处理我也不知道！！！！！！！！！！！！！！！！

但是如果你动手能力不足的话，可以考虑：

1.直接使用nilmtk工具包

2.参考我的另外一篇文章NILM非侵入式负荷识别（papers with code、data）带代码的论文整理——(论文及实现代码篇) 全网最全icon-default.png?t=N7T8https://blog.csdn.net/aa2962985/article/details/128635658?spm=1001.2014.3001.5501        找到里面公开代码中用来数据预处理的那部分，譬如你需要用UK-DALE数据集，你就找用UK-DALE数据集的论文，看看人家是怎么做数据预处理的。

我会在下面标注几个最常用常见的

第一次更新时间：2023年5月9日 22:36:45

第二次更新时间：2023年8月3日 23:03:19

第二次更新的内容：自从工作之后，整天有人私信来问一些重复的问题，实在没有时间回复，故更新常见FAQ。

公开数据集：

1.REDD（The Reference Energy Disaggregation Data Set） （常用）

http://redd.csail.mit.edu/

id:redd

password:disaggregatetheenergy

备注：据说这个网址已经打不开，不要私信问我要这个数据集，我也没有，不回私信。

2.AMPds                                                                               （常用）

AMPds (The Almanac of Minutely Power Dataset).

nilmtk自带的converter是对应 AMPds R2013版本

除此之外还有

AMPds2: The Almanac of Minutely Power dataset (Version 2)

3.CER_Electricity_Data

ISSDA | Commission for Energy Regulation (CER)

4.Umass Smart Data Set

Smart - UMass Trace Repository

5.REFIT                                                                    （常用）

颗粒度最细,8s级别

REFIT: Electrical Load Measurements — University of Strathclyde

6.ENLITEN

https://researchportal.bath.ac.uk/en/datasets/enliten-a-dataset-and-its-associated-analysis-code-for-the-paper

7.GREEND

GREEND download | SourceForge.net

8.ElectricityLoadDiagrams

OEDI: Commercial and Residential Hourly Load Profiles for all TMY3 Locations in the United States

没有missing point

9.UK-DALE                 （常用）

UK Domestic Appliance-Level Electricity (UK-DALE) dataset | Jack Kelly

https://data.ukedc.rl.ac.uk/browse/edc/efficiency/residential/EnergyConsumption/Domestic

有三个版本

10.ECO data set 

DSG - Research Project: ECO data set

11.HES（Household Electricity Study）

Science Search

 12.The tracebase data set

GitHub - areinhardt/tracebase: The tracebase appliance-level power consumption data set

13.ENERTALK

https://www.nature.com/articles/s41597-019-0212-5

预处理和可视化代码：GitHub - ch-shin/ENERTALK-dataset: The ENERTALK Dataset, 15 Hz Electricity Consumption Data from 22 Houses in Korea

14.BLUED

非侵入式负荷分解之BLUED数据集_Alex Ching Ho的博客-CSDN博客_blued数据集

15.DEDDIAG

DEDDIAG, a domestic electricity demand dataset of individual appliances in Germany

16.PLAID                                                       （常用）

PLAID2018: PLAID 2018

PLAID 2017:  PLAID 2017

PLAID 2014:  PLAID 2014

17.MORED: A Moroccan Buildings’ Electricity Consumption Dataset

https://github.com/MOREDataset/MORED

paper:https://www.mdpi.com/1996-1073/13/24/6737

18.Residential Power Traces for Five Houses: the iHomeLab RAPT Dataset

paper: Data | Free Full-Text | Residential Power Traces for Five Houses: The iHomeLab RAPT Dataset

pre-process code: https://github.com/ihomelab/RAPT-dataset

dataset: Residential Power Traces for Five Houses: the iHomeLab RAPT Dataset | Zenodo

19.FIRED: A Fully-labeled hIgh-fRequency Electricity Disaggregation Dataset

paper: FIRED | Proceedings of the 7th ACM International Conference on Systems for Energy-Efficient Buildings, Cities, and Transportation

code: GitHub - voelkerb/FIRED_dataset_helper: Files to load and use the Fully-labeled hIgh-fRequencyElectricity Disaggregation (FIRED) dataset. Files to generate statistics and plots.

20.RAE:The Rainforest Automation Energy Dataset for Smart Grid Meter Data Analysis

pdf: Data | Free Full-Text | RAE: The Rainforest Automation Energy Dataset for Smart Grid Meter Data Analysis

GitHub - smakonin/RAE.dataset: Scripts of the the Rainforest Automation Energy Dataset (RAE dataset)

21.COOLL:Controlled On/Off Loads Library, a Public Dataset of High-Sampled Electrical Signals for Appliance Identification

链接无。

22.IAWE:Indian Dataset for Ambient Water and Energy

iAWE

合成数据集：

顾名思义，这里面的电力数据是人工合成的，跟上面用电表仪器采集的数据不一样，这里一般用来做增强数据集。

1.SHED

A Simulated High-frequency Energy Disaggregation dataset for commercial buildings

SHED Dataset

2.SynD（A Synthetic Energy Consumption Dataset for NILM）

code: GitHub - klemenjak/SynD: A Synthetic Energy Consumption Dataset for Non-Intrusive Load Monitoring

pdf: A synthetic energy dataset for non-intrusive load monitoring in households | Scientific Data

3.SmartSim

A Device Accurate Smart Home Simulator for Energy Analytics

GitHub - sustainablecomputinglab/smartsim

4.Device-Free User Activity Detection using Non-Intrusive Load Monitoring: A Case Study

pdf: https://www.areinhardt.de/publications/2020/Reinhardt_DFHS_2020.pdf

code: GitHub - klemenjak/antgen: The AMBAL-based NILM Trace generator (for NILMTK)

How does Load Disaggregation Performance Depend on Data Characteristics? Insights from a Benchmarking Study. (2020).  PDF: https://www.areinhardt.de/publications/2020/Reinhardt_eEnergy_2020.pdf

工具（框架、数据集转换工具等）：

NILM-TK是一个非侵入式负载监测的开源工具包，专门设计用于以可再现的方式比较能量分解算法，就是Jack Kelly他们几个做的一个toolkit工具包。

论文地址： NILMTK | Proceedings of the 5th international conference on Future energy systems

NILMTK:

Code:  GitHub - nilmtk/nilmtk: Non-Intrusive Load Monitoring Toolkit (nilmtk)

Documentation: NILMTK Documentation

all the state-of-the-art algorithms for the task of energy disaggregation

GitHub - nilmtk/nilmtk-contrib

An evaluation framework for non-intrusive load monitoring algorithms

https://github.com/beckel/nilm-eval

NILM评价指标的相关论文

《On Metrics to Assess the Transferability of Machine Learning Models in Non-Intrusive Load Monitoring》

《Machine learning approaches for non-intrusive load monitoring: from qualitative to quantitative comparation,Artificial Intelligence Review》

NILM中的特征选择相关论文

《Comprehensive feature selection for appliance classification in NILM》

DOI：10.1016/j.enbuild.2017.06.042

code:https://github.com/18D070001/Electrical-Devices-Identification-Model

NILM一些拓展应用：

监测独居老人：

《Assessing Human Activity in Elderly People Using Non-Intrusive Load Monitoring》

DOI：10.3390/s17020351

Sustainable Homecare Monitoring System by Sensing Electricity Data | IEEE Journals & Magazine | IEEE Xplore

用NILM实现居家活动的识别：

采样频率对应不同的谐波特征

Non-Intrusive Load Monitoring and Classification of Activities of Daily Living Using Residential Smart Meter Data | IEEE Journals & Magazine | IEEE Xplore

关于NILM的一些网站（workshop、协会之类的）

The International Workshop on Non-Intrusive Load Monitoring (NILM)

http://www.nilm.eu/

http://wiki.nilm.eu/

Ben出没冇注意
关注
  • 13
    点赞
  • 踩
  • 108
    收藏
    觉得还不错? 一键收藏
  • 6
    评论
专栏目录
nilmtk:非侵入式负载监控工具包（nilmtk）
05-04
NILMTK：非侵入式负载监控工具包 非侵入式负载监控（NILM）是仅根据整个房屋的功率计读数估算单个设备所消耗的能量的过程。 换句话说，它仅通过一个整个房屋的电表就产生了（估算的）逐项电费单。 NILMTK是一个工具包，旨在帮助研究人员评估NILM算法的准确性。 如果您是Python的新用户，建议对Python生态系统中的 ， 和其他工具进行自我教育。 :warning: NILMTK作者可能需要一些时间才能就查询/问题与您联系。 但是，我们非常欢迎您提出修改，支持！ 记住要检查现有的问题凭单，尤其是未解决的问题凭单。 文献资料 如果您是新用户，请在阅读。 引起我们注意的是，一些用户遵循第三方教程来安装NILMTK。 请始终记住检查此类教程的日期，其中许多教程已经过时，并且无法反映NILMTK的当前版本或推荐/支持的设置。 为什么要使用NILM工具包？ 我们引用解释对NILM工具包的需求：
NILM开源数据集:REFIT数据预处理代码
08-04
NILM开源数据集:REFIT预处理代码
NILMTK安装
最新发布
m0_60707708的博客
05-16 411
NILMTK(https://github.com/nilmtk/nilmtk)是针对非侵入式负荷监测研究的一款开源工具库，包含了多种算法。根据官方安装教程(https://github.com/nilmtk/nilmtk)，经常安装不成功。这里给出一种简单粗暴的方法，就是直接在Github下载NILMTK的文件，放到anaconda安装文件夹lib中的site-packages，然后运行experiment文件，缺少什么库，在安装什么库，百试不爽。
NILM所用数据的准备
鹭岛小屋
08-25 6305
REDD数据 REDD是功率分解参考数据集（The Reference Energy Disaggregation Data Set）的简称。麻省理工学院（MIT）公布了一个REDD数据集，包含了6个不同家庭在几周内的用能数据，以及其中2个家庭主要用能设备的高频电流/电压数据。 数据集的网址如下： redd.csail.mit.edu 虽然上述资源是免费的，但是，如果要下载，需要给作者发送邮件索...
NILMTK——经典数据集REDD介绍和使用
樱缘之梦
11-04 1万+
配置了NILMTK包的环境之后，想找数据测试一下，在NILMTK官网的API Docs里边发现dataset_converters模块中有内置的数据集处理函数，如图： 将数据转换成HDF文件，这些数据都是比较优秀的，其中，常用的数据集是REDD和UK_DALE。 1. REDD数据集 目前版本的下载地址为:http://redd.csail.mit.edu，需要向作者发送邮件，才能获取用户名和密码进行下载！ 论文为：J. Zico Kolter and Matthew J. Johnson. .
NILMTK在Windows下的安装教程
樱缘之梦
11-02 3110
近期，要进行负荷辨识，找到NILMTK安装包，特意将过程记录下来。 （1）Windows安装 本机已安装了Anaconda，环境是Python3，NILMTK包的项目地址为：https://github.com/nilmtk/nilm_metadata/，首先需要安装git命令，才能进行git资源下载。 a、下载nilmtk git clone https://github.com/nilmtk/nilmtk.git 就会在目录下发现nilmtk文件夹，并有setup.py文件 切换到该目
深度学习与NIML（非侵入式负荷监测）：NILMTK与数据集介绍（一）
jiangxishaofen的博客
09-22 8426
@深度学习与NIML（非侵入式负荷监测）：NILMTK介绍（一） 提示：本系列为个人学习记录，如有错误欢迎指正，互相交流，共同进步！ 文章目录前言一、NILM是什么？二、正文内容1.博客系列2.博客系列3.nilmtk的安装4.数据集后语 前言 最近入了NILM的坑，看了各种文献与博客后算是对这个方向有了个大概了解，所以在这里跟大家一起捋一捋。 提示：以下是本篇文章正文内容，下面案例可供参考。 一、NILM是什么？ NILM（non-intrusive load monitoring）,非侵入式电力
【NILM】非侵入式负荷分解数据集下载链接
浪荡子爱自由的博客
07-12 7825
非侵入式负荷分解数据集 1.UK-DALE数据集下载： 下载链接 2.REDD数据集下载： 下载链接 用户名： redd 密码： disaggregatetheenergy 3.REFIT数据集下载 下载链接 4.BLUED数据集下载 下载链接（提取码Alex） 参考博客：链接 5.PLAID数据集下载 PLAID 2014下载链接 PLAID 2017下载链接 PLAID 2018下载链接 ......
非侵入式负荷分解数据集
2301_80430808的博客
10-26 976
【NILM】非侵入式负荷分解数据集大全（含下载链接）
NILMTK安装教程（详细）——个人实践成功
weixin_44142093的博客
10-27 4562
个人实践所得，两种成功的NILMTK安装方法。
NILM（非侵入式电力负荷监测）学习笔记 —— 使用NILMTK Toolkit，REDD数据集，CO和FHMM两种算法
热门推荐
wwb1990的博客
01-09 2万+
实验环境 1，语言： Python 3.6 2，IDE：PyCharm Community Edition 2019.3.1 3，主要工具方法：nilmtk和nilm_metadata以及所依赖的类库 （配置环境，详见我另一篇笔记） 4，实验中分别使用两种方法预测分解： NILM-组合优化算法 combinationrial optimization 多条隐马尔科夫模型（FHMM） 5，测试数...
nilm数据集.xlsx
03-15
nilm数据集.xlsxnilm数据集.xlsxnilm数据集.xlsxnilm数据集.xlsxnilm数据集.xlsxnilm数据集.xlsxnilm数据集.xlsxnilm数据集.xlsxnilm数据集.xlsxnilm数据集.xlsxnilm数据集.xlsx
非侵入式负荷分解NILM的实用安装包NILMTK
06-19
非侵入式负荷分解NILM的实用安装包NILMTK，包括nilmtk-contrib、nilmtk和nilm_metadata。python实用安装包，帮助处理负荷分解数据。
基于优化算法的非侵入式居民负荷辨识算法 （数据集）
05-19
本数据集与一篇电气期刊论文的研究工作相关，该论文探讨了利用优化算法解决非侵入式居民负荷辨识问题。优化算法是一种求解复杂问题的有效方法，它能寻找使目标函数达到最优状态的变量组合。在NILM的背景下，优化算法...
ALIP_NILM-master.zip_Alip_nesty98_nilm_负荷分解_非侵入式
07-15
非侵入式负荷分解技术，采用REDD数据集，辅助线性整数规划
NILM非侵入式负荷识别（papers with code、data）带代码的论文整理——(论文及实现代码篇) 全网最全
Ben出没冇注意的博客
01-10 1万+
非侵入式负荷识别（NILM,non-intrusive load monitoring）领域的深度学习论文及代码实现，全网最全。
非侵入式负荷监测－采集设备
Bigbboylover的博客
08-30 1375
好久没写了，今天来更新一下采集设备。NILM的一个大难点，就是如何获得足够多，有效的数据，以及如何建立相应的数据库。现在国内前言的研究单位都有自己的采集设备或者与相应的公司合作来获得一手的数据。下面我将通过朋友开发的一款设备来介绍采集设备的功能。............
Refit简单使用
世界既不黑也不白，而是一道精致的灰。
06-06 1577
Refit 是一个类型安全的 REST 开源库，是一套基于 RESTful 架构的 .NET 客户端实现，内部使用 HttpClient 类封装，可通过 Refit 更加简单安全地访问 Web API 接口，要使用 Refit 框架，只需要在项目中通过 NuGet 包安装器安装即可。 三、使用 创建两个weiapi ==01_Publisher 和02_Subscriber == 2.ThriftAController 3.Person 02_Subscriber 1.ThriftBController
nilm 英国数据集
01-22
NILM（Non-Intrusive Load Monitoring）是一种用于监测和识别住宅或商业建筑中各种电气设备能耗情况的技术。NILM技术可以通过分析整个建筑的总电力负荷数据，来识别出不同电器设备的能耗情况，而不需要在每个设备上安装专门的传感器。 在英国，有一些公开的数据集，用于NILM技术的研究和开发。这些数据集通常包括来自不同建筑的电力负荷数据，以及对应不同电器设备的能耗情况。通过使用这些数据集，研究人员可以开发出更加准确和有效的NILM算法，帮助用户更好地了解和监控他们的能源使用情况。 这些数据集还可以用于NILM技术在实际建筑环境中的应用。例如，可以将NILM技术与智能建筑系统相结合，实现对建筑能源使用情况的实时监控和智能调控。通过分析这些数据集，可以进一步推动建筑能源管理和节能减排的发展，为建筑能源领域的科研和实践提供更多的支持和借鉴。 总的来说，NILM英国数据集为NILM技术研究和应用提供了宝贵的数据资源，有助于推动建筑能源管理的发展，提高能源使用效率，减少能源浪费。希望未来能有更多的数据集开放，为NILM技术的发展和推广提供更多的支持。
评论 6
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值