基于强化学习的电采暖负荷类型识别研究杨安云孙宏彬DOI：10.19850/j.cnki.2096-4706.2021.09.003摘要：随着新能源技术以及智能电网的发展，电采暖技术也得到了广泛的应用。若要促进该技术快速健康发展，电采暖负荷类型的有效识别尤为关键。因此，文章提出了基于强化学习的电采暖识别方法。文章首先介绍了结合K-Means和最大期望（EM）方法对实际功率数据进行聚类的方式，然后建立针对电采暖识别的强化学习的框架，最后对处理后的电采暖数据进行识别验证，分析验证了该方法的可行性。关键词：电采暖;强化学习;分类识别：TP391.4：A：2096-4706（2021）09-0010-04ResearchonElectricHeatingLoadTypeIdentificationBasedonReinforcementLearningYANGAnyun，SUNHongbin（ChangchunInstituteofTechnology，Changchun130012，China）Abstract：Withthedevelopmentofnewenergytechnologyandsmartgrid，electricheatingt---本文来源于网络，仅供参考，勿照抄，如有侵权请联系删除---echnologyhasalsobeenwidelyused.Inordertopromotetherapidandhealthydevelopmentofthistechnology，theeffectiveidentificationofelectricheatingloadtypeisparticularlyimportant.Therefore，thispaperproposesanelectricheatingidentificationmethodbasedonreinforcementlearning.ItfirstintroducesthewayofclusteringtheactualpowerdatabycombiningK-meansandexpectationmaximum（EM）method，andthenestablishesareinforcementlearningframeworkforelectricheatingidentification.Finally，theprocessedelectricheatingdataisidentifiedandverified，andthefeasibilityofthismethodisanalyzedandverified.Keywords：electricheating;reinforcementlearning;classificationandidentification0引言我国以北京、天津为代表的北方城市以及长江一带冬季无集中供热地区的电采暖发展较好，特别是近几年受冬季天然气供应紧张，燃煤供暖污染的累积[1]以及雾霾日趋频发的影响，河北、吉林、内蒙古、新疆等省和自治区电采暖增长速度明显加快。随着电采暖技术被广泛应用，采暖数据也累计得越来越庞大，这阻碍了能源的调度管理，在处理大量数据时需要灵活快速的方法，特别是人为参与较少的方法。而强化学习成为解决该问题的一个有效方法。因此本文以电采暖负荷类型识别为研究方向，验证该方法的有效性。本文首先论述了电采暖设备的类型，然后对电采暖负荷数据进行聚类分析，并提出基于强化学习的电采暖识别方法，最后进行算例验证和分析。1电采暖识别方案1.1数据预处理目前应用的电采暖设备[2，3]主要可分为电锅炉、地源/水源/空气源热泵系统、分散电采暖设备。电锅炉根据蓄热与否分为直热式和蓄热式。直热式电锅炉即---本文来源于网络，仅供参考，勿照抄，如有侵权请联系删除---传统直热电极式电锅炉，其直接将电能转化为热能，无蓄热装置。蓄热式电锅炉是电加热装置结合蓄热载体形成的供热系统，根据蓄热介质的不同又分为水蓄热电锅炉、固体蓄热电锅炉、相变储能蓄热电锅炉。分散式电采暖设备主要有发热电缆、电热膜、电暖器、发热地板等。而电采暖技术经过长期的应用，使得电采暖设备与电采暖负荷形成了一定的对应规律。企事业单位多采用集中式的电锅炉进行采暖，而居住在偏僻地方的居民更多的选择分散式采暖设备。另外电采暖用户的采暖习惯也有所不同。学校用户属于间断用热类型用户，且对室内温度的要求不高（不低于18摄氏度即可）。日内，学校用户的电采暖主要在低谷时段进行用电蓄热，在其他时段根据室温情况补充加热;在整个采暖期内，日用电量与学校作息时间相关性较高，在工作日用电量较大、在节假日用电量较小。而医院用户属于24小时连续用热类型用户，且对室内温度的要求较高。日内，虽然医院用户的电采暖也主要在低谷时段进行用电蓄热，并在其他时段根据室溫要求灵活加热;但在整个采暖期内，日用电量与室外气温相关性较高，温度较低时日用电量较大、温度较高时日用电量较小。对于企事业单位，因为其对用电成本十分关注，该类型用户在电价低谷时段用大量的电蓄热，白...