机器学习在水处理系统中的应用给水篇.docx

《机器学习在水处理系统中的应用给水篇.docx》由会员分享，可在线阅读，更多相关《机器学习在水处理系统中的应用给水篇.docx（9页珍藏版）》请在第一文库网上搜索。

1、机器学习在水处理系统中的应用给水篇人工智能作为21世纪尖端技术的代表，是利用机器模拟人类的学习、思考、分析、决策等方式的技术，是实现智慧水务的重要手段。智慧水务作为现代水务发展的新趋势，是指利用物联网、大数据、云计算、人工智能等新信息技术，将水务系统状态信息传感技术、网络与移动系统相结合，构建集感知、仿真、诊断、预警、调度、控制和服务于一体的全方位智能化水务管理系统；涉及领域涵盖了水源调度、给排水处理系统、市政管网、海绵城市建设与管理、智慧客服以及综合性管控平台等。随着用水量与污水量的持续增加，水处理技术的发展和处理规模的增大，处理工艺愈加复杂；另外，由于环境污染的严重性，水质、处理成本和处理

2、效率的要求被提高。由于水务系统控制与管理拥有大量的数据，这些数据蕴含着各种反应机理和控制要素，各参数间存在非常复杂的非线性关系，其中包含的物理、化学和生物原理尚未研究透彻，因此传统自动控制过程只能给予一定的适度结果。基于一般规律的模型难以建立，只能依据经验进行调整，但这种模型的精度有限，过于依赖人力。因此迫切需要一种新的适用于解决非线性问题的自动化控制方法，充分利用水处理行业的数据信息，摆脱经验操作，实现自主学习控制。机器学习通过分析归纳得出数据趋势，而不是基于编程的因果逻辑，因此机器学习只需要输入海量数据，就可以自主构建数据间的关系，建立某种模型，进而根据模型对新数据进行判断和预测。另外，基

3、于机器学习的模型虽然有一定的，黑箱性，但可以通过适当的分析方法如ShaPIey值（SHAP）挖掘其深层的物理化学信息，因此机器学习具备一定的可解释性。机器学习依据其强大的学习和计算能力，可以在短时间内快速地处理海量数据，非常适合处理非线性问题，如解释污染物的迁移与转换、分析和预测水质、揭露处理反应机理等。因此机器学习是智慧水务的重要实现途径之一，是水务智慧化的核心和关键。机器学习在水务上的应用有望对水务事业做出巨大的贡献，并推动水务事业从人工控制中解放出来，实现智慧控制。据统计，已经有机器学习在自然和工程水体的应用综述、机器学习在污水处理技术和饮用水处理系统非线性问题分析中的应用汇总，但关于不

4、同机器学习算法在水处理系统中的实际应用及对比性总结还没有研究。为增强业内人士对机器学习和智慧水务的认识，推动智慧水务进一步发展，本文综述了国内外机器学习在水处理系统和污染物去除新技术研发中的应用，包括水量预测、混凝分析、消毒模拟、过程控制、能耗节约、膜污染预警、故障诊断等；最后讨论了代表性机器学习算法的优缺点和适用性；并分析了机器学习在水处理系统中应用的挑战和前景。O1机器学习简述在具有海量性、高速性、多样性和失真性等特征的大数据时代，机器学习凭借其算法的低成本性、精准预测性、机器自动化性受到各行各业的青睐。在水务信息化的进程中引入人工智能技术是发展的必然，这也将为水务智慧化、信息化带来新的机

5、遇。人工智能是在一个机器内嵌入相关算法后，多种算法相互结合，使机器拥有类似于人的行为，如观察、思考、学习、创造等；机器学习是人工智能的一个核心分支，旨在使计算机无需进行显示编程即可学习；深度学习是机器学习的子集，是一种含多隐臧层的深度神经网络结构。机器学习应用广泛，可以与各领域技术相结合，从而形成多种交叉学科，如模式识别、计算机视觉、语音识别、自然语言处理等。机器学习可以分为监督学习、无监督学习和强化学习三个主要类别。监督学习包括分类和回归两种算法，基于输入和输出训练数据进行算法构建，可用于预测新输入数据所对应的输出。当输出只能取一个有限值集时，用分类算法；当输出可取一定范围内的任意数值时，用

6、回归算法。无监督学习只能识别训练数据的共性特征，即在输入数据中寻找结构，并对新数据所呈现或缺失的共性特征作出判断，如聚类分析。强化学习是研究算法如何在动态环境中执行任务以实现累计奖励的最大化，如博弈论、遗传算法等，见图Ioo-1oa线性回归bK最近邻(KNN)c支持向J图1本论文中回顾的常用算法原理为训练机器学习模型，一般将数据分为训练集、测试集和验证集三个部分。首先，基于已选机器学习算法利用训练集对模型进行训练;其次，利用验证集数据通过调整超参数的方式优化训练后的模型；最后，将测试集输入训练好的模型中，比较预测输出与其相应的已知结果，以评估训练模型的预测能力和泛化能力。相关系数(PearSo

7、ncorre1ationcoefficient,R2)、平均绝对百分比误差(Meanabso1utepercentageerror,MAPE)平均绝对误差(Meanabso1uteerror,MAE)均方根误差(Rootmeansquareerror,RMSE)相对标准偏差(Re1ativeStandarddeViation,RSD）、性能效率、精度等参数可用于评价模型准确性。常见的机器学习方法包括随机森林、支持向量机、人工神经网络、深度学习、模糊控制等。每种算法都依据其机理的不同，各有长处，应用场合也千差万别。不同算法之间也可以相互结合，取长补短,提高精度。单独算法往往存在一定缺陷，因此在复

8、杂的水务工作中，通常将多种算法相互结合，共同控制。02机器学习在饮用水处理系统中的应用饮用水厂作为保障居民生活的重要组成部分，传统自动控制系统主要依靠传感器监测数据，依据经验进行调整，具有实时性大、风险高、任务量重、控制复杂、精度有限、成本高等特点。将机器学习应用于水处理系统，将改变这一现状，实现基于大数据的过程控制和决策。以下综述了机器学习在需水量预测、药剂投加、氯消毒等方面的运用，包括水源水污染物监测识别、混凝用量的准确高效预测、消毒副产物的形成分析、膜污染的先进控制。2.1 水量水质需水量的预测是进行城市规划建设所必须的内容，用机器学习的方法精确预测城市需水量是保证供水系统安全运行和实现

9、科学管理与优化调度的有效手段。传统短期蓄水量预测一般采用回归分析方法，金冬梅等采用多元线性回归模型（Mu1tivariab1e1inearregressmoda1,M1R)以近年长春市用水量、人均收入及人口资料为输入参数,成功对长春市未来多年用水量进行预测。YASAR等以月平均水费、总人口数、大气温度、相对湿度、降雨量等为影响因素，采用逐步线性回归模型预测土耳其亚达纳的供水量。回归分析方法计算简单，对历史数据质量和影响参数的准确性有较高要求，适用于数据波动小的年用水量等问题，不适用于城市时需水量等数据波动大的问题预测。基于线型数据模型的自回归移动平均模型(Autoregressiveinteg

10、ratedmovingaveragemode,AR1MA)具有收敛速度快和鲁棒性等优点，在数据波动较大的日需水量预测中可取得较好的预测效果，但不适用于非线性时间序列问题。随着机器学习算法的进步，新的机器学习算法诞生，弥补了传统算法的缺点，提高了预测精度。人工神经网络(Artificia1neura1network,ANN)模型依据若干神经元节点及连接权重实现自主记忆，进而完成输入与输出变量的非线性映射。BENNETT等利用两个前馈反向传播、一个径向基函数网络等三种神经网络模型对建筑用水终端组件(淋浴、洗衣机等)需水量进行预测，并应用至全市用水量预测。舒媛媛等基于主成分分析(PrinCiPa1c

11、omponentana1ysis,PCA)的反向传播神经网络(BaCkpropagationneura1network,BPNN)确定了人均收入、降雨量、居民生活用水量及生态环境用水量四个城市需水量影响因子，并对延安市年需水量进行了预测。ANN虽然很适用于大部分非线性时间序列的需水量，但该方法也存在训练时间长、易陷入局部最优、训练数据量大等缺点。多种算法结合，能有效的提高单一模型的预测精度。BRENTAN等基于支持向量回归(Supportvectorregression,SVR)模型，结合自适应傅立叶级数预测偏差，利用巴西弗朗卡自来水公司需求数据对模型进行验证，效果较好。蒋白懿等利用一种灰色遗

12、传(Genetica1gorithm,GA)神经网络组合模型对某市区年居民生活年需水量进行预测，组合模型的预测结果与实际值相对误差仅为1.17%,相比灰色神经网络模型精度提高0.84%,比灰色遗传算法模型提高了3.08%o叶强强等利用混沌算法优化搜索BPNN模型的城市短期需水量预测全局最优解，该模型容易确定输入层节点个数，具有收敛速度快，训练样本少等优点。极限学习机(Etreme1earningmachine,E1M)具有高稳定性和能力，被应用于预测短期需水量预测。与修正偏差的傅立叶级数模型结合，效果与ANN模型相当，但建模时间仅为后者的5%。2.2 混凝沉淀作为提高水质处理效率的水处理技术，

13、混凝技术具有既经济又简便的优点，其关键问题是基于进水浊度对加药量进行预测，在保证出水水质的前提下精准投加混凝剂是获得较好混凝效果及经济效益的前提。作为多输入单输出的非线性问题，模型的适用性对预测效果有重要影响。ANN模型依据简单的结构和鲁棒性被广泛应用于建立混凝模型。基于季节性原水变化和化学剂量，ANN模型被用于提高埃尔金地区污水处理厂过滤效率，该模型以0.63-0.79的相关性系数成功预测沉降水浊度，BPNN以0.78-0.89的相关系数计算出最佳的混凝剂用量。为提高ANN的预测精度，可以与径向基函数神经(Radia1basisfunctionneura1network,RBFNN)和广义回

14、归神经网络(Genera1regressionneura1network,GRNN)等其他算法联合，来模拟混凝过程，GRNN在数据量有限的情况下具有更好的性能，而多层感知器(MUIti1ayerperceptron,M1P)更适合于全规模水厂数据及高浊度的水混凝问题。以原水流量、pH、进出水浊度以及对应的混凝剂用量为指标,选用GA优化BPNN中的连接权值和阈值，构建了基于GA和BPNN的微涡流混凝投药控制模型，也取得较好的预测效果。相对与其他智能控制算法，小脑神经网络算法具有逼近复杂函数、泛化能力强、收敛速度快等方面的优点。该模型可根据关联模糊隶属函数将多输入(原水温度、浊度、pH)单输出(混

15、凝剂用量)问题转化为多个关联的单输入-单输出的问题，因此结果准确率更高，控制更合理。另外，E1M与RBFNN结合的算法E1MRBF可显著降低计算量，在预测低浓度混凝剂用量中，模型相关系数超过0.97,高浓度模型中相关系数在0.80以上。田村山净水厂以进出水pH、温度、流量、浊度、每日混凝剂投加量均值、每3h混凝剂投加量均值为特征参数，用长短时记忆网络(1ongshorttermmemory,1STM)、极端梯度增强集成方法(ExtremeGradientBoosting,XGBoost)和随机森林(Randomforest,RF)三种算法对单种或两种混凝剂投加量进行预测，最终采用了计算简单、精

16、度更高的基于XGBoost算法的混凝投药模型。2.3 氯消毒氯是饮用水水厂主要的消毒剂，在消毒过程中，即要保证消毒效果，又要考虑副产物与气味问题。水体中的余氯变化是一个非线性时变过程，利用单纯神经网络模型虽然可以构建出余氯预测模型，但由于神经网络搜索速度慢、易陷入局部最优、不适用于时变问题等缺点,其模型精度需要进一步提高。为搭建更加准确、稳定的水质余氯预测模型，安小宇等将正余弦算法(SineCosineA1gorithm,SCA)用于改进BP神经网络的非线性权重，构建了SCA-BP水体余氯预测模型，该模型相对误差的平均值为4.04%,预测效果优于BPNN、RBFNN模型。另外，基于粒子群算法改进网络权值和阈值的PSO-BPNN模型也被应用在水厂消毒智能预测中，相对于传统BPNN模型，该模型MAPE下降了1.8%,RSD下降了2.4%,并有效降低了氯消毒剂的使用量。针对小样本、高维空间问题，何自立等利用二阶振荡粒子群优化算法(Second-orderOs