基于图自动编码器的重要性采样法(GAE-IS):评估基础设施网络极端失效风险的新利器

【字体: 时间:2025年03月15日 来源:Patterns 6.7

编辑推荐:

  GAE-IS 方法利用图学习技术,有效降低计算成本,精准估算极端失效概率,评估基础设施韧性。

濠电姷鏁搁崑鐐哄垂閸洖绠插ù锝呭濞存牠鏌曟繛褍妫楀皬闂備焦鏋奸弲娑㈠疮娴兼潙鐓樼€广儱顦伴悡鏇㈡煙娴煎瓨娑ф鐐瘁缚缁辨帡鎮╅崫鍕優缂備浇椴哥敮妤€顕ラ崟顓涘亾閿濆簼绨藉ù鐘虫綑椤啴濡堕崱妤冾儌闂佸摜濮甸悧鐘荤嵁閸℃稑绀冩い鏃囧亹椤︽澘顪冮妶鍛婵☆偅鐩畷鎰版倷閻戞ǚ鎷洪梺闈╁瘜閸欌偓婵$偓鎮傞弻娑樷枎韫囨洜顔婂┑鈥冲级閸旀洟鍩為幋鐘亾閿濆骸浜滃ù鐘虫そ濮婅櫣绱掑Ο鑽ゅ弳闂佸湱鈷堥崑濠囧春濞戙垹鍐€妞ゆ挾鍟块幏鍝勵渻閵堝棗濮х紒韫矙瀹曨偄煤椤忓懐鍘遍梺鎸庣箓鐎氼剙鐣甸崱妯诲弿濠电姴鍊归崑銉р偓瑙勬礋娴滆泛顕i幘顔藉亹闁告瑥顦伴悵锕傛⒒娴e憡鎯堟い锔诲亰瀵彃饪伴崼鐔蜂画閻熸粍妫冮獮鍡樼瑹閳ь剟鐛幒鎳虫棃鍩€椤掆偓铻炴慨妞诲亾闁哄本鐩俊鐑藉閳╁啰褰囬柣鐔哥矋濠㈡ê岣块敓鐘茶摕闁靛ǹ鍎Σ鍫熶繆椤栨氨浠㈡い蹇e幖椤啴濡堕崒娑欐闂佹悶鍎洪悡鍫濐潖閸ф鈷戦梺顐ゅ仜閼活垱鏅堕幘顔界厵鐎规洖娲ら弸鎴炵箾閻撳海绠诲┑鈩冩倐閺佸倿鏌ㄩ姘濡炪倖娲嶉崑鎾绘煛鐏炲墽鈽夐摶锝夋煟閹惧啿顒㈤柣搴ㄧ畺濮婃椽宕崟闈涘壈闂佸摜鍠愰幐鍐差嚕椤愩埄鍚嬮柛娑卞灡濞堟洟姊洪崨濠傚闁稿骸鍟块埢鎾诲蓟閵夛腹鎷虹紓鍌欑劍閿氬┑顔碱樀閺岀喖鎼归锝呯3閻庤娲滈弫濠氥€佸璺虹劦妞ゆ帒瀚弸浣衡偓骞垮劚椤︿即寮查幖浣圭叆闁绘洖鍊圭€氾拷闂傚倷娴囧畷鍨叏閹惰姤鈷旂€广儱顦崹鍌炴煢濡尨绱氶柨婵嗩槸缁€鍕叏濠垫挾顔嘓ot缂傚倸鍊搁崐宄邦渻閹烘梻鐭氶柛顐f礀閸ㄥ倻鐥鐐村櫡濞存粌缍婇弻娑㈠Ψ椤旂厧顫╅梺绋胯閸旀垿寮婚敐澶婃闁圭ǹ楠搁弳鍫ユ⒑鐠囨彃鍤遍柟鍑ゆ嫹
  ### 一、研究背景与挑战
在工程系统领域,极端事件(如极端天气、地震等)虽发生概率低,却能对交通网络、电网等关键基础设施造成灾难性影响。这些事件可导致基础设施瘫痪、经济损失惨重,甚至威胁国家安全。例如,强台风可能破坏输电线路,引发大面积停电;洪水会冲毁道路,阻断交通。因此,评估工程系统在极端条件下的可靠性至关重要,这是系统规划和设计的基础,有助于识别潜在风险,制定应对策略。
然而,传统方法在估算极端失效概率时面临诸多挑战。一方面,极端事件稀有,传统的蒙特卡罗模拟等方法计算成本高昂。以估算概率为、标准误差为 10% 的极端失效场景为例,需约数量级的样本量,模拟复杂非线性工程系统在众多失效场景下的性能极为困难。另一方面,常用的重要性采样(IS)方法虽能降低方差,但确定合适的重要性采样密度(ISD)难度大。在高维问题中,现有近似 ISD 的方法(如高斯混合模型、自适应核密度估计等)存在参数和样本量爆炸的问题,应用于大规模网络时计算成本过高。

二、GAE-IS 方法概述


为解决上述问题,研究人员提出了基于图自动编码器的重要性采样(GAE-IS)方法。该方法借助图学习技术,显著降低计算负担,提高极端失效概率估算的准确性,可用于评估多种城市基础设施(如电力、交通、供水系统)的韧性。

GAE-IS 方法具有两大核心优势。其一,通过图自动编码器(GAE)构建的临界性评估器具有可转移性。此评估器基于 GAE 框架,能评估网络组件对整体网络功能的临界性。在小规模子网络上训练后,可有效转移到大规模网络,无需在大网络上进行大量预采样即可确定 ISD 函数,且模型参数数量不受系统规模和变量维度影响,解决了传统 IS 方法在高维系统中的难题。其二,该方法在工作流程中解耦了组件的临界性与物理失效特征。将组件的脆弱性与潜在灾害的破坏强度空间分布相关联,结合结构脆弱性得到脆弱性分布。通过整合临界性分布与脆弱性分布,可导出 GAE-IS 的组件 ISD 函数,避免了自适应采样方法中因灾害类型或脆弱性分布变化而重新训练模型的问题。

三、GAE-IS 方法的具体实现


  1. 工作流程
    • 道路运输网络被视为由节点和链路组成的有向图。节点代表路口和出行需求的起点或终点,链路代表路段。研究采用平均出行时间(ATT)作为系统性能指标,以评估事件发生后的系统服务水平。ATT 通过公式计算,其中是网络总出行需求,是链路的交通流量,是链路的出行时间,由 Bureau of Public Roads(BPR)函数计算得出,是链路的自由流出行时间,是链路容量,分别取 0.15 和 4。
    • 研究设定链路存在空间异质的失效概率,并假设链路结构失效相互独立。极端失效场景定义为 ATT 超过阈值的情况。确定时,先通过粗蒙特卡罗方法采样个失效场景,然后用伽马分布拟合右偏的 ATT 或使用核密度估计处理多峰分布,将 ATT 分布的 99.75th 和 99.95th 百分位数作为极端失效阈值,实际应用中可根据需求调整。
    • 在训练网络中,使用粗蒙特卡罗方法随机采样个网络失效场景,选取部分导致网络性能大幅下降的样本作为风险场景。计算每个链路出现在风险场景中失效链路集合的可能性,以此调整链路的假设失效概率,进行迭代预采样,直至风险场景阈值超过
    • 临界性评估器根据道路网络的邻接矩阵和节点属性(包括拓扑中心性指标和交通流属性)学习每个链路对网络性能下降的影响特征表示,输出链路在风险场景中属于失效链路集合的可能性,量化链路的临界性。最后,根据链路临界性调整其结构失效概率,得到每个链路的 ISD 函数,进而确定失效场景的 ISD 函数。

  2. 临界性评估器
    • 临界性评估器基于 GAE 框架,输入包括网络的邻接矩阵和节点特征矩阵(由拓扑指标和交通流属性构成,每个节点用 12 维特征向量表示,数据预处理时进行标准化)。通过两层图卷积网络和两层全连接层进行编码,以链路容量作为边属性。
    • 由于交通网络中道路段的失效影响因方向而异,而传统 GAE 适用于无向图,研究采用 Ou 等人的方法,分别训练链路起点和终点的嵌入向量,以区分双向链路。训练时,为每个链路分配实值标签,通过最小化估计的链路可能性(节点嵌入向量的内积)与对应标签的误差来优化参数。

  3. 重要性采样理论基础
    重要性采样通过从引入的辅助分布中生成样本,增加特定样本的数量。对于估计(其中是名义分布,是被积函数),若是正概率密度函数,则,其中是重要性权重,是 ISD 函数。通过从中采样个实例,用样本均值估计期望,同时需满足(当时),以保证估计的无偏性。概率估计的方差(VPE)为,VPE 越高,数据点偏离均值越大,估计概率的稳定性越差。
  4. GAE-IS 方法的应用与评估
    • 研究在多个实际道路运输网络(如德国的 Berlin-Mitte-Prenzlauerberg-Friedrichshain-Center(BMPFC)、澳大利亚的北部 Gold Coast(NGC)、美国的 Anaheim 和 Chicago-Sketch(CS))上验证了 GAE-IS 方法的性能。实验前对网络数据进行预处理,如调整部分网络中连接器链路的容量,以确保模型的平衡训练。
    • 设置 GAE-IS 的参数(如链路失效概率、假设失效概率、采样次数等)和临界性评估器的超参数(如卷积层和全连接层的输出通道数、激活函数、损失函数等),通过交叉参考损失函数曲线和 VPE 曲线确定训练的停止 epoch。
    • 进行特征扰动实验,量化节点特征对模型估计链路临界性的影响。结果表明,节点的剩余容量是所有道路网络中最关键的特征,其次是通过节点的流量,这为理解网络关键链路提供了重要依据。


四、GAE-IS 方法的实验结果


  1. 采样效率提升
    与相同样本量的粗蒙特卡罗模拟相比,GAE-IS 在识别导致系统性能大幅下降的极端失效场景方面表现更优。在 BMPFC、Anaheim 和 NGC 网络中,GAE-IS 的 VPE 显著降低,采样效率分别提高了 82 倍、45 倍和 139 倍。同时,在子网络上进行预采样的计算时间比在原始网络上分别节省了 12 倍、9 倍和 19 倍,证明了临界性评估器的可转移性和 GAE-IS 方法在大规模网络中的可行性和有效性。
  2. 参数敏感性分析
    对参数进行敏感性分析发现,增加能增强 GAE-IS 捕获更多极端失效场景的能力,同时降低这些场景的 VPE。但较低时,GAE-IS 的概率估计与参考概率更接近,准确性更高;增加时,概率估计误差增大。这表明在有限样本量下,对概率估计准确性影响显著,实际应用中需权衡样本方差和估计准确性,通常较低的值(如 0.1 或 0.15)更有利于获得准确的概率估计。
  3. 异质链路失效概率下的应用
    将 GAE-IS 应用于芝加哥道路网络,考虑地震导致的路段失效概率(通过地理地震风险和路堤脆弱性曲线计算)。结果显示,GAE-IS 在采样极端失效场景方面明显优于粗蒙特卡罗方法,采样效率提高了 2 - 40 倍,在子网络上进行预采样的计算时间仅为原始网络的 1/32。这表明 GAE-IS 在处理空间异质链路失效概率场景时同样有效,且能根据地震风险变化轻松更新 ISD 函数,适用于不同的灾害场景,显著降低了重要性采样成本。

五、讨论与展望


GAE-IS 方法为估算大规模基础设施网络的极端失效概率提供了有效途径,尤其在交通系统中表现出色。其计算效率高,能有效解耦组件临界性与脆弱性,减少了模型训练和采样的成本。在不同类型的道路网络实验中,GAE-IS 均展现出良好的性能,为从极端值统计角度评估基础设施网络韧性提供了有力支持。

然而,GAE-IS 目前主要适用于成熟阶段的基础设施系统。当系统处于规划、建设或测试阶段,网络拓扑结构或出行分布模式发生显著变化时,需要重新训练模型。未来研究可探索 GAE-IS 在不同拓扑结构和需求分布网络中的可转移性,优化子网络选择标准,进一步提升其性能和应用范围。例如,研究人员可深入分析子网络与整体网络的结构和功能相似性,为选择更具代表性的训练网络提供理论依据,使 GAE-IS 能更好地应用于水分配系统、电网、通信系统等多种基础设施领域,助力构建更具韧性的城市和可持续发展的社区。

濠电姷鏁搁崑鐐哄垂閸洖绠伴柟闂寸贰閺佸嫰鏌涢锝囪穿鐟滅増甯掗悙濠囨煃鐟欏嫬鍔ゅù婊堢畺閺岋綁鎮㈤悡搴濆枈濠碘剝褰冨﹢閬嶅焵椤掑喚娼愰柟绋挎憸閳ь剚绋堥弲婵嬪焵椤掑嫭娑ч柕鍫熸倐瀵偊宕掗悙鏉戔偓閿嬨亜閹哄秶鍔嶉柣锕€閰e铏规嫚閹绘帩鍔夌紓浣割儐鐢€崇暦濠靛绠虫俊銈傚亾缂佲偓婢舵劖鐓熼柡鍐ㄥ€哥敮鑸垫交濠靛洨绡€闁汇垽娼у瓭濠电偠灏欐繛鈧€规洘鍨块獮姗€骞囨担鐟板厞闁诲氦顫夊ú鏍洪妸鈺傚仼闁惧繐婀辩壕浠嬫煕鐏炲墽鎳呮い锔奸檮娣囧﹪顢曢敐鍥╃厜閻庤娲樺ú鐔笺€侀弮鍫濆窛妞ゆ牭绲剧粊顐︽⒒娴g懓顕滅紒璇插€块幃褔骞樺鍕枔閳ь剨缍嗛崰妤呮偂濞嗘劗绠鹃柤濂割杺閸ゆ瑦顨ラ悙杈捐€块柡灞炬礋瀹曞爼濡搁妷銉︽嚈闁诲孩顔栭崳顕€宕滈悢鑲╁祦鐎广儱顦介弫濠囨煟閿濆懏婀版繛鍫熸倐濮婄粯鎷呴挊澶夋睏闂佺儵鍓濆Λ鍐ㄧ暦瑜版帗鎯炴い鎰剁稻閻濈兘姊虹粔鍡楀濞堟洘銇勯妷銉уⅵ闁哄本鐩獮姗€鎳犻澶嬓滃┑鐐差嚟婵參宕归崼鏇炶摕闁哄洢鍨归獮銏′繆閵堝拑宸ラ柛鎾讳憾閺岋綁濮€閳轰胶浠繝銏㈡嚀濡宓勯梺鍦濠㈡﹢锝為崨瀛樼厽婵炲棗鑻禍鎯р攽閻愯尙婀撮柛濠冩礋濠€渚€姊洪幐搴g畵婵☆偅鐟х划鍫⑩偓锝庡枟閻撳啰鎲稿⿰鍫濈婵﹩鍘鹃埞宥夋煣韫囨凹娼愮€规洘鐓¢弻娑㈠箛閵婏附鐝栧銈傛櫇閸忔﹢寮婚妸銉㈡斀闁糕剝鐟ラ埅闈涒攽閳藉棗鐏犳い鎴濐樀瀵鈽夐姀鐘殿唺闂佺懓顕崕鎰涢敓鐘斥拺閻犲洤寮堕崬澶娾攽椤斿搫鈧鍒掑鑸电劶鐎广儱鎳愰ˇ銊ヮ渻閵堝棙灏靛┑顔惧厴椤㈡瑩骞掑Δ浣叉嫼闁荤姴娲犻埀顒冩珪閻忎線姊洪崨濠冪叆濡ょ姵鎮傞崺銏ゅ箻鐠囪尙顓洪梺鎸庢濡嫬鈻撻妷銉富闁靛牆妫涙晶顒傜磼椤旇偐鐒搁柛鈺傜洴瀵粙顢橀悢鍝勫箞婵犵數鍋涘Λ娆撳礉閺囥垺鍊堕柍鍝勫亞濞堜粙鏌i幇顒€绾ч柛鐘筹耿閺岀喖顢涘姣櫻呪偓娈垮櫘閸o絽鐣烽幒鎳虫梹鎷呯憴鍕絻

10x Genomics闂傚倸鍊风粈渚€骞栭锕€纾归柣鐔煎亰閻斿棙鎱ㄥ璇蹭壕濡ょ姷鍋為悧鐘诲灳閺傝¥鈧帗鍒婇悥鍓坢 HD 闂備浇顕х€涒晠顢欓弽顓炵獥闁圭儤顨呯壕濠氭煙閸撗呭笡闁绘挻娲橀幈銊ノ熼悡搴′粯闂佽绻掓慨鐑藉焵椤掑喚娼愭繛鍙夌矒瀹曚即骞橀懜娈挎綗闂佸湱鍎ら〃鍛寸嵁閵忊剝鍙忔慨妤€妫楁晶顔尖攽椤旂厧鏆f慨濠冩そ瀹曘劍绻濋崒婊呮噯婵犵妲呴崑鍛垝瀹ュ桅闁哄啫鐗嗙粻鐟懊归敐鍥ㄥ殌濞寸姰鍨藉娲箹閻愭彃濮夐梺鍝勬噺缁捇骞冩ィ鍐╃劶鐎广儱妫涢崢閬嶆椤愩垺鎼愭い鎴濇噺閹便劑鍩€椤掆偓閳规垿鎮欑€涙ḿ绋囧┑鈽嗗亝缁挻淇婇悽绋跨疀闁哄鐏濆畵鍡涙⒑缂佹ǘ缂氶柡浣规倐閹剝鎷呴搹鍦紳婵炶揪绲介幉鈥筹耿閻楀牅绻嗛柣鎰煐椤ュ鎽堕悙鐑樼厱鐟滃酣銆冮崨顖滅焼闁糕剝绋掗悡鏇㈡煃閳轰礁鏆堢紓鍌涘哺閺屽秷顧侀柛蹇旂〒閸掓帒鈻庨幘铏€悗骞垮劚椤︿即寮查幖浣圭叆闁绘洖鍊圭€氾拷

婵犵數濮烽弫鎼佸磻濞戞娑欐償閵娿儱鐎梺鍏肩ゴ閺呮粌鐣烽弻銉﹀€甸柨婵嗛娴滅偤鏌嶇紒妯活棃闁诡喗顨婇弫鎰償閳ュ磭顔戠紓鍌欐閼宠泛鈻嶆晶淇皊t闂傚倸鍊风欢姘缚瑜嶈灋婵°倕鎳忛弲婵嬫煥濠靛棙宸濈紒鐘虫煥椤潡鎳滈棃娑橆潓濠碘槅鍋呰摫闁靛洤瀚伴獮妯兼崉鏉炴壆鎹曠紓鍌氬€哥粔宕囨濮樿泛钃熸繛鎴欏灩閸愨偓闂侀潧臎閸愶絾瀚涘┑鐘垫暩閸嬫盯鎮ф繝鍥у偍妞ゃ儳顎怱PR缂傚倸鍊搁崐鐑芥倿閿斿墽鐭欓柟鐑橆殕閸庡孩銇勯弽顐粶闁绘帒鐏氶妵鍕箳閸℃ぞ澹曟俊鐐€х紓姘跺础閹惰棄绠栫憸鏂跨暦椤愶箑唯闁靛牆妫楁刊浼存⒒娓氣偓閳ь剛鍋涢懟顖涙櫠閺夋垟鏀介柍銉﹀墯閸ょ喖鏌嶈閸撱劎绱為崱娑樼婵ǹ娉涘Ч鏌ユ煃閸濆嫭鍣洪柛濠傜仛缁绘盯骞嬮悙鍨櫑婵犳鍠栭崯鎾蓟濞戙垹绫嶉柟鐐綑椤忥拷

闂傚倸鍊风粈渚€骞夐敓鐘偓鍐幢濡炴洖鎼オ浼村川椤撶偟浜伴梻濠庡亜濞诧妇绮欓幒妤€鍚归柛鏇ㄥ灡閻撶喖鏌熼柇锕€澧婚柛銈囧枛閺屾洟宕奸悢绋垮攭濡ょ姷鍋為悧鐘差嚕閸洖绠i柣妯活問閸炲爼姊绘担鍛婂暈闁荤喆鍎辫灋婵犻潧妫ḿ鏍р攽閻樺疇澹橀幆鐔兼⒑闂堟侗妾х紒鑼帶闇夐柣鎴eГ閻撶喖鏌eΟ澶稿惈闁告柨绉堕幉鎼佸级閸喗娈婚梺璇″枔閸庣敻寮幘缁樻櫢闁跨噦鎷� - 婵犵數濮烽弫鎼佸磿閹寸姴绶ら柦妯侯槺閺嗭附銇勯幒鎴濐仼闁活厽顨婇弻娑㈠焺閸愶紕绱板銈傛櫆閻擄繝寮诲☉銏犵労闁告劖鍎冲В鈧梻浣告贡閸庛倝骞愭ィ鍐︹偓鍛存倻閽樺顔愰柡澶婄墕婢х晫绮旈悽鍛婄厱閹兼番鍨归悘銉╂煃閽樺妯€妤犵偞锕㈤、娑橆潩椤愩埄妫滃┑鐘垫暩閸嬬偤宕归崼鏇炵闁冲搫鍊婚々鍙夌節婵犲倸鏆熼柡鍡畵閺岋綁寮崶顭戜哗缂佺偓鍎抽妶鎼佸蓟濞戙垹鐒洪柛鎰靛幖椤ユ繈姊洪崨濠冣拹閻㈩垽绻濋獮鍐ㄎ旈崨顓熷祶濡炪倖鎸鹃崑妯何i幇鐗堚拺缂備焦岣块埊鏇㈡煟閻旀繂娲ょ粻顖炴倵閿濆骸鏋涚紒鐘崇叀閺岀喐瀵肩€涙ɑ閿梺璇″枙缁舵艾顫忓ú顏勫窛濠电姴鍊婚鍌涚節閳封偓閸曞灚鐤侀悗娈垮枟婵炲﹪骞冮姀銈嗗亗閹艰揪缍嗛崬瑙勪繆閻愵亜鈧牠寮婚妸鈺傚€舵繝闈涚墢閻滅粯绻涢幋娆忕仾闁绘挻鐟╅幃褰掑Ω閵夘喗笑闂佺ǹ锕ら…鐑藉箖閻戣棄顫呴柕鍫濇閸樺崬鈹戦悙鍙夘棡闁挎岸鏌h箛瀣姕闁靛洤瀚伴、鏇㈠閳轰礁澹庨柣搴ゎ潐濞叉粍绻涢埀顒傗偓娈垮枙缁瑩銆侀弽顓ф晝闁挎繂鎳忕拠鐐烘倵濞堝灝鏋熼柟顔煎€垮顐﹀箻缂佹ɑ娅㈤梺璺ㄥ櫐閹凤拷

濠电姷鏁搁崑鐐哄垂閸洖绠伴柟闂寸贰閺佸嫰鏌涢锝囪穿鐟滅増甯掗悙濠冦亜閹哄棗浜鹃弶鈺傜箖缁绘繈鎮介棃娴躲垽鎮楀鐓庢珝闁诡垰鏈幆鏃堝Ω閿旀儳骞橀柣搴ゎ潐濞叉牕煤閵堝棛顩锋繝濠傜墛閻撴洟鏌i幇顒傛憼閻忓骏绠撻弻鐔兼寠婢跺ň鍋撴繝姘劦妞ゆ帒锕︾粔鐢告煕閹炬潙鍝烘い銏℃婵¤埖寰勭€n亙鍖栭梻浣筋潐婢瑰寮插☉娆庣箚闁惧繐婀辩壕濂告煏婵炑冨枤閺嗩參姊洪悷鏉挎Щ闁瑰啿閰i妶顏呭閺夋垹顦ㄩ梺闈浤涢埀顒勫磻閹惧绡€婵﹩鍘鹃崢鎼佹煟鎼搭垳绉甸柛瀣閹便劑宕奸妷锔惧幐閻庡厜鍋撻柍褜鍓熷畷鐗堟償閵娿儳鍘洪梺鍝勫暙閻楀棝宕¢幎鑺ョ厽婵☆垱瀵ч悵顏呮叏閿濆懎顏柡宀嬬稻閹棃濮€閳垛晛顫岄梻浣告啞濮婂湱鏁垾宕囨殾婵犻潧顑嗛崑鍕煟閹惧啿顔傞柕澶嗘櫆閻撱儵鏌i弴鐐测偓鍦偓姘炬嫹

相关新闻
生物通微信公众号
微信
新浪微博
  • 急聘职位
  • 高薪职位

知名企业招聘

今日动态 | 人才市场 | 新技术专栏 | 中国科学人 | 云展台 | BioHot | 云讲堂直播 | 会展中心 | 特价专栏 | 技术快讯 | 免费试用

版权所有 生物通

Copyright© eBiotrade.com, All Rights Reserved

联系信箱:

粤ICP备09063491号