网刊加载中。。。

使用Chrome浏览器效果最佳,继续浏览,你可能不会看到最佳的展示效果,

确定继续浏览么?

复制成功,请在其他浏览器进行阅读

基于云模型与凝聚型层次聚类的失效模式与影响分析方法  PDF

  • 尤建新 1
  • 陈雨婷 1
  • 宫华萍 2
  • 徐涛 1
1. 同济大学 经济与管理学院; 2. 同济大学 外国语学院,上海 200092

最近更新:2021-05-10

DOI:10.11908/j.issn.0253-374x.20318

  • 全文
  • 图表
  • 参考文献
  • 作者
  • 出版信息
目录contents

摘要

针对传统失效模式与影响分析(failure mode and effect analysis,FMEA)的不足,提出了一种基于云模型和凝聚型层次聚类算法的改进FMEA方法。首先,运用云模型对专家评估信息进行描述与集结;然后,结合凝聚型层次聚类算法识别云模型评价信息,利用聚类子簇确定失效模式间关联关系,利用聚类结果确定失效模式风险等级。最后,以在线教学失效风险评估为例,验证了该改进FMEA方法的可行性和有效性。

失效模式与影响分析(Failure Mode and Effect Analysis, FMEA)是一种可靠性分析与风险管理中重要的理论和方法,经多年发展后现已被广泛应用于医疗、制造、航空等多个领

1-2。传统FMEA方法通过计算失效模式的发生度(Occurrence,O)、严重度(Severity, S)和可检测度(Detection, D)三个风险因子的乘积得到风险优先值(Risk Priority Number, RPN),存有较多缺陷:①不同O、S和D值的组合可能会产生相同RPN值,但其风险影响可能完全不同,无法确定实际风险水平;②风险因子值需用精确值评估,但在实际场景中往往难以精准表述;③未考虑风险因子内部的相对重要度,实际问题中因子权重可能存在差异。目前国内外关于FMEA方法改进的研究较多,主要包括基于隶属度函数、语言符3、二元语4和结合多准则决策、模糊集理论等的方法,如Illangkumaran 5应用模糊层次分析法建立一个群评价框架来对FMEA方法进行改进;Braglia 6提出基于模糊的逼近理想解排序的改进FMEA方法;Liu7提出基于多准则妥协解排序的改进FMEA方法等。近年来,将聚类技术应用于风险识别逐渐成为改进FMEA的重要方法,如Liu 8提出一种基于噪声密度聚类和动态专家评价方法的改进FMEA方法;Duan9基于k均值聚类和犹豫模糊语言评价改进FMEA方法等。已有研究虽然极大地促进FMEA方法的发展,但以下方面仍有待继续深入研究:①已有风险评估信息表征方法虽在一定程度改进了语言评价的模糊性,但难以同时精准描述风险评估的模糊性和随机性;②尚未形成较为成熟的风险分类方法,而风险分类一般比排序计算更节约时间和成本;③多数聚类技术缺少考虑不同风险类别间的联系,且需事先指定聚类数。

本文基于云模型(Cloud Model)与凝聚型层次聚类算法,提出了一种改进的FMEA方法。该方法利用云模型处理具有随机模糊性语言评价的失效模式,为失效模式层次关系分析和风险等级识别提供有效途径;在线教学风险分析的应用验证新方法的有效性,分析结果为高校在线教学短板问题的改进提供决策参考。

1 基础知识

1.1 云模型

云模型是李德毅

10-11基于模糊理论和概率论提出的一种将自然语言描述的定性指标与定量指标相互转化的理论。正态分布的云模型(高斯云)具有通用性和稳定12。设定性概念C的一次随机实现(随机云滴)为x UxC的确定度μx[0,1]是具有稳定倾向的随机13,且对于xU,xμx 

云模型由三个数值特征进行定性表示,记为C(E,E,H)。其中,期望值E为最典型样本,是定性云滴组的核心;熵E为定性概念的不确定性度量,类似于概率论中随机变量的方差;超熵HE的二阶熵,代表云滴的凝聚力,是熵的不确定

14。定量论域U是由三个数值特征产生的随机云滴,以进行精确数值的定量表示。云模型的优点在于:①允许评价语言在一定论域中服从概率分布,减少个体评价带来的不确定性;②借助云集结算子减少集结评价信息时的信息扭曲问题;③同时考虑评价决策信息的模糊性和随机性。

1.2 前向云生成器算法与云大小比较

定义1  设云滴 x,y对定量论域 U 的贡献为s=xy,则该云滴所在的任何云A可以用s期望值 ŝ 作为云A对论域T的总体得分。利用正向云发生器G (E,E,H,n)产生云模型的云滴样本,对云A的期望进行数值估计,正向云发生器G随机迭代n次得到每个云滴的大小si=xiyi i=1,2,,n。其中, Ei'~N(E,H2) xi~N(E,Ei'2)。通过计算符合云数值特征的随机云滴贡献得分的样本均值,实现不同云之间的比较。设估计值ŝAŝB,则有AB,则

ŝA=1ni=1nxiyiyi=e-xi-E2/2Ei'2 (1)

1.3 云运算算子

定义2   对任意两朵云A(E1,E1,H1)B(E2,E2,H2),满足以下基本运算规则,即

A+B=(E1+E2,E12+E22,H12+H22) (2)
λA=(λE1,λE1,λH1) (3)

Ω 是所有云的集合,云Yi=Ei, Ei, Hi,( i=1,2,,n)Ω 的子集,实现映射方式 ΩnΩ的两种算子定义如下:

定义3   云算术加权平均算子 Ο(Cloud-Weighted Arithmetic Average)

Οω(Y1,Y2,,Yn) =i=1nωiYi (4)

式中:ω 是云Yi 的相关权重向量,满足ωi0,1i=1,2,,n,  i=1nωi=1

定义4  云混合加权平均算子 Ο(Cloud Hybrid Aggregation

15

Οω,wY1,Y2,,Yn=i=1nwiBi  (5)

式中:Bi是云算术加权平均算子Ο集结后权重云(nω1Y1,nω2Y2,,nωnYn)中第i大的云; n是平衡系数; w Bi对应的相关权重向量,满足wj0,1j=1,2,,n, j=1nwj=1wj

wj=Qjn-Qj-1n,  j=1,2,,n (6)

Q(y)是一个单调递增的函数,即

Q(y)=0,y<ay-ab-a ,ayb1,yb (7)

1.4 评价语言映射

定义5  设有限奇数粒度评价术语集H=Hi -g, ,0, ,g,  g N*}是一系列正整数,满足条件:①若i>j,Hi>Hj;②若Hi对应的评价语言为负数,则用neg(Hi)=H-i表示。设Hi有效域为[Xmin ,Xmax],根据韦伯定

16,从Hi映射到θi(i=-g,,0,,g)映射函数f

f:Hi  θi  (i=-g,,0,,g) 
θi= (αg-α-i)/(2αg-2), (-gi0)(αg+α-i-2)/(2αg-2), (0<ig) θi[0,1] (8)

式中:α 作为经验值主要分布在[1.36,1.4] 

17

定义6   将区间云模型距

18进行简化,根据汉明距离,云 y1与云 y2之间的距离为

dy1,y2= E1-E1-H1-(E2-E2-H2) (9)

2 改进FMEA方法

本文提出的基于云模型与凝聚型层次聚类的改进FMEA方法(见图1),主要包括3个阶段:①失效模式风险评估,进行失效模式语言评估信息收集,获取语言评价风险评估矩阵;②云模型评价信息集结,采用云模型表示专家评价语言,集结专家风险评价信息;③失效模式关联发现与风险聚类,进行凝聚型层次聚类,计算失效模式之间的关联度,确定失效模式风险等级。

图1 改进FMEA方法框架流程图

Fig.1 Flowchart of the improved FMEA method

2.1 失效模式风险评估

假设有失效模式Fi(i=1,2,,m) 和风险因子rj(j=1,2,,n),其相应的权重为ω,满足ωj0,1j=1,2,,n,  j=1nωj=1。假设有k个专家进行评价,每个专家对失效模式的评价表示为Tk(k=1,2,,l),语言集H={H-g,, H0, , Hg}表示专家评价时所采用的评价语言标准。

步骤1   获取专家语言评价风险评估矩阵R k

专家根据语言集标准对失效模式的评价,得到专家语言评价风险评估矩阵R k。其中,rijk为专家对失效模式Fi的风险因子rj做出的评价,R k=aijkm×nk=1,2,,t;i=1,2,,m;j=1,2,,n)。在利用德尔菲法对专家评价进行分析时,考虑到不同专家背景和经验不同可能带来偏差,设专家权重为λi,且满足ikλi=1

2.2 云模型评价信息集结

步骤2   确定云模型风险评估矩阵R̂ k

将定量语言映射到云模型的“数值信息”,即期望值E上,进一步确定云模型的定性表示YiEi,Ei,Hi

根据定义5确定映射函数f,计算评价语言映射值 θi。根据θi 计算均值Ei,Ei,Hi可得

Ei=Xmin+θi(Xmax-Xmin ) (10)

设云滴(x, y)满足以下两个正态分布条件,其中EiEi'的期望值,则

x ~NEi ,Ei'2,Ei' ~NEi ,Hi2
Ei'=maxXmax-Ei,  Ei-Xmin/3 (11)
Ei=(Ei-1'+Ei'+Ei+1')/3,  E-i=Ei, (i|=0,1,,g-1)Eg=Eg-1'+Eg'2, E-g=Eg, (i|=g)   (12)
H-i=Hi=(E'+-Ei)/3 E'+=maxk {Ek'} (13)

确定Yi 后,将专家语言评价风险评估矩阵R k转化为云模型风险评估矩阵R̂ k =r̂ijk  m×n

步骤3   计算集体云模型风险评估矩阵Z i

首先,根据Ο(定义3),集结每个失效模式不同风险因子的评价信息,得到第 k个专家对第i个模式Fi的综合评价Zi k=zikm×l,具体计算如下:

zik=Οωr̂i1k,r̂i2k,,r̂ink=(j=1nωjEijk,j=1nωjEijk2j=1nωjHijk2) (14)

然后,利用Ο(定义4)集结不同专家的评价信息,得到集体云模型风险评估矩阵 Z i。根据专家的综合评价计算权重云lλkZi k,用正向云发生器估计权重云(lλ1Zi 1,lλ2Zi 2,,lλlZi l)的大小顺序,再确定相关权重w,最终得到失效模式的集体云模型风险评估矩阵 Z i=zii×1,具体计算如下:

zi=Οω,wzi1',zi2',,zil'=k=1lwiEik',k=1lwiEik'2,k=1lwiHik'2 (15)

式中:Eik',Eik',Hik'Bi(权重云排序后第i大云)的三个数值特征。

2.3 失效模式关联发现与风险聚类

凝聚型层次聚类算法是一种易发现类层次关系和无需事先指定聚类数的经典无监督算

19

步骤4   计算失效模式之间距离

根据定义6得到由集体云模型风险评估云距离表示的临近度矩阵,如计算失效模式FM1FM2的距离:

dz1,z2=E1-E1-H1-E2-E2-H2 (16)

式中, z1=E1,E1,H1, z2=(E2,E2,H2)

步骤5   失效模式风险聚类

根据凝聚型层次聚类算法,每次合并最相邻的两个簇后更新临近度矩阵,重复这一过程,直至仅剩下一个簇时结束。最后,根据聚类结果对失效关联关系和风险等级进行进一步分析。

3 案例分析

疫情后在线教学的大规模实施,虽在一定程度上保证教学的持续性,但仍存在较多不足和问题,亟需查找短板、改进质量。基于已有研

20-21,通过高校学生群体的问卷调查及专家访谈,确定15项常见在线教学失效模式,失效模式表现及因果分析如下(见表1)。

表1 在线教学常见失效模式及因果分析表
Tab.1 FMEA analysis of E-learning system
风险模块编号潜在失效模式失效原因失效后果
教学形式B1 F1 课程形式单调 教学设计不合理,线上环境局限,节奏拖沓等 教学内容低质量,学生学习兴趣低
教学内容B2 F2 知识结构不完整 课件没有根据在线教学情境改进,信息不完整 学生对教学内容转化率低
教学互动B3 F3 互动频率下降 在线互动被聚焦,与教师沟通交流频率变低等 学生参与感下降,学习积极性下降
F4 教学反馈不及时 学生反馈被动,教师无法获知学生的掌握程度等 教师无法及时解惑,教学兴趣降低
F5 情景体验不足 线上教学场景局限,缺乏交流的情境感等 知识吸收差,学生体验感不足
教学安排B4 F6 教学缺乏弹性 教学安排不合理,不可调整 健康受影响,学习可持续性下降
教学平台B5 F7 教学现场效果弱 功能设计不合理,板书操作不便等 教学体验感下降,内容接受度下降
F8 课程录像效果差 播放和导航不合理,共享性差等 教学资源利用不充分,学习效率低
F9 演示操作不流畅 传输效果不佳,界面切换不方便、有延迟 影响教学进度与学生认知理解
教学环境B6 F10 物理环境不友好 上课时缺少安静、无干扰的环境 学习效率低,学生注意力下降
F11 网络带宽不支持 网络设备故障,带宽不足,易卡顿、掉线等 影响学生参与积极性
F12  软件设备出故障 软件性能不稳定,登录失效或闪退等 影响教学进度与教学效果
教学效果B7 F13 教学结果评估难 缺少有效评测方法,检查作业不方便等 教师无法持续改进教学方法
F14 学习过程效率低 学习者自主学习能力差,易分心等 学习兴趣低,存在依赖心理
F15 学习有效性差 上课易走神,自我降低要求,缺少实时提醒等 知识获取率降低,破坏学习习惯

3.1 失效模式风险评估

根据风险因子(O、S、D)建立七级粒度语言评价标准集H,进行失效模式风险评价。根据发生频率增加、影响程度变大、被检测到难度递增的原则,H={Hi|i=-3,-2,-1,,+3} 依次为“极低(VL)、低(L)、较低(ML)、中等(M)、较高(MH)、高(H)、极高(VH)”,如VH代表“频繁发生、影响极大、极难被检测到”。设FMEA评价专家团由5位成员组成,专家权重λ=(0.15, 0.15, 0.25, 0.15,0.30),风险因子权重ω=0.45,0.30,0.25,专家语言评价风险评估结果见表2

表2 专家语言评价风险评估矩阵表 R k
Tab.2 Evaluation of failure modes R k
专家权重F1F2F3F4F5
OSDOSDOSDOSDOSD
1 0.15 MH MH ML MH H H VH H ML MH M L ML L M
2 0.15 H H ML MH H ML MH MH M MH MH MH H ML MH
3 0.25 MH M L ML L ML MH H ML H MH ML H M L
4 0.15 ML H M MH MH MH L H ML MH M H H VH L
5 0.30 VH ML VL M MH L H ML L M L M H MH MH
专家 权重 F6 F7 F8 F9 F10
O S D O S D O S D O S D O S D
1 0.15 L L L ML ML ML M L ML ML ML VL L L ML
2 0.15 L VH L MH MH M M M MH L H VL ML VH VL
3 0.25 L L VL MH H L ML H L MH ML L MH L L
4 0.15 L M VL L MH M L M L ML L ML ML MH L
5 0.30 ML M L M L L ML M ML ML M L MH ML L
专家 权重 F11 F12 F13 F14 F15
O S D O S D O S D O S D O S D
1 0.15 ML L L M M ML M M ML L ML MH H H H
2 0.15 ML H L L VH ML MH MH M H H L H H L
3 0.25 M H L ML H L MH MH MH MH H MH MH H H
4 0.15 M M M ML M L M MH M MH MH H H VH H
5 0.30 M MH VL M H VL M MH VH M VH MH M VH H

3.2 失效模式云评估信息集结

首先,将语言变量转化为云模型。定量论域[Xmin ,Xmax]=[0,10],根据式(8),取经验值α=1.4,分别得到七粒度语言集的θi,Ei,EiHi的值,其中θ-3θ+3的值依次为0,0.225,0.385,0.500,0.615,0.775和1。7个语言变量Hi按式(10)~式(13)转化为7朵评估云,得到云模型风险评估矩阵R̂ k。形成七朵云Yi分别为Y-3(0,2.959,0.125),Y-2(2.248,2.655,0.226),Y-1(3.853,2.100,0.411),Y0(5,1.922,0.470),Y+1(6.147,2.100,0.411),Y+2(7.752,2.655,0.226),Y+3(10,2.959,0.129)。

其次,根据风险因子评价形成失效模式的综合评价。根据式(14)集结Fi的风险评价,得到专家kFi的云模型综合评价Zi k。然后根据式(2)式(3)得到lλkZi k (i=1,,15;k=1,,5, l=5)的计算结果。

最后,用正向云发生器比较 lλkZi k大小,依据式(6)式(7)式(15),使用级别词对中“极端”原则,设参数(a,b)=(0.15,0.95),得到w=(0.063,0.250,0.250,0.250,0.188),最终得到Fi集体云模型风险评估Z i(i=1,2,,15)依次为z1(5.102,2.224,0.349),z2(4.832,2.175,0.340), z3(4.912,2.358,0.331),z4(5.052,2.178,0.388),z5(5.373,2.364,0.305),z6(2.527,2.532,0.245),z7(4.159,2.259,0.363),z8(4.143,2.311,0.327),z9(3.421,2.292,0.327),z10(3.572,2.378,0.298),z11(4.158,2.232,0.379),z12(4.223,2.314,0.325),z13(5.321,1.996,0.408), z14(5.652,2.308,0.319),z15(6.800,2.476,0.260)。

3.3 失效模式关联发现与风险聚类

根据式(16)计算云的临近度,将失效模式“F1~F15”分别用数字“0~14”顺序索引进行凝聚型层次聚类,以树状图表示层次聚类结果(见图2)。图中纵坐标表示为簇间云距离,横坐标为失效模式索引,若有多个距离相近的失效模式聚类簇,则用所含失效模式的数量表示,如图2(a)中的“(5)”表示包含五个距离相近失效模式的聚类簇。聚类结果显示,“F15”、“F1,F2,F3,F4,F5,F13,F14”、“F7, F8, F11, F12”、“F9,F10”、“F6”的风险等级依次为“VH-H-M-L-VL”。

图2 凝聚型层次聚类树状图

Fig.2 Agglomerative hierarchical clustering dendrogram

根据聚类结果可知,在线教学失效模式“知识获取率降低(F15)”的不良影响明显超出其他失效模式,是在线教学质量改进的重点。失效模式教学形式单调 (F1)、知识结构不完整(F2)、互动频率下降(F3)、教学反馈不及时(F4)、场景体验不足(F5)、教学结果评估难(F13)、知识回顾效率低 (F14)风险层级较高。从风险模块来说,教学形式(B1)、教学内容(B2)、教学互动 (B3)与教学效果 (B7)这四个风险模块相关项需要引起重视。层次聚类结果与先前设置的风险模块内容一致,有助于从风险所属模块角度对风险进行识别。教学效果(B7)是其他六个风险模块等潜在风险综合作用的结果,特增加该类子项表示用户感知学习质量的重要性。

该改进FMEA方法不仅识别出在线教学“VH、H、M、L、VL”5类风险,从下至上的聚类过程还增强了风险模块内部关联关系的可解释性。图2c横坐标中:“6~10”表示出“教学现场性减弱(F7)”与“网络带宽不支持(F11)”这两个失效模式的关联性,说明的是在教学质量中由于受到网络带宽、演示设备等硬件的限制,教师的知识传达与学生的知识接收受到影响;“8~9”代表“演示操作不流畅(F9)”和“物理环境不友好(F10)”,两者均影响学生的情感学习环境,受影响者的学习积极性下降。“12~13”显示“教学结果评估难(F13)”与“学习过程效率低(F14)”这两个“学习效果(B7)”子项与 F1~F5”相关,即“教学形式、教学内容与教学互动(B1~B3)”对教学过程的师生双方起到的影响更突出,是需要被着重调整与改善的关键质量短板;而“教学平台(B5)”与“教学环境(B6)”的风险影响较弱,需要长期的持续改进。

3.4 比较分析

为证明方法的有效性,将云模型聚类改进的FMEA方法计算结果与传统FMEA的RPN算法进行比较(见表3),两者对失效模式风险级别计算结果整体一致,但具体排序存在差异,体现了改进FMEA方法对评价的模糊性与随机性。如“教学现场性减弱(F7)”在传统RPN排序9,但在改进方法中排序11,因为对不同的教学参与者而言,该类失效是随机发生的,且学习者个体适应性不同,处理该类型失效模式的能力也不同。与其他失效模式相比,该失效模式的随机性更强,在改进方法中的风险等级下降。基于改进FMEA方法结合现实情况的随机不确定性,提高了对各层次风险识别的客观性。

表3 3种方法的风险优先排序与等级比较表
Tab.3 Risk ranking or level results by three kinds of methods
失效模式OSD传统RPN值传统RPN排序云模型排序云模型聚类结果
F1 7.15 5.60 2.45 3.31 8 6 H
F2 5.40 6.05 4.05 4.47 6 8 H
F3 6.85 6.35 3.00 4.40 7 7 H
F4 6.65 4.90 4.80 5.28 5 5 H
F5 7.25 5.45 4.70 6.27 4 3 H
F6 2.30 4.40 1.60 0.55 15 15 VL
F7 5.05 5.15 3.05 2.68 9 11 M
F8 3.45 5.30 3.20 1.97 11 10 M
F9 3.85 4.20 1.85 1.01 14 14 L
F10 5.05 4.10 2.00 1.40 13 13 L
F11 4.40 6.35 2.15 2.03 10 12 M
F12 3.75 7.25 2.00 1.84 12 9 M
F13 5.80 6.70 6.40 8.39 3 4 H
F14 5.80 7.40 6.40 9.27 2 2 H
F15 6.85 8.45 7.10 13.87 1 1 VH

4 结语

基于云模型和凝聚型层次聚类算法的改进FMEA方法特点主要表现为:①更真实地反映了专家的评价信息,用云模型处理风险因子评价信息,考虑了专家语言评价的模糊性与随机性;②无需事前指定风险类别数量,利用凝聚型层次聚类算法进行失效模式的风险等级分类与内部层次关系识别,在实践中更易操作。在未来研究中,可进一步拓展本方法以处理更复杂的动态风险分析问题,如对方法中涉及的权重进行时间序列的动态调整,对云模型距离的计算方法进行比较改进等。

作者贡献声明

尤建新:理论框架设计,指导写作和修订。

陈雨婷:模型设计,数据采集和分析、论文写作和修订。

宫华萍:模型完善,案例分析、论文写作和修订。

徐涛:文献梳理,数据调研分析。

参考文献

1

ZHANG HengjieDONG YuchengPALOMARES-CARRASCOSA Iet al. Failure mode and effect analysis in a linguistic context: A consensus-based multiattribute group decision-making approach[J]. IEEE Transactions on Reliability2018682): 566. [百度学术

2

YAZDI MDANESHVAR SSETAREH H. An extension to fuzzy developed failure mode and effects analysis (FDFMEA) application for aircraft landing system[J]. Safety Science201798113. [百度学术

3

YANG WueWANG JianqiangWANG Xinfan. An outranking method for multi-criteria decision making with duplex linguistic information[J]. Fuzzy Sets and Systems201219820. [百度学术

4

宫华萍尤建新.基于改进 FMEA的E-learning 系统质量失效模式风险排序[J]. 科技管理研究2020409): 176. [百度学术

GONG HuapingYOU Jianxin. Risk ranking of quality failure mode of E-learning System based on improved FMEA[J]. Science and Technology Management Research2020409): 176. [百度学术

5

ILANGKUMARAN MSHANMUGAM PSAKTHIVEL Get al. Failure mode and effect analysis using fuzzy analytic hierarchy process[J]. International Journal of Productivity and Quality Management2014143): 296. [百度学术

6

BRAGLIA MFROSOLINI MMONTANARI R. Fuzzy TOPSIS approach for failure mode, effects and criticality analysis[J]. Quality and Reliability Engineering International2003195): 425. [百度学术

7

LIU HuchenYOU JianxinLIN Qinglianet al. Risk assessment in system FMEA combining fuzzy weighted average with fuzzy decision-making trial and evaluation laboratory[J]. International Journal of Computer Integrated Manufacturing2015287): 701. [百度学术

8

LIU HuchenCHEN XuqiYOU Jianxinet al. A new integrated approach for risk evaluation and classification with dynamic expert weights[J]. IEEE Transactions on Reliability. DOI: 10.1109/TR.2020.2973403. [百度学术

9

DUAN ChunyanCHEN XuqiSHI Huaet al. A new model for failure mode and effects analysis based on k-means clustering within hesitant linguistic environment[J]. IEEE Transactions on Engineering Management. DOI: 10.1109/TEM.2019.2937579. [百度学术

10

焦跃李德毅杨朝晖.一种评价C3I系统效能的新方法[J]. 系统工程理论与实践199812): 3. [百度学术

JIAO YueLI DeyiYANG Zhaohui. A new method to evaluate the effectiveness of C3I system[J]. Systems Engineering—Theory & Practice199812): 3. [百度学术

11

李德毅孟海军史雪梅.隶属云和隶属云发生器[J]. 计算机研究与发展19956): 15. [百度学术

LI Deyi, MENG Haijun, SHI Xuemei, Membership clouds and membership cloud generators[J]. Journal of Computer Research and Development19956): 15. [百度学术

12

LI DeyiLIU ChangyuGAN Wenyan. A new cognitive model: cloud model[J]. International journal of intelligent systems2009243): 357. [百度学术

13

付斌李道国王慕快. 云模型研究的回顾与展望[J]. 计算机应用研究2011282): 420. [百度学术

FU BinLI DaoguoWANG Mukuai. Review and prospect on research of cloud model[J]. Application Research of Computers2011282): 420. [百度学术

14

WU XianguoLIU QianZHANG Limaoet al. Prospective safety performance evaluation on construction sites[J]. Accident Analysis and Prevention20157858. [百度学术

15

WANG JianqiangLU PengZHANG Hongyuet al. Method of multi-criteria group decision-making based on cloud aggregation operators with linguistic information[J]. Information Sciences2014274177. [百度学术

16

DRÖSLER J. An n-dimensional Weber Law and the Corresponding Fechner Law[J]. Journal of Mathematical Psychology2000442): 330. [百度学术

17

鲍广宇连向磊何明. 基于新型语言评估标度的二元语义改进模型[J]. 控制与决策2010255): 780. [百度学术

BAO GuangyuLIAN XiangleiHE Minget al. Improved two-tuple linguistic representation model based on new linguistic evaluation scale[J]. Control and Decision2010255): 780. [百度学术

18

WANG JianqiangPENG JuanjuanZHANG Hongyuet al. An uncertain linguistic multi-criteria group decision-making method based on a cloud model[J]. Group Decision and Negotiation2015241): 171. [百度学术

19

范明范宏建. 数据挖掘导论[M].北京人民邮电出版社2006. [百度学术

FAN MingFAN Hongjian. Introduction to Data Mining[M]. BeijingPosts & Telecom Press2006. [百度学术

20

宫华萍尤建新王岑岚. 互联网学习产品学习者感知质量因素研究[J]. 中国远程教育20203): 8. [百度学术

GONG HuapingYOU JianxinWANG Cenlan. How do learners perceive the quality of internet-based learning products? [J]. Distance Education in China20203): 8. [百度学术

21

王丽英何云帆田俊华. 在线学习行为多模态数据融合模型构建及实证[J]. 中国远程教育20206): 22. [百度学术

WANG LiyingHE YunfanTIAN Junhua. Constructing and verifying a model of integrating multimodal data from online learning behaviors[J]. Distance Education in China20206):22. [百度学术