Comparison of Six Methods of Ultrasound-guided Fine-needle Aspiration Biopsy of Thyroid Nodules
-
摘要:
目的 比较超声引导下甲状腺结节细针穿刺活检6种操作方法的检验准确性并分享穿刺经验。 方法 纳入1903例行甲状腺结节细针穿刺活检,并经甲状腺外科手术证实,且手术前后都有明确病理结果的患者资料。按照FNA进针角度及取材手法将上述患者资料共分6组:A1~A3,B1~B3组,A类为端侧式,B类为边侧式;1类为负压抽吸法,2类为常压抽吸法,3类为闭压进出法。在传统的评价指标基础上,采用Bowker加权检验对比其差异性, Kappa线性加权检验其一致性。最终评价6种不同操作方法的优缺点。 结果 灵敏度:A类高于B类,A3组最高,为96.47%,最低为B2组87.69%;特异度:均为100%;准确度:A类高于B类,A3组最高,为97.69%,最低为B2组 91.20%;阳性预测率:均为100%;阴性预测率:A类高于B类,最高为A3组95.65%,最低为B2组78.57%;约登指数:A类高于B类,最高为A3组96.47%,最低为B2组87.69%;Bowker加权检验结果:P值由高至低排列为:A3 > A1 > A2 > B3 = B1 = B2;A1、A2、B1、B2、B3组P < 0.01,与术后组织病理学结果有显著统计学差异;A3组P值最高,为0.072,P > 0.05,与术后组织病理学结果无统计学差异;Kappa一致性检验(线性加权)结果:A3 > A1 > A2 > B3 > B1 > B2;A3组最高,为0.959,最低为B2组为0.821。 结论 基于传统评价指标、配对卡方及Kappa检验结果,端侧式入路配合闭压进出取材法(A3组)的细胞学病理结果与术后组织学病理结果最为接近,是取材质量非常高的FNA方式。 -
关键词:
- 超声引导 /
- 细针穿刺活检 /
- Bowker加权检验 /
- Kappa线性加权检验
Abstract:Objective To compare the accuracy of six operative methods of ultrasound-guided fine-needle aspiration biopsy of thyroid nodules and to share the experience of the operation. Methods The data of 1903 patients who underwent thyroid surgery, preoperative fine-needle biopsy (FNA) and definite pathological findings after surgery were included. The data of the above patients were divided into 6 groups: A1-A3, B1-B3 according to the angle of FNA needle insertion and sampling technique. category A for end-lateral and category B for side-lateral; category 1 for negative pressure aspiration, category 2 for normal pressure aspiration, and category 3 for closed pressure entry and exit. Based on the traditional evaluation indexes, the Bowker weighted test was used to compare their differences and the Kappa linear weighted test for consistency. The advantages and disadvantages of the six different operation methods were finally evaluated. Results Sensitivity: Category A was higher than category B. Highest in group A3; 96.47% and lowest in group B2; 87.69%; Specificity: all were 100%; Accuracy: category A was higher than category B subgroups, highest in group A3; 97.69%, and lowest in group B2; 91.20%;Positive prediction rate: all were 100%; Negative prediction rate: category A was higher than class B subgroups. The highest A3 was 95.65% in group A3, and the lowest was 78.57% in group B2;Yordon index: higher in category A than in category B. The highest was 96.47% in group A3 and the lowest was 87.69% in group B2. Bowker’ s weighted test results: the P -values were: A3 > A1 > A2 > B3 = B1 = B2.The P of A1, A2, B1, B2, and B3 < 0.01, statistically significantly different from postoperative histopathological results. The P -value of A3 was 0.072, P > 0.05. There was no statistical difference with the postoperative histopathological result in A3; Kappa consistency test (linear weighted) results: A3 > A1 > A2 > B3 > B1 > B2; The highest value was 0.959 for the A3 group, and the lowest was 0.821 for the B2 group. Conclusions Based on the traditional evaluation index, paired chi-square and Kappa test results, the end-lateral approach with closed-pressure entry and exit sampling method (A3 group) have the closest cytologic pathology results to postoperative histologic pathology and is the best FNA approach with high sampling quality. -
胆石症为肝胆外科的常见疾病,其产生可能与饮食习惯、胆汁代谢异常、妊娠、解剖变异等多种因素有关[1]。其中发生在肝门部胆管汇合部以下的结石称为肝外胆管结石,肝外胆管结石又分为原发性与继发性胆总管结石,临床上以继发性胆总管结石常见,为胆囊内结石落入胆管形成。多数胆石症患者无症状,但10%~25%的患者可能发展为疼痛,胆道梗阻以及继发胆道感染等相关症状,需采用及时,恰当的方法处理。目前临床上对于胆总管未扩张的胆囊结石合并胆总管结石的患者,行内镜与腹腔镜联合探查取石术,而对于胆总管扩张的患者目前共识为行腹腔镜-胆道镜联合探查取石术联合胆囊切除术,术后留置T管或一期缝合[2]。但留置T管存在诸多不便,例如长期带管的生理性不适,T管非计划脱出以及T管相关并发症等,而胆道探查术后一期缝合围术期最担心的并发症为术后胆瘘。本中心为了解决扩张性胆总管结石患者胆道探查术后长期留置T管以及单纯一期缝合后胆漏的问题,创新性采用胆道探查术后放置鼻胆管的手术方式,并取得了较好的治疗效果,现收集相关病例并报道如下。
1. 资料与方法
1.1 一般资料
收集昆明医科大学第二附属医院自2019年12月至2021年10月收治的胆囊结石合并扩张性胆总管结石(胆总管直径≥0.8 cm)患者81例,其中A组行三镜联合腹腔镜下胆囊切除术(LC) + 腹腔镜 - 胆道镜联合探查取石术(LCBDE) + 内镜下鼻胆管引流术(ENBD) + 胆总管一期缝合术(PS)(n = 40),其中男16例,女24例,年龄(54.10±15.03)岁;B组行腹腔镜下胆囊切除术(LC)+腹腔镜-胆道镜联合探查取石术(LCBDE) + 胆总管一期缝合术(PS)(n = 41),其中男16例,女25例,年龄(52.78±15.79)岁。2组年龄、性别经卡方及t检验比较差异无统计学意义(P > 0.05),可以进行组间比较。本研究经昆明医科大学第二附属医院医学伦理委员会审核通过(审-PJ-2021-211)。
1.2 纳入及排除标准
1.2.1 纳入标准
(1)患者术前完善B超,MRCP检查,明确诊断为胆囊结石合并扩张性胆总管结石患者(直径≥0.8 cm);(2)患者既往无腹部手术史,外伤史;(3)病例资料完整[3]。
1.2.2 排除标准
(1)既往曾行腹部手术;(2)术前检查检验提示胆道系统存在急性炎症(急性梗阻性胆管炎,胆源性胰腺炎等);(3)术前存在心肺功能不全或其他疾病不能耐受手术;(4)病例资料不完整。
1.3 手术方法
1.3.1 A组序贯行LC+LCBDE+ENBD+PS(三镜联合术式)
常规“三孔法”行腹腔镜下胆囊切除术,分离暴露胆总管,锐性纵行切开胆总管前壁,置入胆道镜行胆道镜直视下胆道探查取石术。取石完毕后,于胆道镜直视下将4F输尿管导管送入十二指肠(图1A,1B),后将输尿管导管尾端与鼻胆管缝合固定,台下消化内镜医师经消化内镜在十二指肠找到被送入的输尿管导管端(图1C),通过内镜下使用抓钳抓紧(图1D),将输尿管导管以及鼻胆管经鼻引出,固定。之后腹腔镜下将留置腹腔内的鼻胆管端置入胆总管内,可吸收缝线连续缝合胆总管(图1E),缝合完毕后通过胆汁注水试验验证有无胆漏(图1F),温室孔以及胆总管一期缝合处各留置腹腔引流管一根后关腹。术后第2天间断夹闭鼻胆管以观察有无胆漏,若无胆漏则术后第5~7天拔除鼻胆管。
1.3.2 B组序贯行LC+LCBDE+PS(双镜联合术式,不放置鼻胆管)
常规“三孔法”切除胆囊后,分离暴露胆总管,锐性切开胆总管前壁,置入胆道镜行胆道镜直视下胆道探查取石术,并探查确认oddi括约肌功能良好。反复探查确认无结石残余后,可吸收缝线连续缝合胆总管,温氏孔及胆管缝合前各留置腹腔引流管一根于腹壁引出,固定。
1.4 观察指标
(1)术前指标,包括胆管直径,结石大小;(2)术中指标,包括手术时间及出血量;(3)术后指标:术后近期并发症严重程度,包括胰腺炎,胆管炎,胆漏及残石率等;远期并发症严重程度,包括结石再发等,各组患者均进行了门诊或电话随访,并要求患者当地医院复查,检查项目包括彩超,MRCP等,但因本研究中疾病为良性疾病,部分患者拒绝行相应检查而仅为患者主观感受。各组术后通过近远期并发症情况采用下列方法:术后近期并发症指术后1月内出现的并发症,描述采用Clavien-Dindo分级[4]:Ⅰ级常见并发症止痛等对症治疗; Ⅱ级需要Ⅰ级以外的药物治疗 ;Ⅲ级需要手术内镜放射干预;Ⅳ级危及生命的并发症需ICU处理;远期并发症指术后1月后出现的并发症,描述采用Terblanche分级[5]:Ⅰ级无胆道相关症状,Ⅱ级偶有胆道相关症状,无需治疗,Ⅲ级有明显胆道相关症状,需要治疗。近远期并发症主要比较Ⅲ级以上并发症发生率;(4)经济学指标:总住院日及术后住院日。
1.5 统计学处理
统计学分析使用SPSS26.0软件进行,计量资料符合正态分布以
$\bar x \pm s $ 表示,组间比较采用独立样本t检验,偏态分布则用中位数±四分位数间距表示,比较采用秩和检验。计数资料以率表示,组间比较采用Pearson Chi-Square检验及Fisher精确检验。P < 0.05认为差异有统计学意义。2. 结果
2.1 术前指标
B组平均胆管直径大于A组,差异有统计学意义(P < 0.05),见表1。
表 1 2组患者一般资料比较[$\bar x \pm s $ /M(P25,P75)]Table 1. Comparison of general conditions between two groups of patients [$\bar x \pm s $ /M(P25,P75)]项目 A组(n = 40) B组(n = 41) t/z P 年龄(岁) 54.10 ± 15.03 52.78 ± 15.79 0.385 0.701 男/女 16/24 16/25 0.008 0.928 胆管直径(mm) 9.35 ± 2.723 12.46 ± 3.57 −4.404 < 0.001* 结石大小(mm) 5.65 ± 3.04 6.02 ± 2.87 −0.570 0.570 手术时间(min) 180(148.5,180) 120(110,150) −3.654 < 0.001* 出血量(mL) 30(20,65) 50(20,50) −0.203 0.840 *P < 0.05。 2.2 术中指标
B组手术时间短于A组,这是因为A组额外进行了鼻胆管的放置,出血量2组间比较差异无统计学意义(P > 0.05),见表1。
2.3 术后并发症及残石率情况比较
A组中,近期Ⅱ级并发症6例表现为胆道感染,Ⅲ级并发症中1例为术后黄疸不减退,行鼻胆管造影后发现残石,予以内镜下取石后出院,1例为术后鼻胆管脱出后胆漏,内镜下重新放置鼻胆管,胆漏愈合后拔管出院;B组中近期Ⅱ级并发症表现为2例为胆道感染,Ⅲ级并发症中1例为胆道出血,行鼻胆管造影提示胆总管残石,内镜下止血及取石治疗后治愈出院,3例为一过性胆漏,加强营养后胆漏愈合出院,4例表现为胆漏不愈合,内镜放置鼻胆管待胆漏愈合后出院。近期Ⅲ级并发症发生率A组较B组低,差异有统计学意义(P < 0.05)。
远期并发症方面,A组2例为胆汁反流性胆管炎(Ⅱ级),1例为结石再发(Ⅲ级);B组Ⅱ级并发症中1例表现为轻症胰腺炎,3例为偶发胆管炎,Ⅲ级并发症2例为结石再发,予以内镜手术取石。远期Ⅲ级并发症发生率差异无统计学意义(P > 0.05),见表2。
2.4 总住院日,术后住院日比较
A组中鼻胆管拔除时间平均为(5.77±1.90) d(均为出院后在门诊随访拔除鼻胆管),2组总住院日,术后住院日比较差异无统计学意义(P > 0.05),见表3。
表 2 术后近远期并发症情况 [n(%)]Table 2. Postoperative short-term and long-term complications [n(%)]并发症 A组(n = 40) B组(n = 41) χ2 P 术后并发症(Ⅲ级以上) 近期 2(5.0) 8(19.5) 3.940 0.047* 远期 1(2.5) 2(4.9) 0.321 0.571 残石率 1(2.5) 1(2.4) 0.000 0.986 *P < 0.05。 表 3 2组经济学指标比较[M(P25,P75)]Table 3. Comparison of economic indicators between the two groups [M(P25,P75)]项目 A组(n = 40) B组(n = 41) t/z P 术后住院时间(d) 5.5(4,7) 4(3,6) −1.477 0.140 总住院时间(d) 12(8.25,17) 10(10,14.5) −1.986 0.057 3. 讨论
胆石症为胆道外科的常见病,多发病,目前肝外胆管结石的治疗主要通过微创手段进行。胆囊结石的金标准为胆囊切除术,若合并胆总管结石,则需根据胆管扩张程度不同,合理选用消化内镜,腹腔镜及十二指肠镜联合治疗[6]。对于扩张性胆总管结石(胆总管直径≥0.8 cm)患者,目前广泛认可的术式为腹腔镜-胆道镜联合探查取石术,该术式可在胆道镜直视下观察胆管内结石数量,大小,胆管有无变异狭窄等,避免了盲目取石,而常规胆道探查术后需留置T管,目的在于:(1)便于术后直接经T管窦道造影明确有无结石残余,若有残石或复发则可经T管窦道取石;(2)防止胆囊切除术后胆道压力一过性增高所导致的胆漏出现。但T管留置易导致体液大量丢失,进一步导致水,电解质平衡紊乱等[7],且术后常规留置2~3个月T管,导致患者的生活质量下降以及存在如非计划T管脱出,T管周围感染,结石再发等多种T管相关性并发症[8-9],严重者需再行手术治疗,增加了患者的痛苦及住院费用[10],Gurusamy KS等[11]发表的一篇荟萃分析表示,胆道探查术后常规留置T管引流获益不高,胆道探查后行T管引流术可能会增加手术时间及住院时间,CBDE后常规放置T管是不合理的,除非存在胆管远端梗阻需行胆总管减压。
为了避免留置T管所导致的不良影响,越来越多的中心在胆道探查术后采用胆管一期缝合技术[12],而一期缝合最担心的莫过于术后残石与术后胆漏[13]。随着胆道镜技术的成熟以及检查技术的不断进步,术前明确胆道系统内结石数量、大小,术中通过胆道镜直视下取石可以尽量避免残余结石的发生[7];而一期缝合后胆漏的发生笔者为与无T管注水回抽实验有一定关系。本研究中三镜组(A组)为了防止一期缝合后胆道压力一过性增高,采用胆道探查术后留置鼻胆管方式进行常规胆管减压,与常规通过十二指肠镜逆行插管置入鼻胆管方式不同,4F规格大小的输尿管导管更细,更容易通过Oddi括约肌且能尽量避免对Oddi括约肌的刺激,因此笔者采用将鼻胆管与4F规格输尿管导管缝合,胆道镜直视下将输尿管导管送过Oddi括约肌,随后“逆行”通过消化内镜将输尿管导管经口引出,将鼻胆管固定,待一期缝合完毕后,通过鼻胆管注水实验术中验证是否有胆漏,达到降低术后胆漏发生率的目的。通过表2可知,术后近期III级并发症(胆漏、残石)发生率相比,A组(5%)明显低于B组(19.5%),但远期并发症及残石率并未增加,也验证了这一点。
同步三镜手术无需经十二指肠逆行插管,避免了过度刺激oddi括约肌或插管入胰管而造成的内镜相关胰腺炎的发生[14-15],术后第1天患者即可进食流质饮食,间断夹闭鼻胆管,1 d后无不适即可完全夹闭鼻胆管,同时观察腹腔引流管情况,有无胆漏等,若出现胆漏则加强营养,继续保证鼻胆管的通畅引流,待胆漏愈合后夹闭鼻胆管,同步三镜联合组(A组)术后平均住院日为(5.95±3.76) d,实际上术后2~3 d患者完全夹闭鼻胆管后一般情况良好情况下便可出院,待留置鼻胆管1周后至门诊随访拔除即可。
本研究中术者皆为腔镜经验丰富的外科医生团队,且严格掌握该术式的前提条件,包括:(1)术前联合术中确认胆管无狭窄,无急性炎症;(2)Oddi括约肌功能良好。本中心针对LC+LD+PS+ENBD术式(同步三镜联合术式)积累了以下经验:(1)术中将输尿管导管与鼻胆管平行缝合固定后,胆道镜直视下将输尿管导管端送入十二指肠,因输尿管导管端更细,更易送过Oddi括约肌;(2)通过胆道镜直视下确认Oddi括约肌功能良好,若术中导管不能通过Oddi括约肌,则不排外胆胰管汇合异常可能,建议改行T管引流术;(3)取石完毕后使用倒刺线连续缝合胆总管可减少术后胆漏发生率,且较留置T管的缝合更为简便,安全性更高;(4)鼻胆管放置完毕,胆道缝合后,可通过鼻胆管注水试验确认胆漏与否,降低术后胆漏发生几率;(5)当胆管扩张 > 20 mm时,需考虑是否有胆管囊性扩张和(或)先天性胆胰管发育异常可能,此时应考虑胆管病损切除+胆肠吻合术式。
本研究中2组手术时间相比较,A组较B组耗时长,一方面因为胆道探查术后增加了放置鼻胆管步骤,另一方面,本研究中内镜医师与腔镜医师为同一人,也增加了手术时长,故三镜联合技术在临床应用过程中,需建立相应医疗团队,团队成员应包括麻醉医生,内镜及腔镜医师,消化内科医师等,来保证手术顺利进行。配合熟练的医疗团队可缩短手术时间,减少术后并发症的发生,同时有更好的手术疗效[16]。
综上,三镜联合一期缝合技术在胆管扩张胆石症患者中的应用,能减轻胆管一期缝合技术中胆漏的发生率,减少患者带管时长,同时并未增加近远期并发症发生率,患者获益度高,依从性强,值得临床推广使用。
-
表 1 6个组的FNA与病理学结果符合度及对应的kappa一致性检验和常规的评价指标数值(n)(1)
Table 1. Consistency for FNA and pathology of six groups and values of corresponding Kappa Consistency Tests (Linear Weighted) and conventional evaluation indicators (n)(1)
组别 FNA结果 病理结果(n) 总计 Kappa值 良性 非典型病变 恶性/可疑恶性 A1 良性 117 0 13 130 0.91
P = 0.000**非典型病变 0 19 1 20 恶性/可疑恶性 0 0 157 157 总计 117 19 171 307 A2 良性 128 1 15 144 0.904
P = 0.000**非典型病变 0 23 1 24 恶性/可疑恶性 0 0 173 173 总计 128 24 189 341 A3 良性 132 1 6 139 0.959
P = 0.000**非典型病变 0 17 0 17 恶性/可疑恶性 0 0 164 164 总计 132 18 170 320 B1 良性 98 1 22 121 0.845
P = 0.000**非典型病变 0 29 2 31 恶性/可疑恶性 0 0 169 169 总计 98 30 193 321 B2 良性 88 1 24 113 0.821
P = 0.000**非典型病变 0 21 2 23 恶性/可疑恶性 0 0 171 171 总计 88 22 197 307 B3 良性 87 1 20 108 0.852
P = 0.000**非典型病变 0 31 1 32 恶性/可疑恶性 0 0 167 167 总计 87 32 188 307 **P < 0.01。 表 1 6个组的FNA与病理学结果符合度及对应的kappa一致性检验和常规的评价指标数值(%)(2)
Table 1. Consistency for FNA and pathology of six groups and values of corresponding Kappa Consistency Tests (Linear Weighted) and conventional evaluation indicators (%)(2)
灵敏度 特异度 准确度 阳性预测值 阴性预测值 约登指数 92.35 100.00 95.47 100.00 90.00 92.35 92.02 100.00 94.95 100.00 89.51 92.02 96.47 100.00 97.69 100.00 95.65 96.47 88.48 100.00 92.07 100.00 81.67 88.48 87.69 100.00 91.20 100.00 78.57 87.69 89.30 100.00 92.36 100.00 81.31 89.30 表 2 6个组的FNA与病理学结果符合度及配对卡方检验(Bowker加权检验)结果(n)
Table 2. Consistency for FNA and pathology of six groups and values of corresponding Chi-Square Test (Bowker Weighted Test)(n)
组别 FNA结果 病理结果 总计 χ P 良性 非典型病变 恶性/可疑恶性 A1 良性 117 0 13 130 14 0.003** 非典型病变 0 19 1 20 恶性/可疑恶性 0 0 157 157 总计 117 19 171 307 A2 良性 128 1 15 144 17 0.001** 非典型病变 0 23 1 24 恶性/可疑恶性 0 0 173 173 总计 128 24 189 341 A3 良性 132 1 6 139 7 0.072** 非典型病变 0 17 0 17 恶性/可疑恶性 0 0 164 164 总计 132 18 170 320 B1 良性 98 1 22 121 25 0.000** 非典型病变 0 29 2 31 恶性/可疑恶性 0 0 169 169 总计 98 30 193 321 B2 良性 88 1 24 113 27 0.000** 非典型病变 0 21 2 23 恶性/可疑恶性 0 0 171 171 总计 88 22 197 307 B3 良性 87 1 20 108 22 0.000** 非典型病变 0 31 1 32 恶性/可疑恶性 0 0 167 167 总计 87 32 188 307 **P < 0.01。 -
[1] 霍立双,刘丰雨,高琛,等. 我国大陆地区甲状腺结节患病率Meta分析[J]. 河北医科大学学报,2017,38(2):138-141. doi: 10.3969/j.issn.1007-3205.2017.02.004 [2] 陈万青,李贺,孙可欣,等. 2014年中国恶性肿瘤发病和死亡分析[J]. 中华肿瘤杂志,2018,40(1):5-13. [3] Orloff L A,Wiseman S M,Bernet V J,et al. American Thyroid Association Statement on Postoperative Hypoparathyroidism:Diagnosis,Prevention,and Management in Adults[J]. Thyroid,2018,28(7):830-841. doi: 10.1089/thy.2017.0309 [4] Haugen B R,Alexander E K,Bible K C,et al. 2015 American Thyroid Association management guidelines for adult patients with thyroid nodules and differentiated thyroid cancer:the American Thyroid Association guidelines task force on thyroid nodules and differentiated thyroid cancer[J]. Thyroid,2016,26(1):1-33. doi: 10.1089/thy.2015.0020 [5] Filetti S,Durante C,Hartl D,et al. Thyroid cancer:ESMO Clinical Practice Guidelines for diagnosis,treatment and follow-up[J]. Ann Oncol,2019,30(12):1856-1883. doi: 10.1093/annonc/mdz400 [6] Dorothy A, Shead M S, Erin Vidic M A, et al. National comprehensive Cancer Netwrok(NCCN) Guidelines For Patients: Thyroid Cancer Version. Online-Web, 2020.02. [7] 上海市医学会超声医学分会介入学组,上海市社会医疗机构协会超声医学分会介入与重症超声专业委员会. 超声引导下甲状腺结节细针穿刺细胞学检查实践指南(2019版)[J]. 中华超声影像学杂志,2020,29(5):369-383. doi: 10.3760/cma.j.cn131148-20191107-00678 [8] Ha E J,Na D G,Baek J H,et al. US fine-needle aspiration biopsy for thyroid malignancy:diagnostic performance of seven society guidelines applied to 2000 thyroid nodules[J]. Radiology,2018,287(3):893-900. doi: 10.1148/radiol.2018171074 [9] Ha S M,Baek J H,Na D G,et al. Diagnostic performance of practice guidelines for thyroid nodules:thyroid nodule size versus biopsy rates[J]. Radiology,2019,291(1):92-99. doi: 10.1148/radiol.2019181723 [10] Nguyen X V,Roy Choudhury K,Tessler F N,et al. Effect of tumor size on risk of metastatic disease and survival for thyroid cancer:implications for biopsy guidelines[J]. Thyroid,2018,28(3):295-300. doi: 10.1089/thy.2017.0526 [11] Khatami F,Tavangar S M. Liquid biopsy in thyroid cancer:new insight[J]. International Journal of Hematology-oncology and Stem Cell Research,2018,12(3):235. [12] 颜虹, 徐勇勇. 医学统计学[M]. 第3版. 北京: 人民卫生出版社, 2017: 16-19. [13] Fleiss J L,Cohen J. The Equivalence of Weighted Kappa and the Intraclass Correlation Coefficient As Measures of Reliability[J]. Educational & Psychological Measurement,2016,33(3):613-619. -