T/ISC 0033-2023 互联网信息推荐技术影响性评估指南

ICS35.240.99

L67

团体标准

T/ISC0033—2023

互联网信息推荐技术影响性评估指南

ImpactassessmentguidelinesforInternetinformationrecommendation

technology

2023-11-15发布2023-12-15实施

中国互联网协会发布

T/ISC0033—2023

目次

前言................................................................................II

1范围...............................................................................1

2规范性引用文件.....................................................................1

3术语、定义和缩略语.................................................................1

3.1术语和定义.....................................................................1

3.2缩略语.........................................................................2

4推荐技术影响评估框架及流程.........................................................2

4.1评估原则.......................................................................2

4.2推荐技术影响要素...............................................................3

4.3推荐技术影响分析原理...........................................................3

4.4推荐技术影响评估流程...........................................................4

5推荐技术影响评估方法...............................................................4

5.1评估模型概述...................................................................5

5.2算法导向性.....................................................................5

5.3算法客观性.....................................................................7

5.4算法风险性.....................................................................8

5.5茧房系数.......................................................................9

5.6收敛系数......................................................................10

6推荐技术影响评估实施..............................................................11

6.1影响评估准备..................................................................11

6.2影响要素识别和计算............................................................12

6.3影响结果判定..................................................................12

6.4影响评估文档记录..............................................................13

6.5影响风险处理..................................................................14

7影响评估工作形式..................................................................14

7.1自评估........................................................................14

7.2检查评估......................................................................14

I

T/ISC0033—2023

前言

本文件按照GB/T1.1—2020《标准化工作导则第1部分：标准化文件的结构和起草规则》的规定

起草。

请注意本文件的某些内容可能涉及专利。本文件的发布机构不承担识别这些专利的责任。

本文件由中国互联网协会提出并归口。

本文件起草单位：国家计算机网络应急技术处理协调中心、长安通信科技有限责任公司、浙江工

业大学、北京师范大学、北京工业大学、深圳市腾讯计算机系统有限公司、北京百度网讯科技有限公

司。

本文件主要起草人：韩晗、刘美辰、张夏、王鲁华、赵芸伟、崔牧凡、魏海潇、闵勇、刘茜、李

童、武杨、李克鹏、许锐。

II

T/ISC0033—2023

互联网信息推荐技术影响性评估指南

范围

1范围

本文件确立了互联网信息推荐技术影响评估框架及流程，描述了评估方法、评估实施步骤及评估

工作形式。

本文件适用于互联网内容提供商、第三方评估机构以及监管部门等开展互联网信息推荐技术影响

评估工作。

2规范性引用文件

本文件没有规范性引用文件。

3术语、定义和缩略语

3.1术语和定义

下列术语和定义适用于本文件。

3.1.1

互联网信息推荐技术Internetinformationrecommendationtechnology

互联网内容提供商向用户提供互联网信息服务时应用个性化推送类、排序精选类、检索过滤类等

算法进行信息推荐的技术。

3.1.2

互联网信息推荐技术影响评估Internetinformationrecommendationtechnologyimpact

assessment

运用科学的方法和手段，对使用互联网信息推荐技术可能引发的社会公众影响进行系统地识别、

分析和评价。

3.1.3

评估对象assessmentobject

被评估的主体，本标准指采用互联网信息推荐技术进行信息推荐的互联网内容提供商。

1

T/ISC0033—2023

3.1.4

互联网内容提供商Internetcontentprovider

向广大用户综合提供互联网信息业务和增值业务的运营商。

3.1.5

目标数据targetdata

经评估对象授权许可用于影响评估的限定业务范围和限定时间内实际运营产生的数据集合。

3.1.6

评估模型evaluationmodel

通过构建评估指标并明确指标量化方式，形成适用于评估算法推荐对社会公众的影响的模型。

3.1.7

信息茧房informationcocoon

基于用户兴趣和习惯，将更多相同类型内容分发给用户，造成用户获取信息内容狭隘、单一的现

象。

3.1.8

时间茧房timecocoons

通过量化用户在连续时间段内的行为特征评价信息茧房风险的一种方式。

3.1.9

访问茧房accesscocoons

通过量化用户在连续访问次数内的行为特征评价信息茧房风险的一种方式。

3.2缩略语

下列缩略语适用于本文件。

ICP互联网内容提供商（Internetcontentprovider）

4互联网信息推荐技术影响评估框架及流程

4.1评估原则

4.1.1标准化原则

互联网信息推荐技术影响评估应参照本文件确立的评估流程和方法进行实施。

4.1.2可控性原则

2

T/ISC0033—2023

在影响评估实施过程中，应严格按照标准的项目管理方法对服务过程、人员和工具等进行控制，

保证影响实施过程中的安全可控。

a)服务可控性。评估方应在评估工作前介绍评估服务流程，明确需要得到评估对象协调配合的

工作内容，确保评估工作顺利开展；

b)人员与信息可控性。所有参与评估的人员应签署保密协议，应对评估过程数据和结果数据严

格管理，未经授权不得泄露给任何单位和个人；

c)过程可控性。成立评估实施团队，采取项目组长负责制，应对评估工作进行记录并形成相关

记录文档，达到项目过程的可控；

d)工具可控性。评估使用的评估工具应事先通告用户，并在评估实施前获得用户的许可，包括

工具软件、测试策略等。

4.1.3最小影响原则

对于在线业务系统的影响评估，应采用最小影响原则，对于影响评估所需要的数据，需与用户沟

通并进行应急备份。

4.2影响要素

互联网信息推荐技术影响评估围绕算法导向性、算法客观性、算法风险性、茧房系数、收敛系数

等影响要素展开。

a)算法导向性。算法导向性评价互联网信息推荐算法的舆论导向影响，以政治导向和推荐主题

情感导向综合评价；

b)算法客观性。算法客观性评价互联网信息推荐算法的推荐客观程度，以推荐内容商业化程度、

推荐内容类型多样性程度、推荐内容所属账号分散程度综合评价；

c)算法风险性。算法风险性评价互联网信息推荐算法的推荐传播风险，以推荐内容潜在传播风

险和影响范围综合评价；

d)茧房系数。茧房系数评价互联网信息推荐算法推荐分发的信息内容导致用户形成信息茧房的

可能性程度，以时间茧房系数和访问茧房系数综合评价；

e)收敛系数。收敛系数评价互联网信息推荐算法推荐分发的信息内容导致用户形成信息茧房的

可能用时，以时间茧房收敛极值和访问茧房收敛极值综合评价。

4.3影响分析原理

推荐技术影响分析原理如图1所示：

推荐技术影响分析涉及算法导向性、算法客观性、算法风险性、茧房系数、收敛系数等基本要素。

各要素包含的具体指标及量化方法见表1—推荐技术影响评估指标量化表。

影响分析的主要内容为：

3

T/ISC0033—2023

a)经评估对象授权，获取待评估的目标数据；

b)在目标数据范围内识别影响要素，对目标数据进行必要的预处理；

c)对已识别的影响要素开展对应各指标的影响量化；

d)综合各指标的影响量化结果；

e)依据综合量化结果划分影响分级。

影响性评估

获取目标数据影响性要素识别各指标影响性量化综合量化

结果分级