文档介绍：关于计算机领域论文评价的 一些思考
林闯陈文光
清华大学计算机系
2018/8/25
1
提纲
计算机领域论文评价的复杂性
会议论文的重要性
论文价值的主客观度量
客观指标:引用(影响引子),录用率等
主观指标:会议与期刊列表等
一种综合的评价方法
2018/8/25
2
计算机领域论文评价的复杂性
计算机领域
新兴的学科:我国58年建立学科
交叉的学科:数学、机电等(数理与工程技术交叉)
快速发展的学科:摩尔定律、网络发展定律
基础技术的学科:对其他学科的支撑
论文评价的多样性与复杂性
人造系统有很多新的现象、规律需要抽象和总结,缺乏理论基础。
评价需要理论与工程技术两方面考量
热点不断,论文引用率不高。
学生和论文数量不断攀升,国内外期刊和会议庞杂。
2018/8/25
3
计算机领域论文评价的复杂性(1)
论文评价是一项重要而又困难的工作
重要性
声誉与影响
学科建设和评估
政策和工作导向
复杂性
计算机领域包含多个学科和研究方向
每个学科和方向也有不同的论文评价体系和标准
单位发展的平衡
评价的主客观因素很多,尚没有一致统一的标准
是一个不断思考、不断认识和不断完善的过程
2018/8/25
4
计算机领域的会议论文的重要性
“The reason conference publication is preferred to journal publication, at least for experimentalist, is
the shorter time to print(7 months vs 1-2 years)”
The opportunity to describe the work before one’s peers at a public presentation, and
The plete level of review(4-5 vs 2-3)”
《puter Scientists and Engineers For Promotion and Tenure》,David Patterson, Lawrence Snyder and Jeffrey Ullman,1999,n/
2018/8/25
5
论文的意义在于学术和工程价值
价值的评判标准
客观
工程实践
引用次数(影响因子),如SCI, citeseer,
会议录用率
参加人数,与工业界联系(较为间接和次要)
主观:“公认”
影响力和同行评价
Conference Rank List
NUS,Geogeia Tech,Microsoft,IBM
Journal Rank List
香港科大,香港理工大学,…
2018/8/25
6
论文引用是学术价值的良好体现
SCI的引用因子,是对期刊质量的良好评价
引用,特别是他引,表达了论文影响力
Rank
Abbreviated Journal Title
ISSN
总引用数
文章数
引用因子
1
INT PUT VISION
0920-5691
4405
89
2
ACM T INFORM SYST
1046-8188
1103
17
3
BIOINFORMATICS
1367-4803
21412
553
4
MIS QUART
0276-7783
3186
41
5
IEEE T PATTERN ANAL
0162-8828
14708
182
数据来源:2006 Journal Citation Report (JCR), Thomson ISI
2018/8/25
7
SCI期刊影响因子分布
影响因子
比重
%
%
%
%
%
2
%
%
1
%
%
%
%
%
%
%
%
%
2018/8/25
8
SCI的缺陷在于不收集会议录
许多优秀的会议是ACM、IEEE、USENIX和IFIP主办的,不发表在LNCS上。
LNCS进去,又被请出来了。
因此,探索会议论文的评价标准是非常有意义的工作。
如果能够将会议论文与期刊论文一起评价将更有意义
2018/8/25