本次评选进入最后一轮后,引发了关于评选规则是否有重大漏洞的热烈讨论。引发的原因主要是一些明显不够“合理”的现象。在刚开始评选的两天内,出现了大批“马甲”,这些马甲的制造者们给自己打了满分,事后价值中国决定取消
我观察了一段时间,因为后来限制了每个注册人的投票数最多为100票,在候选的500人之间的拉票,似乎带来的新投票数已经很少了,评选投票进入了相对平稳阶段。关于拉票是否公平,我认为这不是一个真问题。拉票合法,这是不证自明的事。如何看待拉票引起的“排名不合理”,我认为有一个解决思路。
我把今天晚上20:00时的前一百名候选人的投票结果做了一个统计,我计算了前20位候选人每人的单项平均分,如下表。
姓名 |
当前名次 |
知名度平均分 |
专业影响力平均分 |
专业水准平均分 |
信息实用性平均分 |
其他优势平均分 |
XIAO |
1 |
4.0125 |
3.9875 |
4.0125 |
3.9917 |
3.9583 |
HE DS |
2 |
3.9362 |
3.8468 |
3.8383 |
3.8170 |
3.7830 |
ZHANG |
3 |
3.6767 |
3.6983 |
3.7543 |
3.7069 |
3.7069 |
HE JY |
4 |
3.6228 |
3.6184 |
3.6667 |
3.6667 |
3.6842 |
YANG |
5 |
3.6159 |
3.6556 |
3.7351 |
3.7417 |
3.6821 |
WANG ZL |
6 |
3.5985 |
3.6136 |
3.6894 |
3.5379 |
3.4545 |
ZHENG |
7 |
3.9748 |
3.9664 |
4.0000 |
3.8319 |
3.7395 |
CHEN |
8 |
4.1100 |
3.9815 |
3.9722 |
3.9074 |
3.9537 |
LUO |
9 |
3.5492 |
3.6639 |
3.7377 |
3.6721 |
3.6393 |
WEI |
10 |
3.6636 |
3.6262 |
3.7290 |
3.6542 |
3.6729 |
LI DY |
11 |
3.7212 |
3.7019 |
3.8173 |
3.8173 |
3.8462 |
|
12 |
3.4949 |
3.4444 |
3.5151 |
3.4444 |
3.4141 |
ZENG |
13 |
3.5843 |
3.5169 |
3.5959 |
3.5393 |
3.4494 |
YUAN |
14 |
3.1818 |
3.2121 |
3.2323 |
3.1818 |
3.1414 |
SUN |
15 |
3.3077 |
3.4066 |
3.3846 |
3.3846 |
3.2967 |
REN |
16 |
3.2000 |
3.2000 |
3.2421 |
3.2316 |
3.1368 |
WANG YG |
17 |
3.1149 |
3.1839 |
3.2874 |
3.2299 |
3.2069 |
WANG YZ |
18 |
3.2317 |
3.3171 |
3.4024 |
3.2561 |
3.2927 |
LI JL |
19 |
3.2561 |
3.2561 |
3.3171 |
3.2561 |
3.2927 |
JIN |
20 |
2.3840 |
3.3951 |
3.4444 |
3.3210 |
3.2593 |
表中的红色数字表示该值与前一位候选人相比异常,即比前一位的平均数大。
如果我们给予这五个分项以同样的重要性系数(权重),那么,意味着出现红字的候选人的名次需要调整,同一个人的红字项数越多,其排名被“不合理地排在后面”的程度越大,也就是不合理性越高。我们按此标准数一下,可以发现,前20名候选人中有9人的名次被现评选规则“扭曲”了,不合理比例达到了45%,这说明就目前评选结果来看,现阶段的评选规则的不合理性相当大。
实际上,据我观察,在给候选人打分时,不同的分项存在一些问题。比如在第一项“知名度”上,存在较大的主观随意性,而在最后一项“其他优势”上,同样存在这个缺陷。这就必然影响到给予这两项的权重系数要适当减小。另外,设置权重系数还应考虑这5个分项在“最有影响力的专家”评选中的重要性和代表性。我个人的意见是分别给予这5个分项的系数为0.1,0.3,0.3,0.2,0.1(注:对于权重系数的设定没有统一标准,此处只是示例)。
按照上述标准重新排列前20名候选人的排名如下:
姓名 |
当前名次 |
五分项加权平均分 |
调整后的排名 |
排名改变情况 |
XIAO |
1 |
4.0125 |
1 |
不变 |
HE DS |
2 |
3.9362 |
4 |
下降2 |
ZHANG |
3 |
3.6767 |
6 |
下降3 |
HE JY |
4 |
3.6228 |
10 |
下降6 |
YANG |
5 |
3.6159 |
7 |
下降2 |
WANG ZL |
6 |
3.5985 |
11 |
下降5 |
ZHENG |
7 |
3.9748 |
3 |
上升4 |
CHEN |
8 |
4.1100 |
2 |
上升6 |
LUO |
9 |
3.5492 |
8 |
上升1 |
WEI |
10 |
3.6636 |
9 |
上升1 |
LI DY |
11 |
3.7212 |
5 |
上升6 |
|
12 |
3.4949 |
13 |
下降1 |
ZENG |
13 |
3.5843 |
12 |
上升1 |
YUAN |
14 |
3.1818 |
20 |
下降6 |
SUN |
15 |
3.3077 |
14 |
上升1 |
REN |
16 |
3.2000 |
19 |
下降3 |
WANG YG |
17 |
3.1149 |
18 |
下降1 |
WANG YZ |
18 |
3.2317 |
15 |
上升3 |
LI JL |
19 |
3.2561 |
17 |
上升2 |
JIN |
20 |
2.3840 |
16 |
上升4 |
以此标准来看,前20名候选人只有1名无须调整排序,其他19名(占95%)都需要调升或调降。9名候选人(占45%)被人为地排前了,需要调降其名次,其中3人的名次下降幅度超过4;10名候选人(占50%)被人为地排后了,需要调升其名次,其中4人的名次调升幅度超过4。考虑到评分的主观性,变动次序不超过2的不计算,那么评分不合理的比例介于50%-95%。
到目前为止,我们还没有将前三轮的评选结果纳入考量。
大家对于最后一轮参照前几轮结果按第一名赋值500分,依次类推的做法,认为有欠公平。原因是最后一轮每票的满分可达到25分,如果靠人情投票,找到20个为自己投满分票的难度并不大,因此对于前几轮的排名冲击过大,实际上出现了最后一轮评选与之前的评选结果脱钩的问题。
我们假设这个初始赋值是合理的。那么克服大家提到的这个问题还可以采用赋予不同权重的做法。也就是调整初始平均分(即初始分除以500后得到的值)和5项加权平均分的比重,假如我们采用0.8/0.2和0.6/0.4两种方案,那么,最后的排名会变成:
姓名 |
当前名次 |
加权排序 |
初始分 |
初始平均分 |
方案一(0.8/0.2) |
方案二(0.6/0.4) |
XIAO |
1 |
3.99542 |
498 |
0.996 |
1.595884 |
2.195768 |
CHEN |
8 |
3.97396 |
500 |
1 |
1.594792 |
2.189584 |
ZHENG |
7 |
3.92773 |
499 |
0.998 |
1.583946 |
2.169892 |
HE DS |
2 |
3.84085 |
497 |
0.994 |
1.56337 |
2.13274 |
ZHANG |
3 |
3.71552 |
484 |
0.968 |
1.517504 |
2.067008 |
WEI |
10 |
3.67105 |
488 |
0.976 |
1.51501 |
2.05402 |
WANG ZL |
6 |
3.60378 |
496 |
0.992 |
1.514356 |
2.036712 |
ZENG |
13 |
3.54507 |
492 |
0.984 |
1.496214 |
2.008428 |
|
12 |
3.46763 |
486 |
0.972 |
1.471126 |
1.970252 |
YANG |
5 |
3.69535 |
450 |
0.9 |
1.45907 |
2.01814 |
SUN |
15 |
3.37472 |
463 |
0.926 |
1.415744 |
1.905488 |
LI JL |
19 |
3.27806 |
475 |
0.95 |
1.415612 |
1.881224 |
WANG YZ |
18 |
3.31951 |
468 |
0.936 |
1.412702 |
1.889404 |
HE JY |
4 |
3.64957 |
403 |
0.806 |
1.374714 |
1.943428 |
JIN |
20 |
3.28038 |
435 |
0.87 |
1.352076 |
1.834152 |
WANG YG |
17 |
3.21955 |
442 |
0.884 |
1.35111 |
1.81822 |
YUAN |
14 |
3.202 |
427 |
0.854 |
1.3236 |
1.7932 |
LI DY |
11 |
3.77596 |
332 |
0.664 |
1.286392 |
1.908784 |
REN |
16 |
3.21263 |
354 |
0.708 |
1.208926 |
1.709852 |
LUO |
9 |
3.67375 |
242 |
0.484 |
1.12195 |
1.7599 |
可以看到,采用两个方案后,重新调整的排名,前10名候选人的次序没有因为方案不同而变化,后10名的次序需要做一些微小调整。当然,赋予什么样的系数,还有其他的选择。
以上的讨论是否比现标准更合理,大家可以自己判断一下,本文只是出于我的研究兴趣,做个一个“游戏”。随着评选的深入进行,排名还是会变化的,合理永远只是相对的。