价值中国100强评选最后阶段的另类标准


 

本次评选进入最后一轮后,引发了关于评选规则是否有重大漏洞的热烈讨论。引发的原因主要是一些明显不够“合理”的现象。在刚开始评选的两天内,出现了大批“马甲”,这些马甲的制造者们给自己打了满分,事后价值中国决定取消418后新注册帐户的投票权,部分“新贵”们立时显了形,我观察到大概有一名候选人的投票数下降了30票左右,这相当于700分左右。之后投票似乎进入了较为有序阶段,但一些候选人的拉票,使得不去拉票的候选人总票数和总分大大落后,不少人的名次下降了很多,又引发了是否劣币驱逐了良币的探讨。

我观察了一段时间,因为后来限制了每个注册人的投票数最多为100票,在候选的500人之间的拉票,似乎带来的新投票数已经很少了,评选投票进入了相对平稳阶段。关于拉票是否公平,我认为这不是一个真问题。拉票合法,这是不证自明的事。如何看待拉票引起的“排名不合理”,我认为有一个解决思路。

我把今天晚上2000时的前一百名候选人的投票结果做了一个统计,我计算了前20位候选人每人的单项平均分,如下表。

姓名

当前名次

知名度平均分

专业影响力平均分

专业水准平均分

信息实用性平均分

其他优势平均分

XIAO

1

4.0125

3.9875

4.0125

3.9917

3.9583

HE DS

2

3.9362

3.8468

3.8383

3.8170

3.7830

ZHANG

3

3.6767

3.6983

3.7543

3.7069

3.7069

HE JY

4

3.6228

3.6184

3.6667

3.6667

3.6842

YANG

5

3.6159

3.6556

3.7351

3.7417

3.6821

WANG ZL

6

3.5985

3.6136

3.6894

3.5379

3.4545

ZHENG

7

3.9748

3.9664

4.0000

3.8319

3.7395

CHEN

8

4.1100

3.9815

3.9722

3.9074

3.9537

LUO

9

3.5492

3.6639

3.7377

3.6721

3.6393

WEI

10

3.6636

3.6262

3.7290

3.6542

3.6729

LI DY

11

3.7212

3.7019

3.8173

3.8173

3.8462

WANG ST

12

3.4949

3.4444

3.5151

3.4444

3.4141

ZENG

13

3.5843

3.5169

3.5959

3.5393

3.4494

YUAN

14

3.1818

3.2121

3.2323

3.1818

3.1414

SUN

15

3.3077

3.4066

3.3846

3.3846

3.2967

REN

16

3.2000

3.2000

3.2421

3.2316

3.1368

WANG YG

17

3.1149

3.1839

3.2874

3.2299

3.2069

WANG YZ

18

3.2317

3.3171

3.4024

3.2561

3.2927

LI JL

19

3.2561

3.2561

3.3171

3.2561

3.2927

JIN

20

2.3840

3.3951

3.4444

3.3210

3.2593

表中的红色数字表示该值与前一位候选人相比异常,即比前一位的平均数大。

如果我们给予这五个分项以同样的重要性系数(权重),那么,意味着出现红字的候选人的名次需要调整,同一个人的红字项数越多,其排名被“不合理地排在后面”的程度越大,也就是不合理性越高。我们按此标准数一下,可以发现,前20名候选人中有9人的名次被现评选规则“扭曲”了,不合理比例达到了45%,这说明就目前评选结果来看,现阶段的评选规则的不合理性相当大。

    实际上,据我观察,在给候选人打分时,不同的分项存在一些问题。比如在第一项“知名度”上,存在较大的主观随意性,而在最后一项“其他优势”上,同样存在这个缺陷。这就必然影响到给予这两项的权重系数要适当减小。另外,设置权重系数还应考虑这5个分项在“最有影响力的专家”评选中的重要性和代表性。我个人的意见是分别给予这5个分项的系数为0.10.3,0.3,0.2,0.1(:对于权重系数的设定没有统一标准,此处只是示例)

按照上述标准重新排列前20名候选人的排名如下:

姓名

当前名次

五分项加权平均分

调整后的排名

排名改变情况

XIAO

1

4.0125

1

不变

HE DS

2

3.9362

4

下降2

ZHANG

3

3.6767

6

下降3

HE JY

4

3.6228

10

下降6

YANG

5

3.6159

7

下降2

WANG ZL

6

3.5985

11

下降5

ZHENG

7

3.9748

3

上升4

CHEN

8

4.1100

2

上升6

LUO

9

3.5492

8

上升1

WEI

10

3.6636

9

上升1

LI DY

11

3.7212

5

上升6

WANG ST

12

3.4949

13

下降1

ZENG

13

3.5843

12

上升1

YUAN

14

3.1818

20

下降6

SUN

15

3.3077

14

上升1

REN

16

3.2000

19

下降3

WANG YG

17

3.1149

18

下降1

WANG YZ

18

3.2317

15

上升3

LI JL

19

3.2561

17

上升2

JIN

20

2.3840

16

上升4

以此标准来看,前20名候选人只有1名无须调整排序,其他19名(占95%)都需要调升或调降。9名候选人(占45%)被人为地排前了,需要调降其名次,其中3人的名次下降幅度超过410名候选人(占50%)被人为地排后了,需要调升其名次,其中4人的名次调升幅度超过4。考虑到评分的主观性,变动次序不超过2的不计算,那么评分不合理的比例介于50%-95%

到目前为止,我们还没有将前三轮的评选结果纳入考量。

大家对于最后一轮参照前几轮结果按第一名赋值500分,依次类推的做法,认为有欠公平。原因是最后一轮每票的满分可达到25分,如果靠人情投票,找到20个为自己投满分票的难度并不大,因此对于前几轮的排名冲击过大,实际上出现了最后一轮评选与之前的评选结果脱钩的问题。

我们假设这个初始赋值是合理的。那么克服大家提到的这个问题还可以采用赋予不同权重的做法。也就是调整初始平均分(即初始分除以500后得到的值)5项加权平均分的比重,假如我们采用0.8/0.20.6/0.4两种方案,那么,最后的排名会变成:

姓名

当前名次

加权排序

初始分

初始平均分

方案一(0.8/0.2)

方案二(0.6/0.4)

XIAO

1

3.99542

498

0.996

1.595884

2.195768

CHEN

8

3.97396

500

1

1.594792

2.189584

ZHENG

7

3.92773

499

0.998

1.583946

2.169892

HE DS

2

3.84085

497

0.994

1.56337

2.13274

ZHANG

3

3.71552

484

0.968

1.517504

2.067008

WEI

10

3.67105

488

0.976

1.51501

2.05402

WANG ZL

6

3.60378

496

0.992

1.514356

2.036712

ZENG

13

3.54507

492

0.984

1.496214

2.008428

WANG ST

12

3.46763

486

0.972

1.471126

1.970252

YANG

5

3.69535

450

0.9

1.45907

2.01814

SUN

15

3.37472

463

0.926

1.415744

1.905488

LI JL

19

3.27806

475

0.95

1.415612

1.881224

WANG YZ

18

3.31951

468

0.936

1.412702

1.889404

HE JY

4

3.64957

403

0.806

1.374714

1.943428

JIN

20

3.28038

435

0.87

1.352076

1.834152

WANG YG

17

3.21955

442

0.884

1.35111

1.81822

YUAN

14

3.202

427

0.854

1.3236

1.7932

LI DY

11

3.77596

332

0.664

1.286392

1.908784

REN

16

3.21263

354

0.708

1.208926

1.709852

LUO

9

3.67375

242

0.484

1.12195

1.7599

可以看到,采用两个方案后,重新调整的排名,10名候选人的次序没有因为方案不同而变化,10名的次序需要做一些微小调整。当然,赋予什么样的系数,还有其他的选择。

以上的讨论是否比现标准更合理,大家可以自己判断一下,本文只是出于我的研究兴趣,做个一个“游戏”。随着评选的深入进行,排名还是会变化的,合理永远只是相对的。