Failedのときに0点にならない

[Nagarei]

Failedのときに0点にならないことがあります。
0点： https://portal-dev.isucon.net/admin/benchmark_jobs/130
正の点： https://portal-dev.isucon.net/admin/benchmark_jobs/132

• (a) 今の実装はfinishedかつfailedのときにしか0点にならないことになっていそう
  

  isucon11-portal/portal/app/models/benchmark_result.rb

  Lines 114 to 118 in 8267bbf

  	private def set_score_zero_when_failed
  	if finished? && !passed?
  	self.score = 0
  	end
  	end

なので、恐らく

• ベンチ側のバグで、finished=trueが送れていない
• (b) portalの仕様として、failedした時点で、finished=trueが来ていなくてもベンチを終了させている

のどちらかだと思っています。

(a)や(b)は仕様ですか？

この問題自体はベンチマーク側で解決出来ると思うので、仕様ならそのままで大丈夫です。

[sapphi-red]

予選ベンチマーク側が変更されたのでとりあえずは放置