7/9

機械学習を利用した総合評価ポイント推定サービス

※情報工学の知識がない人が読んでもよくわからないかも。

投稿前の小説を入力すると、「小説家になろう」での総合評価を推定してくれるWEBサービス。

これまでに「小説家になろう」に投稿された全ての小説の出現単語(のTFIDF)と総合評価の組み合わせを学習しており、小説を入力すると形態素分解して出現単語のTFIDFベクトルを生成し学習モデルに入力することで総合評価を推定する。

発表当初は大いに盛り上がったが、あまりまともな推定値が出ないことがわかり、現在ではネタサービス扱いになっている。

使用者のコメントとしては

「テンプレっぽい作品を入れると妥当な推定値が出るけど、オリジナル性が高い作品を入れるとだいたい0ポイントと推定される」

「自分の小説を入れたら一千万を超える推定値が出たんだけど」

「短編はそこそこまともな推定値なんだけど、長編になると推定値がおかしすぎる」

といったように精度の低さを指摘するものが目立つ。

本当に作ったらどうなるんだろう。

単語のTFIDFなんてナイーブな方法じゃまともに学習できないかな？