[[研究テーマ]] ***評価方法 [#m5e6f7fb] +正解率 0-20/20 --http://nlp.kimura-s.otaru-uc.ac.jp/NLP-research/SCOPE/EvaluationForm2/eva2.cgi +調和平均による評価 --http://nlp.kimura-s.otaru-uc.ac.jp/NLP-research/SCOPE/EvaluationForm2/HarmonicMean.cgi --http://nlp.kimura-s.otaru-uc.ac.jp/NLP-research/SCOPE/EvaluationForm2/HarmonicMean.dat ***提案手法 [#hb708823] +7/20=0.35 [[Baseline Google 7 gram >http://nlp.kimura-s.otaru-uc.ac.jp/NLP-research/SCOPE/EvaluationForm2/Baseline.cgi]] +3/20=0.15 [[MeanICF>http://nlp.kimura-s.otaru-uc.ac.jp/NLP-research/SCOPE/EvaluationForm2/MeanICF.cgi]] +4/20=0.20 [[MeanICFnoun>http://nlp.kimura-s.otaru-uc.ac.jp/NLP-research/SCOPE/EvaluationForm2/MeanICFnoun.cgi]] +6/20=0.30 [[Mean LengthICF>http://nlp.kimura-s.otaru-uc.ac.jp/NLP-research/SCOPE/EvaluationForm2/MeanLengthICF.cgi]] +5/20=0.25 [[Mean LengthICFnoun>http://nlp.kimura-s.otaru-uc.ac.jp/NLP-research/SCOPE/EvaluationForm2/MeanLengthICFnoun.cgi]] +6/20=0.30 [[TF2MaxLength 出現回数2回以上最長フレーズ>http://nlp.kimura-s.otaru-uc.ac.jp/NLP-research/SCOPE/EvaluationForm2/TF2MaxLength.cgi]] +Cabocha テスト段階 [[CabochaA>http://nlp.kimura-s.otaru-uc.ac.jp/NLP-research/SCOPE/EvaluationForm2/CabochaA.cgi]] +15/ 20 =0.75 [[Cabocha 文節単位 助詞の制約>http://nlp.kimura-s.otaru-uc.ac.jp/NLP-research/SCOPE/EvaluationForm2/CabochaParticle.cgi]] +16/ 20 =0.80[[Cabocha 文節単位 助詞+副詞の制約>http://nlp.kimura-s.otaru-uc.ac.jp/NLP-research/SCOPE/EvaluationForm2/CabochaParticleAdverb.cgi]] --実験結果 |手法|正解率|調和平均による評価| |Baseline|7/20=0.35|61.84 / 74.63 = 0.8286| |MeanICF|3/20=0.15|44.54 / 74.63 = 0.5968| |MeanICFnoun|4/20=0.20|51.91 / 74.63 = 0.6956| |Mean LengthICF|6/20=0.30|40.60 / 74.63 = 0.5440| |Mean LengthICFnoun|5/20=0.25|45.10 / 74.63 = 0.6043| |TF2MaxLength|6/20=0.30|53.02 / 74.63 = 0.7104| |助詞の制約|15/ 20 =0.75|66.62 / 74.63 = 0.8927| |助詞と副詞の制約|16/ 20 =0.80|70.24 / 74.63 = 0.9412|