動的分析その１〜「アニメに期待するもの」と「BS-i版評価」とのクロス集計

　今回から動的分析のフェイズに入ります。静的分析が「票の合計結果」のみを材料に進める分析だったのに対し、動的分析では「個別の票を色々な切り口で再分類する」ことを含めて考察していくことになります。

　それを実現するために動的分析では、「クロス集計」という手法が加わります。クロス集計についてご存じない方は、劇場版AIR第２回アンケートに係る動的分析のページで、「クロス集計とは」という項目を設けて説明しておりますのでそちらをご覧いただければと思います。今回の「動的分析その１」では、BS-i版に対する評価とその他の項目の関係のうち、主に「アニメ一般への嗜好」に絡む部分を読み解いていきましょう。

→	「原作付きに求めるもの」とのクロス集計	「今のアニメへの期待」とのクロス集計	χ（カイ）二乗検定
	クロス集計を用いた「各要素」に関する考察	「一般にアニメで重視する要素」とのクロス集計	その他〜おまけ

　まず最初は、Q2(2)とQ3(2)の関係から。以下は抜粋表になりますので、詳細な結果は動的分析〜資料編１・1-1.原作付きアニメに求めるものと評価との関係をご覧下さい。

		原作付きアニメに期待するもの			計
		オリジナル寄り	中庸・不明	原作寄り
評 価	最高＆良かった	40	74	233	347
	普通以下	3	7	3	13
計		43	81	236	360
評点の平均値		1.44	1.57	1.83	1.72
評点の標準偏差		0.92	0.89	0.43	0.65

　一般的な原作付きアニメに対して「原作寄り」を求める人の方が、BS-i版AIRに対する評価は良いようです。逆に、「オリジナル寄り」の展開を希望する人の評価が相対的に低い結果も出ておりますが、アンケート全体に対して票数が少なめであること、相対的に低いとは言っても依然として良い方の評価が大半を占めること、中庸・不明と比べて特に大きく異なる結果ではないことなどから、「オリジナル寄り＝低評価」と断言するのは危険です。標準偏差から読み取れる部分も含めて、ここでは好みが「原作寄り」の方が、良い評価に集中すると言うに留めましょう。

　

→	「原作付きに求めるもの」とのクロス集計	「今のアニメへの期待」とのクロス集計	χ（カイ）二乗検定
	クロス集計を用いた「各要素」に関する考察	「一般にアニメで重視する要素」とのクロス集計	その他〜おまけ

　続いて、Q2(3)とQ3(2)の関係も見てみましょう。同様に以下に抜粋表を載せます。詳細は動的分析〜資料編１・1-2.今のアニメへの満足度と評価との関係をご覧下さい。

		今のアニメへの満足度				計
		好意的	中庸	懐疑的	不明
評 価	最高＆良かった	140	106	64	37	347
	普通以下	3	4	3	3	13
計		143	110	67	40	360
評点の平均値		1.80	1.70	1.69	1.58	1.72
評点の標準偏差		0.55	0.69	0.72	0.70	0.65

　一応、先ほどの集計に倣ってまとめますと、今のアニメに好意的な人の方が、良い評価に集中すると言えそうな結果が出ております。しかしながら、もう少し突っ込んで見てみますと、これはやや不安を残す結果になっていることがわかります。先ほどは「原作寄り」と「オリジナル寄り」との評点平均値の差が0.4近くありましたが、今回は最も良い「好意的」と最も悪い「不明」を比べても、差は0.2強しかありません。この内容で、統計的な差が生じていると結論付けてもいいのでしょうか。

→	「原作付きに求めるもの」とのクロス集計	「今のアニメへの期待」とのクロス集計	χ（カイ）二乗検定
	クロス集計を用いた「各要素」に関する考察	「一般にアニメで重視する要素」とのクロス集計	その他〜おまけ

　以上２つの分析結果を、統計学的な手法を用いて検証してみましょう。まず、Q2(2)の「原作付きアニメに期待するもの」、Q2(3)の「今のアニメへの期待度」、そしてQ3(2)の「BS-i版への評価」の結果を組み合わせた、３要素に対するクロス集計を行います。以下がその結果です。詳細は動的分析〜資料編１・1-3.原作付きへの期待・アニメへの満足・評価の関係をご覧下さい。

原作付きへの期待		原作寄り		その他		計
今のアニメの期待度		好意的	その他	好意的	その他
評 価	最高！	80	119	40	46	285
	良かった	7	27	13	15	62
	普通	0	2	1	1	4
	悪かった	1	0	0	5	6
	最悪！	0	0	1	2	3
計		88	148	55	69	360
評点の平均値		1.89	1.79	1.65	1.42	1.72
評点の標準偏差		0.41	0.44	0.69	1.03	0.65

　一見、非常にキレイな傾向が現れたように見えますね。ここで、「χ（カイ）二乗検定」という手法を用いて、この分類が「有意」（＝統計的に意味のあるもの）であるのかを検証してみます。一般に、χ二乗検定の流れは以下のようになります。

・ある切り口について差が生ずることを、「統計学的に有意ではない」と仮定する。（＝帰無仮説、つまり棄却されることを期待して立てる仮説）

・その仮定に基づき、その切り口で差の出ないデータ群（＝期待度数）を、元のデータ群から作成する。

・２つのデータ群から「χ二乗値」という数値を算出する。

・χ二乗値がある値より大きければ帰無仮説は棄却され、その切り口による差は統計学的に有意と判断できる。逆に小さければ帰無仮説は期待に反して採択されてしまい、その切り口による差は必ずしも統計学的に有意とは言えないことになる。

　…これだけ読んでいても難しいですね？実際にやってみましょう。まず、「帰無仮説」を「今のアニメに好意的であるかどうかは、BS-i版の評価に影響しない」としましょう。この帰無仮説が棄却されれば「今のアニメに好意的である人ほどBS-i版の評価が高い」として良い事になります。逆に仮説が採択されれば、「このアンケートの結果から今のアニメへの期待度とBS-i版の評価を結びつけるのは無理がある」ということです。

　続いて、帰無仮説に基づいた「差の出ないデータ群」を作成してみます。各合計値は上記の表と変わらないようにしながら、各評点の分布が均一になるように平準化するのです。これは上記の表の数値を使って、加減乗除の組み合わせで簡単に作成できますので、興味のある方はやってみてください。例えば、以下の表の左上の「74.2」という値は、（80+119)÷(88+148)×88で求めています。

原作付きへの期待		原作寄り		その他		計
今のアニメの期待度		好意的	その他	好意的	その他
評 価	最高！	74.2	124.8	38.1	47.9	285
	良かった	12.7	21.3	12.4	15.6	62
	普通	0.7	1.3	0.9	1.1	4
	悪かった	0.4	0.6	2.2	2.8	6
	最悪！	0.0	0.0	1.3	1.7	3
計		88	148	55	69	360
評点の平均値		1.83	1.83	1.52	1.52	1.72
評点の標準偏差		0.43	0.43	0.90	0.90	0.65

※黄色のセルは上記の表と同じ値だが、分布を変えた結果、オレンジ色のセル同士、水色のセル同士は同じ値を取るようになった。

　続いて、χ二乗値の算出です。Χ二乗値は、二つの表の各セルについて差をとり、それを二乗して期待度数で割ったものを全て合計することで求められます。例えば下記表の左上「0.45」は、(80-74.2)^2÷74.2で算出されています。こうして求めた各セルの計算結果は以下の通りとなり、この表全体の合計＝χ二乗値は12.02となります。

原作付きへの期待		原作寄り		その他
今のアニメの期待度		好意的	その他	好意的	その他
評 価	最高！	0.45	0.27	0.09	0.07
	良かった	2.54	1.51	0.03	0.02
	普通	0.75	0.44	0.01	0.01
	悪かった	1.05	0.63	2.22	1.77
	最悪！	0.00	0.00	0.08	0.07

　最後にこのχ二乗値を、χ二乗分布表上の値（限界値）と比較します。詳細は省きますが、限界値は「自由度」と「有意水準」を決めることで定まります。今回の検定対象となる表は５行×４列の表なので、「自由度」は４（行数−１）×３（列数−１）＝１２となります。また、「有意水準」の方は通常の検定でよく利用される「５％」という値で十分でしょう（より厳密さを求める場合には、より小さい有意水準を用います）。自由度１２、有意水準５％の限界値を分布表から調べると、21.026。この限界値とχ二乗値を比べると、χ二乗値が十分に小さな値であることがわかりますね。よって、帰無仮説は棄却することができず、少なくとも今回のアンケートの結果のみから「今のアニメに好意的であることとBS-i版の評価には相関関係がある」と結論付けるのはやや無理があることになります。

　なお、もう一方〜原作寄りを好むこととの関係〜についても検証は行ってあります。つまり「帰無仮説」を「原作付きアニメに原作寄りを求めるかどうかは、BS-i版の評価に影響しない」としたわけです。この場合、χ二乗値は27.59となり、限界値21.026よりも大きな値となります。従って帰無仮説は棄却され、「原作寄りを好むこととBS-i版への評価には相関関係がある」と結論して良いことになります。

　長々と書き連ねて参りましたが、結論としては「好みが原作寄りであること」は評価に影響するが、「今のアニメに好意的であること」は必ずしも評価に影響するとは言えないということですね。動的分析その３辺りで、BS-i版に対する評価を左右するタイプ分けを行なってみようと考えておりますが、その際に「原作寄りか」は切り口として使えますが、「今のアニメに好意的か」は切り口として使えない、ということになりましょう。

→	「原作付きに求めるもの」とのクロス集計	「今のアニメへの期待」とのクロス集計	χ（カイ）二乗検定
	クロス集計を用いた「各要素」に関する考察	「一般にアニメで重視する要素」とのクロス集計	その他〜おまけ

　さて、アニメ一般に関する観点の残り一つ、「一般的にアニメの何を重視するか」とBS-i版の評価との関係について、先ほどと同様のクロス集計を行うことになりますが、その前に一点、別な視点での分析を以下に示します。Q2(1)「一般的にアニメの何を重視するか」と、Q3(4)及び(5)「BS-i版で良かった要素・悪かった要素」の関係を調べてみましょう。以下の表ではそれぞれの要素について「一般に重視する」と答えた人の中で「BS-i版でその要素が良かった（悪かった）」と答えた人の比率、逆に「一般に重視する」と答えなかった人の中で「BS-i版でその要素が良かった（悪かった）」と答えた人の比率をまとめ、さらにその間での差分を取っています。詳細は動的分析〜資料編１・1-4.要素ごとの「重視度合い」と「BS-i版での評価」の関係をご覧下さい。

一般的に	BS-i版について	キャラデザ	作画	動き	演出	シナリオ	声優	BGM	原/オリ	話数
重視する	良かった	83.7%	96.8%	91.7%	83.6%	70.4%	89.1%	88.5%	79.7%	30.7%
	悪かった	1.0%	0.0%	0.9%	6.9%	6.1%	3.6%	2.9%	4.7%	63.2%
重視しない	良かった	55.9%	76.4%	75.8%	62.6%	47.8%	61.1%	72.2%	58.0%	14.2%
	悪かった	1.3%	0.0%	0.8%	1.2%	4.3%	0.0%	2.6%	8.5%	64.2%
重視する/しないの差	良かった	27.7%	20.4%	15.9%	21.0%	22.6%	28.0%	16.3%	21.7%	16.5%
	悪かった	-0.4%	0.0%	0.1%	5.7%	1.7%	3.6%	0.2%	-3.9%	-1.1%

　この結果を見てみると、以下の3種類に分類可能なパターンがあることに気付きます。

・重視者偏重（表中のオレンジ色のセル）

　重視する人の方が２割以上良い評価が多く、悪い評価は少ない要素（キャラデザ、作画、原/オリ）

・重視者乖離（表中の水色のセル）

　重視する人の方が２割以上良い評価が多いが、悪い評価も若干多い要素（演出、シナリオ、声優）

・評価安定（表中の黄色のセル）

　重視する/しないによって良い評価も悪い評価も極端には変動しない要素（動き、BGM、話数）

　この分類を、静的分析その２で行ったグループ分けと組み合わせてみると、以下の通りとなります。

グループ	重視者偏重	重視者乖離	評価安定
A	作画		動き
B	キャラデザ	演出・声優	BGM
C	原/オリ	シナリオ
D			話数

　さて、ここで問題です。以上の結果から、「どの要素を重視する人がBS-i版への評価が高くなるか」を予測することが出来ないでしょうか。

　まず、「重視者偏重」に分類される３つの要素については、重視する人がかなり良い評価に傾いていることになりますから、相関関係が見出せる可能性が大きいですね。次に「重視者乖離」に分類される３要素ですが、これらを重視する人は悪い評価も増加してしまうため、切り口とするにはあまり適切ではないと考えられます。最後の評価安定に属する３つは微妙なところですが、この中ではグループAに属する「動き」が重視する人の良い評価が９割超と突出して高いため、切り口として期待できる印象を受けます。

→	「原作付きに求めるもの」とのクロス集計	「今のアニメへの期待」とのクロス集計	χ（カイ）二乗検定
	クロス集計を用いた「各要素」に関する考察	「一般にアニメで重視する要素」とのクロス集計	その他〜おまけ

　以上を踏まえて、「一般的にアニメの何を重視するか」とBS-i版の評価との関係を見るべく、Q2(1)とQ3(2)とのクロス集計を行って見ます。詳細は動的分析〜資料編１・1-5.一般にアニメで重視する要素と評価との関係をどうぞ。

		一般に重視する要素									全体
		キャラデザ	作画	動き	演出	シナリオ	声優	BGM	原/オリ	話数
評 価	最高＆良かった	204	216	224	180	302	188	203	170	110	347
	普通以下	4	4	4	9	12	5	6	2	4	13
計		208	220	228	189	314	193	209	172	114	360
評点の平均値		1.82	1.83	1.80	1.71	1.71	1.76	1.77	1.85	1.70	1.72
評点の標準偏差		0.48	0.48	0.55	0.75	0.67	0.62	0.57	0.42	0.72	0.65

　いかがでしょう。前項で見た「重視者偏重」に分類される「キャラデザ」「作画」「原/オリ」の３要素と、「評価安定」かつグループAに属する「動き」については、全体のそれよりもよりも高い評点平均値が得られています。標準偏差も全体のそれよりも低くなっており、切り口として利用できるかを検討する価値は十分にありそうです。

　ただし、これらがそのまま使えるかと言えば、答えはNoでしょうね。その理由は、一つは「全体の評点と比べて、それほど差が大きくない要素が多い」こと。もう一つは、「1%強〜2%近くの普通以下の評価が含まれるのは、あまり良い分類とは言えない」ということです。この点をクリアしつつ、これら４つの要素を用いた切り口を実現するにはどうしたら良いのか。そこで一つの案が閃きました。「これら４つの要素のうち、いくつの要素を重視するか」で切り分けられないでしょうか。

　それを行なってみたのが以下の表です。ここではBS-i版評価への影響が大きい４つの要素〜「キャラデザ｣「作画」「動き」「原/オリ」〜のうち、いくつの要素を重視するか、それによってBS-i版の評価がどう変わるかをクロス集計しております。詳細は動的分析〜資料編１・1-6.「BS-i指標４要素」のうち重視する要素の数と評価との関係をどうぞ。

		BS-i指標４要素のうち、重視する要素の数					全体
		4	3	2	1	0
評 価	最高＆良かった	74	98	80	64	31	347
	普通以下	1	1	0	7	4	13
計		75	99	80	71	35	360
評点の平均値		1.85	1.89	1.83	1.48	1.31	1.72
評点の標準偏差		0.40	0.42	0.40	0.95	0.98	0.65

　思わずガッツポーズですよ。ここまで明確な差が出せて、嬉しいのなんの。上に挙げた４つの要素〜「BS-i指標４要素」と名づけました〜のうち、重視する個数が２つ以上か未満かで、はっきりと結果に差が出ております。重視する個数が２つ以上の場合は、普通以下の評価がほとんど含まれていないため、平均値は1.8を大きく上回っている上に標準偏差も0.4前後と非常に小さな値を取っております。BS-i指標４要素のうち２つ以上を重視する方は、かなりBS-i版を高評価する方と言って良いと思います。（なお、詳細は省きますが、χ二乗検定でも有意という結果になりました。）

→	「原作付きに求めるもの」とのクロス集計	「今のアニメへの期待」とのクロス集計	χ（カイ）二乗検定
	クロス集計を用いた「各要素」に関する考察	「一般にアニメで重視する要素」とのクロス集計	その他〜おまけ

　必ずしも今回のテーマとは絡まないうえ、統計的にも意味合いの小さい「おまけ集計」を最後にちょっと載せておきます。まず、性別による評価の違いから。詳細は動的分析〜資料編１・2-1.性別の評価へ。

		性別			計
		男性	女性	無回答
評 価	最高＆良かった	316	23	8	347
	普通以下	12	1	0	13
計		328	24	8	360
評点の平均値		1.72	1.75	1.63	1.72
評点の標準偏差		0.64	0.83	0.48	0.65

　「女性」「無回答」を合わせても全体の１割にも満たないため、「性別によって評価に違いがある」とは到底言えません。むしろ、全く差はない、とする方がいいかも知れませんね。なお、女性の平均値は高いのに標準偏差がやたらと大きいのは、２１人が最高評価を付けているにも拘わらず、１人が最悪評価を付けているためです。母数が少ないと１件のイレギュラーもかなり結果に響く可能性が高い、という好例でございます。

　もう一つ。年代別の評価の違いです。詳細は動的分析〜資料編１・2-2.年代別の評価へ。

		年代別				計
		10代以下	20代	30代	その他
評 価	最高＆良かった	71	200	59	17	347
	普通以下	3	6	4	0	13
計		74	206	63	17	360
評点の平均値		1.73	1.75	1.62	1.76	1.72
評点の標準偏差		0.72	0.57	0.82	0.42	0.65

　先ほどの性別の結果に比べると、若干の傾向は出ているかのように見えますが、これは実は統計的には誤差の範囲です。Χ二乗検定を行うと、「年代によって差が出ない」という帰無仮説は棄却することが出来ないのです。30代の評価が低めに出ている辺りは、ひょっとしてこの年代がシニカルなのではないか〜とか考えると面白いんですけどもね。それは「たまたまそう見えるだけ」としておく方が無難のようです。

　いかがでしたか？前回の静的分析その３がかなりマニアックかつ興味深い領域に踏み込んでいた分、今回は少々薄味に感じられたかもしれませんね。次回以降も頑張っていきますので、どうぞ楽しみにお待ちくださいませ。もしよろしければ、管理人のブログなどを通じまして、お読みいただいた感想、分析内容へのご意見等を頂ければ幸いです。

　　　　　　　　

　楽しんで頂けましたらWEB拍手をお願いいたします。→

　ブログの関連記事です。→BS-i版AIRアンケート・動的分析その１公開

このページのトップへ　　　　「動的分析〜資料編１」へ　　　　ホームへ戻る