標準偏差
標準偏差(ひょうじゅんへんさ、英: standard deviation, SD)は、日本工業規格では、分散の正の平方根と定義している[1]。データや確率変数の散らばり具合(ばらつき)を表す数値の一つ。物理学[2]、経済学、社会学などでも使う。例えば、ある試験でクラス全員が同じ点数、すなわち全員が平均値の場合、データにはばらつきがないので、標準偏差は 0 になる。
母集団や確率変数の標準偏差を σ で、標本の標準偏差を s で表すことがある。二乗平均平方根 (RMS) と混同されることもある。両者の差異については、二乗平均平方根を参照。
母集団の標準偏差編集
n 個のデータ x1, x2, …, xn からなる母集団を考える。その母集団の平均(または母平均)μ は、次の通りに定義される:
このとき、母平均 μ を使って次式で得られる量 σ2 を分散(または母分散)と定義する。
この分散の非負の平方根 σ を、母集団の標準偏差と定義する[3]。分散はデータの散らばり具合を表す量であるが、元のデータを平方しているので元のデータや平均値と次元が異なり直接比較することができない。平方根をとると元のデータと同じ次元になるので、分散よりも標準偏差の方が散らばり具合を表す量として便利なことがある[4]。
標本の標準偏差編集
母集団(nよりはるかに大きい)の中から、n 個のデータ x1, x2, …, xn からなる標本を抽出したとする。このとき、標本平均を次式で定義する:
この標本平均を使って次式で定義される量を標本の分散と呼ぶ。
標本の分散の平方根 s を標本の標準偏差と呼ぶ[3]。
σ2 を母集団の分散、s2 を標本の分散とすると、
となることが示される。つまり、標本の分散は母集団の分散よりも小さくなる傾向がある[5]。そのため、標本の分散は母集団の分散の不偏推定量ではない。そこで、
を考えると、この量の期待値は母集団の分散に等しく、分散の不偏推定量になっている。こうして定義される u2 を不偏分散という。標本分散と呼ぶこともある。
u2 の平方根 u を標本標準偏差ということもある。
不偏分散の平方根 u は、標準偏差の不偏推定量ではない。例えば母集団が正規分布に従う場合、標準偏差の不偏推定量 D は次式で与えられる[6]。
ここで、Γ はガンマ関数、u2 は不偏分散である。
標本サイズが大きくなれば、標準偏差の不偏推定量 D は、近似的に、平均からの偏差平方和を n − 1.5 で割った値の平方根として求められる[7]。
名称の混乱編集
統計の教科書によっては n − 1 で割ったものが標本分散という名称になっており[8]、用語が混乱して使用されている場合がある。母平均が不明であって、代わりに標本平均を使用する場合には、期待値が母分散となる不偏分散を使用することが多い[9]。
英語編集
英語では不偏分散による標準偏差のことを「sample standard deviation」(標本標準偏差)と呼ぶことが多い。この語はカール・ピアソンによって1893年に導入された[10]。ただし不偏分散による標準偏差を意味する英語の表現には混乱がある。
- ウィキペディア英語版の「standard deviation」という記事では、不偏分散による標準偏差(平均からの偏差平方和を n − 1 で割った値の平方根)のことを「corrected sample standard deviation」と表記し、平均からの偏差平方和を n で割った値の平方根を「uncorrected sample standard deviation」や「the standard deviation of the sample」と表記している[出典無効]。
- アメリカの Fundamentals of Engineering (FE) の試験問題での「sample standard deviation」は n − 1 で割る方を意味する。
- アメリカ・ユタ大学のトム・マロイは、統計学の学習者向けウェブページ[11]では、「sample standard deviation」を平均からの偏差平方和を n で割った値の平方根だと解説している。
日本語編集
日本語の「不偏標準偏差」という語にも混乱がある。日本の大学教授の間でも、不偏分散 u2 の平方根を、不偏標準偏差だと教える大学教員も多いが、標準偏差の不偏推定量 D を不偏標準偏差だと教える教員もいる。
このように、同じ用語でも話者によって定義が異なる場合がある。
確率変数の標準偏差編集
離散型確率変数編集
X を離散型確率変数とする。X のとりうる値が x1, x2, …, xn で X が xi をとる確率を pi で表す。ここで、
とする。このとき、
を確率変数 X の期待値という。また、
を確率変数 X の分散という。この分散の非負の平方根を標準偏差という。
連続型確率変数編集
X を連続型確率変数とする。連続関数 f(x) が
を満たし、かつ X の値が区間 [x1, x2] に属する確率が
のとき、f(x) を X の確率密度関数という。このとき、
を確率変数 X の期待値という。また、
標準偏差の推定編集
母標準偏差が未知のときは、標本から得られた標本標準偏差から推定することができる。母標準偏差を σ、標本サイズ N の標本標準偏差を s とすると母集団分布が正規分布ならば σ2 は次の自由度 N − 1 の χ2 分布に従う。
σ の95%信頼区間は P = 0.975 の χ2 から P = 0.025 の χ2 までの範囲で、s と σ の比は N = 5 では 0.31 から 1.49、N = 20 では 0.67 から 1.28 となり、標本が小さい場合はかなり範囲が広いことに留意すべきである。
Table
Confidence interval |
Proportion within | Proportion without | |
---|---|---|---|
Percentage | Percentage | Fraction | |
0.318 639σ | 25% | 75% | 3 / 4 |
4490σ 0.67 | % 50 | % 50 | 1 / 2 |
4458σ 0.99 | 68% | 32% | 1 / 3.125 |
1σ | 89492% 68.26 | 10508% 31.73 | 1 / 14872 3.15 |
1552σ 1.28 | 80% | 20% | 1 / 5 |
4854σ 1.64 | 90% | 10% | 1 / 10 |
9964σ 1.95 | 95% | 5% | 1 / 20 |
2σ | 99736% 95.44 | 00264% 4.55 | 1 / 7895 21.97 |
5829σ 2.57 | 99% | 1% | 1 / 100 |
3σ | 00204% 99.73 | 99796% 0.26 | 1 / 370.398 |
0527σ 3.29 | 99.9% | 0.1% | 1 / 1000 |
0592σ 3.89 | 99.99% | 0.01% | 1 / 0000 1 |
4σ | 3666% 99.99 | 6334% 0.00 | 1 / 5787 1 |
7173σ 4.41 | 99.999% | 0.001% | 1 / 0000 10 |
σ 4.5 | 99.9993204653751% | 0.0006795346249% | 1 / 7159.5358 14 3.4 / 1000000 (on each side of mean) |
1638σ 4.89 | % 99.9999 | % 0.0001 | 1 / 1000000 |
5σ | 99426697% 99.99 | 00573303% 0.00 | 1 / 1744278 |
6724σ 5.32 | 999% 99.99 | 001% 0.00 | 1 / 0000000 1 |
0729σ 5.73 | 9999% 99.99 | 0001% 0.00 | 1 / 0000000 10 |
σ 6 | 99998027% 99.99 | 00001973% 0.00 | 1 / 6797346 50 |
9410σ 6.10 | 99999% 99.99 | 00001% 0.00 | 1 / 1000000000 |
6951σ 6.46 | 999999% 99.99 | 000001% 0.00 | 1 / 0000000000 1 |
6502σ 6.80 | 9999999% 99.99 | 0000001% 0.00 | 1 / 0000000000 10 |
7σ | 99.9999999997440% | 0000000256% 0.00 | 1 / 0682215445 39 |
脚注編集
- ^ JIS Z 8101-1:1999, 1.13 分散.
- ^ 伏見, p. 364, 第 VII 章 確率と統計 63節 算術平均、標準偏差.
- ^ a b 栗原 2011, p. 47
- ^ 稲垣 1990, p. 21.
- ^ 例えば、標本サイズが 1 の場合、ばらつきがないので標本の分散は必ず 0 となるが、母集団のばらつきは通常 0 ではない。
- ^ 吉澤 1989, pp. 78–79.
- ^ Brugger 1969, p. 32.
- ^ 例:(東京大学教養学部統計学教室編 1991)。
- ^ 分散または標準偏差の図による解説と具体例は、(村瀬, 高田 & 廣瀬 2007, pp. 52–53)などを参照。
- ^ “Earliest Known Uses of Some of the Words of Mathematics (S)”. 2016年1月30日閲覧。
- ^ 「Estimating Parameters Web Page」
- ^ 「健康統計学-散布度」
- ^ 「高崎経済大学非常勤講義 第4回「記述統計(2):代表値」」
- ^ 「標準偏差の不偏性」
参考文献編集
- Brugger, Richard M (1969-10). “A Note on Unbiased Estimation of the Standard Deviation”. The American statistician (American Statistical Association) 23 (4): 32. ISSN 0003-1305.
- 吉澤, 康和『新しい誤差論 - 実験データ解析法』共立出版、1989年。ISBN 4320014243。
- 稲垣, 宣生『数理統計学』裳華房、1990年。ISBN 4-7853-1406-0。
- 『統計学入門』東京大学出版会、1991年。ISBN 4-13-042065-8。
- 村瀬, 洋一、高田, 洋、廣瀬, 毅士『SPSSによる多変量解析』オーム社、2007年。ISBN 4-27-406626-6。
- 栗原, 伸一『入門統計学検定から多変量解析・実験計画法まで』オーム社、2011年。ISBN 978-4-274-06855-3。
- 西岡, 康夫『数学チュートリアル やさしく語る 確率統計』オーム社、2013年。ISBN 9784274214073。
- 伏見, 康治 『確率論及統計論』河出書房、1942年。ISBN 9784874720127。
- 『数学辞典』日本数学会、岩波書店、2007年。ISBN 9784000803090。
- 日本規格協会, JIS Z 8101-1:1999 統計−用語と記号−第1部:確率及び一般統計用語