Pareto分布

同義語:パレート分布Pareto distribution

概要

Pareto分布(Pareto distribution)とは、下限 $c>0$ と形 $\alpha>0$ について $P(X>x)=(c/x)^\alpha$($x\ge c$)で定まる、裾が冪で減る確率分布である。$\log(X/c)$ は率 $\alpha$ の指数分布に従い、$\alpha$ 次未満の積率だけが有限で、閾値を超えた値の比の条件付き分布が閾値によらないことで特徴づけられる。$\alpha>1$ では Gini 係数は $1/(2\alpha-1)$、上位 $20\%$ が $80\%$ を持つのは $\alpha=\log5/\log4$ のときである。指数の最尤推定量には正確な信頼区間があり、所得・保険の損害・極値のモデルに使う。

$$\newcommand{C}[0]{\mathbb{C}} \newcommand{div}[0]{\mathbin{÷}} \newcommand{N}[0]{\mathbb{N}} \newcommand{Q}[0]{\mathbb{Q}} \newcommand{R}[0]{\mathbb{R}} \newcommand{Z}[0]{\mathbb{Z}} $$

前提知識: 指数分布, 確率変数の変換, 最尤推定

所得や資産の大きさ、都市の人口、保険の大口の損害額のように、ある値を超える割合が値の冪で減っていく量がある。「$x$ を超える割合が $x^{-\alpha}$ に比例する」という形の分布を、19 世紀末に資産の分布をこの形で調べた V. Pareto にちなんで Pareto 分布 という(CSN09 p. 5)。
この記事では、定義と密度、$\alpha$ 次未満の積率だけが有限であること、尺度を変えても同じ形の分布が残るという性質による特徴づけ、指数分布との対数変換による対応、Lorenz 曲線と Gini 係数、最尤推定と正確な信頼区間を証明する。極値の理論での役割(Fréchet 型の吸引域、一般化 Pareto 分布)は 極値理論、裾の一般的な扱いは 正則変動関数 で扱い、ここでは対応を述べるだけにする。記法は 確率分布の一覧 と 対数正規分布 にそろえる。

定義と使える条件

Pareto 分布

$\alpha>0$、$c>0$ とする。確率変数 $X$ が
$$ P(X>x)=\Bigl(\frac cx\Bigr)^{\alpha}\quad(x\ge c),\qquad P(X\ge c)=1 $$
を満たすとき、$X$ は Pareto 分布 $\mathrm{Par}(\alpha,c)$ に従うという。$\alpha$ を 形(裾の指数)、$c$ を 下限(尺度)のパラメータという。

$P(X>x)$ を 裾(生存関数)とよび $\bar F(x)$ と書く。$\log\bar F(x)=\alpha\log c-\alpha\log x$ なので、裾を両対数の目盛りで描くと傾き $-\alpha$ の直線になる。使える条件は次のとおりである。

  • (i) 下限がある:$X\ge c>0$ である。下限より下の値を含むデータでは、下限を超えた部分だけに当てはめる。
  • (ii) 裾が正確に冪:$\bar F(x)=(c/x)^\alpha$ が下限から上のすべての $x$ で成り立つことを仮定する。大きい $x$ でだけ冪に近い分布は 正則変動関数 の言葉で扱う。
  • (iii) 指数の流儀:密度の冪 $x^{-(\alpha+1)}$ の指数 $\alpha+1$ を「指数」と呼ぶ文献も多い(New05 p. 4、CSN09 p. 5 はこちら)。この記事の $\alpha$ はつねに裾の指数である。
密度・分位点・対数変換

$X\sim\mathrm{Par}(\alpha,c)$ とする。

  1. 密度は $f(x)=\dfrac{\alpha c^\alpha}{x^{\alpha+1}}$($x\ge c$)、$x< c$ では $0$ である。
  2. $0< p< 1$ の $p$ 分位点は $c(1-p)^{-1/\alpha}$ で、中央値は $c\,2^{1/\alpha}$、最頻値は $c$ である。
  3. $E:=\log(X/c)$ は率 $\alpha$ の 指数分布 に従う。逆に $E$ が率 $\alpha$ の指数分布に従えば $ce^E\sim\mathrm{Par}(\alpha,c)$ である。
  4. $U$ が $(0,1)$ の 一様分布 に従えば $cU^{-1/\alpha}\sim\mathrm{Par}(\alpha,c)$ である。
  1. 分布関数 $1-(c/x)^\alpha$ を $x>c$ で微分する。2. $(c/x)^\alpha=1-p$ を解く。密度は $[c,\infty)$ で減少するので最頻値は $c$ である。3. $t\ge0$ で $P(E>t)=P(X>ce^t)=e^{-\alpha t}$ であり、逆も同じ式を逆にたどる。4. $x\ge c$ で $P(cU^{-1/\alpha}>x)=P(U< (c/x)^\alpha)=(c/x)^\alpha$ である。$\square$

3 から、Pareto 分布についての主張は指数分布の主張に読み替えられる。たとえば「指数分布の無記憶性」に当たるのが、次節の尺度についての性質である。

公式の表

$X\sim\mathrm{Par}(\alpha,c)$ とする。

量式使える条件根拠
実数次の積率$E[X^r]=\dfrac{\alpha c^r}{\alpha-r}$$r< \alpha$($r\ge\alpha$ では $\infty$)thm-par-moments
平均$\dfrac{\alpha c}{\alpha-1}$$\alpha>1$thm-par-moments
分散$\dfrac{\alpha c^2}{(\alpha-1)^2(\alpha-2)}$$\alpha>2$thm-par-moments
平均超過$E[X-u\mid X>u]=\dfrac u{\alpha-1}$$\alpha>1$、$u\ge c$thm-par-char の後
定数倍・冪$aX\sim\mathrm{Par}(\alpha,ac)$、$X^b\sim\mathrm{Par}(\alpha/b,c^b)$$a,b>0$prop-par-closure
最小値$\min_iX_i\sim\mathrm{Par}(\sum_i\alpha_i,c)$独立、$X_i\sim\mathrm{Par}(\alpha_i,c)$prop-par-closure
最大値の極限$P\bigl(\max_{i\le n}X_i\le cn^{1/\alpha}x\bigr)\to e^{-x^{-\alpha}}$独立同分布、$x>0$prop-par-closure
Lorenz 曲線・Gini 係数$L(p)=1-(1-p)^{1-1/\alpha}$、$G=\dfrac1{2\alpha-1}$$\alpha>1$prop-par-lorenz
上位 $q$ の占める割合$q^{1-1/\alpha}$$\alpha>1$、$0< q< 1$prop-par-lorenz
最尤推定量$\hat\alpha=n\Big/\sum_i\log(x_i/c)$$c$ が既知thm-par-mle

主定理

積率

積率の有限性

$X\sim\mathrm{Par}(\alpha,c)$、$r$ を実数とする。$r< \alpha$ なら $E[X^r]=\dfrac{\alpha c^r}{\alpha-r}$ であり、$r\ge\alpha$ なら $E[X^r]=\infty$ である。特に、平均は $\alpha>1$ のときに限り有限で $\frac{\alpha c}{\alpha-1}$、分散は $\alpha>2$ のときに限り有限で $\frac{\alpha c^2}{(\alpha-1)^2(\alpha-2)}$ である。また $t>0$ なら $E[e^{tX}]=\infty$ である。

prop-par-basic の密度から
$$ E[X^r]=\int_c^\infty x^r\frac{\alpha c^\alpha}{x^{\alpha+1}}\,dx=\alpha c^\alpha\int_c^\infty x^{r-\alpha-1}\,dx $$
である。被積分関数は正で、$\int_c^\infty x^{s-1}dx$ は $s< 0$ のとき $c^s/(-s)$、$s\ge0$ のとき $\infty$ である。$s=r-\alpha$ とおけば前半を得る。分散は $E[X^2]-E[X]^2=\frac{\alpha c^2}{\alpha-2}-\frac{\alpha^2c^2}{(\alpha-1)^2}=\frac{\alpha c^2}{(\alpha-1)^2(\alpha-2)}$ である。$t>0$ なら $e^{tX}\ge(tX)^m/m!$ で、整数 $m\ge\alpha$ をとれば右辺の期待値が $\infty$ である。$\square$

対数正規分布はすべての次数の積率が有限で、積率母関数だけが発散した(対数正規分布 の定理「積率と積率母関数」)。Pareto 分布はそれより裾が重く、$\alpha$ 次以上の積率がすべて発散する。$1< \alpha\le2$ では平均は有限だが分散は無限で、標本平均のゆらぎは $n^{-1/2}$ より遅くしか小さくならない(反例の表の 4 行目)。

尺度についての性質による特徴づけ

尺度を変えても形が変わらないこと

$c>0$ とし、確率変数 $X$ は $P(X\ge c)=1$ を満たし、すべての $x$ で $P(X>x)>0$ とする。次の 2 つは同値である。

  1. ある $\alpha>0$ について $X\sim\mathrm{Par}(\alpha,c)$ である。
  2. すべての $u\ge c$ と $v\ge1$ について
    $$ P(X>uv\mid X>u)=P(X>cv) $$
    が成り立つ。すなわち、$X>u$ のもとでの $X/u$ の条件付き分布は、$X/c$ の分布と同じである。
対数をとると Cauchy の関数方程式になる

1 ⇒ 2。 $\frac{(c/(uv))^\alpha}{(c/u)^\alpha}=v^{-\alpha}=\bigl(\frac c{cv}\bigr)^\alpha$ である。
2 ⇒ 1。 $u=c$ とおくと $P(X>cv)/P(X>c)=P(X>cv)$ で、仮定から $P(X>cv)>0$ なので $P(X>c)=1$ である。$s\ge0$ について $g(s):=-\log P(X>ce^s)$ とおく。$g$ は有限、広義増加で、$g(0)=0$ である。2 を $u=ce^s$、$v=e^t$($s,t\ge0$)に使うと $P(X>ce^{s+t})=P(X>ce^s)P(X>ce^t)$、すなわち
$$ g(s+t)=g(s)+g(t)\qquad(s,t\ge0) $$
である。帰納法で正の整数 $n$ について $g(ns)=ng(s)$ であり、$s=\frac1m$ とおけば正の有理数 $q$ について $g(q)=qg(1)$ を得る。$s\ge0$ に対して $q< s< q'$ となる有理数をとると、単調性から $qg(1)\le g(s)\le q'g(1)$ で、$q,q'\to s$ として $g(s)=\alpha s$($\alpha:=g(1)$)である(Cauchyの関数方程式 の単調な解)。$X$ は実数値なので $x\to\infty$ で $P(X>x)\to0$、すなわち $g(s)\to\infty$ であり、$\alpha>0$ である。よって $x\ge c$ で $P(X>x)=e^{-g(\log(x/c))}=(c/x)^\alpha$ である。$\square$

prop-par-basic の 3 で $E=\log(X/c)$ に移すと、2 は $P(E>s+t\mid E>s)=P(E>t)$、すなわち 指数分布 の無記憶性そのものである。この定理から、閾値 $u$ を超えた値の比 $X/u$ は閾値によらず $\mathrm{Par}(\alpha,1)$ に従い、超過の平均は $E[X-u\mid X>u]=u\bigl(\frac\alpha{\alpha-1}-1\bigr)=\frac u{\alpha-1}$ と閾値に比例する($\alpha>1$)。平均超過が閾値の 1 次式になることは、極値理論 で裾の形を見分ける手がかりに使われる。

閉じている操作と極値

定数倍・冪・最小値・最大値
  1. $X\sim\mathrm{Par}(\alpha,c)$、$a,b>0$ なら $aX\sim\mathrm{Par}(\alpha,ac)$、$X^b\sim\mathrm{Par}(\alpha/b,c^b)$ である。
  2. $X_1,\dots,X_n$ が独立で $X_i\sim\mathrm{Par}(\alpha_i,c)$ なら、$\min_iX_i\sim\mathrm{Par}(\alpha_1+\dots+\alpha_n,c)$ である。
  3. $X_1,X_2,\dots$ が独立に $\mathrm{Par}(\alpha,c)$ に従い、$M_n:=\max_{i\le n}X_i$ とすると、すべての $x>0$ について $P(M_n\le cn^{1/\alpha}x)\to\exp(-x^{-\alpha})$ である。
  4. $\Lambda$ が形 $\alpha$、率 $\beta$ の ガンマ分布 に従い、$\Lambda$ を与えたもとで $Y$ が率 $\Lambda$ の指数分布に従うなら、$Y+\beta\sim\mathrm{Par}(\alpha,\beta)$ である。
  1. $x\ge ac$ で $P(aX>x)=(ac/x)^\alpha$、$x\ge c^b$ で $P(X^b>x)=P(X>x^{1/b})=(c^b/x)^{\alpha/b}$ である。
  2. 独立性から $x\ge c$ で $P(\min_iX_i>x)=\prod_i(c/x)^{\alpha_i}=(c/x)^{\sum\alpha_i}$ である。
  3. $n$ が大きく $n^{1/\alpha}x\ge1$ のとき、独立性から $P(M_n\le cn^{1/\alpha}x)=\bigl(1-\frac{x^{-\alpha}}n\bigr)^n$ で、これは $e^{-x^{-\alpha}}$ に収束する。
  4. $y\ge0$ で、ガンマ分布の Laplace 変換 $E[e^{-\Lambda y}]=\bigl(\frac\beta{\beta+y}\bigr)^\alpha$ により
    $$ P(Y>y)=E\bigl[P(Y>y\mid\Lambda)\bigr]=E[e^{-\Lambda y}]=\Bigl(\frac\beta{\beta+y}\Bigr)^\alpha $$
    である。よって $x\ge\beta$ で $P(Y+\beta>x)=(\beta/x)^\alpha$ である。$\square$

3 の極限は Fréchet 分布で、極値理論 の定理「Fisher–Tippett–Gnedenko の定理」の 3 つの型のうち裾が冪の型に当たる。4 の $Y=X-\beta$ の分布を Lomax 分布(第 2 種の Pareto 分布)とよび、下限が $0$ になるように平行移動した形である。極値理論 で定義される一般化 Pareto 分布 $H_{\gamma,\beta}$ は、$\gamma>0$ なら $1+\gamma Y/\beta\sim\mathrm{Par}(1/\gamma,1)$($Y\sim H_{\gamma,\beta}$)となるので、この記事の Pareto 分布を平行移動・定数倍したものである。

不平等の指標

平均 $\mu$ が有限な正の確率変数の分位点関数を $Q(u)$ とする。$L(p):=\frac1\mu\int_0^pQ(u)\,du$($0\le p\le1$)を Lorenz 曲線 といい、小さいほうから割合 $p$ の人が全体のどれだけの割合を持つかを表す。$G:=1-2\int_0^1L(p)\,dp$ を Gini 係数 という。全員が同じ値なら $L(p)=p$、$G=0$ である。

Lorenz 曲線と Gini 係数

$X\sim\mathrm{Par}(\alpha,c)$、$\alpha>1$ とする。
$$ L(p)=1-(1-p)^{1-1/\alpha},\qquad G=\frac1{2\alpha-1} $$
であり、大きいほうから割合 $q$($0< q< 1$)の人が持つ割合は $1-L(1-q)=q^{1-1/\alpha}$ で、$c$ によらない。特に、上位 $20\%$ が全体の $80\%$ を持つのは $\alpha=\log5/\log4\approx1.16096$ のときである。

prop-par-basic の 2 から $Q(u)=c(1-u)^{-1/\alpha}$ である。$\beta:=1-1/\alpha\in(0,1)$ とおくと
$$ \int_0^pQ(u)\,du=c\int_0^p(1-u)^{-1/\alpha}du=\frac c\beta\bigl(1-(1-p)^\beta\bigr) $$
で、thm-par-moments から $\mu=\frac{\alpha c}{\alpha-1}=\frac c\beta$ なので $L(p)=1-(1-p)^\beta$ である。$\int_0^1L(p)\,dp=1-\frac1{1+\beta}$ から $G=\frac2{1+\beta}-1=\frac{1-\beta}{1+\beta}=\frac1{2\alpha-1}$ である。上位 $q$ の割合は $1-L(1-q)=q^\beta$ である。$q^\beta=0.8$、$q=0.2$ を解くと $\beta=\frac{\log0.8}{\log0.2}=1-\frac{\log4}{\log5}$、すなわち $\alpha=\frac{\log5}{\log4}$ である。$\square$

$\alpha\downarrow1$ で $G\uparrow1$ となり、少数への集中が強まる。$\alpha\le1$ では平均が無限で、Lorenz 曲線は定義されない。同じ量の式は New05 pp. 10–11 にも(密度の指数で)ある。

推定

最尤推定と正確な分布

$X_1,\dots,X_n$($n\ge2$)を $\mathrm{Par}(\alpha,c)$ からの独立な標本とする。

  1. $c$ が既知の場合。 $T:=\sum_i\log(X_i/c)$ とおくと、$\alpha$ の最尤推定量は $\hat\alpha=n/T$ である。$2\alpha T$ は自由度 $2n$ の カイ二乗分布 に従い、$E[\hat\alpha]=\frac{n}{n-1}\alpha$、$\frac{n-1}T$ は $\alpha$ の不偏推定量である。
  2. $c$ も未知の場合。 $X_{(1)}:=\min_iX_i$、$\hat T:=\sum_i\log(X_i/X_{(1)})$ とおくと、最尤推定量は $\hat c=X_{(1)}$、$\hat\alpha=n/\hat T$ である。$X_{(1)}\sim\mathrm{Par}(n\alpha,c)$ で、$2\alpha\hat T$ は自由度 $2(n-1)$ のカイ二乗分布に従い、$X_{(1)}$ と独立である。
指数分布の無記憶性で最小値を切り離す

prop-par-basic の 3 により $E_i:=\log(X_i/c)$ は独立に率 $\alpha$ の指数分布に従う。

  1. 対数尤度は $\ell(\alpha)=n\log\alpha+n\alpha\log c-(\alpha+1)\sum_i\log X_i=n\log\alpha-\alpha T-\sum\log X_i$ で、$\ell'(\alpha)=\frac n\alpha-T$ は $\alpha=n/T$ の前で正、後で負なので、そこで最大になる($T>0$ は確率 $1$)。$T=\sum E_i$ は形 $n$、率 $\alpha$ のガンマ分布に従うので $2\alpha T$ は形 $n$、率 $\frac12$ のガンマ分布、すなわち自由度 $2n$ のカイ二乗分布に従う。形 $n$、率 $\alpha$ のガンマ分布について $E[1/T]=\int_0^\infty\frac{\alpha^nt^{n-2}e^{-\alpha t}}{(n-1)!}dt=\frac\alpha{n-1}$ から残りを得る。
  2. 尤度は $\alpha^nc^{n\alpha}\prod_iX_i^{-\alpha-1}\cdot1_{\{c\le X_{(1)}\}}$ で、$c$ について $c\le X_{(1)}$ の範囲で増加するので $\hat c=X_{(1)}$ である。これを代入すると 1 と同じ計算で $\hat\alpha=n/\hat T$ を得る。分布を調べる。$E_{(1)}:=\min_iE_i=\log(X_{(1)}/c)$、$D_i:=E_i-E_{(1)}$ とおくと $\hat T=\sum_iD_i$ である。$E_j$ が最小となる事象の上で、$(E_1,\dots,E_n)$ の同時密度 $\alpha^ne^{-\alpha\sum_ie_i}$ を $m=e_j$、$d_i=e_i-m$($i\ne j$、$d_i>0$)に変数変換すると(Jacobi 行列式は $1$)
    $$ \alpha^ne^{-n\alpha m}e^{-\alpha\sum_{i\ne j}d_i}=\frac1n\cdot n\alpha e^{-n\alpha m}\cdot\prod_{i\ne j}\alpha e^{-\alpha d_i} $$
    となる。$j$ について和をとると、$E_{(1)}$ は率 $n\alpha$ の指数分布に従い、最小でない $n-1$ 個の差 $D_i$ は互いに独立に率 $\alpha$ の指数分布に従い、$E_{(1)}$ と独立である。よって $X_{(1)}=ce^{E_{(1)}}\sim\mathrm{Par}(n\alpha,c)$(prop-par-basic の 3)、$\hat T$ は形 $n-1$、率 $\alpha$ のガンマ分布に従い $X_{(1)}$ と独立で、$2\alpha\hat T$ は自由度 $2(n-1)$ のカイ二乗分布に従う。$\square$

1 から、$\chi^2_{k,a}$ を自由度 $k$ のカイ二乗分布の上側 $a$ 点として、区間 $\bigl[\chi^2_{2n,1-a/2}/(2T),\ \chi^2_{2n,a/2}/(2T)\bigr]$ は $\alpha$ をちょうど確率 $1-a$ で含む。$c$ が未知なら 2 により自由度を $2(n-1)$、$T$ を $\hat T$ に替えた区間が同じく正確である。密度の指数 $\alpha+1$ で書くと、1 の推定量は $1+n/T$ となり、New05 p. 4 の式 (5)、CSN09 p. 5 の式 (3.1) と同じものである。CSN09 は同じ頁で、大きい $n$ での標準誤差を $(\hat\alpha_{\text{密度}}-1)/\sqrt n$(この記事の記法で $\hat\alpha/\sqrt n$)とし、両対数の図の直線の当てはめで指数を推定すると系統的な偏りが生じることを述べている。

計算の手順

正の値のデータに Pareto 分布を当てはめる手順は次のとおり。

  1. 下限を決める。 冪の形が成り立つ範囲の下限 $c$ を決め、$c$ 以上の値だけを使う。決め方の一つは、候補の $c$ ごとに当てはめて適合度を比べることである(CSN09)。
  2. 対数に移す。 $e_i=\log(x_i/c)$ は率 $\alpha$ の指数分布の標本になる(prop-par-basic の 3)。
  3. 推定する。 $\hat\alpha=n/\sum e_i$、または不偏な $(n-1)/\sum e_i$、区間は thm-par-mle の後の段落。
  4. 量に戻す。 平均・分散が有限かを $\hat\alpha$ と区間で判断する(thm-par-moments)。超過確率は $(c/x)^{\hat\alpha}$、超過の平均は $u/(\hat\alpha-1)$。

例題

80 対 20 の法則

上位 $20\%$ が全体の $80\%$ を持つ Pareto 分布について、$\alpha$、Gini 係数、上位 $1\%$ の持つ割合、中央値と平均の比を求めよ。
使う公式:prop-par-lorenz、prop-par-basic の 2、thm-par-moments。
答え:$\alpha=\log5/\log4\approx1.160964$、$G=1/(2\alpha-1)\approx0.756471$、上位 $1\%$ の割合 $0.01^{1-1/\alpha}=0.01^{\log(5/4)/\log5}\approx0.528088$。中央値は $c\,2^{1/\alpha}\approx1.817c$、平均は $\frac{\alpha c}{\alpha-1}\approx7.213c$ で、平均は中央値のおよそ $3.97$ 倍である。

標本からの推定

$c=1$ が既知の $\mathrm{Par}(\alpha,1)$ からの標本 $1.2,\ 1.5,\ 3.1,\ 1.05,\ 2.4,\ 8.7,\ 1.8,\ 1.3$ から、$\alpha$ の最尤推定値、不偏推定値、$95\%$ の正確な区間を求めよ。
使う公式:thm-par-mle の 1。$\chi^2_{16,0.975}\approx6.90766$、$\chi^2_{16,0.025}\approx28.8454$。
答え:$T\approx5.65692$、$\hat\alpha=8/T\approx1.41420$、不偏推定値 $7/T\approx1.23742$、区間 $[0.610550,\ 2.54956]$。区間は $1$ と $2$ を含むので、このデータからは平均が有限かどうかも決められない。

再保険の超過の平均

1 件の損害額が $\mathrm{Par}(2.5,10^6)$(円)に従うとき、損害が $5\times10^6$ 円を超える確率と、$5\times10^6$ 円を超えたときの超過分の平均を求めよ。
使う公式:def-par-main、thm-par-char の後の段落。
答え:$P(X>5\times10^6)=5^{-2.5}\approx0.0178885$、超過の平均は $5\times10^6/1.5\approx3.33333\times10^6$ 円である。閾値を $10^7$ 円に上げると超過の平均も $6.66667\times10^6$ 円と比例して増える。

使える条件と反例

各行は、対応する主張の条件を 1 つだけ外したものである。

外す条件反例成り立たなくなること
thm-par-char の 2 がすべての $u\ge c$ で成り立つこと(大きい $u$ での極限としてだけ成り立つ)$P(X>x)=\bigl(\frac2{1+x}\bigr)^\alpha$($x\ge1$)。prop-par-closure の 4 で $\beta=1$ の Lomax 分布を $1$ だけずらしたもの$X/u$ の条件付き分布は $u\to\infty$ で $\mathrm{Par}(\alpha,1)$ に近づくが、$X$ は Pareto 分布でない
thm-par-mle の 1 で $c$ が正しいこと真の分布が $\mathrm{Par}(\alpha,1)$ なのに $c=\frac12$ として計算する$2\alpha T$ はカイ二乗分布に従わず、$\hat\alpha\to\alpha/(1+\alpha\log2)$ に確率収束して区間は $\alpha$ を外す
prop-par-closure の 3 の独立性$X_i=X_1$(すべての $i$)$M_n/(cn^{1/\alpha})=X_1/(cn^{1/\alpha})\to0$ で、Fréchet 分布に近づかない
中心極限定理 の分散の有限性独立に $\mathrm{Par}(1.5,1)$ に従う列$(X_1+\dots+X_n-n\mu)/\sqrt n$ は分布収束しない。$n^{2/3}$ で割ると退化しない分布に近づく
prop-par-lorenz の $\alpha>1$$\mathrm{Par}(1,1)$平均が無限で Lorenz 曲線と Gini 係数が定義されない
反例の確かめ
確かめを開く

1 行目:$X\ge1$ で $P(X>x)>0$。$P(X>uv\mid X>u)=\bigl(\frac{1+u}{1+uv}\bigr)^\alpha\to v^{-\alpha}$($u\to\infty$)である。一方 $u=2$、$v=2$ では $P(X>4\mid X>2)=(3/5)^\alpha$ で、$P(X>2)=(2/3)^\alpha$ と一致しないので 2 は成り立たない。$\bar F$ も $(1/x)^\alpha$ の形でない($x=3$ で $(1/2)^\alpha\ne3^{-\alpha}$)。

2 行目:$T_{1/2}=\sum\log(2X_i)=T+n\log2$ で、大数の法則から $T_{1/2}/n\to1/\alpha+\log2$。したがって $n/T_{1/2}\to\alpha/(1+\alpha\log2)< \alpha$ で、区間の幅は $n^{-1/2}$ の速さで $0$ に近づくので、やがて $\alpha$ を含まなくなる。

3 行目:$M_n=X_1$ である。

4 行目:$\alpha=1.5$ なら分散は無限である(thm-par-moments)。安定分布 の定理「吸引域の判定(十分条件)」を $L=1$、$\theta=1$ で使うと $a_n=n^{2/3}$ で、$(S_n-b_n)/n^{2/3}$ は退化しない分布に収束する。$b_n=n\mu-nE[X_11_{\{X_1>n^{2/3}\}}]=n\mu-3n^{2/3}$ なので、$(S_n-n\mu)/n^{2/3}$ も退化しない分布に収束する。$\sqrt n$ で割ったものがある分布に収束すると、$\sqrt n/n^{2/3}\to0$ を掛けて(Slutsky の定理)$(S_n-n\mu)/n^{2/3}$ は $0$ に確率収束し、退化しない分布への収束と矛盾する。

5 行目:thm-par-moments で $r=\alpha=1$。

よくある誤り

誤り正しくはなぜ
密度の指数 $\alpha+1$ と裾の指数 $\alpha$ を取り違える文献ごとにどちらの指数かを確かめる使える条件 (iii)
両対数の図の直線の傾きで指数を推定する最尤推定を使うthm-par-mle の後の段落
標本平均が有限の値に出たので平均も有限とする$\alpha\le1$ なら平均は無限。標本平均は $n$ とともに増え続けるthm-par-moments
下限のない Lomax 分布と Pareto 分布を同じ式で扱う下限が $0$ になるよう平行移動したもので、尺度の性質をもたないprop-par-closure の 4、反例の表の 1 行目
どの量にも 80 対 20 の法則が成り立つとする$\alpha=\log5/\log4$ のときに限るprop-par-lorenz

補足

関連する分布と使われ方

冪乗則。 裾が $x^{-\alpha}$ に比例する分布を総称して冪乗則の分布という。値を横軸、超える割合を縦軸にとる代わりに、順位と値の関係として同じデータを描いたものは Zipf の法則とよばれ、両者は表し方の違いである(New05 p. 4)。裾が冪に近い分布。 Student の $t$ 分布や指数 $2$ 未満の対称な安定分布のように、裾が正確な冪ではなく $x^{-\alpha}L(x)$($L$ は緩やかに変動する関数)の形のものは 正則変動関数 で扱い、極値理論 の Fréchet 型の吸引域に入る。Pareto 分布はその最も単純な例である。指数分布との関係。 prop-par-basic の 3 により、Pareto 分布の推定・検定は指数分布の推定・検定に帰着する。thm-par-mle の 2 の証明は指数分布の順序統計量の間隔の性質で、指数分布の無記憶性による。

関連項目

参考文献

[1]
M. E. J. Newman, Power laws, Pareto distributions and Zipf's law, Contemporary Physics 46 (2005), no. 5, 323–351(頁は arXiv:cond-mat/0412004v3 の版による), 2005, p. 4(式 (5)、Zipf の法則との関係)、pp. 10–11(式 (24)–(28)、Lorenz 曲線と 80 対 20 の法則)
[2]
Aaron Clauset; Cosma Rohilla Shalizi; M. E. J. Newman, Power-Law Distributions in Empirical Data, SIAM Review 51 (2009), no. 4, 661–703(頁は arXiv:0706.1062v2 の版による), 2009, p. 5(式 (3.1)・(3.2)、最小二乗による当てはめの偏り、Pareto の 19 世紀末の仕事)

Mathpediaは寄付と、参考文献の書籍リンク(Amazonアソシエイト)の紹介料で運営されています。 支援について / 寄付する