5.25. mmbucket 多次元均等化バケット分割¶
f=
で指定した複数の数値項目を次元とした件数均等化バケット分割を行う。
例えば、 f=a,b,c
そして n=5
と指定すると、
mbucket 件数均等化バケット分割 コマンドと同様に、項目 a,b,c
それぞれを5つの区間に分割するが、
mmbucket
では、項目 a,b,c
の3次元空間における各バケット(バケット数は \(5^3=125\) 個になる)に
属する件数ができるだけ均等になるような区間を計算する
パラメータ¶
i= : 型=str , 任意(default=標準入力)
入力データを指定する。
o= : 型=str , 任意(default=標準出力)
出力データを指定する。
f= : 型=str , 必須
ここで指定した項目(複数項目指定可)の値を分割する。複数指定すれば、その数の次元に基づく均等化バケット分割を行う。1項目のみ指定すればmbucket
と同じ結果になる。x
,nfn
オプション使用時は、項目番号(0〜)で指定可能。
n= : 型=str , 必須
f=
で指定した項目数と同じ個数分指定する。ただし1つの数字を指定した場合、f=
で指定した全ての項目に、同じ分割数が適用される。
F= : 型=str , 任意(default=1)
出力形式を指定する。バケットの名前を出力形式。0:バケット番号のみを表示する。1:バケットの範囲のみを表示する。2:バケット番号とバケット範囲の両方を表示する。
k= : 型=str , 任意(default=キーブレイク処理しない)
バケット分割を行う単位となる項目名リスト(複数項目指定可)を指定する。
O= : 型=str , 任意(default=)
f=
パラメータで指定した各項目の各バケットの数値範囲を出力するデータを指定する。
bufcount= : 型=str , 任意(default=)
バッファのサイズ数を指定する。
ms= : 型=bool , 任意(default=False)
各項目を順次バケット分割していく時の開始項目を変えることで複数回のバケット分割をトライし、よりよい解を求める。詳細は、以下の「アルゴリズムの概要」を参照のこと。
r= : 型=bool , 任意(default=False)
バケット番号を逆順に出力する。
共通パラメータ¶
i= , o= , bufcount= , assert_diffSize= , assert_nullkey= , assert_nullin= , assert_nullout= , nfn= , nfno= , x= , q= , tmppath= , precision=
利用例¶
importと入力データ(CSV)の準備
1import nysol.mcmd as nm 2 3with open('dat1.csv','w') as f: 4 f.write( 5'''id,x,y 6A,2,7 7B,6,7 8C,5,6 9D,7,5 10E,6,4 11F,1,3 12G,3,3 13H,4,2 14I,7,2 15J,2,1 16''') 17 18with open('dat2.csv','w') as f: 19 f.write( 20'''id,x,y 21A,2,7 22A,6,7 23A,5,6 24B,7,5 25B,6,4 26B,1,3 27C,3,3 28C,4,2 29C,7,2 30C,2,1 31''')
基本例
x、y
項目の件数ができるだけ多次元均等になるように2分割する。
その際、各バケットの数値範囲を rng.csv
という名前のファイルに出力する。
1nm.mmbucket(f="x:xb,y:yb", n="2,2", O="rng.csv", i="dat1.csv", o="rsl1.csv").run() 2### rsl1.csv の内容 3# id,x,y,xb,yb 4# A,2,7,1,2 5# B,6,7,2,2 6# C,5,6,2,2 7# D,7,5,2,2 8# E,6,4,2,1 9# F,1,3,1,1 10# G,3,3,1,1 11# H,4,2,2,1 12# I,7,2,2,1 13# J,2,1,1,1
出力形式
id
項目を単位に件数ができるだけ多次元均等になるように x,y
項目を2分割する。
出力形式はバケット番号とバケット範囲の両方を表示する。
1nm.mmbucket(k="id", f="x:xb,y:yb", n="2,2", F="2", i="dat2.csv", o="rsl2.csv").run() 2### rsl2.csv の内容 3# id%0,x,y,xb,yb 4# A,2,7,1:_3.5,2:6.5_ 5# A,6,7,2:3.5_,2:6.5_ 6# A,5,6,2:3.5_,1:_6.5 7# B,7,5,2:3.5_,2:4.5_ 8# B,6,4,2:3.5_,1:_4.5 9# B,1,3,1:_3.5,1:_4.5 10# C,3,3,1:_3.5,2:1.5_ 11# C,4,2,2:3.5_,2:1.5_ 12# C,7,2,2:3.5_,2:1.5_ 13# C,2,1,1:_3.5,1:_1.5
関連メソッド¶
mbucket 件数均等化バケット分割 : 複数項目指定しても、それぞれの項目で1次元バケット分割を実行する。