python samples

[PR] この広告は3ヶ月以上更新がないため表示されています。
ホームページを更新後24時間以内に表示されなくなります。

python

numpy and pandas

R vs Stata

ディレクトリ操作

トップへ

ディレクトリの中身一覧
```
os.listdir("Desktop") 
```

ファイルやディレクトリの存在確認

os.path.exists("Desktop/folder") 
os.path.exists("Desktop/file.txt")

パスの結合

os.path.join("Desktop", "folder/file.pdf")

パスから拡張子を分割（返り値は長さ2のリスト）
```
os.path.splitext("Desktop/folder/subfolder/file.txt")
```

パスからファイル名だけを抜き出し

os.path.basename("Desktop/folder/subfolder/file.txt")

リスト・辞書・集合

トップへ

リストの繰り返し
```
[0] * 10
['a', 'b', 'c'] * 3
```
リスト内で、特定の値に等しい要素番号の最小値
```
l = ['A', 'B', 'B', 'C']
l.index('B')
```
固定数ごとに抜き出す（サブスクリプティング）
```
x = ["A", "B", "C", "D", "E", "F"]
x[1::3]
x[0::2]
```

辞書（dictionary）のkeyの一覧

d = { "name":"tarou" , "address":"tokyo", "age":30, "hobby":["igo", "chess", "shogi"] }
d.keys()

辞書を拡張する

d = { "name":"tarou" , "address":"tokyo" }
d.update( {"age":30, "hobby":["igo", "chess", "shogi"]} )

集合演算

set(range(5)) & set(range(3))
set(['a', 'b']) | set(['a', 'c', 'd'])
set(range(4)) - set([2])

リスト内の重複を取り除く: 一度集合にしてからリストに戻せばいい。ただし順番は狂う。
```
x = ['a', 'b', 'c', 'b', 'c']
list(set(x))
```

文字列

トップへ

大文字・小文字
```
'aBc'.upper()
'XYz'.lower()
```

文字列の頭 and/or お尻のスペースを消す

'  abc def g '.strip()
'  abc def g '.lstrip()
'  abc def g '.rstrip()

文字↔ユニコード
```
unichr(100)
ord("C")
```
文字列のリストを結合
```
"-".join(["take", "it", "easy"])
```
文字列を分解してリストに
```
"take-it-easy".split("-")
```
文字列が一定の長さ以上になるまでゼロで埋める
```
"12".zfill(5)
```

数学

トップへ

累乗
```
pow(3, 4)
3 ** 4
```
剰余
```
18 % 7
```

乱数

シードをセット
```
random.seed(2)
```

色々な乱数発生

random.random()  # [0,1)一様乱数
random.uniform(2, 5)  # 一様乱数
random.randint(5, 10)  # 整数一様分布

リスト内の頻度分布（FreqDistインスタンスは辞書に変換可能）
```
x = ["a", "b", "b", "c"]
d = nltk.FreqDist(x)
dict(d)
```

全ての組み合わせを返す

import itertools
a = itertools.combinations(range(1,6),3)
b = list(a)
print b
print len(b)

全ての置換を返す

import itertools
a = itertools.permutations(range(1,6),3)
b = list(a)
print b
print len(b)

科学計算（NumPy, SciPy）

トップへ

時間

トップへ

しばらく止める（単位は秒）
```
time.sleep(5)
```
現在の時間。そのまま文字列として使おうとするとエラーが起こることがある。strtime関数で文字列に整形できる。
```
tm = datetime.datetime.today()
tm.strftime("%Y-%m-%d_%H-%M-%S") 
```

Webアクセス

トップへ

URLの結合

urlparse.urljoin("http://jiy.blog.shinobi.jp/", "Entry/274/")

web pageのソースを取得

urllib2.urlopen("http://jiy.blog.shinobi.jp/Entry/274/").read()

ファイルをダウンロード

urllib.urlretrieve("http://bfile.shinobi.jp/admin/img/blogheader_logo.png", "file.png")

Web scraping

トップへ

BeautifulSoupの使い方

オブジェクト作成

src = urllib2.urlopen("http://jiy.blog.shinobi.jp/").read()
soup = BeautifulSoup.BeautifulSoup(src)

タグとそのオプションを指定して検索

divs = soup("div", {"class":"EntryTitle"})
divs[0]

タグのオプションの値を検索
```
imgs = soup("img")
imgs[2].get("src")
```

HTMLタグを除去
```
re.sub("<[^<>]*>", "", src)
```

CSV

トップへ

リストをCSVに保存。csv.writerを利用。

x = [ ["x", "y", "z"], [10, 5, 3], [1, "XYZ", 3], ["5", 1, "ABC"] ]
with open('test.csv', 'wb') as f:
    ff = csv.writer(f)
    
    for row in x:
        ff.writerow(row)

辞書をCSVに保存。csv.DictWriterを利用。データは辞書のリスト。

data = [ {"name":"ichiro", "age":20} , {"name":"tarou", "age":15} ,{"name":"takuro", "age":30} ]
head = ("name", "age")
with open("test.csv", "wb") as f:
    ff = csv.DictWriter(f, head)
    
    for row in data:
        ff.writerow(row)

DictWriter使用時に、ヘッダー行を入れるためのテクニック

data = [ {"name":"ichiro", "age":20} , {"name":"tarou", "age":15} ,{"name":"takuro", "age":30} ]
head = ("name", "age")
with open("test.csv", "wb") as f:
    ff = csv.DictWriter(f, head)
    
    # ここ
    row = dict( (n, n) for n in head )
    ff.writerow(row)
 
    for row in data:
        ff.writerow(row)

画像

トップへ

PyPNGの使い方
- PNGファイル読み込み
```
x = png.Reader("file.png").read()
```
- RGB情報
```
list(x[2])
```

その他

トップへ

シェルコマンドを使う
```
os.system("ls -a")
```
別のファイルを回す。特にインタープリタで使うと便利
```
excecfile("file.py")
```
一時的にPYTHONPATHを変更する
```
sys.path.append("/my/favorite/path")
```

目次

ディレクトリ操作

リスト・辞書・集合

文字列

数学

科学計算（NumPy, SciPy）

時間

Webアクセス

Web scraping

CSV

画像

その他