MarketStore_LT.pdf

Alpacaが開発する時系列データ特化型データベースMarket Storeのチュートリアル

Transcript

1. 5分で完全理解！ MarketStore Daito AKIMURA (@akkie30)
2. 自己紹介 - Daito Akimura • 本職：　メルカリ の Backend Engineer • 副業：　先月からAlpaca Japanにて MarketStore開発 • 仕事では Java, Python, PHP, Go を使っています • Twitter：　@akkie30 • GitHub：　dakimura
3. 次回は「MarketStoreなにもわからない」になります
4. MarketStoreとは • 金融取引に関わる時系列データに特化した超高速データベースサーバ ◦ Alpacaがゼロから設計開発 ◦ 実装はGolang • QueryとWriteが可能 • 公式クライアントはPythonで書かれた pymarketstore
5. MarketStoreの特徴 • QueryはPythonのデータ解析フレームワークPandasのDataFrame型を返却する • 3rd partyの(go) pluginを開発できる ◦ バックグラウンド処理 / トリガ処理 • 既にAlpacaで本番運用実績がある
6. なにはともあれ使ってみよう
7. 起動 $ docker run -i -p 5993:5993 alpacamarkets/marketstore:latest
8. pymarketstoreインストール $ pip install pymarketstore
9. Data Write & Query >>> import pymarketstore, numpy, pandas >>> data = numpy.array([(1544400000, 10.0)], dtype=[('Epoch', 'i8'), ('Ask', 'f4')]) >>> cli = pymarketstore.Client() >>> data = numpy.array([(1544400000, 10.0)], dtype=[('Epoch', 'i8'), ('Ask', 'f4')]) >>> cli.write(data, 'TEST/1Min/Tick') # write data >>> cli.query(pymarketstore.Params('TEST', '1Min', 'Tick')).first().df() # read data Epoch Ask 2018-12-10 00:00:00+00:00 10.0
10. 一緒に開発しましょう！ https://github.com/alpacahq/marketstore