Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
freee-shigure-matsuri-20150321
Search
Keiji Matsuzaki
March 22, 2015
Technology
8
2.1k
freee-shigure-matsuri-20150321
時雨祭 2015.03 (
http://shigure.connpass.com/event/11780/
) で発表した資料です。
Keiji Matsuzaki
March 22, 2015
Tweet
Share
More Decks by Keiji Matsuzaki
See All by Keiji Matsuzaki
note engineer meetup #3 インフラの現状 / note engineer meetup #3 infra
futoase
4
1.1k
ハマったところ 表参道.rb #44 / into a problem
futoase
0
1k
note meetup #2 Electronを利用した10面ディスプレイの操作 / Controll of gaienmae display
futoase
0
700
mastodon
futoase
0
110
susumekata
futoase
1
710
freee-wacul-web-app-lt-one
futoase
0
1.8k
Engineer All Hands #5 (freee) 「インフラ」
futoase
0
470
soracom-go
futoase
0
340
AWS Summit Tokyo 2015 freee
futoase
19
20k
Other Decks in Technology
See All in Technology
GoogleのAIエージェント論 Authors: Julia Wiesinger, Patrick Marlow and Vladimir Vuskovic
customercloud
PRO
0
160
ABWGのRe:Cap!
hm5ug
1
120
Docker Desktop で Docker を始めよう
zembutsu
PRO
0
180
comilioとCloudflare、そして未来へと向けて
oliver_diary
6
450
[IBM TechXchange Dojo]Watson Discoveryとwatsonx.aiでRAGを実現!座学①
siyuanzh09
0
110
Oracle Base Database Service:サービス概要のご紹介
oracle4engineer
PRO
1
16k
Kotlin Multiplatformのポテンシャル
recruitengineers
PRO
2
150
AWSの生成AIサービス Amazon Bedrock入門!(2025年1月版)
minorun365
PRO
7
470
デジタルアイデンティティ技術 認可・ID連携・認証 応用 / 20250114-OIDF-J-EduWG-TechSWG
oidfj
2
690
2024AWSで個人的にアツかったアップデート
nagisa53
1
110
Git scrapingで始める継続的なデータ追跡 / Git Scraping
ohbarye
5
500
今から、 今だからこそ始める Terraform で Azure 管理 / Managing Azure with Terraform: The Perfect Time to Start
nnstt1
0
240
Featured
See All Featured
Sharpening the Axe: The Primacy of Toolmaking
bcantrill
38
1.9k
The Psychology of Web Performance [Beyond Tellerrand 2023]
tammyeverts
45
2.3k
Exploring the Power of Turbo Streams & Action Cable | RailsConf2023
kevinliebholz
28
4.5k
Building Applications with DynamoDB
mza
93
6.2k
Docker and Python
trallard
43
3.2k
Building Flexible Design Systems
yeseniaperezcruz
328
38k
Music & Morning Musume
bryan
46
6.3k
Let's Do A Bunch of Simple Stuff to Make Websites Faster
chriscoyier
507
140k
Large-scale JavaScript Application Architecture
addyosmani
510
110k
How to Ace a Technical Interview
jacobian
276
23k
Keith and Marios Guide to Fast Websites
keithpitt
410
22k
XXLCSS - How to scale CSS and keep your sanity
sugarenia
248
1.3M
Transcript
freeeを支える技術 時雨祭 (2015.3)
発表の機会をいただき、 ありがとうございますm(_ _)m
Github、3/21 21:00から15分ほどメンテナンス https://github.com/blog/1975-scheduled-maintenance-saturday-3-21-2015-12-00-utc
None
自己紹介
松崎 啓治(まつざき けいじ) 33歳 freee 入社(6社目...?) 2014年6月1日〜 やってること: インフラ担当 Twitter:
@xga Github: @futoase
確定申告という山場を越えた...
None
freee 株式会社
eは3つ
何をやってる会社か?
None
http://www.freee.co.jp/special/zeirishi/
クラウド会計ソフトfreee(フリー) https://secure.freee.co.jp/
None
口座情報から自動で入出金データを管理 仕訳帳の出力 確定申告書出力 レシートアップロード後OCR対応 etc...
クラウド給与計算ソフト freee(フリー) https://p.secure.freee.co.jp/
None
年末調整入力の対応 源泉徴収票の出力 勤務時間の管理 残業時間の管理(時給) etc...
今のところこの2つ
設計
Ruby on Rails Public API Private API 会計処理 給与計算 認証処理
Web front Backbone.js Vue.js Application Layer CSS
Application Layer Go サムネイル変換 OCR
Infrastructure Layer Amazon Web Service RDS ElastiCache EC2 SQS S3
SES Route 53 IAM RedShift
Mobile(会計のみ) iOS Android Reactive Cocoa Rx Java
開発体制
会計 給与 インフラ Engineer Engineer Engineer Analytics CTO アプリ基盤 Engineer
Adjuster UX Engineer
だいたいエンジニア30名ぐらい。 インターンまぜると35名ぐらいになる かな。
デプロイ体制
develop staging master
develop staging master 開発用branch staging向け release向け
develop staging master futoase Pull Request
develop staging master futoase Pull Request
develop staging master futoase git check out pr/10000 Pull Request
develop staging master futoase Pull Request test (Parallel test) Pull
Request
develop staging master futoase OK test Pull Request
PRを出すとJenkinsが Parallel testを実行してくれる
develop staging master futoase Pull Request
develop staging master futoase hoge氏 Review Pull Request
develop staging master futoase hoge氏 LGTM Pull Request
develop staging master futoase Merge hoge氏 LGTM
ReviewerがPRのReviewを行う。 RevieweeがMergeする
develop staging master futoase
develop staging master futoase @deploy pre-deploy repository develop to staging
develop staging master futoase @deploy pre-deploy repository develop to staging
Pull Request
develop staging master job: staging-deploy
job: staging-deploy web api admin cap deploy staging
botにHipChatからコマンドを投げ、 jenkinsにcapistrano taskを実行させる
監視体制
None
None
zabbix server web api auth
zabbix server web api auth zabbix get -> proc.cpu …
proc.mem… system.cpu… proc.num...
zabbix server web api auth
zabbix server web api auth zabbix get -> proc.cpu …
proc.mem… system.cpu… proc.num...
zabbix server web api auth
zabbix server web api auth zabbix get -> proc.cpu …
proc.mem… system.cpu… proc.num...
Zabbix serverのItemに 登録しているkeyを元に Zabbix agentが 各サーバのメトリクスを取得、監視
zabbix server web api auth
zabbix server web api auth CPU: 80% (user time) Mem:
available 10% Disk: available 10%
zabbix server web api auth CPU: 80% (user time) Mem:
available 10% Disk: available 10%
zabbix server CPU: 80% (user time) Mem: available 10% Disk:
available 10% Trigger CPU >= 80% (user time) web api auth
zabbix server HipChat ML チャットに通知 MLに通知
予めZabbix Itemに対してTrigger条件を指定し、 閾値を超えたら HipChat と MLに通知を送るようにしている 単純なActionで済むなら、プロセスを自動起動して なかったことにするとか。
jenkins web api auth bundle ex rake \ spec role=api
stage=production
jenkins web api auth server spec...
jenkins web api auth OK
EC2 Tagからインスタンス情報を取 り出し(Private IPアドレス)、 serverspecをインスタンスに対して 掛け、テストする。
パフォーマンス確認体制
MONyog Bugsnag Newrelic
MONyog Bugsnag Newrelic SQL Tuning Application Bug Performance
None
None
None
監視に割り当てる人力が少なめなため、 価値があるソフトウェアを購入し運用することで 穴を埋める。
ロギング体制
web api auth fluentd
web api auth fluentd td-agent td-agent td-agent
web api auth fluentd td-agent td-agent td-agent data
各サーバからtd-agentにより fluentdサーバ(1台)にデータを送信。
fluentd S3 ElasticSerch fluent-plugin-s3 fluent-plugin-elasticsearch
S3 ElasticSerch Kibana PostgreSQL JSONB + GIN index
kibanaは直近1ヶ月分のログを調査するときに利用する。 PostgreSQLは サービスインから今までのログを調査するのに利用する。 PostgreSQLのJSONB型のカラムにデータを突っ込んでGIN index貼ると2000万件ほどのレコードだと SELECT文 2〜3secで返ってきて便利
KPI体制
RedShift S3 Zendesk サポート サポートデータ RDS BI(内製) R言語 RPostgreSQL R
Studio
RedShiftを中心としてKPI体制を整えている。 Google Big Queryや Treasure Dataなどは今のところ検討せず。 独自BIの管理が課題。
サポート体制
文化
None
毎月最後の金曜日にTGIF 毎週火曜と木曜日に全体ミーティング 二週間に一回程度、社員全員で飯を食う リリースが終わったら適当に 立ち食い寿司屋に行く あとは定期的に何かしら飲みがある
Qiita::Teamにあれこれ書いたり。 何かあったらメールに書くという文化があるので何 があったのかがわからないということが少ない(今の ところ)
バグのことをハッピーと呼ぶ。 ハッピー担当というものが平時は毎日2名、 エンジニアがアサインされ、 負債を返していく。
asanaにサポートから バグを受け取ったら起票、 修正したらコメントの繰り返し。 タスク管理はほぼasana。 チームに寄っては wunderlistやTrello使ったり。
サーバプロビジョニングは 入社時にchefだったので駆逐していって、 後もうちょっと(data bagの管理)で終わる。 今はansibleに移行中。
採用 http://www.freee.co.jp/recruit_eng
エンジニア募集中なので freee株式会社が気になる人は 僕のほうまで話いただけるか、 Wantedlyなどの手段を利用オ ナシャス♥
あざっした