Upgrade to Pro — share decks privately, control downloads, hide ads and more …

GitLFS移行のお話 / migrate to git lfs

Avatar for ron / Ryuichi Saito ron / Ryuichi Saito
February 27, 2017
Technology
18k
1

GitLFS移行のお話 / migrate to git lfs

Avatar for ron / Ryuichi Saito

ron / Ryuichi Saito

February 27, 2017

Other Decks in Technology

See All in Technology
2026年度新卒技術研修 サイバーエージェントのデータベース 活用事例とパフォーマンス調査入門
Avatar for CyberAgent cyberagentdevelopers
PRO
3
2.3k
Databricks Lakebaseを用いたAIエージェント連携
Avatar for Daiki Akimoto NTTD daiki_akimoto_nttd
0
170
システムは「動く」だけでは 足りない - 非機能要件・分散システム・トレードオフの基礎
Avatar for nwiizo nwiizo
2
770
サイボウズ 開発本部採用ピッチ / Cybozu Engineer Recruit
Avatar for Cybozu cybozuinsideout
PRO
10
77k
推し活エージェント
Avatar for ゆんたん yuntan_t
1
860
マルチモーダル非構造データとの闘い
Avatar for shibuiwilliam shibuiwilliam
1
190
AgentCore RuntimeからS3 Filesをマウントしてみる
Avatar for Har1101 har1101
2
350
試されDATA SAPPORO [LT]Claude Codeで「ゆっくりデータ分析」
Avatar for Satoru Ishikawa ishikawa_satoru
0
280
Data Intelligence Engineering Unit　部門と各ポジション紹介
Avatar for SansanTech sansantech
PRO
0
130
Webアクセシビリティは“もしも”に備える設計
Avatar for tomokusaba tomokusaba
0
170
パワポ作るマンをMCP Apps化してみた
Avatar for iwamot iwamot
PRO
0
310
Cortex Codeでデータの仕事を全部Agenticにやりきろう！
Avatar for harry gappy50
0
320

Featured

See All Featured
B2B Lead Gen: Tactics, Traps & Triumph
Avatar for Sophie Logan marketingsoph
0
99
[RailsConf 2023] Rails as a piece of cake
Avatar for Vladimir Dementyev palkan
59
6.4k
Making Projects Easy
Avatar for Brett Harned brettharned
120
6.6k
The Director’s Chair: Orchestrating AI for Truly Effective Learning
Avatar for Mike Taylor tmiket
1
140
ReactJS: Keep Simple. Everything can be a component!
Avatar for Pedro Nauck pedronauck
666
130k
What's in a price? How to price your products and services
Avatar for Michael Herold michaelherold
247
13k
Embracing the Ebb and Flow
Avatar for Simon Collison colly
88
5k
The untapped power of vector embeddings
Avatar for Frank van Dijk frankvandijk
2
1.7k
End of SEO as We Know It (SMX Advanced Version)
Avatar for Michael King ipullrank
3
4.1k
The World Runs on Bad Software
Avatar for Brandon Keepers bkeepers
PRO
72
12k
Building Flexible Design Systems
Avatar for Yesenia Perez-Cruz yeseniaperezcruz
330
40k
Mobile First: as difficult as doing things right
Avatar for Swwweet swwweet
225
10k

Transcript

  1. None

  2. プログラマ出身インフラエンジニア

  3. None
  4. None
  5. None

  6. 1GB/1repo grani/~~~~ 81GB たくさん 4日以内 停止

  7. 死刑宣告 ※使い方が悪い

  8. None

  9. Github Enterprise 他ホスティングサービス Git LFS Git Annex

  10. None

  11. Git L F S

  12. None

  13. 引用：http://qiita.com/shibukk/items/e9af45a6009646c7e14f

  14. None

  15. 引用：http://qiita.com/shibukk/items/e9af45a6009646c7e14f

  16. None

  17. ← .gitconfigにfilterを設定 ← .gitattributesに追記 ← clean filterがポインタファイル化 ← trackしたファイルはLFSにpushされる

  18. None

  19. 1. リポジトリのLFS化 2. 過去履歴の改変（サイズ削減）

  20. git-lfs-migrate

  21. 手動でlfs track bfg-repo-cleaner

  22. None

  23. git-lfs-migrateが大きいサイズのリポジトリで使 えない リポジトリが大きすぎて複製できない

  24. git addが笑えないくらい遅い addに約11時間

  25. .git/refs/pull/に紐づくobjectが消せない（サイズが 減らない）

  26. 歴史改変後にgit gcするとエラーになる 歴史の改変に失敗してしまった リポジトリのコピーで作業できれば。。

  27. None

  28. 非エンジニアが使い方が分からなくて戸惑う ポインタファイルがlfsサーバーに上がっちゃう 時がある

  29. clone/pull/checkout etcが遅い git lfs コマンドを使いましょう

  30. None

  31. Pros Cons

  32. 現状だと色々辛みがあるが、選択肢としては悪 くなかった気はしている

  33. None

  34. コアシステムの再設計＆Legacy API廃止 Scanner / Transfer Queue clean filterの動作を非同期にして高速化されたものと、転送 方法の改善？(よくわかってない) Filter

    Process 1つのfilterで複数ファイルを扱えるようにすることでforkの コストが無くなる
  35. None