Upgrade to Pro — share decks privately, control downloads, hide ads and more …

GitLFS移行のお話 / migrate to git lfs

Avatar for ron / Ryuichi Saito ron / Ryuichi Saito
February 27, 2017
Technology
1
18k

GitLFS移行のお話 / migrate to git lfs

Avatar for ron / Ryuichi Saito

ron / Ryuichi Saito

February 27, 2017
Tweet

Other Decks in Technology

See All in Technology
アクセスピークを制するオートスケール再設計: 障害を乗り越えKEDAで実現したリソース管理の最適化
Avatar for M-Yamashita myamashii
1
120
Delta airlines Customer®️ USA Contact Numbers: Complete 2025 Support Guide
Avatar for michal deltahelp
0
920
SREのためのeBPF活用ステップアップガイド
Avatar for Sohei Iwahori egmc
1
160
[SRE NEXT] ARR150億円_エンジニア140名_27チーム_17プロダクトから始めるSLO.pdf
Avatar for sato-s satos
2
530
React開発にStorybookとCopilotを導入して、爆速でUIを編集・確認する方法
Avatar for yut yu_kod
1
300
DatabricksにOLTPデータベース『Lakebase』がやってきた！
Avatar for Takeru Ino inoutk
0
140
TableauLangchainとは何か？
Avatar for yuta cielo1985
1
120
SRE不在の開発チームが障害対応と 向き合った100日間 / 100 days dealing with issues without SREs
Avatar for katsukamaru shin1988
1
400
オフィスビルを監視しよう：フィジカル×デジタルにまたがるSLI/SLO設計と運用の難しさ / Monitoring Office Buildings: The Challenge of Physical-Digital SLI/SLO Design & Operation
Avatar for 株式会社ビットキー / Bitkey Inc. bitkey
1
110
対話型音声AIアプリケーションの信頼性向上の取り組み
Avatar for 株式会社IVRy（社員登壇資料） ivry_presentationmaterials
1
380
How Do I Contact HP Printer Support? [Full 2025 Guide for U.S. Businesses]
Avatar for jackkkk harrry1211
0
130
ビジネス職が分析も担う事業部制組織でのデータ活用の仕組みづくり / Enabling Data Analytics in Business-Led Divisional Organizations
Avatar for Hiroka Zaitsu zaimy
1
210

Featured

See All Featured
ReactJS: Keep Simple. Everything can be a component!
Avatar for Pedro Nauck pedronauck
667
120k
Why Our Code Smells
Avatar for Brandon Keepers bkeepers
PRO
336
57k
The Straight Up "How To Draw Better" Workshop
Avatar for Dennis Kardys denniskardys
235
140k
Art, The Web, and Tiny UX
Avatar for Lynn Fisher lynnandtonic
299
21k
Bash Introduction
Avatar for André Augusto Costa Santos 62gerente
613
210k
Measuring & Analyzing Core Web Vitals
Avatar for Philip Tellis bluesmoon
7
510
Responsive Adventures: Dirty Tricks From The Dark Corners of Front-End
Avatar for Vitaly Friedman smashingmag
251
21k
How to Create Impact in a Changing Tech Landscape [PerfNow 2023]
Avatar for Tammy Everts tammyeverts
53
2.9k
Mobile First: as difficult as doing things right
Avatar for Swwweet swwweet
223
9.7k
Git: the NoSQL Database
Avatar for Brandon Keepers bkeepers
PRO
430
65k
Put a Button on it: Removing Barriers to Going Fast.
Avatar for kastner kastner
60
3.9k
The Success of Rails: Ensuring Growth for the Next 100 Years
Avatar for Eileen M. Uchitelle eileencodes
45
7.5k

Transcript

  1. None

  2. プログラマ出身インフラエンジニア

  3. None
  4. None
  5. None

  6. 1GB/1repo grani/~~~~ 81GB たくさん 4日以内 停止

  7. 死刑宣告 ※使い方が悪い

  8. None

  9. Github Enterprise 他ホスティングサービス Git LFS Git Annex

  10. None

  11. Git L F S

  12. None

  13. 引用：http://qiita.com/shibukk/items/e9af45a6009646c7e14f

  14. None

  15. 引用：http://qiita.com/shibukk/items/e9af45a6009646c7e14f

  16. None

  17. ← .gitconfigにfilterを設定 ← .gitattributesに追記 ← clean filterがポインタファイル化 ← trackしたファイルはLFSにpushされる

  18. None

  19. 1. リポジトリのLFS化 2. 過去履歴の改変（サイズ削減）

  20. git-lfs-migrate

  21. 手動でlfs track bfg-repo-cleaner

  22. None

  23. git-lfs-migrateが大きいサイズのリポジトリで使 えない リポジトリが大きすぎて複製できない

  24. git addが笑えないくらい遅い addに約11時間

  25. .git/refs/pull/に紐づくobjectが消せない（サイズが 減らない）

  26. 歴史改変後にgit gcするとエラーになる 歴史の改変に失敗してしまった リポジトリのコピーで作業できれば。。

  27. None

  28. 非エンジニアが使い方が分からなくて戸惑う ポインタファイルがlfsサーバーに上がっちゃう 時がある

  29. clone/pull/checkout etcが遅い git lfs コマンドを使いましょう

  30. None

  31. Pros Cons

  32. 現状だと色々辛みがあるが、選択肢としては悪 くなかった気はしている

  33. None

  34. コアシステムの再設計＆Legacy API廃止 Scanner / Transfer Queue clean filterの動作を非同期にして高速化されたものと、転送 方法の改善？(よくわかってない) Filter

    Process 1つのfilterで複数ファイルを扱えるようにすることでforkの コストが無くなる
  35. None