Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
僕はDPDKをやっている人ではありません(XDP・netmap入門)
Search
khwarizmi
March 12, 2019
Programming
1
720
僕はDPDKをやっている人ではありません(XDP・netmap入門)
khwarizmi
March 12, 2019
Tweet
Share
More Decks by khwarizmi
See All by khwarizmi
IntelNIC 送受信を学ぶ
khwarizmi
3
920
NICのデバドラ開発
khwarizmi
0
160
ハードウェア乱数を用いた謝辞代表者の決定
khwarizmi
0
71
ネットワーク性能調査ちょっとやってみる
khwarizmi
0
180
klab インターン成果物発表
khwarizmi
0
290
Z4「高速なFW/IDSの実装」
khwarizmi
0
170
HIGHSPEED PACKET IO
khwarizmi
0
95
Other Decks in Programming
See All in Programming
CI改善もDatadogとともに
taumu
0
180
クリーンアーキテクチャから見る依存の向きの大切さ
shimabox
4
890
一休.com のログイン体験を支える技術 〜Web Components x Vue.js 活用事例と最適化について〜
atsumim
0
720
AIプログラミング雑キャッチアップ
yuheinakasaka
8
1.1k
パスキーのすべて ── 導入・UX設計・実装の紹介 / 20250213 パスキー開発者の集い
kuralab
3
860
楽しく向き合う例外対応
okutsu
0
550
Amazon ECS とマイクロサービスから考えるシステム構成
hiyanger
2
580
PHPのバージョンアップ時にも役立ったAST
matsuo_atsushi
0
200
JavaScriptツール群「UnJS」を5分で一気に駆け巡る!
k1tikurisu
9
1.8k
負債になりにくいCSSをデザイナとつくるには?
fsubal
10
2.5k
密集、ドキュメントのコロケーション with AWS Lambda
satoshi256kbyte
1
210
仕様変更に耐えるための"今の"DRY原則を考える
mkmk884
8
2.7k
Featured
See All Featured
個人開発の失敗を避けるイケてる考え方 / tips for indie hackers
panda_program
100
18k
The Myth of the Modular Monolith - Day 2 Keynote - Rails World 2024
eileencodes
21
2.5k
For a Future-Friendly Web
brad_frost
176
9.6k
Building Flexible Design Systems
yeseniaperezcruz
328
38k
Optimising Largest Contentful Paint
csswizardry
34
3.1k
Statistics for Hackers
jakevdp
797
220k
Easily Structure & Communicate Ideas using Wireframe
afnizarnur
193
16k
Docker and Python
trallard
44
3.3k
ピンチをチャンスに:未来をつくるプロダクトロードマップ #pmconf2020
aki_iinuma
114
50k
The Cult of Friendly URLs
andyhume
78
6.2k
Music & Morning Musume
bryan
46
6.4k
How STYLIGHT went responsive
nonsquared
98
5.4k
Transcript
僕はDPDKをやっている人ではありません (XDP・netmap 入門)
自己紹介 - 河原颯太(かわはらそうた) @khwarizmi6514 - 法政大学応用情報工学科 学部4年 金井(ネットワークセキュリティ)研究室所属 - 小学5年から野球を初めて高校3年までやっていた.
- 春日部高校出身です! (これを言うといろんなところで先輩後輩が釣れることに最近 気が付いた) - パソコンとは無縁の生活だったが, 大学入学時, 気が付いたらパソコンをやらなけ ればいけなくなっていた. - 一緒に研究をしてくれる後輩募集中 (一人で研究をしていて寂しい)
最近やってること - NICのデバドラ開発 - NICのハードウェア機能活用による性能比較調査 - Linuxネットワークパフォーマンス調査 - XDPとnetmap *最近やりたいこと*
- FreeBSDで性能調査(ネットワークスタック参照したりしときながら触ったことがな い) - 自作キーボード(家でやったらニッパがざこくてまだ完成してない) - FPGA(購入してLEDチカチカまでしてそのままタンスの奥にいる) - EDM作りたみがある
題名の意図 先輩の影響もあって(研究室内での)DPDKのイメージが割と強い DPDKに強いこだわりがあるわけではなくてレイヤの低いところを手広くやりたいだけな ので, 後輩の印象を操作しておきたかった
高速パケットIOフレームワーク カーネルのパケット IO に関するコストを大きく引き下げることがで きるようなフレームワークやライブラリ
メモリコピー ソフトウェア割り込み, ソケットキュー, ユーザ空間, それぞれへのコピーが発生する. 6
カーネルバイパスなメモリアクセス
netmap カーネルバイパスなメモリアクセスにより高速なパケットIOを実現 しているnetmapを使ってみます.
やってみる netmapAPIから利用できる仮想ポートであるVALEポートを用いて, pkt-genでパケット 転送テストをします
環境 - OS: ubuntu16.04 - kernel: 4.10.0-19-generic - インタフェース(NIC): VALEポート
ビルド・モジュールロード $ sudo apt install linux-headers-`uname -r` $ git clone
https://github.com/luigirizzo/netmap.git $ cd netmap $ make $ insmod netmap.ko
pkt-gen $ cd apps/pkt-gen $ make $ sudo ./pkt-gen -i
vale0:rx -f rx $ ./pkt-gen -i vale0:tx -f tx -R 1
None
XDP - eXpress Data Path - Linuxカーネル内で動作するebpfを用いた技術 - なんかすげえ流行ってるけど思いの外使ったことある人は少なめだった
XDP
XDPのポイント - カーネルの機能利用することができる - 透過的に現在利用しているアプリケーションに利用できる - 動的に使える - 下手するとカーネルパニック -
eBPF verifierによる事前静的検証 - ループを許可しない (単純なループのみ許可する方向で話が進んでいるらしい - プログラムの長さを制限 (tail call で回避可能
やってみる Generic XDP(skbを割り当ててから処理を行う)を用いる - NICのサポートがなくてもXDPが使用できる - パフォーマンスは犠牲になっている
環境 - OS: Fedora 29-1.2 (ubuntuだと動かなかった) - kernel: 4.20.13 (
>= 4.12) - プログラムローダ: iproute2-ss190107
コード 全ドロップ
コンパイル&ロード $ clang -O2 -Wall -target bpf -c xdp_drop.c -o
xdp_drop.o $ sudo ip link set dev enp0s8 xdp obj xdp_drop.o
確認とアンロード $ sudo ip link set dev enp0s8 xdp off
None
None