Go и внешний мир

Transcript

1. Go и внешний мир Алексей Акулович backend dev VK 2018.12.07#2
2. Жизнь кода на Go 1. Написание 2. Тестирование 3. Сборка 4. Деплой 5. Запуск
3. Жизнь кода на Go 1. Написание 2. Тестирование 3. Сборка 4. Деплой 5. Запуск
4. Сборка бинарника $ go build
5. Сборка бинарника $ go build
6. Сборка бинарника $ go build $ ./binary-file
7. Сборка бинарника $ go help build … -x print the commands. …
8. Сборка бинарника $ go build -x … go/pkg/tool/platform/compile -o pkg.a ./main.go … go/pkg/tool/platform/link -o a.out -buildmode=exe pkg.a …
9. Сборка бинарника $ go build -x … go/pkg/tool/platform/compile -o pkg.a ./main.go … go/pkg/tool/platform/link -o a.out -buildmode=exe pkg.a …
10. Сборка бинарника $ go build -buildmode=exe
11. Вызов Go из стороннего кода
12. Вызов Go из стороннего кода $ go help build … -buildmode mode build mode to use. See 'go help buildmode' for more. …
13. Вызов Go из стороннего кода $ go help buildmode … -buildmode=c-shared -buildmode=c-archive …
14. c-shared
15. c-shared // mylib.go: package main import "C" import ( "fmt" ) //export HelloWorld func HelloWorld(i int32, msg string) { fmt.Printf("Hello from go: i:%d msg:%s\n", i, msg) } func main() {}
16. c-shared // mylib.go: package main import "C" import ( "fmt" ) //export HelloWorld func HelloWorld(i int32, msg string) { fmt.Printf("Hello from go: i:%d msg:%s\n", i, msg) } func main() {}
17. c-shared $ go build -o mylib.so -buildmode=c-shared mylib.go $ ls mylib.go mylib.h mylib.so
18. c-shared // libtest.c: #include <stdio.h> #include "mylib.h" int main() { GoInt i = 42; GoString msg = {"C Caller", 9}; // HelloWorld(i int32, msg string) HelloWorld(i, msg); }
19. c-shared // libtest.c: #include <stdio.h> #include "mylib.h" int main() { GoInt i = 42; GoString msg = {"C Caller", 9}; // HelloWorld(i int32, msg string) HelloWorld(i, msg); } // mylib.h: typedef struct { const char *p; ptrdiff_t n; } _GoString_; typedef _GoString_ GoString; // src/reflect/value.go: type StringHeader struct { Data uintptr Len int }
20. c-shared $ gcc -o libtest libtest.c ./mylib.so $ ./libtest Hello from go: i:42 msg:C Caller
21. c-shared // mylib.go: //export HelloWorld2 func HelloWorld2(i int32, msg *C.char) { fmt.Printf("Hello from go: i:%d msg:%s\n", i, C.GoString(msg)) } // libtest.c: int main() { GoInt i = 42; GoString msg = {"C Caller", 9}; HelloWorld(i, msg); HelloWorld2(100500, "C caller#2"); }
22. c-shared
23. c-shared // libtest.py: $ python libtest.py from ctypes import * lib = cdll.LoadLibrary("./mylib.so") class GoString(Structure): _fields_ = [("p", c_char_p), ("n", c_longlong)] lib.HelloWorld.argtypes = [c_int, GoString] msg = GoString("Hello from Python", 17) lib.HelloWorld(42, msg)
24. c-shared // libtest.lua: $ luajit libtest.lua local ffi = require("ffi") ffi.cdef[[ void HelloWorld2(int p0, const char* p1); ]] local mylib = ffi.load("./mylib.so") mylib.HelloWorld2(42, "Hello from lua!")
25. c-archive
26. c-archive $ go build -o mylib.a -buildmode=c-archive mylib.go
27. c-archive $ go build -o mylib.a -buildmode=c-archive mylib.go $ gcc -o libtest -pthread libtest.c mylib.a
28. c-archive $ go build -o mylib.a -buildmode=c-archive mylib.go $ gcc -o libtest -pthread libtest.c mylib.a $ ./libtest Hello from go: i:42 msg:C Caller
29. c-shared & c-archive Плюсы и минусы: • c-archive вкомпиливается, c-shared нет • runtime языка • fork
30. http://jemgunay.co.uk/gopher/
31. Вызов стороннего кода из Go
32. Вызов стороннего кода из Go package main /* int sum(int a, int b) { return a + b; } */ import "C" import ( "fmt" ) func main() { fmt.Println(C.sum(40, 2)) }
33. Вызов стороннего кода из Go package main /* int sum(int a, int b) { return a + b; } */ import "C" import ( "fmt" ) func main() { fmt.Println(C.sum(40, 2)) }
34. Вызов стороннего кода из Go package main /* int sum(int a, int b) { return a + b; } */ import "C" import ( "fmt" ) func main() { fmt.Println(C.sum(40, 2)) }
35. Вызов стороннего кода из Go /* ... */ import "C" import ( "fmt" )
36. Вызов стороннего кода из Go /* ... */ import "C" import ( "fmt" ) /* ... */ import ( "C" "fmt" )
37. Вызов стороннего кода из Go /* ... */ import "C" import ( "fmt" ) /* ... */ import ( "C" "fmt" ) /* ... */ import "C" import ( "fmt" )
38. Вызов стороннего кода из Go package main /* #include <stdio.h> void hello(char* s) { printf("From C: %s\n", s); } */ import "C" func main() { C.hello("Hello, NN!") }
39. Вызов стороннего кода из Go package main /* #include <stdio.h> void hello(char* s) { printf("From C: %s\n", s); } */ import "C" func main() { C.hello("Hello, NN!") }
40. Вызов стороннего кода из Go $ go run main.go # command-line-arguments ./main.go:17:29: cannot use "Hello, NN!" (type string) as type *_Ctype_char in argument to _Cfunc_hello
41. Вызов стороннего кода из Go $ go run main.go # command-line-arguments ./main.go:17:29: cannot use "Hello, NN!" (type string) as type *_Ctype_char in argument to _Cfunc_hello // src/reflect/value.go: type StringHeader struct { Data uintptr Len int }
42. Вызов стороннего кода из Go /* #include <stdio.h> #include <stdlib.h> void hello(char* s) { printf("From C: %s\n", s); } */ import "C" import ( "unsafe" ) func main() { cs := C.CString("Hello, NN!") defer C.free(unsafe.Pointer(cs)) C.hello(cs) }
43. Вызов стороннего кода из Go /* typedef struct { int32_t a; int32_t b; int32_t r; } Foo; void sum(Foo *req) { req->r = req->a + req->b; } */ import "C" import "fmt" func main() { req := C.Foo{ a: 12, b: 30, } C.sum(&req) fmt.Println(req.r) }
44. Вызов стороннего кода из Go /* #pragma pack(push,1) typedef struct { int8_t a; int32_t b; } Bar; #pragma pack(pop) typedef struct { int8_t a; int32_t b; } Foo; void test() { printf("Bar size: %lu\n", sizeof(Bar)); printf("Foo size: %lu\n", sizeof(Foo)); } */ import "C" import ( "fmt" "unsafe" ) func main() { C.test() fmt.Printf("C.Foo size: %d\n", unsafe.Sizeof(C.Foo{}), ) }
45. Вызов стороннего кода из Go $ go run main.go Bar size: 5 Foo size: 8 C.Foo size: 8
46. Вызов стороннего кода из Go $ go run main.go Bar size: 5 Foo size: 8 C.Foo size: 8 http://golang-sizeof.tips
47. Вызов стороннего кода из Go package main /* #cgo LDFLAGS: -lm #include <math.h> */ import "C" import "fmt" func main() { fmt.Println(C.pow(2, 5)) }
48. Go scheduler и cgo func foo() {} go func() { foo() }()
49. Go scheduler и cgo func foo() {} go func() { foo() syscall.GetPid() }()
50. Go scheduler и cgo func foo() {} go func() { foo() syscall.GetPid() // https://morsmachine.dk/go-scheduler }()
51. Go scheduler и cgo func foo() {} go func() { foo() syscall.GetPid() // https://morsmachine.dk/go-scheduler C.bar() }()
52. Go scheduler и cgo func foo() {} go func() { foo() syscall.GetPid() // https://morsmachine.dk/go-scheduler C.bar() // https://github.com/golang/go/issues/8636#issuecomment-66098275 }()
53. Выводы • Удобное встраивание в обе стороны
54. Выводы • Удобное встраивание в обе стороны • Есть проблемы из-за разных миров
55. Выводы • Удобное встраивание в обе стороны • Есть проблемы из-за разных миров • Без необходимости так лучше не делать
56. Полезные ссылки: Call Go function from C function https://dev.to/mattn/call-go-function-from-c-function-1n3 cgo https://github.com/golang/go/wiki/cgo RustGo: вызов Rust из Go с почти нулевым оверхедом https://habr.com/post/337348/ Пишем модульную Go программу с плагинами https://4gophers.ru/articles/plugins/
58. Вопросы? ater.me/conf/go_nn.pdf Презентация vk.com/ac @atercattus Вопросы