Ruby - Hashe pod maską

18.11.2015 at Łódź Ruby user Group

Transcript

1. Hashe pod maską Michał Gutowski
2. Oparte na
3. Jaki jest hash każdy widzi
4. Jak trzymane są dane w hashu? 0 1 7 8 4 6 5 3 2 9 10 1 => 'el1' '2' => 'el2' :trzy => 1 struct st_table { /* troche niewaznych rzeczy */ int num_bins; // 11 int num_entries; // 3 struct st_table_entry **bins; };
5. Odczytywanie danych z hasha 0 1 7 8 4 6 5 3 2 9 10 1 => 'el1' '2' => 'el2' :trzy => 1 hash[1] funkcja_hashujaca(1) % 11 => 1 hash[:trzy] funkcja_hashujaca(:trzy) % 11 => ?
6. Dodawanie danych do hasha 0 1 7 8 4 6 5 3 2 9 10 1 => 'el1' '2' => 'el2' :trzy => 1 :cztery => 4 hash[:cztery] = 4 funkcja_hashujaca(4) % 11 => 8
7. Funkcja hashująca krótko irb #1 1.hash => 3709253595230655525 '2'.hash => 1262910778843821320 :trzy.hash => -1450000291807366770 irb #2 1.hash => -3056501098034584631 '2'.hash => -3487312348025589315 :trzy.hash => -1489272169862565918
8. Kolizje :nowy => 6 ? funkcja_hashujaca(1) % 11 => 1 funkcja_hashujaca(:nowy) % 11 => 1 0 1 7 8 4 6 5 3 2 9 10 1 => 'el1' '2' => 'el2' :trzy => 1 :cztery => 4
9. 0 1 7 8 4 6 5 3 2 9 10 1 => 'el1' '2' => 'el2' :trzy => 1 :cztery => 4 :nowy => 6 hash[:nowy] funkcja_hashujaca(:nowy) % 11 => 1 :nowy.eql? 1 => false :nowy.eql? :nowy => true
10. Pat Shaughnessy - Ruby Under a Microscope: An Illustrated Guide to Ruby Internals Co najmniej 3 porównania przy każdym odwołaniu Tylko 44 elementy!
11. Co robić jak żyć?
12. Rehash • density = num_entries / num_bins • jeżeli większe bądź równe 5 (ST_DEFAULT_MAX_DENSITY) • zwiększ liczbę binów do 19 (magiczny numer!) • dla każdego elementu odpal • funkcja_hashujaca(klucz) % 19
13. Rehash Pat Shaughnessy - Ruby Under a Microscope: An Illustrated Guide to Ruby Internals
14. Rehash i czas dodawania elementów
15. Krótkie podsumowanie jeszcze przed końcem • Struktura klucz/wartość • Dane są trzymane w „koszyczkach” • wrzucane są do odpowiednich koszyczków zależnie od funkcj hashującej • Kiedy robi się ich za dużo następuje rehash
16. Rehash i magiczne numerki ruby < 2.2 liczby pierwsze - 2^n+a Tabela Peter Moore Maksymalna liczba binów według tej tablicy 1 073 741 909
17. Rehash i magiczne numerki ruby 2.2
18. Funkcja hashująca trochę dłużej
19. Funkcja hashująca tl;dr • Oparta na algorytmie MurmurHash • funkcja bazuje na przesunięciach bitowych • przy każdym odpaleniu ruby jest seedowana innymi danymi • funkcja bierze pod uwagę miejsce w pamięci danego obiektu • używa dwóch magicznych liczb 24 i 0x5bd1e995
20. They're not really 'magic', they just happen to work well