Upgrade to Pro — share decks privately, control downloads, hide ads and more …

Streamingdatenstrukturen zum Analysieren von Nu...

Torsten Bøgh Köster
May 20, 2016
Technology
0
43

Streamingdatenstrukturen zum Analysieren von Nutzeraktionen in Echtzeit (Otto Group BI Streaming Round Table)

A newer and more recent version of the talk held at WJAX 2015.

Torsten Bøgh Köster

May 20, 2016
Tweet

More Decks by Torsten Bøgh Köster

See All by Torsten Bøgh Köster
🔪 How we cut our AWS costs in half
tboeghk
0
170
Shared Nothing Logging Infrastructure
tboeghk
0
100
Beyond Cloud: A road trip into AWS and back to bare metal
tboeghk
1
68
Shared Nothing Logging Infrastructure
tboeghk
0
1.2k
Kubernetes the ❤️ way
tboeghk
0
960
Beyond Cloud: A road trip into AWS and back to bare metal
tboeghk
0
85
Open-Source-Logging und -Monitoring (W-JAX 2017)
tboeghk
0
91
Beyond Cloud (W-JAX 2017)
tboeghk
0
130
Open Source Logging & Monitoring (code.talks 2017)
tboeghk
0
95

Other Decks in Technology

See All in Technology
0→1事業こそPMは営業すべし / pmconf #落選お披露目 / PM should do sales in zero to one
roki_n_
PRO
1
1.5k
Formal Development of Operating Systems in Rust
riru
1
420
When Windows Meets Kubernetes…
pichuang
0
310
comilioとCloudflare、そして未来へと向けて
oliver_diary
6
450
AWSサービスアップデート　2024/12 Part3
nrinetcom
PRO
0
140
カップ麺の待ち時間(3分)でわかるPartyRockアップデート
ryutakondo
0
140
2025年のARグラスの潮流
kotauchisunsun
0
800
新卒1年目、はじめてのアプリケーションサーバー【IBM WebSphere Liberty】
ktgrryt
0
130
PaaSの歴史と、 アプリケーションプラットフォームのこれから
jacopen
7
1.5k
「人物ごとのアルバム」の精度改善の軌跡／Improving accuracy of albums by person
mixi_engineers
PRO
1
110
FODにおけるホーム画面編成のレコメンド
watarukudo
PRO
2
280
Cloudflareで実現する AIエージェント ワークフロー基盤
kmd09
0
290

Featured

See All Featured
Easily Structure & Communicate Ideas using Wireframe
afnizarnur
192
16k
How to Ace a Technical Interview
jacobian
276
23k
Product Roadmaps are Hard
iamctodd
PRO
50
11k
Why You Should Never Use an ORM
jnunemaker
PRO
54
9.1k
[RailsConf 2023] Rails as a piece of cake
palkan
53
5.1k
Stop Working from a Prison Cell
hatefulcrawdad
267
20k
個人開発の失敗を避けるイケてる考え方 / tips for indie hackers
panda_program
98
18k
Making Projects Easy
brettharned
116
6k
How to Think Like a Performance Engineer
csswizardry
22
1.3k
How GitHub (no longer) Works
holman
312
140k
The Psychology of Web Performance [Beyond Tellerrand 2023]
tammyeverts
45
2.3k
Performance Is Good for Brains [We Love Speed 2024]
tammyeverts
7
570

Transcript

  1. Streamingdatenstrukturen zum Analysieren von Nutzeraktionen in Echtzeit Otto Streaming Round

    Table 2016 Torsten Bøgh Köster (Shopping24) 19. Mai 2016

  2. Agenda

  3. @tboeghk CTO shopping24 internet group Search Technology Meetup Hamburg Search,

    build, delivery, code quality, road bike
  4. None

  5. Open Source Power. Delivered.

  6. search system @ shopping24

  7. Anwendungsfall 1

  8. Sucharchitektur

  9. Produktbefüllung

  10. Keine Index-Updates zur Prime Time

  11. Verfügbarkeit aktualisieren

  12. Verfügbarkeit von 1,5 Mrd. Produkten?

  13. Bloomfilter

  14. Funktionsweise Bloomfilter

  15. Lokale Bloomfilter

  16. Anwendungsfall 2

  17. Relevante Produkte je Suchanfrage

  18. Benutzeraktionen einfangen

  19. Benutzeraktionen verarbeiten

  20. None

  21. You cannot scale into real time!

  22. Stream Mining

  23. Logstash FTW!

  24. Popularitätswerte als Rankingfaktor

  25. Mit Mandanten exponentielle Datenpunkte

  26. None

  27. The Count-Min-Sketch: A Bloomfilter on Steroids

  28. Wie geht das?

  29. None

  30. Relevanz von Datenpunkten im zeitlichen Verlauf

  31. Exponential Decay

  32. Punisher.java

  33. Anwendungsfall 3

  34. Populäre Suchen in der Autocompletion boosten

  35. Heavy Hitters a.k.a. TopK

  36. Und so geht’s

  37. None
  38. None
  39. None

  40. Questions? @tboeghk developer.s24.com [email protected]