• Проблема № 3: взрывной рост расходов – 2,5K - 50K USD (110M параметров) – 10K - 200K USD (340M параметров) – 80K - 1,6M USD (1,5B параметров) – ...и продолжает расти: GPT-3 — 1,8 - 4,6M USD • изначально ML — альтернатива дорогим методам обучения AI https://arxiv.org/pdf/2004.08900.pdf