---
title: "MMM patikra: atkartoti praeitį neužtenka"
url: https://hu.lt/mmm-validavimas-kaminsky/
author: "Gedas Kučinskas"
published: 2026-11-13T14:00:00+02:00
updated: 2026-11-11T00:28:03+02:00
language: lt
categories: ["Ekonometrija (MMM)", "Statistika & know-how"]
tags: ["MMM", "inkrementiškumas", "modelių validavimas", "prognozavimas", "rinkodaros matavimas"]
description: "MMM validavimas: kodėl R² ir MAPE nepakanka, kaip tikrinti prognozes, ankstesnes rekomendacijas ir realų biudžeto pokyčio poveikį."
---

# MMM patikra: atkartoti praeitį neužtenka

> Puikus MMM atitikimas istorijai dar nepatvirtina rekomendacijų. Michael Kaminsky mintis apie prognozes, istorinių sprendimų patikrą ir gyvas intervencijas.

Gražiai atkartota pardavimų istorija dar nėra geras rinkodaros modelis. Jei MMM beveik idealiai paaiškina, kas jau įvyko, bet nepadeda priimti geresnio kito biudžeto sprendimo, jo vertė lieka neįrodyta. Sutampančios kreivės pristatyme atrodo įtikinamai. Verslui svarbu, kas nutiks jas palikus už nugaros.

[Michael Kaminsky](https://www.linkedin.com/in/michael-the-data-guy-kaminsky/), vienas „Recast“ įkūrėjų, [LinkedIn įraše](https://www.linkedin.com/posts/michael-the-data-guy-kaminsky_heres-the-uncomfortable-truth-you-can-build-activity-7381683589048070146-mcbR) primena nemalonią MMM savybę: daugybė modelių gali puikiai atitikti tuos pačius duomenis ir pateikti skirtingus atsakymus, kas veikia bei ką daryti toliau. Tai ne argumentas atsisakyti MMM. Tai argumentas reikalauti patikros už mokymo duomenų ribų.

## Atkartoti praeitį lengviau nei pasirinkti teisingą paaiškinimą

Sudėtingas modelis turi daug būdų prisitaikyti prie istorijos. Kanalų poveikį galima skirtingai paskirstyti tarp uždelsto veikimo, saturacijos, sezoniškumo ir bazinės paklausos. Bendras pardavimų grafikas gali likti panašus, nors rekomendacija dėl biudžeto pasikeičia.

Todėl aukštas R² ar maža MAPE mokymo imtyje neatsako, ar teisingai įvertinta kanalo grąža. R² apibūdina atitikimą stebėtiems duomenims, o MAPE – vidutinę absoliučią procentinę paklaidą. Abu rodikliai gali būti naudingi diagnostikai. Nė vienas pats nepatvirtina, kad modelio rekomendacijos geros.

Apie šį skirtumą plačiau – [MAPE iliuzijoje](https://hu.lt/mape-iliuzija-mmm-reklamos-graza/). Taip pat svarbu, kad [siauras ROAS intervalas](https://hu.lt/mmm-klaidingas-uztikrintumas-95-intervalas/) gali aprašyti neapibrėžtumą pasirinkto modelio viduje, bet ne visas alternatyvias prielaidas.

## Patikra turi prasidėti prieš pamatant rezultatą

Kaminsky siūlo atskirti prognozių tikrinimą, istorinių sprendimų analizę ir realias intervencijas. Tai skirtingo stiprumo patikros, ne tarpusavyje pakeičiami sertifikatai.

| Patikros tipas | Ką verta testuoti | Ko vien to nepakanka įrodyti |
| --- | --- | --- |
| Prognozė už mokymo imties ribų | Ar numatomi vėlesnių savaičių rezultatai | Kad teisinga kiekvieno kanalo grąža |
| Istorinių sprendimų patikra | Ką modelis būtų rekomendavęs tuo metu | Kas tikrai būtų nutikę pasirinkus kitą biudžetą |
| Gyvas intervencijos testas | Ar planuotas biudžeto pokytis duoda numatytą poveikį | Kad išvada galioja visoms rinkoms ir sezonams |

**Kodėl?** Patikros vertę lemia tai, kokį klausimą ji atsako ir ko dar nežinome. Vienas geras rezultatas neturi tapti leidimu tikėti visomis modelio išvadomis.

## Prognozuoti savaites, kurių modelis nematė

Verta dalį vėlesnio laikotarpio palikti prognozės patikrai. Modelį mokyti tik ankstesniais duomenimis ir užfiksuoti prognozę prieš atveriant patikrai atidėtus rezultatus. Kartoti šią procedūrą slenkant laiko ribai, o ne pasitenkinti vienu patogiu laikotarpiu.

Verta aiškiai atskirti, ar prognozuojama pagal iš anksto žinomą planą, ar pagal vėliau paaiškėjusias faktines išlaidas ir kitas sąlygas. Antras variantas gali tikrinti modelį, bet nėra tas pats, kas tikra prognozė sprendimo momentu.

**Kodėl?** Būsimos informacijos nutekėjimas leidžia atrodyti tikslesniam, negu būtumėte priimdami sprendimą. Palyginimas su paprasta atskaitos prognoze taip pat padeda suprasti, ar sudėtingumas duoda papildomos naudos.

## Istorinis sprendimų testas nėra laiko mašina

Verta grįžti į ankstesnį sprendimo momentą ir patikrinti, ką modelis būtų siūlęs turėdamas tik tuomet prieinamą informaciją. Ar rekomendacija būtų buvusi įgyvendinama? Ar jos kryptis išliktų panaši pakeitus pagrįstas prielaidas? Ar ji nereikalautų biudžeto, kurio verslas neturėjo?

Tačiau modeliu suskaičiuotas alternatyvus scenarijus dar nėra nepriklausomas jo teisingumo įrodymas. Jeigu rekomendaciją ir jos tariamą naudą apskaičiuoja tas pats modelis, patikra gali suktis ratu. Nepasirinkto biudžeto rezultato istorijoje tiesiog nestebime.

**Kodėl?** Toks testas naudingas sprendimo logikai ir įgyvendinamumui tikrinti. Priežastinei grąžai reikia papildomų įrodymų, ne vien įtikinamos simuliacijos.

## Gyva intervencija – tikras rekomendacijos išbandymas

Verta suplanuoti ribotą biudžeto pokytį pagal modelio rekomendaciją. Iš anksto užrašyti laukiamą rezultatą, jo intervalą, poveikio laiką ir sąlygas, kuriomis išvada būtų laikoma nepasitvirtinusia. Kai įmanoma, numatyti tinkamą kontrolę ir eksperimentinį dizainą.

Svarbu nekeisti visko vienu metu. Nauja kaina, akcija, kūryba ir biudžetas tame pačiame teste apsunkina priežasties nustatymą. Vien rezultatų palyginimas prieš pakeitimą ir po jo savaime nepašalina sezoniškumo ar kitų pokyčių.

**Kodėl?** Modelis turi išlaikyti ne tik tikslesnio skaičiaus, bet ir tikros rekomendacijos patikrą. Vis dėlto geras bendrų pardavimų prognozavimas dar neįrodo teisingo priežastinio kanalų paskirstymo. Tam prognozę verta papildyti intervencijų įrodymais.

## Pasitikėjimą kuria galimybė pripažinti klaidą

Verta turėti prognozių žurnalą: ką modelis numatė, kokiomis sąlygomis ir kas iš tikrųjų įvyko. Nepavykusios prognozės neturi dingti po naujos modelio versijos pristatymo. Būtent jos parodo, kur baigiasi dabartinio modelio patikimumas.

Tai dera su [skirtingų matavimo metodų paskirtimi](https://hu.lt/kaip-keiciasi-rinkodaros-matavimas/): atribucija padeda vairuoti, MMM – planuoti, eksperimentai – tikrinti priežastinį poveikį.

**Esmė: verta prašyti ne gražesnio praeities paaiškinimo, o prognozės, kuri gali nepasitvirtinti.** Be tokios patikros MMM rizikuoja likti tuo, ką Kaminsky vadina brangiu matavimo teatru. Pasitikėjimą uždirba ne užtikrintas pristatymas, o pakartotinai tikrinamos rekomendacijos.

Šaltinis: [Michael Kaminsky, „Recast“ bendraįkūrėjo, LinkedIn įrašas apie išorinę MMM patikrą](https://www.linkedin.com/posts/michael-the-data-guy-kaminsky_heres-the-uncomfortable-truth-you-can-build-activity-7381683589048070146-mcbR).