Successfully reported this slideshow.
We use your LinkedIn profile and activity data to personalize ads and to show you more relevant ads. You can change your ad preferences anytime.
¿CÓMOMEDIR LA
PRECISIÓN
DELOS
PRONÓSTICOS?
www.celogis.com
T O M Á S G Á L V E Z M A R T Í N E Z
A P R E N D E T O D O S O...
Por Tomás Gálvez Martínez
Presidente de CELOGIS
Education Partner de Forecast
Solutions
Profesor y Director de ENAE
Busine...
¿Cómo medir la precisión de los pronósticos? | iiwww.celogis.com
Medirlaefectividaddenuestrospronósticospareceserunatareas...
www.celogis.com
Existeevidenciasignificativaqueunmodeloqueajustabienalosdatoshistóricos,no
necesariamentepronosticabien.¿E...
www.celogis.com
Paracadaunodelosescenariosqueustedgenereseránecesariomedirel
desempeñodeellosmedianteindicadoresdeprecisió...
www.celogis.com
Conestebreveantecedenteylaestructurabásicadelerrordefinida,heagrupadolas
diferentesalternativasdemediciónd...
www.celogis.com
1. Medidasdeselección
Enlaprimeraseccióndeesteartículo,sesugiriódividirlaseriedetiempodedos
partes.Unadeel...
www.celogis.com
2.Medidasdeinterpretación
MPE(MeanPercentageError):Esunamediadelerrorporcentual.Esunamétrica
simplequesirv...
www.celogis.com
3.Medidasdeprecisión
Enestasecciónsehacereferenciaala segundaporcióndeinformacióndenominada
datosdepredicc...
www.celogis.com
3.Medidasdeprecisión(continuación)
UdeTheil.ElcoeficientededesigualdadUdeTheilesotramedidaquepermite
anali...
www.celogis.com
Laprecisiónesunacualidadimportanteenlaseleccióndeunmodelodepronóstico,
peronoeslaúnicaqueaconsiderarenlase...
www.celogis.com
Comoseexpusoenesteartículo,siustedbuscaseleccionarelmodeloquemejor
ajustaasusdatoshistóricospuedeutilizare...
www.celogis.com
Box,G.E.,Jenkins,G.M.,1970.TimeSeriesAnalysis:ForecastingandControl,Holden-
Day,SanFrancisco. 
Croston,J.D...
www.celogis.com
T O M Á S G Á L V E Z M A R T Í N E Z
A P R E N D E T O D O S O B R E P R O N Ó S T I C O S
Upcoming SlideShare
Loading in …5
×

eBook. Cómo medir la precisión de los pronósticos

566 views

Published on

Medir la efectividad de nuestros pronósticos parece ser una tarea sencilla. Podemos simplemente encontrar la diferencia entre lo que aseguramos que pasaría con lo que realmente sucedió y listo. Tenemos un resultado. Sin embargo estoy seguro que en la mayoría de los casos tendremos dudas sobre la forma de medir el éxito o fracaso de dicho resultado.
El propósito de este eBook es exponer las principales herramientas de precisión de los pronósticos considerando tres interrogantes clave:
1. ¿Los modelos que mejor se ajustaron a la historia son igual de efectivos para pronosticar?
2. ¿Cuántas medidas de precisión existen y en qué casos aplicar cada una de ellas?
3. ¿Qué criterios alternativos existen para la selección del modelo de precisión?
Al final es posible que no dispongamos de un sólo criterio de selección, pero tendremos más información que nos ayudará a la evaluación del resultado de los pronósticos.

Espero les sea útil este documento y lo apliquen en su práctica diaria.

Published in: Business
  • Be the first to comment

eBook. Cómo medir la precisión de los pronósticos

  1. 1. ¿CÓMOMEDIR LA PRECISIÓN DELOS PRONÓSTICOS? www.celogis.com T O M Á S G Á L V E Z M A R T Í N E Z A P R E N D E T O D O S O B R E P R O N Ó S T I C O S
  2. 2. Por Tomás Gálvez Martínez Presidente de CELOGIS Education Partner de Forecast Solutions Profesor y Director de ENAE Business School  CÓMO MEDIR LA PRECISIÓN DE LOS PRONÓSTICOS ¿Cómo medir la precisión de los pronósticos? | iwww.celogis.com
  3. 3. ¿Cómo medir la precisión de los pronósticos? | iiwww.celogis.com Medirlaefectividaddenuestrospronósticospareceserunatareasencilla.Podemos simplementeencontrarladiferenciaentreloqueaseguramosquepasaríacon loque realmentesucedióylisto.Tenemosunresultado.Sinembargoestoyseguroqueenla mayoríadeloscasostendremosdudassobrelaformademedireléxitoofracasode dichoresultado. ElpropósitodeesteeBookesexponerlasprincipalesherramientasdeprecisiónde lospronósticosconsiderandotresinterrogantesclave: 1. ¿Losmodelosquemejorseajustaronalahistoriasonigualdeefectivospara pronosticar? 2. ¿Cuántasmedidasdeprecisiónexistenyenquécasosaplicarcadaunadeellas? 3. ¿Quécriteriosalternativosexistenparalaseleccióndelmodelodeprecisión? Alfinalesposiblequenodispongamosdeunsólocriteriodeselección,pero tendremosmásinformaciónquenosayudaráalaevaluacióndelresultadodelos pronósticos. Esperolesseaútilestedocumentoyloapliquenensuprácticadiaria. LA CIENCIA O EL ARTE DE LA MEDICIÓN Consultoryconferencistaen Pronósticos,PlaneacióndeDemanday S&OP
  4. 4. www.celogis.com Existeevidenciasignificativaqueunmodeloqueajustabienalosdatoshistóricos,no necesariamentepronosticabien.¿Entoncesparaquéevaluarlaprecisión deun modelodepronósticoenfuncióndesucapacidaddeajustealosdatoshistóricos? Unadelasalternativasparaevaluarloanterior,esdividirlainformaciónendos conjuntos.Elprimerconjuntolopodemosdenominardatosdecontrolyutilizarlopara encontrarelmejormodelodepronóstico.Yalsegundoconjuntoetiquetarlocomo datosdepredicciónynoincluirlosenelanálisisinicial.Lacuestiónes¿quécantidad dedatostomarparacadaconjuntodeinformación?Porejemplosiusteddisponede4 añosdeinformaciónhistóricadivididosenformamensual,puedetomarlostres primerosañosparalosdatosdecontrolyelrestoparalosdatosdepredicción.Obien dejarlosúltimos6o3mesesparaestaúltimaactividad.Existeunagranvariedadde combinacionesquesiempreestaránsujetasalasnecesidadesyresultados esperadosdecadaorganización. Paralosdatosdecontrol,esnecesarioseleccionarelmodelodepronósticoque mejorajustaalosdatoshistóricos,pero¿Cuántasformasdemediciónexisten? ¿Todastienenlamismafuncionalidad?¿Elquétienemenorerroroeldemayor complejidadyvariables?Sesabequeamedidaqueaumentanlasvariablesenel modelo,elerrorpuededisminuir.Conrelaciónalosdatosdepredicción.¿Cómo determinaraquélquepronosticómejor?O¿quémedidautilizarparaestefin?Enlas siguientespáginasseexpondránalternativasparasolucionarestasinterrogantes. LOS MODELOS QUE MEJOR SE AJUSTARON A LA HISTORIA ¿SON IGUAL DE EFECTIVOS PARA PRONOSTICAR? ¿Cómo medir la precisión de los pronósticos? | 1
  5. 5. www.celogis.com Paracadaunodelosescenariosqueustedgenereseránecesariomedirel desempeñodeellosmedianteindicadoresdeprecisión.Serequieredefiniruncriterio paralaprecisióndelpronóstico(datosdepredicción)yotraparalaseleccióndel modelo(datosdecontrol).Notodostendránelmismosignificadonielmismouso, peroambosdebenestarbasadosenlasiguientefórmuladelerror(et): Dondeet eselerrordelpronóstico,    eselvalorobservadoorealeneltiempotde laseriedetiempo,e    eselvalorpronosticadoeneltiempotdelaseriedetiempo. Elerrortambiénpuedeserrepresentadoentérminosrelativos(%)utilizandola siguienteestructuradecálculo: Obienexpresarloenformacuadrática: ¿CUÁNTAS MEDIDAS DE PRECISIÓN EXISTEN Y CÓMO APLICAR CADA UNA DE ELLAS? ¿Cómo medir la precisión de los pronósticos? | 2
  6. 6. www.celogis.com Conestebreveantecedenteylaestructurabásicadelerrordefinida,heagrupadolas diferentesalternativasdemedicióndelerrorentres: 1. Medidasdeselección. 2. Medidasdeinterpretación,y 3. Medidasdeprecisión. Encadaunadeestasmedidas,noseexplicanensutotalidadlaspresentadasenla Tabla1,sólosedescribenlasmássignificativasquesonproductodemásde15años deexperienciaeneltemayenmásde200empresadediferentesindustrias. Comosiempreellectortendrálaúltimadecisiónsobrecuálutilizar,conbaseenla informaciónquedisponeylosdatosdelaempresaenlaqueparticipa. Tabla 1. Medidas de error de pronóstico ¿Cómo medir la precisión de los pronósticos? | 3
  7. 7. www.celogis.com 1. Medidasdeselección Enlaprimeraseccióndeesteartículo,sesugiriódividirlaseriedetiempodedos partes.Unadeellaladenominamosdatosdecontrolyalaotradatosdepredicción. Enestasecciónharemosreferenciaalaprimera,yproponerherramientasde mediciónquemuestrenelmínimoerrorparaseleccionarelmejormétodopara pronosticar. MSE(MeanSquareError):Eselpromediodeloscuadradosdelasdiferenciasde cadaartículoenelperiodotyseutilizaparacompararlaprecisiónentrediferentes métodosocriteriosdepronóstico.Segúnmiexperienciaestamedida,olasiguiente, sonlasmásrecomendadasparaseleccionarelmejormétododepronóstico. RMSE(RootMeanSquareError):Estamedidaeslaraízdelpromediodelos cuadradosdelerrordecadaartículoenelperiodoty tambiénseutilizaparacomparar laprecisióndediferentesmétodosdepronóstico.Ladiferenciaconlaanterioresque elresultadoestáenlasunidadesoriginalesdelainformaciónhistóricaanalizada. ¿Cómo medir la precisión de los pronósticos? | 4
  8. 8. www.celogis.com 2.Medidasdeinterpretación MPE(MeanPercentageError):Esunamediadelerrorporcentual.Esunamétrica simplequesirveparaobservarsielerrordelpronósticotieneunsesgo(bias)positivo onegativo.Tambiénsedicequeelpronósticoestásubestimadoosobrestimado.  Unpronósticosobreestimadopuedegenerar:excesodeinventario,sobrecostos, rechazosporobsolescencia,costospormermas,entreotros.Unpronóstico subestimadopuedeproducir:reducciónenlosnivelesdeservicio,costoporpérdida deventas,incrementoenelcostoporelreprocesamientodeórdenes,entreotros.  MAPE(MeanAbsolutePercentageError):Eslamediadeloserroresporcentuales envalorabsoluto,noconsideraelsignodelerrorsólolamagnitud.ElMAPEesunade lasmedidasmásutilizadasanivelmundial,peronoserecomiendaparalaselección deunmétododepronósticopuestoquelasunidadesdelcálculosoncifrasrelativas. ¿Cómo medir la precisión de los pronósticos? | 5
  9. 9. www.celogis.com 3.Medidasdeprecisión Enestasecciónsehacereferenciaala segundaporcióndeinformacióndenominada datosdepredicción quesedescribióalprincipiodeesteeBook.Recuerdequees necesarioprobarquetanefectivoeselmodeloolosmodelosseleccionadospara pronosticar.Enseguidasemuestrandosalternativasparaevaluarlaefectividaddel modeloseleccionadoparapronosticar:ElFA(ForecastAccuracy)yelcoeficienteU deTheil.Laseleccióndependerásiempredelosresultadosesperadosenla organizaciónydelaexperienciadelplaneador. FA(ForecastAccuracy).Laformamáscomúndemedirlaprecisióndeunpronóstico escompararlosresultadosdelpronósticocontralosvaloresrealesdelsiguiente periodo.Elobjetivoesencontrarvalorescercanosa1paraemitirjuiciosfavorables sobreelmodelodepronósticoseleccionado.Lafórmulautilizadaparaesteefectoes: Aúncuandoéstaeslaunadelasmedidasmásutilizadaentrelospronosticadores, sóloserecomiendautilizarlaenelcortoplazo(nomásdetresperiodos)yaque existenotroscriteriosquenospuedenayudaraencontrarcuálmodelopronostica mejoraperiodosmáslargos.Recuerdequesielmodeloseleccionadoseajustómuy bienalosdatoshistóricosnonecesariamenteesigualdeefectivoenelmomentode pronosticar. ¿Cómo medir la precisión de los pronósticos? | 6
  10. 10. www.celogis.com 3.Medidasdeprecisión(continuación) UdeTheil.ElcoeficientededesigualdadUdeTheilesotramedidaquepermite analizarlaefectividaddelmodeloseleccionadoenlapredicción.Recuerdequelas medidasdeerroresabsolutosenlugardeloscuadráticos,suelenpresentarsesgosy éstosúltimospenalizanenmayormedidaloserroresgrandes.Laeleccióndependerá delaimportanciaqueselesdéalosgrandeserrores.ElcoeficientededesigualdadU deTheilpresentaunasoluciónparaestosescenarios.SielvalordeUescercanoa cero,suponeunapredicciónperfecta.Suformulaciónestábasadaenladiferencia cuadráticaqueexisteentrelastasasdecrecimientodelavariablerealylaestimada. Estecoeficientesepuedeutilizarparaevaluarlaefectividaddelpronósticoa medianoplazo: ¿Cómo medir la precisión de los pronósticos? | 7
  11. 11. www.celogis.com Laprecisiónesunacualidadimportanteenlaseleccióndeunmodelodepronóstico, peronoeslaúnicaqueaconsiderarenlaselecciónyevaluacióndeunmodelode pronóstico.Lascaracterísticasdelainformacióncomo:1)Eltamañooelhorizontede tiempodelosdatoshistóricos,2)elcomportamientodelainformacióny3)eltipode relacióndelpronósticotambiéndebenconsiderarseenlaelección. 1. Elhorizontedetiempolimitalabúsquedadelmodelo.Algunosmodelosseutilizan paracalcularpronósticosacortoplazo(deunoatresmeses)comolosmodelosde atenuaciónexponencial.LosmodelosdedescomposiciónyARIMAsonútilesparael medianoplazo,mientrasqueloseconométricosfuncionanbienamedianoylargo plazo. 2. Elcomportamientodelainformacióntambiénesútilparalimitarlabúsquedadel modelo.Porejemplosilosdatoshistóricospresentanestacionalidadnotodoslos modelosdepronósticopuedenseraplicables.WintersoBox&Jenkinsseríanlosmás recomendables. 3. Porúltimoexistentrestiposderelacionesquelimitantambiénestabúsqueda:1) Silaserieesúnicayelpronósticoseobtieneapartirdesupropiopasado,2)Sila serieesnocausalyelpronósticoseobtieneapartirdeotrasbaseshistóricas,y3)Si laserieescausalendondelospronósticossonobtenidosapartirdeotrasvariables queestánrelacionadas. ¿QUÉ CRITERIOS ALTERNATIVOS EXISTEN PARA LA SELECCIÓN DEL MODELO DE PRECISIÓN? ¿Cómo medir la precisión de los pronósticos? | 8
  12. 12. www.celogis.com Comoseexpusoenesteartículo,siustedbuscaseleccionarelmodeloquemejor ajustaasusdatoshistóricospuedeutilizarelMAPE,peroésteesunindicadorde interpretaciónrelativoytiendeapresentarsesgos.ElMSEolaRMSEpresentan mejoresresultadosparadichoefecto.  Alseleccionarunmodelodepronósticoscompareprecisióncontrapertinenciayno olvideelcostoqueestorepresenta.Recuerdequenosiemprelosmodelosmás complicadossonmásprecisosquelosmássimplesyporlogeneralmenoscostosos. Talveznoposeauncriterioúnicoparajuzgarlaseleccióndeunmodeloenciertas situaciones,encualquiercasoesnecesariocontarconvariosdeellosysiempre dependeránde loquesevaapronosticarydelaexperienciadelpronosticador. Dependiendodelusoqueseledéenlaempresaalasprediccionesacorto,amedioy alargoplazo,laimportanciadelhorizontedeprediccióndebesertomadaencuentaa lahoradedefiniruncriteriodeseleccióndemodelos.Esposiblequeseamás adecuadounmodelodeprecisiónquetengomenorefectividadenelcortoymayoral mediandoplazoyviceversa. Nosvemosenelsiguienteartículo. CONCLUSIONES Y RECOMENDACIONES ¿Cómo medir la precisión de los pronósticos? | 9 TG
  13. 13. www.celogis.com Box,G.E.,Jenkins,G.M.,1970.TimeSeriesAnalysis:ForecastingandControl,Holden- Day,SanFrancisco.  Croston,J.D.,1972.Forecastingandstockcontrolforintermittentdemands, OperationalResearchQuarterly,23,pp.289–303. Fildes,R.,&Makridakis,S.,1995.Theimpactofempiricalaccuracystudiesontime seriesanalysisandforecasting,InternationalStatisticalReview63,289-30. Makridakis,S.,Hibon,M.,2000.TheM3-Competition:results,conclusionsand implicationsInternationalJournalofForecasting,16,pp.451–476. Makridakis,S.,Wheelright,S.C.,Hyndman,1998.Forecasting:Methodsand Applications.Wiley. Poler,R.,Mula,J.,PeidroD.,Tomás,J.V.,2006.PROGNOS:Unsistemadesoporteal procesodeprevisióndedemanda.XCongresodeIngenieríadeOrganización. BIBLIOGRAFÍA CONSULTADA: ¿Cómo medir la precisión de los pronósticos? | 10
  14. 14. www.celogis.com T O M Á S G Á L V E Z M A R T Í N E Z A P R E N D E T O D O S O B R E P R O N Ó S T I C O S

×