Datos discrepantes: NOAA vs informes CLIMAT...

Desconectado Vigorro...

  • FORERO TRISTE-ALMERIA...
  • La vieja guardia de Meteored
  • Supercélula Tornádica
  • *****
  • 34576
  • Sexo: Masculino
  • Garbanzo negro del foro, vivo como una legumbre...
Datos discrepantes: NOAA vs informes CLIMAT...
« en: Jueves 10 Diciembre 2009 23:49:36 pm »
El otro dia cruzamos rs y yo un par de privis tal que asi... publico el asunto por si alguien puede aportar algo... a ver si chuzos, por ejemplo, puede echarnos un cable...

Citar
A ver, por ejemplo, quiero saber la media anual de temperatura de Labacolla para 1994... tengo tres fuentes de informacion:

- CLIMAT: en ogimet sumo las 12 medias mensuales y divido entre 12, sale 14'13...

http://www.ogimet.com/cgi-bin/gclimat?months=12&mode=0&ind=08042&ord=DIR&year=1997&mes=12

- INE: encuentro 14'2...

http://www.ine.es/jaxi/tabla.do?path=/t43/a012/a1998/l0/&file=t20011b.px&type=pcaxis&L=0

- NOAA: busco y encuentro los datos diarios, sumo y divido por 365, y sale 13'69...

ftp://ftp.ncdc.noaa.gov/pub/data/gsod/1997/080420-99999-1997.op.gz

Podria entender discrepancias entre el INE y las otras fuentes, pero, ¿entre NOAA y los climat?...

Citar
Yo al revés, entiendo mejor a NOAA, que parece que es la media ponderada horaria, supongo que a la izquierda de la temp. tienes el número de horas del día con datos, no creo que sea la media clásica.

La otra la entiendo menos, al principio pensé en que era un problema de dividir por 12  en vez de por 365, pero veo que es algo más profundo pues cambian los valores mensuales!!!. Climat debe ser media diaria 0:00-0:00 UTM. La otra será 6:00-6:00 UTC, pero me extraña, ¿ocurre en el resto de las estaciones?

Bien, me he puesto a investigar una miaja, no queria dejar este asunto pendiente, y encuentro esto... quiero saber, por ejemplo, la media de Noviembre pasado en Almeria...

- CLIMAT (ogimet): 17'8...
http://www.ogimet.com/cgi-bin/gclimat?mode=0&state=Spa&ind=08487&ord=DIR&verb=no&year=2009&mes=11&months=1

- NOAA: 16'55...
ftp://ftp.ncdc.noaa.gov/pub/data/gsod/2009/084870-99999-2009.op.gz

¡¡ 1'25 de diferencia !!... :o

Un dato adicional... en NOAA el formato de los datos es este:

STN--- WBAN   YEARMODA    TEMP       DEWP
084870 99999  20071101    60.1 24    42.7 24
084870 99999  20071102    62.4 24    46.4 24
084870 99999  20071103    63.0 24    51.0 24
etc...

Es de suponer que la columna a la derecha de la temperatura nos dice el numero de datos diario... en ogimet, por otro lado, leemos esto:

Advertencia: Estos datos están basados parcialmente en los registros GSOD de la NOAA (Global Summary Of the Day). Por tanto, los datos y resúmenes que aquí­ se ofrecen estan sujetos a  la resolución 40 de la OMM (Cg-XII).

Se me ocurren tres preguntas...

a) ¿cuando ogimet dice "estos datos son un resumen" se refiere a que los CLIMAT que ofrece son un resumen, y que quizas en otra web podemos encontrar CLIMAT mas amplios, y por tanto concordantes con los datos de la web de NOAA?...

b) ¿o se refiere a que los CLIMAT estan basados SIEMPRE, sea cual sea la fuente que los ofrezca, en resumenes de datos de NOAA?...

c) en cualquiera de los dos casos anteriores seria esperable una diferencia (lo logico es que un resumen de X no concuerde con X), pero ¿podria venir la diferencia, ademas, por lo que dice rs de que igual el "dia" se contabiliza de distinta manera?...



Otra comprobacion... cojo todas las medias de Diciembre para Almeria de los CLIMAT disponibles en ogimet y comparo con NOAA... el dato de NOAA siempre viene dado por 31 dias de toma de datos, si no se indica lo contrario... indico el numero total de datos diarios, y recuerdo que el maximo seria 744 (31 dias * 24 datos = 744)... para hacernos una idea de la importancia del numero de datos que faltan sobre el maximo de 24, tengamos en cuenta esto:

- falta un dato diario, es decir, hay 23, el total seria de 713
- faltan dos datos diarios (22), el total seria de 692
- faltan 3 datos diarios (21), el total seria de 651
- faltan 4 datos diarios (20), el total seria de 620
- faltan 5 datos diarios (19), el total seria de 589

1992
C: 14'2
N: 13'79 (718)

1993
C: 13'5
N: 13'26 (702)

1994
C: 14'4
N: 14'05 (667)

1995
C: 15'2
N: 15'5 (543)

1996
C: 13'7
N: 13'58 (730)

1997
C: 14'2
N: 14'06 (704)

1998
C: 13'3
N: 12'97 (620)

1999
C: 13'6
N: 13,72 (618)

2000
C: 14'1
N: 14'04 (604)

2001
C: 13
N: 11,93 (608)

2002
C: 15
N: 13,51 (595)

2003
C: 13'9
N: 12,92 (600)

2004
C: 13'9
N: 13,27 (586)

2005
C: 13'1
N: 12'26 (622)

2006
C: 13'3
N: 12,36 (737)

2007
C: 13'8
N: 13'48 (743)

2008
C: 12,3
N: 11,3 (744)

Si lo vemos graficamente podemos extraer las siguientes conclusiones:

1.- vemos que CLIMAT sale mas calido, por poco, en 1992, 1993 y 1994, pero en 1995, NOAA sale mas calido... coincide esto con un bajonazo del numero de datos diarios de NOAA, por lo que podriamos pensar en una relacion...

2.- sin embargo vemos que entre 1998 y 2005 el numero de datos diarios de NOAA es similar, oscilando entre unos 585 y unos 620, con lo que cabria esperar que CLIMAT fuera siempre algo mas calido, como ocurria en 1992, 1993 y 1994, ya que no hay caida fuerte de datos diarios de NOAA, y sin embargo, vemos que en 1995 NOAA es mas calido...

3.- a partir de 2001, y salvo en 2007, la diferencia a favor de CLIMAT parece crecer, pero seguimos sin encontrar una relacion con el numero de datos diarios, ya que a pesar del subidon de datos diarios de 2006, 2007 y 2008, no parece que la grafica de temperaturas haga nada raro...



Y meto otra grafica para comparar la evolucion de la diferencia entre CLIMAT y NOAA... es DESCOMUNAL el resultado...

- hasta 2000 oscila entre 0'1 y 0'4 (mas calido CLIMAT), salvo los 0'3 y 0'1 que NOAA fue mas calido (1995 y 1999 respectivamente)...

- pero es que a partir de 2001 algo ocurre con los CLIMAT, pues las diferencias, desde entonces, oscilan entre 0'6 y 1'1, salvo el disparate de 2002 (1'5) y los 0'3 de 2007, valor similar a los del periodo 1992-2000...

- por otro lado, confirmamos que no hay relacion alguna entre las variables "diferencia entre CLIMAT y NOAA" y "numero de datos diarios total de NOAA"...




Por ultimo, he cogido, año por año desde 1992, una estacion española para comprobar el grado de concordancia entre CLIMAT y NOAA, y sale esto... indico el numero de datos diarios mas abundante, aunque algunos dias puedan tener mas o menos, o incluso haya dias sin dato alguno... pongo los links a ogimet y a NOAA...

1992, 08001, LA CORUÑA, +0'49 PARA CLIMAT
CLIMAT 14'61
NOAA 14'12 (364 DIAS, 7/8 datos diarios en general)
http://www.ogimet.com/cgi-bin/gclimat?ind=08001&mode=0&ord=DIR&year=1992&mes=12&months=12
ftp://ftp.ncdc.noaa.gov/pub/data/gsod/1992/080010-99999-1992.op.gz
   
1993, 08008, ROZAS, +0'67 PARA NOAA
CLIMAT 11'17
NOAA 11'84 (364 dias, 4-5 datos diarios)
http://www.ogimet.com/cgi-bin/gclimat?ind=08008&mode=0&ord=DIR&year=1993&mes=12&months=12
ftp://ftp.ncdc.noaa.gov/pub/data/gsod/1993/080080-99999-1993.op.gz

1994, imposible la comparacion... los CLIMAT solo existen para Noviembre y Diciembre para casi todas las estaciones, y NOAA presenta, en muchos casos, pocos datos de medias diarias... por ejemplo, solo 309 dias para Rozas o 349 para La Coruña...

1995, 08027, IGUELDO, +0'36 PARA CLIMAT
CLIMAT 13'99
NOAA 13'63 (365 dias, 8 datos diarios)
http://www.ogimet.com/cgi-bin/gclimat?ind=08027&mode=0&ord=DIR&year=1995&mes=12&months=12
ftp://ftp.ncdc.noaa.gov/pub/data/gsod/1995/080270-99999-1995.op.gz

1996, 08085, NOAIN, +0'91 PARA NOAA
CLIMAT 12'72 (falta el mes de Abril)
NOAA 13'63 (366 dias, pero quito, 14-15-16 datos diarios)
http://www.ogimet.com/cgi-bin/gclimat?ind=08085&mode=0&ord=DIR&year=1996&mes=12&months=12
ftp://ftp.ncdc.noaa.gov/pub/data/gsod/1996/080850-99999-1996.op.gz

1997, 08055, VIRGEN DEL CAMINO, +1'27 para NOAA
CLIMAT 11'95
NOAA 13'22 (365 dias, 11-12-13 datos diarios)
http://www.ogimet.com/cgi-bin/gclimat?ind=08055&mode=0&ord=DIR&year=1997&mes=12&months=12
ftp://ftp.ncdc.noaa.gov/pub/data/gsod/1997/080550-99999-1997.op.gz

1998, 08075, VILLAFRIA, +1'31 para NOAA
CLIMAT 10'96
NOAA 12'27 (363 dias, 11-12-13 datos diarios)
http://www.ogimet.com/cgi-bin/gclimat?ind=08075&mode=0&ord=DIR&year=1998&mes=12&months=12
ftp://ftp.ncdc.noaa.gov/pub/data/gsod/1998/080750-99999-1998.op.gz

1999, 08160, ZARAGOZA, +0'56 para CLIMAT
CLIMAT 15'42
NOAA 14'86 (364 dias, 23-24 datos diarios)
http://www.ogimet.com/cgi-bin/gclimat?ind=08160&mode=0&ord=DIR&year=1999&mes=12&months=12
ftp://ftp.ncdc.noaa.gov/pub/data/gsod/1999/081600-99999-1999.op.gz

2000, 08238, TORTOSA, +0'81 para NOAA
CLIMAT 18'17
NOAA 18'98 (364 DIAS, 5 datos diarios)
http://www.ogimet.com/cgi-bin/gclimat?ind=08238&mode=0&ord=DIR&year=2000&mes=12&months=12
ftp://ftp.ncdc.noaa.gov/pub/data/gsod/2000/082380-99999-2000.op.gz

2001, 08221, RETIRO, +0'20 para NOAA
CLIMAT 13'85
NOAA 14'05 (365 dias, 22-23-24 datos diarios)
http://www.ogimet.com/cgi-bin/gclimat?ind=08222&mode=0&ord=DIR&year=2001&mes=12&months=12
ftp://ftp.ncdc.noaa.gov/pub/data/gsod/2001/082210-99999-2001.op.gz

2002, 08261, CACERES, +0'68 para NOAA
NOAA 17'16 (361 dias, 6-7 datos diarios)
CLIMAT 16'48 http://www.ogimet.com/cgi-bin/gclimat?ind=08261&mode=0&ord=DIR&year=2002&mes=12&months=12
ftp://ftp.ncdc.noaa.gov/pub/data/gsod/2002/082610-99999-2002.op.gz

2003, 08429, ALCANTARILLA, +2'83 para NOAA
CLIMAT 18'8
NOAA 21'54 (355 dias, 12-13 datos diarios)
http://www.ogimet.com/cgi-bin/gclimat?ind=08429&mode=0&ord=DIR&year=2003&mes=12&months=12
ftp://ftp.ncdc.noaa.gov/pub/data/gsod/2003/084290-99999-2003.op.gz

2004, 08391, SAN PABLO, +0'57 para NOAA
CLIMAT 19'55
NOAA 18'98 (366 dias, 17-18-19-20 datos diarios)
http://www.ogimet.com/cgi-bin/gclimat?ind=08391&mode=0&ord=DIR&year=2004&mes=12&months=12
ftp://ftp.ncdc.noaa.gov/pub/data/gsod/2004/083910-99999-2004.op.gz

2005, 08449, ROTA, +1'17 para CLIMAT
CLIMAT 17'89
NOAA 16'72 (365 dias, 23-24 datos diarios)
http://www.ogimet.com/cgi-bin/gclimat?ind=08449&mode=0&ord=DIR&year=2005&mes=12&months=12
ftp://ftp.ncdc.noaa.gov/pub/data/gsod/2005/084490-13025-2005.op.gz

2006, 08482, MALAGA, +1'74 para NOAA
CLIMAT 16'77
NOAA 19'51 (365 dias, 24 datos diarios)
http://www.ogimet.com/cgi-bin/gclimat?ind=08482&mode=0&ord=DIR&year=2006&mes=12&months=12
ftp://ftp.ncdc.noaa.gov/pub/data/gsod/2006/084820-99999-2006.op.gz

2007, 08487, ALMERIA, +0'43 para CLIMAT
CLIMAT 19'11
NOAA 18'68 (364 dias, 24 datos diarios)
http://www.ogimet.com/cgi-bin/gclimat?ind=08487&mode=0&ord=DIR&year=2007&mes=12&months=12
ftp://ftp.ncdc.noaa.gov/pub/data/gsod/2007/084870-99999-2007.op.gz

2008, 60020, SANTA CRUZ DE TENERIFE, +0'18 para NOAA
CLIMAT 21'66
NOAA 21'84 (362 dias, 4-5 datos diarios)
http://www.ogimet.com/cgi-bin/gclimat?ind=60020&mode=0&ord=DIR&year=2008&mes=12&months=12
ftp://ftp.ncdc.noaa.gov/pub/data/gsod/2008/600200-99999-2008.op.gz

Lo meto graficamente, a ver que vemos... por un lado CLIMAT es mas calido en 7 años y NOAA es mas calido en 9, nada definitivo ni claro, aunque obviamente hubiera interesado mostrar para cada estacion al serie completa, como lo hecho con Almeria, pero bueno, lo que queria mostrar esta mostrado: los datos de NOAA y CLIMAT son discordantes ¿para todas las estaciones y todos los años?...



Y comparo con el numero de datos diarios... no veo que el hecho de que haya mas o menos datos diarios influya en la diferencia entre el CLIMAT y NOAA...






1.- Dije que es descomunal la grafica de diferencias entre CLIMAT y NOAA para Almeria en Diciembre porque si se estan usando informes CLIMAT para apoyar el calentamiento (que haberlo haylo, creo), va a salir bastante mayor del que realmente es, si es que los datos de NOAA son correctos, que es de suponer que si... es que a partir de 2001 es una pasada lo que ocurre, los CLIMAT se disparan, aunque habria que hacerlo para todos los meses del año y para varias estaciones, igual es solo un "problema" de Almeria...

2.- Con todo, parece que los Diciembres tienden a ser, claramente, cada vez mas frios por aqui, pero ese es otro tema... ;D

A ver que opinais de todo esto, ahi os lo dejo, os leere... 8)
« Última modificación: Lunes 28 Diciembre 2009 14:15:12 pm por Vigorro... »

Desconectado Javalambre

  • Cb Incus
  • *****
  • 2881
  • Sexo: Masculino
  • ¡Nunca te harán callar...........!
Re: Datos discrepantes: NOAA vs informes CLIMAT...
« Respuesta #1 en: Viernes 11 Diciembre 2009 19:42:03 pm »
Primero de todo, una vez más, es para quitarse el sombrero ante tu trabajo...... simplemente brutal.

 :o

Tengo una teoría, seguro que equivocada: los CLIMAT son datos de extremos climáticos , es decir la máxima y la mínima dentro de las 24 horas del día con independencia de la hora a la que se produzca la efeméride..... quizás incluso provengan de las automáticas.
Los datos NOAA son los datos Synop, con un número de datos variable según la estación: normalmente 24 registros en aeropuertos y observatorios de primer orden y escasos registros en otras estaciones (por ejemplo, Teruel, con uno cada 6 horas y en fin de semana aveces ni eso).

Llevo tiempo siguiendo la temperatura de algunos lugares y es fácilmente comprobable como la media clásica siempre, en ocasiones se acerca a un grado cuando el tiempo se vuelve anticiclónico y extremadamente frío de noche, es superior a la media ponderada.

A la vista de los datos, los NOAA son los ponderados y los CLIMAT la media clásica (ojo, de las 24 horas del día por lo que, sobretodo en invierno, suele suceder que a una noche nublada se suceda una tarde-noche despejada que baje significativamente la media del día).

A ver si algún trabajador de la AEMET, Febrero-Erruben-Spissatus-Nimbus,etc... nos pueden sacar de dudas.

 ;)
Dios nos libre del día de las alabanzas. Hostalets de Pierola (Serra Alta) 385msnm. Teruel en el corazón!

Establecemos reglas para los demás y las excepciones para nosotros (François de la Rochefoucauld)

No estoy de acuerdo con lo que dices, pero defenderé hasta la muerte tu derecho a decirlo (Voltaire).

Desconectado chuzosdepunta

  • Cumulus Húmilis
  • **
  • 233
Re: Datos discrepantes: NOAA vs informes CLIMAT...
« Respuesta #2 en: Viernes 11 Diciembre 2009 20:03:42 pm »
Buenas ...

Muchas preguntas para contestar  ;D

Citar
a) ¿cuando ogimet dice "estos datos son un resumen" se refiere a que los CLIMAT que ofrece son un resumen, y que quizas en otra web podemos encontrar CLIMAT mas amplios, y por tanto concordantes con los datos de la web de NOAA?...

Los resúmenes CLIMAT están basados en informes CLIMAT que cada estación elabora siguiendo unos procedimientos y sintaxis propias de los CLIMAT. En Ogimet se da TODA la información que se puede sacar de un CLIMAT. (ver http://www.ogimet.com/docs/climat.pdf ).

Entro otras cosas en AEMET, la temperatura media de un día o de un mes se calculan con la media de las máximas y mínimas  :o . Es obvio que no adecuado este cálculo, pero el método se mantiene por compatibilidad con lo que se hacía años atrás en que las observaciones estaban muy espaciadas y no existían los modernos métodos de observación.

Calcular la media con, por ejemplo, la media de las 24 temperaturas horarias de un día o hacerlo con la media aritmética de la máxima y mínima puede deparanos muchas sorpresas. La OMM obviamente recomienda el primer método.

Entonces, primera cosa a tener en cuenta: La forma de calcular las medias puede que no sea la óptima. Para acabarlo de empeorar, cada país sigue un procedimiento distinto.

Ahora le toca a la NOAA. La forma de calcular las medias también deja mucho que desear.  No hay un filtro respecto a los periodos del día en que hay o no hay observaciones. Los datos pueden ser muy sesgados.  Unas veces se calcula con los datos explícitos de un synop. Encima a veces los datos se basan en METAR y no en SYNOPS.

Ejemplo, Almeria  el día 9 de Noviembre de 2005.  NOAA, en su resumen GSOD contabiliza 19 datos para calcular la T. media  (17.7 ºC). Si buscamos los datos de synops disponibles

http://www.ogimet.com/display_synops.php?lugar=08487&ord=REV&nil=SI&fmt=html&tipo=ALL&anof=2005&mesf=11&dayf=10&horaf=00

vemos que solamente hay 6 synops. ¿de dónde han salido los 19 datos? Muy posiblemente de los METAR de LEAM. ¿De dónde ha salido la mínima de 12ºC?. La respuesta es, posiblemente, de algún metar intermedio.

En este caso, la media (Tmax + Tmin)/2 difiere solo una décima respecto lo que da GSOD, pero no siempre es así.  Si vemos otro día, por ejemplo el 11 de Mayo de 2005, hay también 19 datos en GSOD, pero su media son 18.9. De Ogimet,  la media sacada de (Tmax + tmin)/2 son 20.1. Por otra parte, el resumen diario de Ogimet, que intenta tener en cuenta todo eso saca 19.7ºC. 

http://www.ogimet.com/display_synops.php?lugar=08487&ord=REV&nil=SI&fmt=html&tipo=ALL&anof=2005&mesf=5&dayf=12&horaf=00

http://www.ogimet.com/cgi-bin/gsynres?ind=08487&ndays=30&ano=2005&mes=5&day=21&hora=00&ord=REV

¿queda claro que no esta claro?   ???

En Ogimet, los resúmenes diarios siguen un algoritmo que es el mismo en todo el mundo, y tratan de tener en cuenta tanto las máximas y mínimas explícitas como la distribución de los datos horarios y. por supuesto, solamente de synops. No es nada fácil dar una temperatura media diaria. Cuando no hay datos suficientes simplemente no da la media diaria.

Bueno, ahora comprendereís por qué me está costando tanto sacar índices de tendencia y promedios globales de temperatura a partir de datos de observaciones sinópticas de los últimos 10 años. Hay tantas fuentes de error ....Llevo ya muchos ensayos y no me acaba de convencer ninguno, pero poco a poco me voy aproximando.

Espero haber aclarado algo



Desconectado Vaqueret di Rondó

  • un Zarathustra insidioso
  • Supercélula
  • ******
  • 5077
  • Sexo: Masculino
  • Eppur si calfa....
    • MeteoCastalla
Re: Datos discrepantes: NOAA vs informes CLIMAT...
« Respuesta #3 en: Viernes 11 Diciembre 2009 20:33:44 pm »
Esto es algo que me interesa mucho, para implementar algo parecido: ¿Qué pesos asignas a los valores máx, mín y a los diferentes datos horarios para sacar la media? ¿varía el método según la cantidad de datos disponibles?

Gracias.
   

Desconectado Cerro Calderón

  • Cb Calvus
  • ****
  • 2223
  • Sexo: Masculino
  • Torrebaja 750 m. (Rincón de Ademuz)
Re: Datos discrepantes: NOAA vs informes CLIMAT...
« Respuesta #4 en: Viernes 11 Diciembre 2009 20:41:30 pm »
     Las diferencias entre medias clásicas y medias horarias pueden ser brutales. Aquí en días anticiclónicos invernales, la media horaria puede ser de 2ºC incluso 3ºC inferior a la media clásica. Un pequeño ejemplo del día más cálido (por máxima y media clásica), soleado y con mayor amplitud de este mes:

Torrebaja-CMA, 6 diciembre 2009.

0Z -0'9ºC
1Z -1'1ºC
2Z -1'7ºC
3Z -2'0ºC
4Z -2'3ºC
5Z -2'6ºC
6Z -2'9ºC
7Z -2'9ºC
8Z -2'8ºC
9Z -1'4ºC
10Z 3'0ºC
11Z 6'8ºC
12Z 11'8ºC
13Z 18'3ºC
14Z 19'4ºC
15Z 19'3ºC
16Z 18'0ºC
17Z 14'8ºC
18Z 11'3ºC
19Z 9'1ºC
20Z 5'3ºC
21Z 2'9ºC
22Z 2'0ºC
23Z 1'2ºC

     Los valores no son los registrados a esa hora en punto, sino el promedio de toda la hora. Si tomamos el valor máximo y el mínimo la media sale de 8'3ºC, sin embargo haciendo la media de todas las horas nos vamos a 5'1ºC, nada menos que -3'2ºC de diferencia. Comentar que yo ese día registré en mi casa una máxima de 18'4ºC (la máxima absoluta de este diciembre) y una mínima de -3'0ºC, generalmente noto una desviación al alza en las máximas de esa estación, sobre todo en jornadas soleadas y cuando la radiación solar es más importante, por lo que ahora en invierno parece que se mitiga bastante aunque aun es posible que se exagere algo el pico máximo de temperatura, en cualquier caso no dejan de ser unas diferencias abismales.

Desconectado chuzosdepunta

  • Cumulus Húmilis
  • **
  • 233
Re: Datos discrepantes: NOAA vs informes CLIMAT...
« Respuesta #5 en: Viernes 11 Diciembre 2009 21:21:56 pm »
Hola Vaqueret

Citar
Esto es algo que me interesa mucho, para implementar algo parecido: ¿Qué pesos asignas a los valores máx, mín y a los diferentes datos horarios para sacar la media? ¿varía el método según la cantidad de datos disponibles?

A groso modo.  Primero hay un filtro de los datos en sí:
 - Valores demasiado altos o bajos.
 - Variaciones demasiado bruscas:
      > 20 ºC en una hora
      > 30 ºC en 2 horas
      > 40ºC en mas de 3 horas
 - Picos demasiado exagerados, se estudia la derivada segunda de T(t)
 - Coherencia entre valores extremos y horarios

Una vez filtrados los datos:
  1)  Si hay más de tres datos horarios en 24 horas y no mas de 6 horas sin datos, cada temperatura tiene el peso dado por el tiempo transcurrido entre esa observación y la siguiente. La T media es la T ponderada con esos pesos.

   2) En otro caso se calcula la media entre la Tmax y Tmin, si existen. De no existir alguna de ellas No se calcula la Tmed.

Hay bastantes pequeños  detalles, pero el algoritmo actual es el que te he expuesto.

Espero que te sirva alguna idea.




Desconectado Vaqueret di Rondó

  • un Zarathustra insidioso
  • Supercélula
  • ******
  • 5077
  • Sexo: Masculino
  • Eppur si calfa....
    • MeteoCastalla
Re: Datos discrepantes: NOAA vs informes CLIMAT...
« Respuesta #6 en: Viernes 11 Diciembre 2009 23:28:31 pm »
Hola Vaqueret

Citar
Esto es algo que me interesa mucho, para implementar algo parecido: ¿Qué pesos asignas a los valores máx, mín y a los diferentes datos horarios para sacar la media? ¿varía el método según la cantidad de datos disponibles?

A groso modo.  Primero hay un filtro de los datos en sí:
 - Valores demasiado altos o bajos.
 - Variaciones demasiado bruscas:
      > 20 ºC en una hora
      > 30 ºC en 2 horas
      > 40ºC en mas de 3 horas
 - Picos demasiado exagerados, se estudia la derivada segunda de T(t)
 - Coherencia entre valores extremos y horarios

Una vez filtrados los datos:
  1)  Si hay más de tres datos horarios en 24 horas y no mas de 6 horas sin datos, cada temperatura tiene el peso dado por el tiempo transcurrido entre esa observación y la siguiente. La T media es la T ponderada con esos pesos.

   2) En otro caso se calcula la media entre la Tmax y Tmin, si existen. De no existir alguna de ellas No se calcula la Tmed.

Hay bastantes pequeños  detalles, pero el algoritmo actual es el que te he expuesto.

Espero que te sirva alguna idea.





Muchas gracias. Actualmente hago algo bastante parecido, definiendo un delta de T máximo que si se sobrepasa descarta automáticamente el dato.

En caso de tener datos periódicos que ya sean medias del periodo es problema es trivial, pero ¿y en el caso de que tengamos medidas puntuales de cada fin de periodo más una máxima y una mínima? ¿Se debería dar más peso a los valores max y min que a los otros o no? yo creo que no, pero recuerdo haber leido que sí. Por eso lo pregunto.

Saludos.
La única duda que tengo
   

Desconectado Vigorro...

  • FORERO TRISTE-ALMERIA...
  • La vieja guardia de Meteored
  • Supercélula Tornádica
  • *****
  • 34576
  • Sexo: Masculino
  • Garbanzo negro del foro, vivo como una legumbre...
Re: Datos discrepantes: NOAA vs informes CLIMAT...
« Respuesta #7 en: Sábado 12 Diciembre 2009 15:26:30 pm »
Espero haber aclarado algo

Si, que no hay nada como un tio al lado de la garita tomando datos cada hora... ;D

En serio, gracias por tus extensas explicaciones, sirven para ir aclarando el panorama... ;)

Eso si, me sigue quedando una duda: ¿a que se debe ese incremento brutal entre CLIMAT y NOAA a partir de 2000?... es que no creo que sea una casualidad, debe haber algo mas, algo relacionado con la manera de "contabilizar" datos, no se... vuelvo a poner la grafica... recuerdo: barra positiva=CLIMAT mas calido, barra negativa= NOAA mas calido...

Saludos... 8)


Desconectado Javalambre

  • Cb Incus
  • *****
  • 2881
  • Sexo: Masculino
  • ¡Nunca te harán callar...........!
Re: Datos discrepantes: NOAA vs informes CLIMAT...
« Respuesta #8 en: Sábado 12 Diciembre 2009 15:34:37 pm »
Gracias Chuzoadepunta, ahora tengo todo más claro.

 ;)

Respecto a lo que comenta Cerro Calderón totalmente de acuerdo, lo acabo de comentar en este hilo.Por ejemplo ayer en dos estaciones SIAR de toda fiabilidad.

Amplitud

Teruel              16,5/-2,8  ......... 19,3 ºC

Villarquemado  16,3/ -5,5 ......... 21,8 ºC

Aunque son meritorias teniendo en cuenta las pocas horas de sol aún lo es más la desviación de la temperatura media respecto la ponderada.

                           Media clásica      Media ponderada               Diferencia

Teruel.................      6,85ºC                   4,4ºC                          + 2,45 ºC

Villarquemado....       5,4ºC                      2,9 ºC                        + 2,5 ºC


Lógicamente no todos los días son iguales pero en las estaciones más continentalizadas las medias clásicas se alejan mucho de la realidad.

Dios nos libre del día de las alabanzas. Hostalets de Pierola (Serra Alta) 385msnm. Teruel en el corazón!

Establecemos reglas para los demás y las excepciones para nosotros (François de la Rochefoucauld)

No estoy de acuerdo con lo que dices, pero defenderé hasta la muerte tu derecho a decirlo (Voltaire).

Desconectado chuzosdepunta

  • Cumulus Húmilis
  • **
  • 233
Re: Datos discrepantes: NOAA vs informes CLIMAT...
« Respuesta #9 en: Sábado 12 Diciembre 2009 20:32:22 pm »
Citar
En caso de tener datos periódicos que ya sean medias del periodo es problema es trivial, pero ¿y en el caso de que tengamos medidas puntuales de cada fin de periodo más una máxima y una mínima? ¿Se debería dar más peso a los valores max y min que a los otros o no? yo creo que no, pero recuerdo haber leido que sí. Por eso lo pregunto.

Saludos.
La única duda que tengo

Depende si el primer y ultimo dato se refieren a un mismo momento del día o no. Me explico: si los datos son cada 24 horas, por ejemplo a las 06 UTC, tanto el dato del inicio como el dato del final son de una misma hora. Sacar promedios con esos dos datos sería temerario, mejor utilizar las extremas.

   tmed = (tmax + tmin) / 2;

Pero si tienes, por ejemplo, datos de cada 6 horas y ademas las extremas en  cada intervalo, podrías intentar algo que yo hice hace algún tiempo

     (tmax + tmin + t_inicial + t_final) / 4

Saludos.

PD. Vaqueret, vaya paquete de nieve que puede caer por la zona. Lamentando estoy no estar en Alcoy. Me temo que me voy a perder una de las buenas  ???