Consultas al open data de AEMET

Iniciado por M_Pinar, Lunes 03 Julio 2023 17:32:48 PM

Tema anterior - Siguiente tema

AURIA

*****
Cb Incus
Mensajes: 4,733
República climática independiente
En línea

Vigorro...

FORERO TRISTE ALMERIA
La vieja guardia de Meteored
*****
Supercélula Tornádica
Mensajes: 35,126
GARBANZO NEGRO DEL FORO, GRRR...
En línea
Cita de: M_Pinar en Martes 04 Julio 2023 17:08:32 PM
Cita de: Vigorro... en Martes 04 Julio 2023 13:37:26 PM
Un apunte... como dice meteosat71, faltan observatorios, ¿simplemente estas en ello o no se pueden poner por algo o que?... [emoji41]
En el opendata de AEMET, por alguna razón, no salen todos.

Los podéis ver aquí, https://opendata.aemet.es/centrodedescargas/productosAEMET? en "Climatologías diarias" se pueden ver sin crearse una "api key". En Valladolid, para mi disgusto, solo salen tres (Valladolid, Valladolid Aeropuerto y Olmedo). Sin embargo en "Observación" de la propia AEMET salen 8 (y curiosamente ahí no sale Valladolid Aeropuerto).
Si, eso si, en la web de Aemet se pueden consultar observatorios que luego no estan en Opendata...




CitarLos que sí salen en ese listado del opendata y no aparecen mi web es porque no logré descargarme los datos. Tengo que revisarlos, no sea que se me haya escapado algo...
Si, me refiero a eso, a que hay estaciones en Opendata que no aparecen en tu web... por si te ayuda, he echado un ojo y te faltan estos, aunque se me puede haber pasado alguno...

ASTURIAS
Oviedo, no se si 1249I o 1249X
Puerto de Pajares

AVILA
Avila Ayuntamiento

BARCELONA
Todas, son 7

BIZKAIA
Punta Galea

CACERES
Todas, son 7

CANTABRIA
Reinosa
Santander 1111
Santander 1111X
Valderrible

CIUDAD REAL
Valdepeñas

CUENCA
San Clemente
Tarancon

GIRONA
Todas, son 5

GUADALAJARA
Guadalajara

GIPUZCOA
Zumarraga

HUELVA
Alajar

HUESCA
Biels
Torla

LLEIDA
La Seo D'Urgell

MADRID
Buitrago
Colmenar
Getafe
Barajas
Ciudad Universitaria
Puerto del Alto del Leon
Robledo de Chavela
Somosierra
Torrejon

TARRAGONA
Todas, son 4

ZARAGOZA
Valdespartera

[emoji106]  [emoji41]

M_Pinar

***
Cumulus Congestus
Mensajes: 552
Ubicación: Valladolid, zona sur
En línea
Ahora sí, cargados los 291 observatorios que salen en el OpenData de AEMET.

Respecto al cálculo de las medias cuando faltan datos, lo que se hace ahora es sencillamente una media: sumatorio del dato (temperatura máxima, mínima o media) de los días con datos dividido entre número de días con datos. Si faltan muchos datos en el intervalo de la consulta, pues los datos medios saldrán más o menos distorsionados dependiendo de qué se esté sacando, claro...

En el caso de medias mensuales / anuales puedo intentar no tener en cuenta para las medias los datos de los meses / años que no tengan "suficientes" datos, pintando también de otra forma esos meses / años.

Gracias por las sugerencias!
Valladolid, zona sur

https://mpinar.es/

Patoán

**
Cumulus Húmilis
Mensajes: 433
Cotos se cubrirá de hielo.
Ubicación: Toledo / Albacete
En línea
Muchas gracias M_Pinar! Anda que no le vamos a dar uso  [emoji41]

Toledo/Albacete - Spain

M_Pinar

***
Cumulus Congestus
Mensajes: 552
Ubicación: Valladolid, zona sur
En línea
Le he puesto algo que se me ha ocurrido llamar "nivel de filtrado" que elimina en el cálculo de medias mensuales y anuales los meses o años que estén por debajo de ese "nivel". También pinta un poco distintos los datos que estén por debajo de ese nivel.

Y arreglado y mejorado alguna cosilla  [emoji2]
Valladolid, zona sur

https://mpinar.es/

Pepeavilenho

Meteo Tropical
*****
Supercélula
Mensajes: 9,264
Ubicación: Avila (1200m)
En línea

Vigorro...

FORERO TRISTE ALMERIA
La vieja guardia de Meteored
*****
Supercélula Tornádica
Mensajes: 35,126
GARBANZO NEGRO DEL FORO, GRRR...
En línea
Resubo este hilo... en estos tiempos en que el foro cada vez tiene menos actividad, merece la pena resaltar el curro de quien crea y mantiene una herramienta, ¡gracias de nuevo, apañero!... [emoji41]

Y un apunte: Aemet ha metido multitud de estaciones nuevas en OpenData, ¿has pensado en meterlas en la web?... en su mayoria son emas cuya serie empieza este siglo, pero hay datos interesantes... [emoji106]

M_Pinar

***
Cumulus Congestus
Mensajes: 552
Ubicación: Valladolid, zona sur
En línea
Cita de: Vigorro... en Lunes 03 Junio 2024 02:22:02 AM
Resubo este hilo... en estos tiempos en que el foro cada vez tiene menos actividad, merece la pena resaltar el curro de quien crea y mantiene una herramienta, ¡gracias de nuevo, apañero!... [emoji41]

Y un apunte: Aemet ha metido multitud de estaciones nuevas en OpenData, ¿has pensado en meterlas en la web?... en su mayoria son emas cuya serie empieza este siglo, pero hay datos interesantes... [emoji106]
Pues sí, ya veo que han añadido un montón!

Las subo en cuanto pueda, claro!
Valladolid, zona sur

https://mpinar.es/

Pepeavilenho

Meteo Tropical
*****
Supercélula
Mensajes: 9,264
Ubicación: Avila (1200m)
En línea

_00_

******
Supercélula
Mensajes: 6,105
Motril, costa granaina
Ubicación: Motril - 40 mts
En línea
Una pregunta M_Pinar,
¿los datos los obtienes directamente de la página de aemet o tienes copia?
(Si tienes copia: ¿en tabla o en base de datos?)

te lo pregunto porque estaría bien integrar IA para poder chatear con los datos...

M_Pinar

***
Cumulus Congestus
Mensajes: 552
Ubicación: Valladolid, zona sur
En línea
Cita de: _00_ en Viernes 14 Junio 2024 14:17:42 PM
Una pregunta M_Pinar,
¿los datos los obtienes directamente de la página de aemet o tienes copia?
(Si tienes copia: ¿en tabla o en base de datos?)

te lo pregunto porque estaría bien integrar IA para poder chatear con los datos...
Tengo copia en una base de datos: el acceso al open data de AEMET está restringido, solo te deja coger los datos en bloques de 6 meses máximo y enseguida te corta el grifo si pides más de no sé cuantos por minuto. Así que, sin copia, imposible, jejeje

Por esa misma razón, poco a poco se irán cargando todos los datos que faltan, va a tardar días!

Lo de integrarlo con IA, solo tengo algún conocimiento teórico al respecto, nunca me he puesto con ello, pero todo es empezar, quién sabe...


Valladolid, zona sur

https://mpinar.es/

Pepeavilenho

Meteo Tropical
*****
Supercélula
Mensajes: 9,264
Ubicación: Avila (1200m)
En línea
Están actualizadas algunas estaciones.

Esta página es un auténtico privilegio. Miles de gracias.