En què s’assemblen els 𝐛𝐨𝐥𝐞𝐭𝐬 i les 𝐝𝐚𝐝𝐞𝐬 públiques?
🍄 Els 𝐛𝐨𝐥𝐞𝐭𝐬 hi són, però no sempre els veus
En un bosc dens hi ha bolets amagats: petits, dispersos, sota fullaraca. Si vas sense ajuda, potser en trobes pocs. Però si vas amb un bon rastrejador, tornes amb el cistell ple.
📑 Les 𝐝𝐚𝐝𝐞𝐬 públiques (Generalitat, diputacions, administració central) són com aquests bolets: existeixen, però no sempre són fàcilment visibles, accessibles o estructurades. Perquè ser útils, cal recollir-les, netejar-les, posar-les en ordre — i això és el que un spider o crawler fa.
Un 🕸️ 𝐬𝐩𝐢𝐝𝐞𝐫 és com un 🐕 𝐠𝐨𝐬𝐬𝐞𝐭 rastrejador que olora tòfones: recorre pàgines web, identifica conjunts de dades, segueix enllaços, detecta noves dades publicades, i les captura — perquè no es perdin sota les fulles. Després, cal netejar-les, uniformar-les, afegir-metadades, fer-les accessibles via API, buscables, reutilitzables. Així es torna a omplir el cistell.
🌍 Les dades obertes són clau per transformar el nostre territori i afrontar reptes globals com els de l’Agenda 2030. La Generalitat de Catalunya ja classifica més de 1000 conjunts de dades segons els 17 ODS, millorant la transparència, la col·laboració i la capacitat d’acció. El compromís amb les dades obertes és el camí cap a una societat més justa, sostenible i innovadora.
Aquesta iniciativa no només amplia la qualitat i rellevància de les dades disponibles, sinó que les fa més accessibles i alineades amb reptes globals (medi ambient, desigualtat, salut, etc.).
🔐 Com les treballem?
• 1. Localitzem sistemàticament les fonts de dades públiques (webs institucionals, portals de dades obertes, butlletins oficials).
• 2. Fem servir spiders / crawlers (per exemple, amb Python i eines com Scrapy, BeautifulSoup) que rastregen aquests llocs regularment, detectant noves dades.
• 3. Processament: neteja, normalització (formats homogènies), metadades completes (quin organisme, data, periodicitat, informació territorial).
• 4. Eines d’accés (APIs, visualitzadors, cerques per paraula clau, entitats o temes) perquè sigui fàcil per a ciutadania, organitzacions i investigadors trobar i reutilitzar les dades.
• 5. Revisió i manteniment: verificar que les dades segueixen actives, actualitzades, i adaptar si canvien els formats o les fonts.
Per què és important ara
• Podem entendre millor què fa l’administració i responsabilitzar-la.
• Per al sector empresarial i la innovació, dades de qualitat són matèria primera per desenvolupar serveis, aplicacions, estudis i polítiques públiques.
• Tenir dades ben organitzades i accessibles marca la diferència.
Els bolets hi són, les dades públiques també. Per tornar amb el cistell ple, necessitem rastrejadors, ordenació i eines que permetin aprofitar-les. Des de
dades.cat
, és el que fem: ajudar que les dades es trobin, s’entenguin i s’utilitzin.
#DadesObertes
#Transparència
#GovernObert
#DataEngineering
#Agenda2030
#ODS