Dátový tím spoločnosti Solargis denne pracuje s obrovskými objemami údajov z rôznych zdrojov, či už ide o porovnávanie nameraných údajov so súbormi údajov spoločnosti Solargis, kontrolu kvality alebo analýzu trendov s cieľom získať užitočné poznatky. S Jozefom Dudzakom, dátovým vedcom, a doktorkou Markétou Jansovou, vedúcou tímu dátových aplikácií, sme sa rozprávali o úlohe špecialistu na solárne údaje - a o tom, ako softvér Solargis Analyst transformuje komplexnú analýzu zdrojov v solárnom sektore.
Jozef: Od našich zákazníkov dostávame nespracované solárne merania vo forme súborov CSV, ktoré je potrebné importovať a harmonizovať na účely ďalšej analýzy. To znamená zosúladiť záznamy údajov s metadátami, vyriešiť problémy, ako sú nesprávne časové značky, a zabezpečiť jednotné formátovanie. Ďalej vykonávame úlohy kontroly kvality, aby sme prijaté údaje pripravili na ďalšiu analýzu.
Kvalitné solárne údaje sú základom dôveryhodnej analýzy solárnych zdrojov. Zákazníci to chápu, ale aj keď odvetvie podniká kroky na zlepšenie kvality meraných údajov, stále chýba konzistentnosť v uplatňovaných prístupoch. Súčasťou našej úlohy je dôkladné overenie nameraných údajov, čím zabezpečíme, aby sa identifikovali všetky chyby a aby sa pri následnej analýze používali len platné záznamy údajov.
Po získaní údajov s kontrolovanou kvalitou ich analyzujeme a získavame poznatky pre zákazníkov. Pre projektantov je našou typickou úlohou použiť miestne pozemné merania na prispôsobenie modelu Solargis tak, aby bolo možné vypočítať časové rady špecifické pre danú lokalitu so zníženou neistotou. Naše kvalitatívne posúdené a harmonizované solárne merania sa pravidelne používajú aj pri analýze výkonnosti fotovoltických projektov.
Jozef: Vidíme, že najpoužívanejším nástrojom na správu a analýzu údajov je stále Microsoft Excel. Hoci je to vynikajúci nástroj na mnohé úlohy analýzy údajov, má obmedzenia pri spracovaní veľkých objemov údajov v časových radoch, ktoré obsahujú nekonzistentnosti. Tabuľkový softvér nie je určený na harmonizáciu, kontrolu kvality a sofistikovanú analýzu časových radov údajov o slnečných zdrojoch. Pri prijímaní údajov z meraní sa často stretávame s nekonzistentnými tabuľkami, posunutými časovými značkami a nedostatočnou synchronizáciou. Typický tabuľkový softvér dokáže importovať len 1 milión záznamov - čo v závislosti od časového kroku nemusí stačiť ani na 2 roky, nieto ešte na 25 rokov historických časových radov údajov o slnečných zdrojoch a meteorologických údajov!
Ďalšou úrovňou sofistikovanosti softvéru je používanie vlastných skriptov napísaných v kódovacích jazykoch, ako je Python. To si vyžaduje odborné znalosti v oblasti kódovania aj solárnej energetiky, takže pre mnohé podniky v tomto odvetví to nie je dostupná cesta. Okrem toho je každý prvok spracovania údajov riadený skriptami, čo spôsobuje, že komplexná analýza a porovnávanie s viacerými súbormi údajov sú časovo náročné, pretože proces nie je interaktívny - skript sa musí nakódovať, spustiť a vylepšiť.
K dispozícii sú základné služby kontroly kvality, ktoré však majú obmedzenú funkčnosť, pokiaľ ide o poskytovanie spoľahlivých a dôveryhodných súborov údajov kontrolovaných z hľadiska kvality. Niektorí odborníci na solárnu energiu používajú alternatívny softvér z iných odvetví na základnú správu a vizualizáciu, ale majú problémy, keď je potrebná pokročilá analýza.
Marketa: Vďaka našim skúsenostiam so spracovaním solárnych údajov z celého sveta sme vedeli, že dôležitým krokom je spojenie rôznych funkcií pod jednou strechou. To znamená pokročilú kontrolu kvality, intuitívnu vizualizáciu a zjednodušenú správu údajov, a to všetko na jednom mieste.
Rozhodli sme sa dodať softvérovú platformu vytvorenú pre solárnych analytikov, solárnymi analytikmi, pričom sme do štruktúry riešenia zabudovali naše odborné znalosti v danej oblasti. Už teraz sa nám podarilo automatizovať prácne úlohy, ako je harmonizácia údajov, kontrola kvality a mnoho ďalších.
Softvér zefektívňuje proces porovnávania viacerých súborov údajov a vykonávania výpočtov a umožňuje analytikom pracovať so zložitými, rôznorodými súbormi údajov bez toho, aby museli tráviť čas vytváraním nových skriptov.
Jozef: Vizualizačné nástroje pridávajú ďalšiu flexibilitu a šetria čas - človek môže jednoducho porovnať niekoľko súborov údajov. K dispozícii je množstvo grafických nástrojov na zobrazenie rozdielov rôznymi spôsobmi (tepelné mapy, grafy rozptylu, grafy časových radov a podobne).
Solargis Analyst tiež umožňuje automaticky zostavovať reporty a súhrny, čo znamená menej času na administratívne úlohy - a viac času stráveného poskytovaním hodnoty klientom a zainteresovaným stranám.
Marketa: Považovali sme za dôležité poskytnúť viacúrovňové skúsenosti pre používateľov s rôznymi zručnosťami a potrebami. Platforma poskytuje funkcie a nápovedy o tom, čo treba hľadať, ale ak chce analytik vypočítať vlastnú premennú alebo transformáciu údajov, potom Solargis Analyst ponúka všestrannosť, ktorá to umožňuje.
Jozef: Solargis Analyst dokáže spracovať akýkoľvek typ údajov vo formátoch Excel alebo CSV, pokiaľ majú časovú pečiatku. Platforma je optimalizovaná pre celý rad parametrov, ako je slnečné žiarenie/žiarenie, teplota, vietor, zrážky a iné meteorologické a atmosférické údaje.
Jediným obmedzením množstva údajov, ktoré môžete použiť, je pamäť RAM počítača. Najväčší súbor údajov, ktorý som doteraz použil, obsahoval 9 miliónov záznamov pokrývajúcich 25 rokov údajov.
Markéta: Hlavným cieľom je rozšíriť existujúce funkcie a zároveň vytvoriť nové funkcie pre údaje zo širšieho spektra prístrojov a typov montáže. Dostali sme tiež pozitívnu spätnú väzbu na automatizáciu, ktorú platforma poskytuje, takže sa budeme snažiť automatizovať ďalšie prvky softvéru, aby sme ešte viac zjednodušili analýzu a zvýšili produktivitu.
Solárne zariadenia sú čoraz zložitejšie. Využíva sa viac typov údajov, aby vlastníci aktív lepšie pochopili svoje projektové lokality: od solárnych zdrojov, teploty, albedo až po zrážky. Solargis Analyst pomáha solárnym dátovým analytikom jednoducho porovnávať súbory údajov a rýchlejšie získavať poznatky. Ak sa chcete dozvedieť viac o novej platforme Solargis Analyst a zistiť, ako môže zvýšiť produktivitu vášho tímu solárnych dát, kontaktujte nás na adresehttps://solargis.com/contact-us
