Metodologia działania, źródła danych i architektura pobierania w Centrum Dotacji
Centrum Dotacji PRO to inteligentna platforma, która integruje, ujednolica i monitoruje dostępne formy wsparcia finansowego dla przedsiębiorstw, organizacji pozarządowych (NGO), instytucji samorządowych oraz osób prywatnych. Ze względu na brak jednego, zintegrowanego publicznego interfejsu API z bazą naborów w Polsce, stworzyliśmy zaawansowany system ETL (Extract, Transform, Load), który przetwarza dane z dziesiątek rozproszonych źródeł krajowych i unijnych.
Monitorujemy kilkadziesiąt źródeł w czasie rzeczywistym. Ponieważ w Polsce nie istnieje jedno centralne API dla wszystkich dotacji, łączymy pobieranie przez oficjalne interfejsy programistyczne, parserów RSS/XML oraz dedykowanych crawlerów HTML.
Zróżnicowane ogłoszenia normalizujemy do spójnego modelu. Standaryzujemy nazwy beneficjentów (np. mapowanie 'MŚP' oraz 'mikroprzedsiębiorstwa' do jednej kategorii), kwoty, waluty, terminy oraz rodzaje wsparcia (dotacja, pożyczka).
Ten sam program często pojawia się w kilku portalach. Nasz wieloetapowy algorytm porównuje tytuły, cele, zakresy dat oraz podobieństwo semantyczne, by scalić duplikaty w jeden przejrzysty rekord o wysokiej wiarygodności.
Przechowujemy skróty (hash) zawartości dokumentów. Wszelkie zmiany w terminach składania wniosków, budżecie naboru czy załącznikach są natychmiast wykrywane, wersjonowane i publikowane w panelu użytkownika.
| Nazwa źródła | Kategoria | Metoda odczytu | Częstotliwość | Status |
|---|---|---|---|---|
| Portal Funduszy Europejskich | Krajowy portal centralny | Crawler HTML & Sitemap monitoring | Codziennie | Aktywne |
| PARP (Polska Agencja Rozwoju Przedsiębiorczości) | Agencja wdrażająca | Headless Browser (omijanie WAF) | Codziennie | Wdrażane |
| NFOŚiGW (Fundusz Środowiska) | Programy sektorowe (OZE, Eko) | Parser harmonogramu & crawler PDF | Codziennie | Aktywne |
| ARiMR (Agencja Rolnictwa) | Wsparcie rolnictwa i rozwoju wsi | Scraping warstwy informacyjnej | Co 2 dni | Aktywne |
| Operatorzy Regionalni (ARR, Województwa) | Wojewódzkie i lokalne dotacje | Dedykowane konektory HTML / RSS | Codziennie | Aktywne |
Każda informacja prezentowana w naszym serwisie posiada przypisane źródło (URL) oraz zrzut stanu naboru. Dzięki temu masz pewność, że dane nie zostały zmodyfikowane w sposób niezgodny z oficjalną specyfikacją. W przypadku rozbieżności system automatycznie podświetla różnice w wersjach regulaminu i dokumentacji.