Category Archives: open data

Heel Holland BAGt, met elke dag een nieuwe BAG

De service van de BAG (Basisregistratie Adressen en Gebouwen) is nu ‘dagvers’: elke dag krijgt de service een update. Het is mooi dat er een actuele kaart is voor alle gebruikers. En dat zijn er nogal wat: in 2017 had de BAG maar liefst 30 miljoen hits! Vanuit het content-team is er hard gewerkt om de BAG dagvers te krijgen. Wat is ervoor gedaan? En wat is er daardoor allemaal mogelijk?

In de afgelopen jaren

De BAG was één van de eerste datasets die Esri Nederland beschikbaar stelde voor haar klanten. Datasets van PDOK, zoals basisregistraties, worden beschikbaar gesteld in GML-formaat. Om organisaties tijd te laten besparen met het omzetten van dit gecompliceerde formaat biedt Esri Nederland sinds 2013 de BAG in het formaat file geodatabase. Eerst werd dit halfjaarlijks gedaan en later kwam er een maandelijkse update.

En heel Holland BAGt inmiddels! Naast de 30 miljoen hits op de services heeft de kosteloze Datasets-groep van ArcGIS – waar alle datadownloads terug te vinden zijn – inmiddels al 1385 leden. Natuurlijk worden al onze file geodatabases geleverd met bijpassende map documents (.mxd voor gebruik in ArcMap) en map files (.mapx voor gebruik in ArcGIS Pro).

Nieuwe ontwikkelingen

De technologische innovaties denderen ondertussen gestaag door en inmiddels hebben we ook alle lagen als individuele services beschikbaar. Deze services zijn direct in de ArcGIS-applicatie (zowel op desktop, mobiel als online) te gebruiken. En met gebruiken bedoel ik ook écht gebruiken (!), niet alleen bekijken. Want het is mogelijk om op deze BAG-services selecties te doen, exports en zelfs analyses uit te voeren. Op deze manier heeft u toegang tot alle gebruikstoepassingen die u nodig heeft, zonder dat u zelf de data hoeft te beheren. En dat scheelt natuurlijk veel tijd.

Mijn collega’s en ik zijn echter altijd op zoek naar nieuwe innovaties en de laatste maanden heb ik gewerkt aan ons allernieuwste project; de BAG versie 2, die wij omschrijven als BAGv2. De BAGv2 is een dagverse service, die dus elke nacht geüpdatet wordt. Zo weet u zeker dat u altijd de meest recente data van de BAG gebruikt, zonder dat u deze zelf hoeft te beheren.

Ook wij maken dankbaar gebruik van de service. Zo zagen we onlangs dat een medewerker van de gemeente Amersfoort de verblijfsobjecten in een pand op een wel heel originele manier had geregistreerd. Daar werden wij wel vrolijk van! Helaas werd dit al snel weer aangepast, en door de dagversheid van de nieuwe BAG konden we er dus niet lang van genieten!

smiley-bag-amersfoort

Verblijfsobjecten in een pand in Amersfoort

In de dataset zelf hebben we wat wijzigingen doorgevoerd. Dit is zowel in de service als in de file geodatabase terug te vinden. Zo hebben we besloten om de historische gegevens niet meer mee te leveren. Deze gegevens zorgden voor veel verwarring en daarom leveren we op dit moment alleen nog de huidige BAG-data. Daarnaast hebben we ons datamodel verbeterd. We genereren onze adressen op een andere manier en hebben onze relatieklassen verbeterd, waardoor deze nog accurater zijn dan voorheen. Ook hebben we verblijfsobjectvlakken toegevoegd aan de file geodatabase.

Analysemogelijkheden

Verder wilden we de BAG toegankelijker maken voor analyses. Voor ik bij Esri kwam werken woonde ik in Schotland waar ik GIS & Data Officer was bij het Central Scotland Green Network Trust. Daar behoorden geografische analyses tot mijn belangrijkste taken. Hierbij maakte ik meestal gebruik van datasets van andere partijen, waarbij ik geen invloed had op het datamodel. Ik weet dan ook als geen ander dat het datamodel van de benodigde datasets analysemogelijkheden erg kan beperken. Dit wilden we dan ook verbeteren in deze nieuwste BAG-versie.

Voorheen had de Verblijfsobject-laag één attribuut voor gebruiksdoel. Als een verblijfsobject meerdere gebruiksdoelen had, dan stonden deze allemaal in hetzelfde veld. Voor een analyse bleek dit erg onhandig. Nu hebben we behalve dit attribuut een aantal extra attributen toegevoegd. Zo is er nu een attribuut met het eerst-voorkomende gebruiksdoel, handig voor high-level analyses waar detail minder belangrijk is. Voor de gedetailleerdere analyses hebben we voor ieder gebruiksdoel een aparte kolom gemaakt in de attribuuttabel. Hierin wordt voor ieder gebruiksdoel aangegeven of het op het individuele verblijfsobject van toepassing is. Zo zijn analyses eenvoudiger uit te voeren op een of meerdere gebruiksdoelen.

bag-dagvers

De nieuwe gebruiksfunctie-attributen in de BAG-verblijfsobjecten, weergegeven in ArcGIS Online

We hopen dat deze verbeteringen in de BAG-service het werk vereenvoudigen. Het betekent ook dat we de oude service in maart uitfaseren. Vergeet niet de REST-link die u gebruikt te controleren, omdat deze is veranderd naar https://basisregistraties.arcgisonline.nl/arcgis/rest/services/BAG/BAGv2/MapServer. Als u de service toevoegt aan uw applicatie door naar het item in ArcGIS Online te zoeken, dan zult u direct de nieuwste BAGv2 toevoegen. De BAG-lagen staan ook individueel geregistreerd, waardoor er nog meer gebruiksmogelijkheden direct op de service van toepassing zijn.

 Mocht u vragen of opmerkingen hebben, dan horen wij dat graag via content@esri.nl.

Naar de dagverse BAG-service

Naar de Datasets-groep (hier kunt u als lid onze nieuwe BAG file geodatabase downloaden)

Posted in Achter de schermen, Content, open data | Tags: , , , , , | Reacties uitgeschakeld voor Heel Holland BAGt, met elke dag een nieuwe BAG

Als iedereen praat over smart, hoe pak je smart city-vraagstukken dan concreet aan?

Steeds meer steden willen een smart city zijn. Maar wanneer mag jezelf als stad een smart city noemen? Ik hoor steeds meer mensen om mij heen die een smart city wel zien zitten, want laten we eerlijk zijn: wie is nu niet ontzettend benieuwd hoe zijn stad over 10 jaar eruit ziet? Innoveren hoort bij Nederland. Hoe doen we dat? Hoe kunnen we nú onze kennis goed inzetten dat we hier in de toekomst van profiteren? En waarom is locatie essentieel in het analyseren van smart city-vraagstukken? Dit was één van de vragen die aan ons werd gesteld op het jaarlijkse topontmoeting smart city-evenement in Eindhoven.

Mensen trekken massaal naar de stad. Om te wonen, werken of te recreëren. En als er steeds meer mensen in de stad zijn, leidt dat ook tot steeds grotere uitdagingen op het gebied van veiligheid, economie, mobiliteit en duurzaamheid. Steden moeten dus snel anders georganiseerd worden om leefbaar te blijven. Zelfs zo snel dat de Rijksoverheid allerlei innovatieve projecten ondersteunt en een nationale smart city-strategie heeft opgesteld om steden vooral maar smart te maken. De urgentie is dus aanwezig.

Smart werken kan dankzij data. Tegenwoordig is data en ook open data overal aanwezig. We leven in een tijd waarin alles gevolgd kan worden met behulp van sensoren. Bijvoorbeeld de verkeerstromen meten, de loopstropen van bezoekers door een stad heen, het geluids- of warmteniveau of de luchtkwaliteit. Er is dus heel veel data beschikbaar.

Hoe kunnen we onze kennis zo inzetten dat we effectief gebruik maken van deze data? Ons antwoord: door locatie als uitgangspunt te nemen en deze data (uit verschillende bronnen) op een kaart te zetten. Door op basis van deze locaties analyses uit te voeren en zo patronen te ontdekken. Wist u bijvoorbeeld dat als u de bronnen van bijvoorbeeld het weer, het wegverkeer en de luchtkwaliteit op een kaart zet, dat u realtime kunt zien wat er gebeurt? Dat deze data als big data wordt opgeslagen en dat u de gegevens over een periode kunt analyseren? Zo ontdekt u nieuwe patronen en kunt u beleid slim aanpassen.

Dashboard

Met dit voorbeeld stonden mijn collega Bert Vermeij en ik vorige week op het smart city-evenement 2017 in Eindhoven. Een jaarlijkse topontmoeting waarbij verschillende mensen uit de energie- en mobiliteitssector, technisch universiteiten en beleidsmedewerkers van diverse overheden aanwezig waren. Een groep mensen die doorgaans nog niet met een Geografisch Informatie Systeem werkt. Maar wat was het vernieuwend voor ze! Een platform waarbij op basis van locatie allerlei (realtime) data geanalyseerd wordt.

Wat is uw idee? Vanuit Esri Nederland dagen we u graag uit om úw idee te presenteren. Welke bronnen zou u willen combineren op de kaart? Als u nog niet waar u kunt beginnen helpen onze smart city experts u graag verder. Informeer naar de mogelijkheden via contact@esri.nl

Posted in open data, Smart communities | Tags: , , , , | Reacties uitgeschakeld voor Als iedereen praat over smart, hoe pak je smart city-vraagstukken dan concreet aan?

Ontketen GIS in de keten

In het omzetten van data naar informatie is het steeds belangrijker om deze inzichten te kunnen delen met anderen. Dit leidt tot informatieketens, zowel binnen een organisatie als tussen organisaties onderling. Als u hier mee bezig bent, vraagt u zich wellicht af: Hoe faciliteer ik dit? Op welke manier kan ik garant staan dat mijn data niet in verkeerde handen valt? Hoe zorg ik ervoor dat de beheerlast zo klein mogelijk blijft en voorkom ik het steeds maken van een export?

Volgens Wikipedia is ketensamenwerking “een vorm van samenwerking tussen partijen die opeenvolgend met elkaar samenwerken aan één product of proces.” Een mooi voorbeeld is een inspectieproces. De inspecteurs gaan naar buiten en leggen waarnemingen vast. Deze waarnemingen vormen de input voor het maken van een diagnose. Uitgezet in de tijd leidt dat tot een prognose. En tot slot worden herstelwerkzaamheden uitgevoerd. In zo’n keten wil je dat de data voor alle betrokkenen beschikbaar is, zonder dat ze lastig gevallen worden door niet relevante informatie.

Een voorbeeld waaruit blijkt dat in verschillende stappen van een keten er andere informatie nodig is: de inspecteur moet in het veld alle schades vastleggen zonder beïnvloed te worden door eerdere waarnemingen. In de diagnose en prognose is de historie juist erg belangrijk! Bij de uitvoering moet de aannemer de voortgang kunnen rapporteren, de schades kunnen vinden en terugkoppeling kunnen geven over het resultaat.

Dit inspectieproces is een continu proces en de GIS-omgeving moet dit zo efficiënt mogelijk kunnen ondersteunen. Het ArcGIS-platform biedt veel mogelijkheden om dit in te richten, passend bij de organisatie. Op de Esri GIS Tech vertelde ik over de mogelijkheid van ‘Weergaven op de data’. Dit is slechts één van de mogelijkheden die het platform biedt om samenwerking te faciliteren.

Tijdens de roadshow ‘Samenwerken in de keten’ gaan we dieper in op hoe een keten gefaciliteerd kan worden met technologie. Daarnaast gaan we het hebben over wat de best practices zijn om data te delen op een manier die beheersbaar is, die faciliteert dat mensen precies krijgen wat ze nodig en/of mogen hebben en hoe deze informatie vervolgens op een krachtige manier gedeeld wordt binnen én buiten de keten(s).

Wilt u meer weten? Klik hier voor meer informatie over de roadshow.

Posted in Apps, ArcGIS, ArcGIS Online, open data, samenwerken in de keten | Tags: , , | Reacties uitgeschakeld voor Ontketen GIS in de keten

Vandaag is rood

De luchtfoto 25cm is begin dit jaar beschikbaar gesteld als open data. Beeldmateriaal.nl – een samenwerking tussen een aantal gemeenten, de provincies, Rijksoverheid en de waterschappen – heeft de Luchtfoto 25cm als open data vrijgegeven. Dit beeldmateriaal is veel gedetailleerder dan de huidige luchtfoto van 50cm. Met de vrijgave van de 25cm Luchtfoto zijn we ook verblijd met een ander cadeautje: de Colour Infra Red (oftewel CIR) luchtfoto. Beide datasets zijn inmiddels door Esri Nederland als onderdeel van ArcGIS Content als weblaag beschikbaar gemaakt voor ArcGIS-gebruikers. Wat is een Colour Infra Red luchtfoto eigenlijk? En wat kun je ermee?


Een gedeelte van de CIR-luchtfoto van Nederland.
Copyright beeldmateriaal.nl, Esri Nederland

Colour Infra Red is een bijzonder vorm van visualisatie. Het wordt ook wel ‘false colour’ genoemd, omdat de foto er voor ons nep uitziet. De foto bestaat voornamelijk uit tinten rood en grijs, wat ons niet meteen aan het groene Nederlandse landschap doet denken. Een CIR visualiseert de kleuren die wij normaal waarnemen op een andere manier. Maar nog belangrijker, behalve de gebruikelijke RGB (rood/groen/blauw) banden van een gewone kleurenfoto, wordt ook infrarood gebruikt. Dit licht is normaal niet met het blote oog waarneembaar, maar in een CIR-afbeelding krijgt infrarood een rode kleur. Het gewone rood wordt groen, groen wordt blauw en blauw wordt zwart:

blog-cir-luchtfoto-25cm-esri-rood

 

Dit heeft niet alleen een interessant effect op de afbeelding van de foto, maar het betekent ook dat bepaalde zaken er beter door te zien zijn. Door de foto te bekijken is er al veel uit halen! Met name het infrarood is belangrijk. Infrarood weerspiegelt namelijk op het chlorofyl, het groen in planten. CIR wordt daarom ook meestal gebruikt om vegetatie te analyseren. Hoe gezond is de vegetatie? Wat voor soorten bomen groeien daar? De verschillende tinten rood kunnen duiden op gezonde, snel groeiende vegetatie (veel chlorofyl is felrood) of juist zieke of dode planten (lichtroze) en het is ook mogelijk om verschillende plantensoorten te onderscheiden aan de hand van hun chlorofylwaarden. Zo hebben naaldbomen minder chlorofyl omdat ze geen bladeren hebben, en zijn dus ook minder felrood gekleurd.

 

Deze eigenschap zorgde ervoor dat CIR-fotografie voor het eerst al werd gebruikt in de Tweede Wereldoorlog. Omdat het verschil tussen vegetatie en niet-vegetatie snel is te zien, kon gericht camouflagemateriaal opsporen. Behalve vegetatie kun je ook andere informatie uit een CIR-luchtfoto halen. Nu is het verschil duidelijk te zien als we bijvoorbeeld naar sportvelden kijken. In een CIR-afbeelding wordt een veld van kunstgras weergegeven met grijs, terwijl een veld van natuurlijk gras met rood is afgebeeld. Door de mens gemaakte objecten zijn namelijk vaak grijs, met de uitzondering van kunstmatige objecten die rood of blauw/groen zijn, deze worden immers als groen en respectievelijk paars aangegeven. Zo kun je zien hoe verstedelijkt een gebied is. En: is een weg verhard of onverhard? Colour Infra Red ken ik zelf al langer. In archeologie, waar ik een achtergrond in heb, wordt via CIR gekeken naar onregelmatigheden die kunnen wijzen op archeologische sites, zoals celtic fields.

blog-cir-luchtfoto-25cm-esri-rood-2
De grachten van Amsterdam in Colour Infra Red, waarbij rode daken groen worden afgebeeld. Copyright Beeldmateriaal.nl, Esri Nederland.

Wat is eigenlijk de staat van het water? Water kan verschillende kleuren hebben, wat afhangt van de diepte en de helderheid van het water. Diep, helder water, wordt in een CIR-afbeelding als zwart afgebeeld. Als het water ondiep is (en daarom de bodem nog weerkaatst wordt) of het water troebel is (en er dus veel organische deeltjes in het water weerkaatst worden), wordt dit in een CIR-afbeelding blauw.

blog-cir-luchtfoto-25cm-esri-rood-3
Water kan in een CIR-afbeelding verschillende kleuren hebben, afhankelijk van de diepte en helderheid. Copyright Beeldmateriaal.nl, Esri Nederland.

De nieuwe Colour Infra Red luchtfoto is een gedetailleerde luchtfoto, maar met een nieuwe kleurverdeling. Dit kan het eenvoudiger maken om bepaalde objecten beter te herkennen en te analyseren. Bijvoorbeeld om het landschap te analyseren, vegetatie te monitoren, wordt er gekeken naar kunstmatige (door de mens gecreëerde) elementen in het landschap. CIR wordt ook voor militaire doeleinden gebruikt, omdat kunstmatige camouflage gemakkelijk is te herkennen.

 

Heeft u de nieuwe CIR-luchtfoto al voor een project gebruikt? Laat het ons weten via content@esri.nl!

 

Klik hier voor de nieuwe RGB luchtfoto 25cm weblaag

Klik hier voor de nieuwe CIR-luchtfoto 25cm weblaag

Bekijk de speciale StoryMap over de nieuwe beelden van de CIR Luchtfoto 25cm

Bekijk de speciale StoryMap over de nieuwe beelden van de Luchtfoto 25cm

Posted in ArcGIS, Content, open data | Reacties uitgeschakeld voor Vandaag is rood

Open data, the battle

Het was in de herfst van 2010 toen we bij Esri Nederland voor het eerst tegen het concept ‘open data’ aanliepen. We waren meteen enthousiast. Als organisaties zonder beperkingen data ter beschikking stellen, kunnen anderen daarmee iets nieuws maken. Zou de data dan ook nog structuur hebben en actueel zijn, dan neemt de kans alleen maar toe.

app-waterDelen

Nu 5 jaar later is het dromen en filosoferen over open data grotendeels realiteit geworden – hoewel werken met open data af en toe een gevecht is geweest. Esri heeft anderen mogen ondersteunen om datasets open te maken en we delen onze kennis op dit gebied. Ook gebruiken we zelf open data om bijvoorbeeld tot nieuwe basiskaarten te komen. Ten slotte stellen we nieuwe datasets als open data ter beschikking, zoals bijvoorbeeld de postcodekaart van Nederland.

Ideation
Ondanks dit blijft aandacht voor open data noodzakelijk. Wedstrijden, die uitnodigen om met open data te stoeien, zijn daarvoor een goed middel. Dit proces wordt ook wel ‘ideation’ genoemd. Rijkswaterstaat en KNMI hebben daarom een heuse Open Data Battle georganiseerd. Wij voelden ons uitgedaagd door de vele datasets.

Aan de slag

Na de uitgebreide toelichting, tijdens de informatiedag gegeven door de verschillende bronhouders van de open data, hebben wij eerst organisatiebreed een oproep gedaan. Met een groep collega’s zaten we via een conference call ‘bij elkaar’ en werden een hoop ideeën gedeeld. We zijn aan de slag gegaan met de vraag: ‘Is het mogelijk een routeplanner voor ‘op het water’ te bouwen, rekening houdend met de hoogte van een boot en eventueel sluistijden? We voelden bij dit idee wat lichte frustratie van een paar collega’s doorklinken, wat altijd een goede motivator is voor een innovatief idee.sluis

How it’s made

Uit de data van opendatabattle.nl hebben we de vaarwegen en bruggen geselecteerd (bron: NWB). Vervolgens hebben we per brug de maximale hoogte, bij geopende en gesloten status, bepaald. In een aparte kolom hebben we aangegeven of bruggen open kunnen, of niet. Dit heeft namelijk wel effect op de voorgestelde route. Het lijnsegmentenbestand van vaarwegen hebben we opgesplitst om zo navigeren vanaf en tot aan een brug mogelijk te maken. Zo is een nieuw netwerk opgebouwd, voorzien van routeringsparameters. Dit nieuwe netwerk hebben we als (REST-)service gepubliceerd, die vervolgens door de webapplicatie is ontsloten.*

En nu?

Met een nominatie op zak zijn we benieuwd waar we in ‘the battle’ eindigen. We hadden graag wat meer tijd gehad om een breder netwerk van organisaties te laten aansluiten bij deze data. Deze versie van ‘WegWijs op het Water‘ (de alliteratie is van collega Marcel de Rink) zien we als een soort halffabricaat, waarmee we vooral ook anderen op een idee willen brengen. Omdat de open data van Rijkswaterstaat en KNMI nog veel meer mogelijk maken kunnen we dit idee met een andere partij samen een stap verder brengen? We blijven nog even grasduinen door de verschillende databronnen. Daar zijn nog veel ideeën uit te halen. Voorlopig kunnen we nog aan de slag met het waarmaken van onze dromen en filosofieën over open data.

*Voor de geïnteresseerden: de gebruikte tools zijn Network Analyst, de ETL-tool ArcGIS Data Interoperability, ArcGIS for Server, HTML5, ArcGIS JavaScript API en een aantal standaard widgets. Voor meer informatie, e-mail naar Mark Jagt via contact@esri.nl

wegwijs-water

Posted in Achter de schermen, Apps, open data | Tags: , , , , , , , , , | Reacties uitgeschakeld voor Open data, the battle