Category Archives: ArcGIS Online

ArcGIS Content, een kijkje in de keuken

Goede basisdata is het begin van een goed geografisch informatiesysteem. Vijf jaar geleden lanceerde Esri Nederland de eerste versie van de topografische basiskaart in het Rijksdriehoekstelsel. In navolging daarvan kwamen andere basiskaarten beschikbaar en werd belangrijke open data aangeboden, zoals de BAG, BGT, BRT, postcodevlakken en demografie. Hoe zag het er de afgelopen jaren achter de schermen eigenlijk uit? Als beheerder van de contentomgeving wil ik jullie graag een persoonlijke kijk geven in onze ‘contentkeuken’.

Het prille begin

We begonnen met een basisinrichting van ArcGIS Server. Een omgeving die in een extern datacentrum stond. Vanuit die omgeving boden we een aantal basiskaarten aan. De belangrijkste gebruikers waren ArcGIS Desktop-gebruikers; maximaal enkele miljoenen hits per maand. Een groot contrast met nu, met per dag meer dan 5 miljoen hits op alle ArcGIS Content-services.

In 2012 werd ArcGIS Online geïntroduceerd. Het gebruik van de basiskaarten nam daardoor toe, want ze waren beter vindbaar. We moesten daardoor de omgeving wel uitbreiden, maar de architectuur voldeed nog. In die tijd las ik ergens dat een goede beheerder zo min mogelijk te doen heeft (dan is tenslotte alles up-and-running). Dat was van toepassing op die tijd: het beheer was nog eenvoudig.

Wat er veranderde met het AHN

2014 was een omslagpunt: het Actueel Hoogtebestand Nederland (AHN) werd vrijgegeven. Dit betekende het einde van de eenvoud van onze ArcGIS Server-omgeving met alleen basiskaarten. De toevoeging van het AHN zou alle lucht uit de servers persen met grote risico’s op storingen.

Met de opgedane kennis uit het verleden gingen we terug naar de tekentafel. Betrouwbaarheid en snelheid waren het credo. In de praktijk betekende dit een veelvoud aan servers, alles redundant uitgevoerd en verspreid over twee datacenters. De infrastructuur was hiermee klaar om de groei in gebruik verder te blijven faciliteren.

Leren van de Esri ANP Verkiezingskaarten

Hoewel de nieuwe omgeving op verschillende scenario’s was voorbereid, volgde al snel een leerzaam traject: de verkiezingen. Een relatief eenvoudige kaart visualiseerde realtime per gemeente de verkiezingsuitslag. Veel nieuwssites plaatsten deze kaart, waarmee er direct een groot bereik was. Dit ging om duizenden hits per seconde. We moesten snel bijschalen… en nog meer bijschalen qua hardware. Een uitzonderlijke situatie, maar ook dan moet de kaart blijven werken.

Met alle ervaringen zijn we continu bezig om de contentomgeving te monitoren, slimmer in te richten en te automatiseren. Door de aanwezige redundantie in de infrastructuur is er altijd wel voldoende capaciteit. Zelfs als er een server uitvalt. Er vielen begin vorig jaar op één moment zelfs meerdere servers uit. Graafwerkzaamheden zorgden voor meerdere glasvezelkabelbreuken bij één van de datacentra. Wij weten van die situatie, maar gebruikers van onze kaarten hebben het nooit gemerkt.

Blijven groeien

We zitten niet stil. Dat kan ook niet, want elk jaar blijft het gebruik van ArcGIS Content verdubbelen. Als beheerder vind ik het fantastisch om bij te mogen dragen in het groeien van deze omgeving. De groei blijft onze verwachtingen overtreffen. Het contentteam zelf groeit ook mee, het aanbod groeit mee en de hoeveelheid gebruikers groeit mee.

Ik ben er trots op dat we een robuuste omgeving aanbieden, waarin we gebruikers kunnen faciliteren met een rijke hoeveelheid content en de uitval van servers gewoon kunnen opvangen. En achter de schermen werken we alweer aan de volgende uitbreiding van de back-end, zodat we de betrouwbaarheid en snelheid van ArcGIS Content blijven waarborgen.

LinkedInFacebookTwitterDeel deze blogpost
Posted in ArcGIS, ArcGIS Online, Content, Support | Tags: , , , , , | Plaats een reactie

Vernieuwde topografische basiskaart, een kijkje in de keuken

ArcGIS Content is een volwaardig product binnen het ArcGIS-platform. Het huidige aanbod is zeer gevarieerd en bestaat onder andere uit Basisregistraties, Grenzen en plaatsen, Geocoderen en routeren, Hoogtegegevens, Demografie en lifestyle en nog veel meer.

Esri Nederland startte het leveren van content met de Topografische basiskaart in het Rijksdriekhoekstelsel (Topo RD). Er was en is een grote behoefte aan een topografische kaart in het Rijksdriehoekstelsel die naadloos gebruikt kan worden in het hele ArcGIS-platform. Dit blijkt onder meer uit het aantal tile requests op deze basiskaart. Op een gemiddelde werkdag zijn dit er nu al meer dan 4 miljoen.

Onlangs is de Topo RD in een nieuw jasje gestoken. Hierbij hebben we de kaart helemaal opnieuw samengesteld en gevisualiseerd. In dit blog licht ik de belangrijkste verschillen toe, maar graag ga ik eerst in op een vraag die ik laatst van een gebruiker kreeg: ‘Hoe maak je eigenlijk zo’n basiskaart?’.

Zoomniveaus
Bij elke goede basiskaart wordt er op verschillende zoomniveaus verschillende data getoond: wanneer je ver bent uitgezoomd wil je bijvoorbeeld geen fietspaden zien, als je diep gaat inzoomen juist wel. Bij (raster) basiskaarten wordt dit geregeld door verschillende zoomniveaus te hanteren en voor ieder zoomniveau een aparte kaart te maken. Voor de basiskaarten van Esri Nederland geldt, dat deze zich in deze context houden aan Praktijkrichtlijn Tiling 1.1 van Geonovum. Deze richtlijn hanteert 15 zoomniveaus en dus bestaat de Topo RD-basiskaart uit 15 logisch opeenvolgende, maar wel verschillende kaarten. De kaart die op het diepste niveau getoond wordt, wordt door middel van een resampling-techniek ook getoond op twee diepere niveaus. Hierdoor heeft de Topo RD-basiskaart dus eigenlijk 17 schaalniveaus.

Bij het maken van een kaart voor een bepaald zoomniveau, wordt eerst de primaire databron bepaald. Vervolgens wordt er gekeken wat er uit die databron wordt gebruikt. Mochten er zaken missen in de primaire databron, dan wordt er gekeken of er ook data uit andere bronnen toegevoegd kan worden.

Oude en vernieuwde Topografische basiskaart: de verschillen
De verschillen tussen de oude en de vernieuwde Topo RD zitten vooral in de gebruikte databronnen. Voor geen enkel zoomniveau is de primaire databron hetzelfde gebleven. Hieronder een overzicht.

tabel topo

Dat alle primaire databronnen gewijzigd zijn, zal een gemiddelde gebruiker van de basiskaart niet opvallen. Dit is het gevolg van het kiezen voor min of meer dezelfde opmaak. Zo is bijvoorbeeld de kleur voor hoofdwegen (grijs) hetzelfde gebleven en zijn ook de meeste labels op dezelfde manier opgemaakt. Toch zal de oplettende gebruiker wel gemerkt hebben dat de kaart is gewijzigd, omdat er op verschillende vlakken wel degelijk voor een andere opmaak is gekozen. Daarnaast zorgt de toevoeging van de AHN met een hillshade voor een heel ander beeld in reliëfrijke gebieden.

Benieuwd naar de belangrijkste verschillen? Neem dan eens een kijkje in de StoryMap:

topo

 

Een kijkje in de toekomst

De Topo RD is op dit moment beschikbaar als een basiskaart die is opgebouwd met raster tiles. In de toekomst krijgen wij de mogelijkheid om RD-basiskaarten ook aan te bieden via vector tiles. Vector tiles hebben als voordeel ten opzichte van raster tiles dat ze altijd scherp zijn, dynamische labels hebben, weinig opslag vereisen én dat de opmaak achteraf door de gebruiker is aan te passen. Er is ook een nadeel ten opzichte van raster tiles: complexere symbologie is, in elk geval voorlopig, niet mogelijk met vector tiles. De huidige basiskaarten van Esri Nederland die opgebouwd zijn op basis van raster tiles, blijven we daarom actualiseren en verder ontwikkelen. We kunnen daarom verwachten dat er tijdelijk twee typen van de Topografische basiskaart in RD naast elkaar zullen bestaan, waarbij u als gebruiker zelf kunt kiezen voor de meest geschikte variant voor elk proces.

Reageren op dit blog kan via content@esri.nl

Posted in ArcGIS, ArcGIS Online, Content, Esri | Tags: , , , | Plaats een reactie

Editen van je bucketlist

Ons jaarthema is de ‘De kaart in uw handen’. Een uitleg daarvan is hoe je de kaart in handen van de mensen om je heen geeft. Dus ook aan mensen die niets met GIS hebben. Ik heb onlangs een kaart met mijn vriend gedeeld. Hij heeft werkelijk geen idee wat GIS is (‘iets met kaarten’).

Caroline (in rood) gaf de kaart in de handen van haar vriend door hun bucketlist in kaart te brengen.

Papieren kaart
Mijn vriend denkt bij een noemen van een kaart aan de ouderwetse papieren kaart die je in de auto vindt. Hoe kun je aan hem – en alle andere mensen die niets met GIS hebben – duidelijk maken dat je met de huidige technologie veel meer kan dan met alleen een papieren kaart?

Delen
Je kan online een kaart maken en deze heel eenvoudig delen. In één oogopslag kun je met een interactieve kaart laten zien wat je bedoelt. Je zult niet meer een verkeerde afslag nemen door het verkeerd kaartlezen van je bijrijder.Een kaart kan meteen antwoord geven op een vraag. “Een vraag die eigenlijk altijd begint met ‘waar’ als vraag”, zo zei een mede-Esri’aan. 

Dagdromen
Mijn vriend heeft dus ook een kaart in handen gekregen. We houden erg van reizen en waren op een zondag tijdens een wandeling aan het dagdromen waar we nog allemaal heen wilden. Naar aanleiding hiervan heb ik onze ‘bucketlist’ in kaart gebracht – letterlijk. Vervolgens heb ik er een webapplicatie van gemaakt en dit met hem gedeeld.

screenshot-bucketlist

De bucketlist van Caroline en haar vriend in de vorm van een StoryMap.

Loterij
Ik heb een eenvoudige kaart gemaakt, met punten op locaties waar we nog naar toe willen, de mogelijkheid om punten toe te voegen en wat aanvullende informatie toe te voegen. Meer niet. Hij was erg enthousiast, ook over de eenvoud hiervan, en onze bucketlist is al aardig groot geworden. Een winnend lot uit de loterij zou van pas komen.

Rollen
Afgelopen Esri GIS Tech hadden we het vaak over verschillende rollen. Je hebt een identiteit nodig om te kunnen werken in het ArcGIS-platform.  Je rol bepaalt hoeveel mogelijkheden je hebt. Over rollen gesproken… Op mijn eigen bucketlist-kaart zette ik een punt in Rotterdam, om precies te zijn: op het WTC-gebouw waar elk jaar de Esri GIS Tech plaatsvindt. Het leek mij gaaf om hier een presentatie te geven.

Caroline Herder (in rood) stond dit jaar ook op het podium van de Esri GIS Tech, iets wat op haar bucketlist-kaart stond.

Presentatie
Eerder schreef ik dat ik zo trots was op mijn mede-trainees
, die al een presentatie gaven. Mezelf zag ik het nog doen, spreken voor bijna 1000 man. In voorbereiding op de Esri GIS Tech 2015 werd het dit keer ook aan mij gevraagd en het is gelukt! Ik heb er daadwerkelijk gestaan, wat erg gaaf is!

Editen
En mijn bucketlist? Die moest ik nog wat aanpassen. Ik heb de symbologie veranderd, zodat de afgevinkte items zichtbaar zijn als afgevinkt. Leuk, dat editen van je bucketlist! Het volgende plan is een huis kopen, zodat mijn vriend en ik samen ook weer wat kunnen afvinken.

Posted in ArcGIS Online, Werken bij Esri Nederland | Tags: , , , | Plaats een reactie

Portal for ArcGIS: de menukaart in uw handen

Sommigen hebben weleens moeite om Portal for ArcGIS te plaatsen, een lokaal portaal waarmee services kunnen worden gehost. Waarom vindt Esri dit belangrijk? Om dat uit te leggen, vergelijk ik het ArcGIS-platform graag met dineren. Ik geef toe, een onverwachte analogie, maar hij werkt verhelderend.

Analogie dineren.

Analogie dineren bij een restaurant.

Analogie
In deze analogie is ArcGIS for Server de chefkok, die bij het bereiden van het diner gebruik maakt van keukengerei (de hardware) en ingrediënten (data) uit de voorraadkast (de database). De klant (browser) wordt bediend door de ober (de interface) en de voorraadkast wordt bevoorraad door een bezorgdienst (externe interface met push-model) of door zelf te foerageren (externe interface met pull-model).

Menukaart
Maar hoe weet je als klant wat je zoal kunt bestellen? Het ArcGIS-restaurant richtte zich tot voor kort vooral op vaste klanten en had daarom geen gebruiksvriendelijke menukaart nodig. ArcGIS for Server is als een chefkok die wel razendsnel een bestelling bereidt, maar niet zo’n gebruiksvriendelijk overzicht kan geven van alle mogelijke gerechten. Nu het ArcGIS-restaurant een breder publiek wil bedienen, is er behoefte aan een gebruiksvriendelijke menukaart. Portal for ArcGIS is die gebruiksvriendelijke menukaart, waarop je kunt zien wat je allemaal kunt krijgen. De onderdelen van het menu zijn informatieproducten (zie Bœuf bourguignon maar als informatieproduct).

Het ArcGIS-restaurant had tot voor kort <BR>geen gebruiksvriendelijke menukaart.

Het ArcGIS-restaurant richtte zich tot voor kort
op vaste klanten.

Thuiskok en thuisbezorgd.nl
De analogie gaat verder: de professionele GIS-gebruiker is een thuiskok die met ArcGIS for Desktop werkt in zijn eigen keuken (laptop). En een clouddienst als thuisbezorgd.nl is te vergelijken met ArcGIS Online: via deze clouddienst kun je gerechten bestellen van meerdere koks. Helemaal niet zo gek. In het dagelijks leven eet je ook niet altijd buiten de deur. Maar het is heel handig en fijn dat het kan. In deze analogie zie je goed dat Portal for ArcGIS onmisbaar is bij ArcGIS for Server.

Een keuze
Esri vindt het belangrijk om een keuze te bieden. Niet elke organisatie heeft de mogelijkheid om te werken in de cloud, andere organisaties hebben juist weer niet de resources om alles on-premises (lokaal) te regelen. In ArcGIS 10.3 biedt Esri een keuze: ArcGIS Online voor de cloud en/of Portal for ArcGIS on-premises. Bij elke ArcGIS for Server zit een Portal for ArcGIS. Daarmee heeft u de menukaart in uw handen.

Posted in Achter de schermen, ArcGIS Online, Esri | Tags: , , , | Plaats een reactie

Open data, hoe doe je dat?

Wat is open data en hoe pak je het aan? Het waterschap Groot Salland kwam bij ons met deze vraag. Binnen een paar weken hadden de medewerkers van het waterschap samen met mij het vraagstuk voor hun organisatie opgelost, inclusief de uitvoering. Omdat deze ervaring interessant kan zijn voor andere organisaties, delen we graag onze aanpak.

Eigenschappen open data
Over welk onderwerp praten we als het gaat over open data? Door met de ‘wat’-vraag te beginnen maken we helder voor alle betrokkenen wat open data is. Op het Open Data-portaal van de Nederlandse overheid (data.overheid.nl) wordt open data omschreven aan de hand van de volgende eigenschappen:

  • De data is openbaar.
  • Er berust geen auteursrecht of andere rechten van derden op de data.
  • De data zijn bekostigd uit publieke middelen, beschikbaar gesteld voor de uitvoering van die taak.
  • De data voldoen bij voorkeur aan ‘open standaarden’ (geen barrières voor het gebruik door ICT-gebruikers of door ICT-aanbieders).
  • Open data is bij voorkeur computer-leesbaar, zodat zoekmachines informatie in documenten kunnen vinden.

Valkuilen
Met deze kaders wordt al een stuk duidelijker wat valt onder open data. Op de website staat tevens een handreiking om in 4 stappen naar open data te komen. Hierin worden ook de juridische aandachtspunten genoemd. De valkuilen die naar voren komen – ook al voldoet de data aan de bovenstaande punten – zijn namelijk dat de data de belangen van derden niet mogen schaden. Immers, dit kan tot aansprakelijkheid en tot negatieve publiciteit leiden.

Open data

Bestuur koos de datasets via thema’s.

Kiezen datasets
Dan nu aan de slag? Nee, eerst nadenken met welke datasets je wilt beginnen. Op welke van jouw datasets zit de maatschappij te wachten? Welke dataset wil je als organisatie als open data gaan publiceren? Deze vraag heeft waterschap Groot Salland duidelijk kunnen beantwoorden door naar het bestuur te kijken. Het bestuur heeft aangeven welke datasets belangrijk zijn voor de bedrijfsvoering door de hoofdtaken als uitgangspunt te nemen. Die zijn opgedeeld in de thema’s Veilige dijken, Ruimte voor water, Schoon water, Genieten van water. Het waterschap zorgt voor voldoende oppervlaktewater van goede kwaliteit, beschermt het gebied tegen hoogwater en wateroverlast. Het waterschap werkt aan een duurzaam beheer van het watersysteem en de hiermee verweven waterketen.

Relatie met water
Datasets als ‘legger watersysteem’, peilbesluit en waterbergingen komen in een gesprek dan als vanzelf naar voren. Ook een dataset als ‘watererfgoed en cultuurhistorische objecten die een relatie met water hebben’ is aan het lijstje toegevoegd. Genieten van water gebeurt immers niet alleen met een bootje op het water, maar ook op de fiets, lekker langs de dijk fietsen om bij die oude watermolen af te stappen en van het uitzicht te genieten. Deze datasets zijn bekostigd uit publieke middelen, er berust geen auteursrecht of andere rechten op en ze zijn openbaar.

open data

ArcGIS Open Data is onderdeel van ArcGIS Online.

ArcGIS Open Data
Nu de ‘wat’-vragen beantwoord zijn, komt de ‘hoe’-vraag aan de orde. Deze was voor waterschap Groot Salland nog gemakkelijker te beantwoorden. Het waterschap wilde gebruik maken van ArcGIS Open Data, omdat dit Open Data-portaal inbegrepen zit bij ArcGIS Online. Met een paar klikken hebben we samen de publieke items ‘open’ gemaakt en vervolgens in een Open Data-groep geconfigureerd.

Developer-API
Met het inzetten van het Open Data-portaal zijn de onderdelen computer-leesbaar en open standaarden ‘getackeld’. Naast de gangbare formaten als shapefile, csv en kml is er een developer-API beschikbaar, handig voor ontwikkelaars om de data bijvoorbeeld aan te roepen via Geo-JSON. Het is mogelijk om een ‘abonnement’ op een dataset te nemen: een belangstellende krijgt dan direct een melding wanneer er een wijziging in de data is gemaakt. Kortom, het vinden van de data en gebruiken ervan is met ArcGIS Open Data op eenvoudige en toegankelijke wijze geregeld.

Voordeel voor maatschappij én organisatie
Niet alleen de maatschappij heeft voordeel bij open data, als organisatie heb je ook de nodige voordelen van open data. Je gaat als organisatie kritischer naar de kwaliteit van de data kijken. In samenspel met het beheerproces wordt de data breed en open uitgedragen, zodat iedereen ervan kan ‘genieten’ en feedback kan geven. Hiermee neemt de transparantie als waterschap (als overheid!) toe, het is namelijk gegevens onthullen waar iedereen van kan profiteren. Open data, doe je samen! Als organisatie en met de maatschappij.

Bekijk de ArcGIS Open Data-website van waterschap Groot Salland…

Download flyer ArcGIS Open Data…

E-mail voor meer informatie over ArcGIS Open Data naar contact@esri.nl.

Posted in Achter de schermen, ArcGIS Online | Tags: , , | Plaats een reactie