Nieuwe databron: Verkeersborden overzicht en locatie

Script blijft (na ruim 4 uur draaien) hangen op tijdsitp:
2020-08-17T12:50:03.399Z

Dat is het hoogste tijdstip in de dataset, en wordt eindeloos opgevraagd. Ik zal een issue op github aanmaken.

Deze manier van data aanbieden is trouwens verschrikkelijk @ndw :frowning:

1 like

Op zo’n manier aanbieden heeft inderdaad weinig met open data te maken

Gelukt! Ik heb een pull request gedaan met een fix voor het python script.

En ik heb de csv opgeschoond en geconverteerd naar een 291mb GeoPackage met 834k verkeersborden. Wie interesse heeft, laat maar weten.

6 likes

De fix is opgenomen in de originele code. Mooie samenwerking zo. GitHub - Uijtdehaag/Verkeersborden: Harvest de verkeersborden die via Nationale Databank Wegverkeersgegevens (NDW) als open data beschikbaar zijn gesteld.

3 likes

Mooi gedaan heren. Ik heb wel interesse dus laat maar weten hoe ik die geopackage kan krijgen.

Heb hier een gezipte gpkg neergezet (67mb). Ik kan nergens een licentie vinden, dus geen idee of dit mag. Behalve dat er staat “Verzamelde gegevens worden via de Nationale Databank Wegverkeersgegevens (NDW) als open data beschikbaar gesteld, bijvoorbeeld aan leveranciers van informatiediensten en aan wegbeheerders.”

http://terglobo.nl/downloads/traffic_signs_ndw_20200820.zip

En het zijn eigenlijk een soort was/wordt mutaties, dus je zou een download en update script moeten hebben dat een actuele dataset bijhoudt. (Ik voel een verkeersbordactueelbestaand aankomen :D) Maar deze gpkg is leuk om mee te spelen, voor nu.

2 likes

Bedankt . Ik ben een beetje aan het freubelen gegaan en inmiddels als best een leuk kaartje in QGIS kunnen maken. Best interessante dataset voor Openstreemap. Dit om bv toegang (Access) te mappen. Hier een kaartje van wat gemeentes in de provincie Utrecht. Er is ook een WMS van zodat ook JOSM (editor voor openstreetmap) deze data zichtbaar te maken is. Ik heb hier alleen een beperkt aantal C en G borden genomen maar uiteraard is er veel meer mee te doen. Hoe dan ook… voor mij is dit een interessante set met gegevens. Smaakt naar meer.

1 like

Ik heb inmiddels ook een download-programmaatje gemaakt en alles gedownload, afgelopen weekend en heb nu 954.008 unieke entries opgehaald.
Waar ik tegenaan liep, was dat ik een heleboel dubbelen kreeg.
(Nog even los gezien van het feit dat het eerste van je 100 opgehaalde records steeds gelijk is aan de laatste van de vorige ‘batch’, als je als offset steeds de laatste publication_timestamp gebruikt).
Het blijkt dat de ‘offset’ (publication_timestamp) NIET in strikt chronologische volgorde komt.
Dat leverde bij mij ca 20% aan dubbelen op (1.2 miljoen records opgehaald om 954.000 unieken over te houden).
Ik kan nu geen kant en klare URL geven die gelijk 100 records ophaalt waarin dat zichtbaar is want de service lijkt momenteel plat te liggen (ik krijg nu 502 Bad Gateway terug), maar ik heb genoteerd dat de eerste groep dubbelen al na 1290 records optreedt.
Dit kan ik er nog wel aan toevoegen:
Na 2020-07-06 16:52:46.714 volgt 2020-07-06 16:52:40.381.
Een sprongetje terug van zo’n 6 seconden.
Dit verschijnsel trad best vaak op.

Een andere kleine tekortkoming is dat er soms wat rare unicode karakters zitten in de tekst_signs en in de straatnamen. Het eerste voorbeeld daarvan zit al in het 5e record: Schoonlo?rstraat.

Ik hoop dat ze dit soort dingetjes nog verbeteren…

1 like

Zeer veel interesse in de geopakkage van Raymond Nijssen.

Groet Jan Pieter

De link staat hier: Nieuwe databron: Verkeersborden overzicht en locatie - #16 door raymondnijssen - Datasets - Geoforum

Zeer bedankt. Nog even een vraag aangaande de aangeboden API. Zijn deze in de regel kant en klaar of moet je die zelf nog programmeren ? En waar laat je hem los ? Is dat in het python veld ? Ben wel leek in API, doch leergierig.

De API is gemaakt door NDW, is zeg maar de lokatie waar je je data op kunt halen. Een service dus. In dit geval wijkt de API nogal af van wat ik persoonlijk gewend ben. Normaal gesproken kun je meerdere parameters gebruiken, bijvoorbeeld gemeentecode, boundingbox of verkeersbordtype zouden hier wel handig zijn geweest. Maar in geval van de verkeersborden kun je alleen een datum/tijd meegeven en krijg je de 100 eerstvolgende verkeersborden vanaf dat moment.

Je wordt daardoor gedwongen om een script te schrijven, dat steeds de volgende 100 borden ophaalt totdat alle borden binnen zijn. Dat hebben een aantal mensen hier gedaan, en @Antoon_Uijtdehaag heeft zijn script gedeeld zodat ook anderen het kunnen gebruiken.

Zouden symbolen verkeersborden gebruikt mogen als voor symbolen voor een eigen kaart of zit je hier met copyrights?

Dank voor de uitleg.

Gr Jan Pieter

Er worden geen symbolen geleverd maar echte foto’s van de borden zelf. Geen mooie, maar schuin vanuit een auto.

Dat zag ik. Maar op Wikipedia staan de rvv borden afgebeeld die op te slaan zijn als afbeelding. Mijn vraag of dat mag.

Dat hangt van de Licentie af die aan het betreffende plaatje hangt

bijvoorbeeld: https://upload.wikimedia.org/wikipedia/commons/7/70/Nederlands_verkeersbord_A1.svg
heeft een licentie in het “Public domain” (dus vrij van copyrights)

Het is misschien goed om dit met betrekking tot het ‘hergebruik’ van images van commons te lezen

Dank Wouter Visscher

Ik ga me erover inlezen.

Hallo,

Ik heb getracht met je API de verkeersborden te downloaden, maar kreeg na 6 uur een foutmelding.
Heb jij inzicht in de betekenis hiervan?

Groet Jan Pieter

Het bestand traffic_signs.csv mocht niet worden aangemaakt. Onvoldoende rechten.