Bij deze bied ik mijn diensten aan om data van het web, als gestructureerde data naar bijvoorbeeld een database of CSV (Excel) te exporteren.

Recent voorbeeld:
Klant x wilde een agenda met alle festivals op hun website.
Nu zijn er natuurlijk genoeg website's met dit soort agenda's om dit niet allemaal zelf te hoeven uitzoeken & invoeren.
Door de agenda's van enkele website's te combineren, werd dit vervolgens een topper in de zoek resultaten.
Enkel omdat het completer was, dan ieder andere agenda dat beschikbaar was op dat moment.
Hierdoor werden ook enkele weken handmatig werk bespaard en dat is altijd mooi mee genomen!

Enkele mogelijkheden:

• Gebruik om bepaalde website's te indexeren voor een eigen zoekmachine.
• Advertentie website's crawlen om bepaalde artikelen te vinden en te vergelijken.
• Veilingen in de gaten houden.
• Prijzen vergelijken van bepaalde partij'en.
• Data kopiëren wanneer er geen toegang is tot de database.
• Data migreren indien relaties leggen in de database vrijwel onmogelijk is geworden. (Joomla etc.)
• Email adressen verzamelen. (Deze moeten wel getoond worden op pagina's)
• Nog veel meer!

Soort werkzaamheden:
Ik bouw het maatwerk gedeelte boven op een framework, hierdoor kunnen we zelf regels toepassen en de data omvormen indien nodig. Het resultaat hiervan kan ik daarna naar ieder gewenste bron wegschrijven. (CSV, Excel, XML, MySQL, MSSQL etc) Eventueel kan dit ook in speciale formaten voor bijvoorbeeld CMS imports.

Omschrijving van de werkzaamheden:
Geautomatiseerd data mining / scraping, hiervoor gebruik ik een zelf ontwikkelt framework waaraan ik in de afgelopen 2 jaar gebouwd heb.

Doordat dit volledig door mij gebouwd is, is het opzetten en uitbreiden met minimale inspanning te realiseren.
Ook is het een mogelijkheid om periodiek de data te verversen waardoor alles up-to-date blijft.

Hoe werkt het?
1) U levert een website aan, bij voorkeur meteen een voorbeeld url, van een voorbeeld pagina waarvan u data wilt verzamelen.

2) U geeft aan welke informatie u nodig heeft, vervolgens ga ik kijken hoeveel werk het gaat zijn om dit te realiseren. Dit hangt vooral af van de opbouw van de pagina, snelheid van de server van de website etc. We willen natuurlijk niet de web server overbelasten.

3) Ik geef een offerte af, en indien akkoord lever ik deze data aan in de gewenste vorm voor de afgesproken hoeveelheid.

In geval van goed gestructureerde pagina's kan dit binnen enkele uren zowel ontwikkeld en omgezet zijn.

Neem gerust contact op indien interesse.
Dit kan via de website of privé berichten, meestal binnen 24 uur reactie.