In m'n goeien ouwen tijd heb ik ooit eens een webcrawler gemaakt. Nu zat ik erover na te denken om deze als professionele dienst aan te bieden, kan hem namelijk ook voor mezelf gebruiken.

Nu wil ik deze in gaan zetten, om webpagina's te scannen op bepaalde woorden/zinnen te scannen, en bij deze woorden/zinnen de webpagina op te slaan waarop deze staan. Dit kan handig zijn ivm copyright schending ed.

Is hier nu echt interesse in?

Lijkt me best slim en handig voor sommige websites. Kun je gerelateerde links ofzo aanbieden. Ik zeg maar iets.

Daarvoor heb ik meer nodig dan 1 servertje aan een 100mbit verbinding helaas. Het internet is daarvoor te groot en de capaciteit die ik hebt is te klein.

Wij hebben hier zeker een intresse in!

Als ik je goed begrijp kan ik hiermee rondspideren op ingestelde texten cq zinnen?

Afbeeldingen kan, deze wou ik eigenlijk nog achterwege laten omdat dit veel meer dataverkeer betreft.

Je kan hier inderdaad mee zoeken op ingestelde teksten, ook html codes. Ook zit er een functie in om .zip en .tar bestanden te kunnen unzippen/tarren en om de textfiles door te zoeken.

Ik denk inderdaad dat hier veel vraag naar is, dus waarschijnlijk kan ik er wel een abonnementsdienst van maken. Hierdoor kan ik dan ook een grotere capaciteit ontwikkelen.

Je verkoopt source dus niet? je wilt het in eigen beheer uitwerken?

Ik verkoop gewoonlijk nooit sources. Ik ga even kijken en rondvragen of er vraag naar een desbetreffende dienst is, het script aan de praat krijgen op PHP5 + wat verbeteringen aanbrengen (Zoals ik het nu zie, kom ik in een endless loop terecht. Zoals ik het nu zie is er vraag naar door diverse bedrijven.

Om dit zelf te hosten, is nogal een dure oplossing. 100mbit flatfee kost bij de meeste netwerken al vanaf 1600 euro per maand (Heb ik bij de ietwat betere gekeken, geen Linkup oid), exclusief rack en server kosten. Vandaar dat dit denk ik ook een groot voordeel is om shared te draaien.

Ik snap je intentie, echter wij willen het graag in eigen beheer.

wij werken dan ook niet met slechts 1 server :)

@ Olivier: Indien je wilt handelen, gelieve PB's te sturen of je eigen topic te openen, niet door topics te kapen.

Mijn excuses, ik pas het bericht aan.