Terug naar de blog
    MarktinformatieAI-automatisering

    Concurrentie- en marktmonitoring met AI: een wekelijkse brief die echt gelezen wordt

    Informatie over concurrenten is openbaar maar verspreid. Een wekelijkse AI-brief kan het leeswerk doen, als hij uitgaat van echte vragen, toegestane bronnen gebruikt en elke bewering onderbouwt.

    Door Nichita Railean, CTOGepubliceerd 5 min leestijd

    De meeste bedrijven houden hun concurrenten al in de gaten, alleen niet systematisch. Iemand bekijkt de prijspagina van een concurrent vlak voor een verkoopgesprek, een ander stuurt een persbericht door, en een productmanager ontdekt een nieuwe functie maanden na de lancering. De informatie is openbaar, maar ligt verspreid, en niemand heeft tijd om alles elke week te lezen.

    AI kan het leeswerk doen. Het kan niet bepalen wat voor uw bedrijf belangrijk is, en u kunt het geen conclusies toevertrouwen die het niet met een bron kan onderbouwen. Dit artikel legt uit hoe u een wekelijkse markt- en concurrentiebrief opzet die klopt, binnen de regels blijft en kort genoeg is om echt gelezen te worden.

    Begin bij de beslissingen die de brief moet ondersteunen

    Een monitoringproject dat bij de bronnen begint, eindigt als nieuwsfeed. Begin liever met drie tot vijf vragen die uw team steeds opnieuw stelt. Heeft een concurrent zijn prijzen of pakketten aangepast? Werft hij voor een nieuwe markt of een nieuwe competentie? Heeft hij overheidsopdrachten in ons segment gewonnen? Welke klachten over hem komen telkens terug in reviews?

    Elke vraag heeft een eigenaar nodig die iets met het antwoord doet: sales voor prijzen, de directie voor nieuwe markten, product voor functies. Heeft een vraag geen eigenaar, schrap hem dan. Een brief die niemand in het bijzonder dient, is de eerste e-mail die mensen niet meer openen.

    Kies bronnen die u mag gebruiken

    Openbaar betekent niet dat er geen regels gelden. Loop deze punten door met degene die in uw bedrijf juridische vragen behandelt, voordat u een crawler op een website loslaat.

    • Robots.txt en gebruiksvoorwaarden. Met het Robots Exclusion Protocol, gestandaardiseerd als RFC 9309, geven sitebeheerders aan welke delen crawlers moeten overslaan. De RFC zegt zelf dat deze regels geen vorm van toegangsautorisatie zijn, dus respecteer ze en lees ook de voorwaarden van de site.
    • Opt-outs voor tekst- en datamining. De Europese auteursrechtrichtlijn 2019/790 staat tekst- en datamining van rechtmatig toegankelijke content toe, maar volgens artikel 4 kunnen rechthebbenden dat gebruik voorbehouden, voor online content bijvoorbeeld met machineleesbare middelen. Respecteer zo'n voorbehoud.
    • Databanken. De Europese databankrichtlijn beschermt de investering achter een databank. Herhaaldelijk en systematisch opvragen uit de product- of prijsdatabank van een concurrent kan dat recht schenden, ook als elke afzonderlijke pagina openbaar is. Volg wijzigingen en steekproeven, geen volledige kopieën.
    • Persoonsgegevens. Namen, profielen en berichten van medewerkers van een concurrent zijn persoonsgegevens onder de AVG, ook als ze openbaar zijn. Volg bedrijven, geen mensen, tenzij u een rechtsgrond heeft en de transparantieplichten hebt uitgewerkt.
    • Informatie van concurrenten zelf. De richtsnoeren van de Europese Commissie over horizontale samenwerking beschrijven wanneer informatie-uitwisseling tussen concurrenten een mededingingsprobleem wordt. Verzamelen wat iedereen kan zien is iets anders dan prijzen of plannen uitwisselen met een concurrent, direct of via een gezamenlijke derde partij. Houd de brief eenrichtingsverkeer.

    Binnen die grenzen is er genoeg om mee te werken: prijs- en productpagina's, release notes, persberichten, vacatures, aankondigingen van aanbestedingen zoals op het Europese TED-portaal, deponeringen in het handelsregister, jaarverslagen en openbare reviews. De Europese richtlijn over bedrijfsgeheimen behandelt het observeren of testen van een product dat voor het publiek beschikbaar is gesteld ook als een rechtmatige manier om informatie te verkrijgen.

    Hoe de wekelijkse pijplijn werkt

    De opzet die we in onze projecten bouwen, volgt altijd dezelfde stappen, ongeacht welke tools ze uitvoeren.

    1. Verzamelen. Haal volgens een schema een vaste lijst pagina's en feeds op. Een vaste lijst is makkelijker te toetsen op toestemming dan ongericht crawlen, en de brief wordt er herhaalbaar door.
    2. Wijzigingen detecteren. Sla elke versie op en vergelijk die met de vorige. De meeste pagina's veranderen in een gegeven week niet, en alleen de verschillen gaan door. Zo blijven de kosten laag en meldt het systeem geen oud nieuws als nieuw.
    3. Uitlezen. Een taalmodel zet elke wijziging om in een gestructureerd record: concurrent, soort wijziging, oude waarde, nieuwe waarde, datum en link.
    4. Indelen. Koppel elk record aan een van uw vragen en laat vallen wat bij geen enkele vraag past. Eenvoudige regels, zoals elke wijziging op een prijspagina, werken vaak beter dan een model vragen hoe belangrijk iets is.
    5. Opstellen. Een model schrijft een of twee zinnen per item, gegroepeerd per vraag, met de bronlink naast elke bewering.
    6. Controleren en versturen. Een mens leest het concept, haalt ruis weg, voegt context toe die het systeem niet kan kennen en verstuurt het. Dat kost minuten in plaats van uren, omdat het leeswerk al gedaan is.
    SignaalTypische bronWat AI doetWat een mens beslist
    Wijzigingen in prijs of pakketPrijspagina's en openbare prijslijstenZiet de wijziging en legt oude en nieuwe waarden vastOf en hoe u reageert
    Nieuwe producten of functiesRelease notes, productpagina's, persberichtenVat samen wat er veranderde en voor wieOf het de roadmap of het verkoopverhaal raakt
    WervingspatronenVacaturepagina's en vacaturesitesGroepeert vacatures naar rol, vaardigheid en locatieWat het patroon zegt over hun plannen
    OverheidsopdrachtenAanbestedingsportalen en gunningsberichtenVindt gunningen in uw categorieën en regio'sOf u de volgende keer inschrijft, en met wie
    KlantsentimentOpenbare reviewsitesGroepeert terugkerende klachten en complimentenWelke punten in uw eigen boodschap horen

    Houd het model eerlijk

    Twee manieren waarop het misgaat verdienen aandacht in het ontwerp. De eerste is verzinnen: een model dat een markt moet samenvatten, vult gaten met uitspraken die aannemelijk klinken. De oplossing zit in de structuur. Elke zin in de brief moet uit een uitgelezen record met link komen, en de controleur moet elk item met één klik kunnen nagaan. Is er deze week niets relevants veranderd, dan staat dat in de brief.

    De tweede is manipulatie. Uw systeem leest tekst die anderen hebben geschreven, ook uw concurrenten. OWASP zet prompt injection bovenaan zijn lijst van risico's voor toepassingen op basis van taalmodellen, en beschrijft indirecte injectie via externe content zoals websites. Behandel opgehaalde pagina's als data: het model dat ze leest krijgt geen tools, geen toegang tot interne systemen en geen mogelijkheid om iets te versturen. Een verborgen regel op een webpagina mag nooit kunnen veranderen wat uw systeem doet.

    Hoe u begint

    Draai vier tot zes weken een pilot met een kleine scope: een handvol concurrenten, drie vragen en een vaste lijst bronnen. Stuur de brief elke week naar de eigenaren van de vragen en stel hun telkens één vraag: heeft u iets gedaan met wat erin stond? Blijft het antwoord nee, pas dan eerst de vragen aan voordat u bronnen toevoegt. Heeft de brief zijn plek verdiend, breid dan uit met één soort bron tegelijk en houd de menselijke controle.

    Wilt u inschatten wat een wekelijkse brief uw team kan besparen? Beschrijf het huidige proces in de ROI-calculator. Twijfelt u nog waar AI in uw bedrijf moet beginnen, lees dan vijf vragen die de juiste eerste automatisering kiezen of bekijk veelvoorkomende workflows per bedrijfsonderdeel.

    Bronnen

    1. RFC 9309: Robots Exclusion Protocol (IETF)
    2. Directive (EU) 2019/790 on copyright in the Digital Single Market, Article 4 (EUR-Lex)
    3. Directive 96/9/EC on the legal protection of databases, Article 7 (EUR-Lex)
    4. Regulation (EU) 2016/679, the General Data Protection Regulation (EUR-Lex)
    5. EUR-Lex summary: Guidelines on horizontal cooperation agreements, including information exchange
    6. Directive (EU) 2016/943 on the protection of trade secrets, Article 3 (EUR-Lex)
    7. OWASP Top 10 for LLM Applications: LLM01 Prompt Injection
    8. TED, Tenders Electronic Daily: EU public procurement notices