2014_CBS_10077 - Bestek GAC/2014/2444 - Raamcontract voor het leveren van diensten door (een) externe bureau(s) voor veldwerk marktonderzoek 2015-2018. Selectie kandidaten en bestek - Goedkeuring

Nr.

Naam

Motivering

Score

Selectiecriterium nr. 1: de kwaliteit van het management van de onderneming
Beoordeling op 5 punten

cv’s van het werkelijke management van de onderneming (en enkel daarvan)

1

Checkmarket bvba

Uit de cv’s van de managers blijkt te weinig relevante expertise voor het zelf uitvoeren van marktonderzoek, veeleer go-between functies

0,5

2

De Martelaere & Co v.o.f.

Uit de cv’s van de managers blijkt relevante expertise en jarenlange ervaring voor het zelf uitvoeren van marktonderzoek.

4,5

3

Dimarso nv

Uit de cv’s van de managers blijkt relevante expertise en jarenlange ervaring voor het zelf uitvoeren van marktonderzoek.

4,5

4

GFK Belgium

Uit de cv’s van de managers blijkt relevante expertise en jarenlange ervaring voor het zelf uitvoeren van marktonderzoek.

4,5

5

Ipsos nv

Uit de cv’s van de managers blijkt relevante expertise en jarenlange ervaring voor het zelf uitvoeren van marktonderzoek.

4,5

Selectiecriterium nr. 2: de algemene kwaliteit van de personeelsbezetting van de onderneming en de potentiële bekwaamheid van het bureau om enerzijds de opdracht volledig in het Nederlands uit te voeren en anderzijds ook meertalige opdrachten (Frans, Engels, eventueel Duits) uit te voeren
Beoordeling op 10 punten

• een lijst van de personeelsleden van de gehele onderneming, met vermelding van hun moedertaal, hun talenkennis, hun functie en hun beroepskwalificatie (daarom echter niet hun cv’s);
• een beschrijving van partners waarmee regelmatig wordt samengewerkt, bv. op het vlak van veldwerk van marktonderzoek

1

Checkmarket bvba

Uit het dossier blijkt weinig beschikbaarheid over geschikt personeel voor de uitvoering van het veldwerk van perceel 4, nl. dat er voldoende handmatige data-invoerders ter beschikking zijn voor invoer van grote capaciteit en voor Antwerpse monitor op het platform van de stad.
Checkmarket werkt structureel met 2 partners (SSI en Eye-See) waar ze perceel 3 volledig aan uitbesteden.

1

2

De Martelaere & Co v.o.f.

Uit het dossier blijkt dat het bureau beschikt over een uitgebreid eigen netwerk van enquêteurs, veldwerkers en encodeurs, die veldwerk in verschillende talen kunnen uitvoeren.
Meerderheid van de opdrachten gebeurt in eigen beheer, met eigen personeelsleden. Slechts een klein aantal opdrachten wordt in tijdelijke samenwerkingsverbanden met partners uitgevoerd.

9

3

Dimarso nv

Uit het dossier blijkt dat het bureau beschikt over een uitgebreid eigen netwerk van researchers, enquêteurs, veldwerkers en encodeurs, die veldwerk in verschillende talen kunnen uitvoeren.
Ze werken niet structureel samen met partners, ze beschikken over een gespecialiseerde dataverzameling organisatie NID.

9

4

GFK Belgium

Uit het dossier blijkt dat het bureau beschikt over een uitgebreid eigen netwerk van researchers, enquêteurs, veldwerkers en encodeurs.
In het dossier werd al vermeld wie als team op de opdracht zou worden ingezet, met motivatie van de keuze van elk teamlid (ervaring en expertise).
Van de andere personeelsleden kunnen we de taalkennis niet inschatten, want dit werd niet in de lijst opgenomen.

9

5

Ipsos nv

Uit het dossier blijkt dat het bureau beschikt over een uitgebreid eigen netwerk van researchers, enquêteurs, veldwerkers en encodeurs. Enkel moedertaal is vermeld.
Ze werken met een vast projectteam en contactpersoon voor de opdracht.
Ze werken niet structureel samen met partners.

9

Selectiecriterium nr. 3: de ervaring en bekwaamheid in veldwerk voor marktonderzoek en de in de onderneming aanwezige aandacht voor de betrouwbaarheid en validiteit van het veldwerk van marktonderzoek
Beoordeling op 25 punten

• een selectieve lijst van de beheerde klanten in de afgelopen drie jaar (2011-2013) waarop duidelijk vermeld staat om welke opdracht het ging (dus niet louter de naam van de klant) en het tijdstip van uitvoering;
• een selectie van twee zelf te kiezen cases (niet meer of niet minder) die de inschrijver gegeven hieronder vermelde motivatie relevant of ‘transponeerbaar’ acht. Het moet gaan om opdrachten die de inschrijver zelf heeft uitgevoerd in de periode 2011-2013 en die afgerond zijn. Er moeten duidelijke resultaten kunnen worden beschreven. Per case wordt opgegeven (telkens op max. 2 A4-pagina’s):
  • de opdrachtgever, met vermelding van een contactpersoon en diens adres (incl. telefoon en e-mailadres) en de data waarop het project werd uitgevoerd;
  • de inhoud van de opdracht;
  • de toegepaste methoden;
  • het plan van aanpak;
  • de resultaten van de aanpak;
  • de deelopdrachten die werden uitgevoerd in eigen regie en die werden uitbesteed of afgehandeld door een ander bureau, met vermelding van de onderaannemers (naam en referentie).

1

Checkmarket bvba

Perceel 3:
Cases zijn oké, zowel voor online panelonderzoek als eye-tracking
Perceel 4:
Cases zijn oké, manuele data invoer van enquêtes is mogelijk; controle op invoer wordt voorzien, ook op de invoer via scanning.

17,5

2

De Martelaere & Co v.o.f.

Perceel 1:
Uit cases blijkt vooral ervaring in het voeren van diepte-interviews en focusgroepen. Uit de cases blijkt geen ervaring met andere vormen van kwalitatief onderzoek, noch met technieken vereist voor kwalitatief onderzoek.
Perceel 2:
Uit de indiende blijkt dat ze voldoen aan de noden van de stad voor dit perceel.
Perceel 4:
Uit de cases blijkt duidelijk dat ze aan de noden van de stad Antwerpen kunnen voldoen.
Perceel 5:
Contact had beter uitgewerkt kunnen worden.
Uit de cases blijkt dat ze enerzijds ervaring hebben met bevraging van specifieke groepen, en anderzijds dat ze zeer grote steekproeven kunnen realiseren. 

17,5

3

Dimarso nv

Door de keuze van de cases die perceel overschrijdend zijn, werden de verschillende methodes net te weinig uitgewerkt.  De ene case werd beter uitgewerkt dan de andere.
Zo kwam kwalitatief onderzoek slechts beperkt aan bod; uit de cases blijkt weinig ervaring met uiteenlopende vormen van kwalitatief onderzoek.

17,5

4

GFK Belgium

De 2 cases geven een onvoldoende beeld weer op de 5 percelen en werden eerder summier uitgewerkt. Dit wordt echter opgevangen door de klantenreferenties per perceel, waar de opdrachten voldoende werden toegelicht.
Uit de klantenreferenties blijkt dat ze over meerdere kwalitatieve onderzoeksmethoden beschikken.
Ook blijkt dat ze grote steekproeven voor face-to-face onderzoek aankunnen en nieuwe toepassingen integreren. 

17,5

5

Ipsos nv

Goed uitgewerkte cases per perceel, waaruit blijkt dat ze over meerdere kwalitatieve methodieken beschikken voor kwalitatief onderzoek.
Ook blijkt dat zij voor kwantitatief onderzoek, grote steekproeven aankunnen.

17,5

Selectiecriterium nr. 4: de motivatie voor deze opdracht
Beoordeling op 10 punten

een beschrijving (op max. 1 A4) van de reden waarom het bureau deelneemt aan deze specifieke competitie en om welke redenen het bureau zichzelf in staat acht de opdrachten op een kwaliteitsvolle manier uit te voeren.

1

Checkmarket bvba

Vrij standaard

5

2

De Martelaere & Co v.o.f.

Vrij standaard

5

3

Dimarso nv

De interesse in de maatschappelijke relevantie van de opdrachten maakt de motivatie net iets meer dan standaard.

7

4

GFK Belgium

Vrij standaard

5

5

Ipsos nv

De interesse in de variëteit van de opdrachten maakt de motivatie net iets meer dan standaard.

7

Nr.

Naam

Score

1

Dimarso nv

38

2

Ipsos nv

38

3

De Martelaere & Co v.o.f.

36

4

GFK Belgium

36

5

Checkmarket bvba

24

Nr.

Naam

Score

1

Dimarso nv

38

2

Ipsos nv

38

3

De Martelaere & Co v.o.f.

36

4

GFK Belgium

36

Nr.

Naam

Score

1

Dimarso nv

38

2

Ipsos nv

38

3

De Martelaere & Co v.o.f.

36

4

GFK Belgium

36

Nr.

Naam

Score

1

Dimarso nv

38

2

Ipsos nv

38

4

GFK Belgium

36

Nr.

Naam

Score

1

Dimarso nv

38

3

De Martelaere & Co v.o.f.

36

4

GFK Belgium

36

Nr.

Naam

Score

1

Dimarso nv

38

2

Ipsos nv

38

3

De Martelaere & Co v.o.f.

36

4

GFK Belgium

36

Nr.

Beschrijving

Gewicht

Perceel 1 (Het uitvoeren en begeleiden van kwalitatief onderzoek)

100

1

Kwaliteit van de onderzoeksmethodieken en aanpak focusgroepen en diepte-interviews

20

- kwalitatieve onderzoeksmethodieken die de inschrijver ter beschikking heeft;
- de aanpak van focusgroepen en diepte-interviews;
- de manier waarop respondenten gerekruteerd worden, rekening houdend met de diversiteit van de doelgroepen in Antwerpen;
- de manier waarop de interviewgids wordt uitgewerkt;
- de manier waarop de data zullen worden opgeleverd;
- de voorgestelde maatregelen voor garantie van anonimiteit en kwaliteit.

2

Kwaliteit van het plan van aanpak van de cases

20

- de uitgewerkte methodiek;
- de wijze van rekrutering van de respondenten;
- de doorlooptijden.

3

Kwaliteit van het team dat de opdracht zal uitvoeren

20

- de kwalificaties van de voorgestelde projectverantwoordelijke en eerste aanspreekpunt;
- de kwalificaties van het team dat de opdracht zal uitvoeren, en van de voorgestelde vervangers.

4

Kwaliteit van de manier waarop de samenwerking en de continuïteit van het veldwerk tot stand worden gebracht

10

- de ernst, het realisme, de te verwachten kwaliteit, de flexibiliteit en de duidelijkheid van het engagement dat de stad vraagt;
- de manier waarop de samenwerking wordt voorgesteld.

5

Prijs

30

- (de voordeligheid van) de totale, forfaitaire prijs en wat daarin begrepen is;
- er wordt hierbij gekeken naar de opgegeven prijzen per onderdeel van de opdracht, de uurprijzen (overheadkosten inbegrepen) van geleverde prestaties per job, de kost van de gespendeerde werktijd (uurkost*aantal uur) en de kost per focusgroep en diepte-interview.

Perceel 2 (Het uitvoeren van face-to-face interviews van kwantitatief onderzoek)

100

1

Kwaliteit van het plan van aanpak

40

- de aanpak van de face-to-face interviews bij elk van in artikel III.4.1 opgenomen onderzoeksopzetten;
- de wijze van rekrutering van respondenten;
- de contactprocedure per type interview;
- de controles van de enquêteurs en van de data en de kwaliteitsgaranties die gegeven kunnen worden;
- de manier waarop de data zullen worden opgeleverd en wat het responsverslag vermeldt;
- de doorlooptijden.

2

Kwaliteit van het team

20

- de kwalificaties van de voorgestelde projectverantwoordelijke en eerste aanspreekpunt;
- de kwalificaties van het team dat de opdracht zal uitvoeren, en van de voorgestelde vervangers.

3

De kwaliteit van de manier waarop de samenwerking en de continuïteit van het veldwerk tot stand worden gebracht

10

- de ernst, het realisme, de te verwachten kwaliteit, de flexibiliteit en de duidelijkheid van het engagement dat de stad vraagt;
- de manier waarop de samenwerking wordt voorgesteld.

4

Prijs

30

- (de voordeligheid van) de totale, forfaitaire prijs en wat daarin begrepen is;
- er wordt hierbij gekeken naar de opgegeven prijzen per onderdeel van de opdracht, de uurprijzen (overheadkosten inbegrepen) van geleverde prestaties per job, de kost van de gespendeerde werktijd (uurkost*aantal uur), de kost per onderzoeksopzet en de kost per interview.

Perceel 3 (Het uitvoeren van online onderzoek via panels en van onderzoek via eye-tracking)

70

1

De kwaliteit van het online onderzoeksplatform en van het panel

30

- de flexibiliteit van het platform op vlak van het programmeren van de vragenlijsten;
- de representativiteit van het panel voor Antwerpen, Vlaanderen, Brussels Hoofdstedelijk Gewest en Wallonië, de omvang en de samenstelling van het panel, de wijze waarop panelleden gerekruteerd worden en het relatiebeheer met het panel;
- de beschikbaarheid over internationale panels.

2

De kwaliteit van de eye-tracking methodiek

20

- de methodiek(en) om eye-tracking uit te voeren;
- de voorgestelde aanpak van eye-tracking voor het evalueren van een affiche, een webpagina en een folder van 4 pagina’s bij Antwerpenaars vanaf 16 jaar.

3

De kwaliteit van de data-oplevering

10

- de manier waarop de veldwerkresultaten zullen worden gecontroleerd en opgeleverd;
- de kwaliteit van het responsverslag;
- de voorgestelde maatregelen voor kwaliteitsgaranties;
- de termijnen waarbinnen ruwe data kunnen worden opgeleverd.

4

De kwaliteit van het team en van de manier waarop de samenwerking en de continuïteit van het veldwerk tot stand worden gebracht

10

- de kwalificaties van de voorgestelde projectverantwoordelijke en eerste aanspreekpunt;
- de kwalificaties van het team dat de opdracht zal uitvoeren, en van de voorgestelde vervangers;
- de ernst, het realisme, de te verwachten kwaliteit, de flexibiliteit en de duidelijkheid van het engagement dat de stad vraagt;
- de manier waarop de samenwerking wordt voorgesteld.

5

Prijs

- (de voordeligheid van) de totale, forfaitaire prijs en wat daarin begrepen is;
- Er wordt hierbij gekeken naar de opgegeven prijzen per onderdeel van de opdracht, de uurprijzen (overheadkosten inbegrepen) van geleverde prestaties per job, de kost van de gespendeerde werktijd (uurkost*aantal uur), de kost per afgeleverde enquête (totale kostprijs/gegarandeerde aantal ingevulde enquêtes).

Perceel 4 (Het uitvoeren van data-invoer van papieren vragenlijsten)

100

1

De kwaliteit van de data oplevering

40

- de manier waarop de veldwerkresultaten zullen worden ingevoerd en gecontroleerd;
- het systeem van kwaliteitsbewaking;
- de manier waarop de stad Antwerpen kwaliteitscontroles kan uitvoeren;
- de voorgestelde maatregelen voor kwaliteitsgaranties;
- de opvolging en data invoer van de Antwerpse monitor via Limesurvey van de stad Antwerpen.

2

De kwaliteit van het team en van de manier waarop de samenwerking en continuïteit van het veldwerk tot stand worden gebracht

20

- de kwalificaties van de voorgestelde projectverantwoordelijke en eerste aanspreekpunt;
- de kwalificaties van het team dat de opdracht zal uitvoeren, en van de voorgestelde vervangers;
- de ernst, het realisme, de te verwachten kwaliteit, de flexibiliteit en de duidelijkheid van het engagement dat de stad vraagt;
- de manier waarop de samenwerking wordt voorgesteld.

3

Prijs

40

- (de voordeligheid van) de totale, forfaitaire prijs en wat daarin begrepen is;
- Er wordt hierbij gekeken naar de opgegeven prijzen per onderdeel van de opdracht, de uurprijzen (overheadkosten inbegrepen) van geleverde prestaties per job, de kost van de gespendeerde werktijd (uurkost*aantal uur), de kost per afgeleverde enquête (totale kostprijs/gegarandeerde aantal ingevulde enquêtes).

Perceel 5 (Het uitvoeren van telefonische enquêtes (CATI))

100

1

De kwaliteit van de steekproef

30

- de aard en representativiteit van de steekproef;
- het bestand dat als basis voor de steekproeftrekking wordt gebruikt;
- de procedure om netto respondenten te selecteren;
- de methode waarop de NIT bepaald wordt;
- de controle op, programmering en testing van de vragenlijst.

2

De kwaliteit van de controle en dataoplevering

20

- de manier waarop de veldwerkresultaten zullen worden opgeleverd en wat het responsverslag vermeldt;
- de mate waarin en de manier waarop interviewers gecontroleerd worden;
- de instructies die meegegeven worden aan de interviewers bij het halen van de quota;
- de kwaliteitscontroles die de stad Antwerpen zelf kan uitvoeren;
- de voorgestelde maatregelen voor kwaliteitsgaranties.

3

De kwaliteit van het team en van de manier waarop de samenwerking en continuïteit van het veldwerk tot stand worden gebracht

20

- de kwalificaties van de voorgestelde projectverantwoordelijke en eerste aanspreekpunt;
- de kwalificaties van het team dat de opdracht zal uitvoeren, en van de voorgestelde vervangers;
- de ernst, het realisme, de te verwachten kwaliteit, de flexibiliteit en de duidelijkheid van het engagement dat de stad vraagt;
- de manier waarop de samenwerking wordt voorgesteld.

4

Prijs

30

- (de voordeligheid van) de totale, forfaitaire prijs en wat daarin begrepen is;
- Er wordt hierbij gekeken naar de opgegeven prijzen per onderdeel van de opdracht, de uurprijzen (overheadkosten inbegrepen) van geleverde prestaties per job, de kost van de gespendeerde werktijd (uurkost*aantal uur), de kost per afgeleverde enquête (totale kostprijs/gegarandeerde aantal ingevulde enquêtes).