Notitie gebruik Handreiking Gezonde Gemeente
November 2014, RIVM Centrum Gezond Leven
Inhoud 1
2
3
4
Inleiding ................................................................................................................. 3 1.1
Overzicht gebruik van Handreiking Gezonde Gemeente .......................................... 3
1.2
Doelstelling onderzoek ....................................................................................... 3
Opzet van het onderzoek .......................................................................................... 3 2.1
Onderzoeksvragen ............................................................................................ 3
2.2
Onderzoekspopulatie ......................................................................................... 3
2.3
Methoden ......................................................................................................... 4
Resultaten .............................................................................................................. 5 3.1
Respons ........................................................................................................... 5
3.2
Resultaten per onderzoeksvraag ......................................................................... 5
Conclusies..............................................................................................................10
Bijlagen 1 – Steekproef GGD’en 2 – Steekproef gemeenten 3 – Vragenlijst gebruik Handreiking Gezonde Gemeente 4 – Betrouwbaarheidsintervallen 5 – Aanvullende informatie per organisatie 6 – Werkervaring van professionals
Pagina 2 van 30
1 1.1
Inleiding Overzicht gebruik van Handreiking Gezonde Gemeente
Met de Handreiking Gezonde Gemeente (HGG) bieden RIVM Centrum Gezond Leven (CGL) en partners professionals gezondheidsbevordering en beleidsmedewerkers van gemeenten informatie voor het maken, uitvoeren en evalueren van gezondheidsbeleid. Deze online handreiking op Loketgezondleven.nl bevat informatie, tips en voorbeelden om aan de slag te gaan en het bestaat naast een algemeen deel uit acht themadelen. Kennis van landelijke en lokale organisaties is gebundeld in deze handreiking. In 2012 en 2013 vroeg het CGL aan professionals hoe ze de kwaliteit van de HGG waarderen. Ook maakten we op basis van webstatistieken inzichtelijk hoe vaak professionals de HGG gebruiken. Daarmee weten we niet in welke organisaties de HGG het meest/minst gebruikt wordt en waar de informatie in de praktijk voor gebruikt wordt. Terwijl deze informatie essentieel is voor het promoten van de HGG. In dit rapport is het gebruik gekwantificeerd en is bepaald in welke mate professionals de HGG in de praktijk toepassen bij het maken, uitvoeren en/of evalueren van gezondheidsbeleid.
1.2
Doelstelling onderzoek
Het doel van dit onderzoek is om inzicht in het daadwerkelijke gebruik van de HGG te hebben om de handreiking gerichter te kunnen promoten.
2 2.1
Opzet van het onderzoek Onderzoeksvragen
1. Hoeveel professionals (potentiële gebruikers van de HGG) gebruiken de handreiking bij het maken, uitvoeren en/of evalueren van gezondheidsbeleid? 2. In welke organisatie(s) wordt het HGG het meest/minst gebruikt? Welke informatie uit de HGG wordt het meest gebruikt en waar wordt de informatie in toegepast? De operationalisatie van ‘gebruik’ is dat een respondent de HGG kent, er informatie in opzoekt en die (in wisselende mate) toepast in de praktijk. De HGG in dit onderzoek betreft de versie waarin de Gezonde Wijk nog niet geïntegreerd is (integratie oktober 2014).
2.2
Onderzoekspopulatie
Potentiële gebruikers van de HGG zijn professionals in diverse functies en werkzaam bij diverse organisaties, zoals adviseurs gemeenten bij GGD’en en een sportbuurtcoach werkzaam bij een provinciale sportorganisatie. De focus in dit project richt zich op vier type organisaties: 1. 2. 3. 4.
GGD’en Gemeenten Provinciale sportorganisaties / sportservices Regionale Ondersteuningsstructuren (ROS)1
Binnen de organisaties betrekken we de medewerkers die richting gemeenten adviseren (leefstijl breed of in het geval van een sportservice gericht op sport en bewegen), uitvoerende professionals gezondheidsbevordering, ambtenaren volksgezondheid (en eventueel ambtenaren binnen andere sectoren).
1
Regionale ondersteuningsstructuren (ROS) zijn maatschappelijke ondernemingen. Zij stimuleren de integratie en samenwerking binnen de eerstelijnszorg en bieden ondersteuning in de eerste lijn. Pagina 3 van 30
2.3
Methoden
Organisaties Per organisatie is het aantal professionals vastgesteld dat we voor deelname aan dit onderzoek benaderen. 1. GGD’en Uit 28 GGD’en zijn op basis van een steekproeftrekking 13 GGD’en geselecteerd voor benadering. De steekproef is representatief wat landelijke spreiding betreft en de verdeling over stedelijke en landelijke regio’s (zie bijlage 1). 2. Gemeenten Uit 404 gemeenten is een steekproef getrokken van 85 gemeenten. De steekproef is representatief wat landelijke spreiding betreft en de verdeling over stedelijke en landelijke regio’s (zie bijlage 2). 3. Sportservices Alle 12 sportservices zijn benaderd voor deelname. 4. ROS Alle 17 ROS-organisaties zijn benaderd voor deelname. Respondenten Bij gemeenten, sportservices en ROS’en is steeds een persoon per organisatie benaderd. Daarbij vroegen we naar iemand die zich bezighoudt met het adviseren van gemeenten (sportorganisaties, ROS) of naar de ambtenaar met als aandachtsgebied volksgezondheid (gemeenten). Het aantal ROS’en en sportservices is in vergelijking met GGD’en en gemeenten klein in aantal. In dit onderzoek deden alle ROS’en en sportservices mee. De kleine aantallen in de resultaten brengen de werkelijkheid in kaart, zonder vertekening. Bij de GGD’en zijn meer professionals bevraagd, omdat hier meerdere functionarissen werken met de HGG. Per GGD zijn de functionaris gezondheidsbevordering en de adviseur gemeentelijk gezondheidsbeleid benaderd. Daarnaast benaderden we bij vier GGD’en managers die de afdeling gezondheidsbevordering en/of gezondheidsbeleid aansturen. Er is gekozen om twee managers van relatief kleine GGD’en en twee managers van relatief grote GGD’en te bevragen. Vragenlijst We ontwikkelden een korte vragenlijst (zes tot tien vragen) (zie bijlage 3). De professionals werkzaam bij GGD’en, sportservices en ROS’en benaderden we telefonisch of zij wilden meedoen. Waarna bij een positief antwoord de vragenlijst meteen is afgenomen. Gemeentelijke beleidsambtenaren met volksgezondheid in de portefeuille kregen een mail. Dit vanwege de omvang van de steekproef en de ervaring dat deze groep telefonisch niet goed te bereiken is.
Pagina 4 van 30
3 3.1
Resultaten Respons
De respons bij de telefonische interviews was 100 procent bij de ROS’en en sportservices. Bij GGD’en was de respons onder de professionals gezondheidsbevordering (GB) 75 procent, onder professionals gemeentelijke gezondheidsbeleid (GGB) 100 procent en onder de managers 100 procent. Bij de gemeenten, waar de vragenlijst per mail is uitgezet, was de respons 52 procent. Gemeenten en GGD’en zijn op basis van een steekproef en niet voltallig benaderd, daarom moeten de resultaten met een betrouwbaarheidsinterval worden geïnterpreteerd. We presenteren de puntschattingen, in bijlage 4 staan de exacte betrouwbaarheidsintervallen. De resultaten van de managers GGD zijn niet opgenomen in onderstaande tabellen, maar in tekst uitgewerkt. Bij deze kleine groep is gevraagd of ze het gebruik van de handreiking bij medewerkers stimuleren. De resultaten over het gebruik en de toepassing van de handreiking staan in deze paragraaf in hoofdlijnen uitgewerkt. In bijlage 5 staan de tabellen per organisatietype met alle verzamelde informatie. Bijvoorbeeld redenen waarom de HGG niet gebruikt wordt.
3.2
Resultaten per onderzoeksvraag
Onderzoeksvraag 1 Bekendheid met HGG Om gebruik van de HGG te kunnen maken is bekendheid ermee een voorwaarde. De bekendheid van de HGG onder professionals is hoog. Bij ROS’en, sportservices en gemeenten zegt twee derde van de professionals de HGG te kennen. Bij de GGD’en, zowel onder de professionals GB als GGB, is dat 100 procent (zie figuur 1). Informatie opzoeken in HGG en de toepassing Aan de professionals die bekend zijn met de HGG vroegen we of ze informatie opzoeken en of ze de informatie toepassen. Van de mensen, werkzaam bij ROS’en of sportservices, zegt meer dan de helft er informatie in op te zoeken. Bij gemeenten en GGD’en, zowel professionals GB als GGB, zegt meer dan 80 procent er daadwerkelijk informatie in op te zoeken (zie figuur 2). Reden om geen informatie in de HGG op te zoeken is dat benodigde informatie elders beschikbaar is of dat de informatie als bekend wordt beschouwd (zie bijlage 5). Als geïnterviewden aangaven informatie in de HGG op te zoeken vroegen we of ze de informatie ook toepassen in hun werkzaamheden. Alle professionals werkzaam bij sportservices en GGD’en die informatie opzoeken zeggen deze informatie ook te gebruiken. Bij ROS’en en gemeenten is de toepassing van de informatie lager, maar nog steeds goed: respectievelijk meer dan 80 procent en meer dan 85 procent. Er zijn weinig professionals die informatie opzoeken in de HGG en die vervolgens niet toe (kunnen) passen (zie figuur 2).
Pagina 5 van 30
Percentage
Figuur 1. Bekendheid met de HGG bij professionals per type organisatie*
100 90 80 70 60 50 40 30 20 10 ROS (N = 17)
Sport service (N = GGD GB (N=9) 12)
GGD GGB (N=13) Gemeente (N=46)
*Bij GGD’en en gemeenten is met een steekproef de bekendheid met de HGG uitgevraagd. Interpretatie betrouwbaarheidsinterval: als de steekproef 100 keer wordt herhaald, zal in 95 van deze gevallen de steekproefproportie in dit interval liggen.
Figuur 2. Informatie in de HGG opzoeken en toepassen door professionals per type organisatie*
100 90 80 Percentage
70 60 Heeft informatie opgezocht in Handreiking
50 40
Heeft informatie gebruikt uit de Handreiking
30 20 10 Sport ROS (N = Gemeente GGD GB GGD GGB service (N 11) (N=31) (N=9) (N=13) = 8)
Bij GGD’en en gemeenten is met een steekproef de bekendheid met de HGG uitgevraagd. Interpretatie betrouwbaarheidsinterval: als de steekproef 100 keer wordt herhaald, zal in 95 van deze gevallen de steekproefproportie in dit interval liggen.
Pagina 6 van 30
Onderzoeksvraag 2 In welke organisaties wordt de HGG het meest gebruikt Bij gemeenten en GGD’en, zowel bij professionals GB als GBB, is het gebruik van de HGG het grootst als we kijken naar professionals die informatie opzoeken én toepassen. Bij sportservices en ROS’en ligt het gebruik lager; circa de helft van de professionals die de HGG kent zegt er informatie in op te zoeken en toe te passen (zie figuur 2). Er is ook gevraagd naar welke onderdelen van de HGG ze raadpleegden en waarvoor ze de informatie gebruikten. Informatie die het meest gezocht wordt Is zijn verschillen tussen de organisaties in het soort informatie dat professionals zoeken. Bij GGD’en, professionals GGB en GB, zoekt men voornamelijk informatie over beleid maken en datzelfde gebeurt bij gemeenten. GGD GB professionals zoeken daarnaast ook nog vaak informatie over het uitvoeren van beleid. De succesfactoren worden vaak bekeken bij de GGD’en, door zowel professionals GB als GBB. Dit onderdeel is bij de andere organisaties minder populair. Het onderdeel advies en ondersteuning wordt het meest ingezien door GGDprofessionals, andere organisaties bekijken dit onderdeel minder vaak. Het onderdeel evalueren wordt het minst bezocht (zie figuur 3). Deze resultaten over het soort informatie dat professionals opzoeken in de handreiking komen overeen met de informatie die we sinds 2012 via de webstatistieken bijhouden.
Percentage
Figuur 3. Per type organisatie de onderdelen (top 5) waar informatie in opgezocht is
100 90 80 70 60 50 40 30 20 10 0
Beleid maken Uitvoeren Succesfactoren Advies en ondersteuning Evalueren
Pagina 7 van 30
Het beeld van de onderdelen die het vaakst geraadpleegd worden zien we bevestigd als per professional, onafhankelijk waar ze werkzaam zijn, wordt weergegeven welk soort informatie ze zoeken in de HGG (figuur 4).
Percentage
Figuur 4. De onderdelen (top 6) waar professionals informatie opzochten
100 90 80 70 60 50 40 30 20 10 -
Themadelen die het meest geraadpleegd worden De HGG geeft naast algemene informatie over bijvoorbeeld beleid maken en uitvoeren, ook specifieke informatie in acht themadelen. Per organisatie bekeken we welke themadelen het meest geraadpleegd worden. Alle organisaties raadplegen veel het themadeel Overgewicht. Bij sportservices wordt het themadeel Sport en bewegen het meest geraadpleegd. De professionals GB bij GGD’en raadplegen de themadelen Overgewicht en Sport en bewegen het meest. Professionals GGB raadplegen de vijf themadelen even vaak (figuur 5). De organisaties maken het minst gebruik van de themadelen Drugs, Seksuele gezondheid en Letsel. Ook deze resultaten komen overeen met wat sinds 2012 uit de webstatistieken blijkt.
Pagina 8 van 30
percentage
Figuur 5. Per type organisatie de themadelen (top 5) waar informatie in gezocht is
100 90 80 70 60 50 40 30 20 10 0
Themadeel Overgewicht Themadeel Sport en bewegen Themadeel Alcohol Themadeel Depressie Themadeel Roken
Waarvoor de informatie wordt gebruikt Na het uitvragen over welke informatie men opzoekt, vroegen we waar de professional de informatie voor gebruikt? Per type organisatie is er in hoofdlijnen een verschil te zien in toepassing van de informatie. Gemeenten gebruiken de informatie veelal bij het schrijven van de nota volksgezondheid. Ook bij GGD’en (professionals GGB) gebruikt men de informatie vaak om een nota volksgezondheid te schrijven, maar nog vaker om gemeenten te adviseren. Professionals GB van GGD’en gebruiken de informatie ook het meest om gemeenten te adviseren en datzelfde geldt voor de sportservices. De ROS’en vormen een uitzondering, zij gebruiken de informatie het meest om interventies te inventariseren of te kiezen (zie figuur 6).
Pagina 9 van 30
Percentage
Figuur 6. Per type organisatie waarvoor de informatie is gebruikt (top 5)
100 90 80 70 60 50 40 30 20 10 0
Schrijven van de nota Opstellen werkplan / uitvoeringsprogramma Maken projectplan Advies aan gemeenten Inventariseren en/of kiezen van interventies Anders nl
HGG in relatie tot werkervaring Om te kijken of het gebruik van de HGG een relatie heeft met werkervaring vroegen we professionals zichzelf te typeren als ‘zeer ervaren’, ‘ervaren’ of ‘starter’. Professionals die zichzelf zeer ervaren noemen kennen de handreiking vaker dan de rest. De zeer ervaren professionals werkzaam bij sportservices kennen de handreiking goed, maar lijken het minder te raadplegen dan minder ervaren collega’s. Starters lijken iets minder bekend te zijn met de handreiking. Zie bijlage 6. Faciliteren of stimuleren gebruik HGG door managers Aan een kleine groep, vier GGD-managers, vroegen we of ze het gebruik van de HGG stimuleren onder werknemers. Allemaal kennen ze de HGG en stimuleren zij het gebruik onder collega’s. Een reden die zij noemen is ‘voorkomen dat bestaande dingen opnieuw bedacht worden’ en meestal wordt de HGG tijdens overleggen en discussies aangehaald als één van de te raadplegen bronnen. Het gebruik van de HGG richting gemeenten stimuleren zeggen twee managers te doen, de andere twee doen dit niet.
4
Conclusies
Goede bekendheid HGG De HGG is onder GGD-professionals (GB en GGB) het meest bekend; ook bij de andere organisaties in dit onderzoek is de bekendheid met de HGG goed. Gebruik van informatie uit HGG De meeste professionals die de HGG kennen zoeken er informatie in op en passen die toe in hun werkzaamheden. Bij sportservices en ROS’en is de toepassing lager dan bij gemeenten en GGD’en.
Pagina 10 van 30
Themadelen Per organisatie is er een verschil in meest geraadpleegde themadelen. Professionals werkzaam bij sportservice zoeken het vaakst informatie op in het themadeel Sport en bewegen; bij ROS’en is dat in het themadeel Overgewicht. De themadelen Sport en bewegen en Overgewicht worden het meest geraadpleegd en de themadelen Letsel, Drugs en Seksuele gezondheid het minst. Algemene deel HGG Binnen het algemene deel van de HGG wordt vooral informatie gezocht over beleid maken. Professionals raadplegen ook alle andere onderdelen, waarbij zij het onderdeel evalueren het minst vaak inkijken. Toepassing van HGG De toepassing van de informatie uit de HGG verschilt per organisatie. Het vaakst gebruiken zij de informatie bij het schrijven van de nota volksgezondheid en/of het adviseren van gemeenten. Werkervaring in relatie tot bekendheid met de HGG De HGG is bij professionals goed bekend, maar starters lijken er minder vaak bekend mee zijn. Onderzoeksresultaten bevestigen de webstatistieken In 2012 en 2013 is het gebruik van de HGG met webstatistieken in beeld gebracht. De resultaten van dit onderzoek bevestigen ons beeld op basis van deze statistieken. Bekendheid HGG bij gemeenten De bekendheid en het gebruik van de HGG bij gemeenten is hoger dan verwacht. Op basis van webstatistieken hadden we nog geen inzicht bij welke organisaties bezoekers werken die de HGG raadplegen. Voor het eerst is hier nu zicht op en het resultaat daarvan is positief. Hoe verder met de resultaten? In 2015 krijgen de resultaten invulling in het jaarplan van het programma Gezonde Gemeente en Wijk, met een accent op de promotie van de HGG. De programmacoördinator werkt dit uit (januari/februari 2015). Het gerichter aandacht vragen voor ontwikkelingen (in updates) en het actief promoten van de HGG bij starters zijn daarin aandachtspunten. De resultaten van dit onderzoek zijn positief en liggen in lijn van de indrukken die we eerder op basis van webstatistieken kregen. Voor de komende jaren stellen we dan ook dat de webstatistieken betrouwbare informatie geven over aantallen bezoekers en onderdelen die geraadpleegd worden. Wel zal er in de interpretatie van de webstatistieken rekening worden gehouden met de integratie van de Handreikingen Gezonde Gemeente en Gezonde Wijk (oktober 2014). Naar verwachting heeft dit gevolgen voor het aantal bezoekers van onderdelen als uitvoering en samenwerking.
Pagina 11 van 30
BIJLAGEN Notitie gebruik Handreiking Gezonde Gemeente Bijlage 1 – Steekproef GGD’en Goal We are interested in surveying a population of GGDs such that the sample is representative and in obtaining several proportion estimates (e.g. proportion of users). The goal of this document is to describe the sample sizes required to obtain these proportion estimates under a specific assumption for survey non-response and under an a-priori desired precision of the estimates. Description of population We have a total known population of N=25 GGDs in 2014. The 25 GGDs are:
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25
GGD Amsterdam GGD Brabant-Zuidoost GGD Drenthe GGD Flevoland GGD Fryslân GGD Gelderland-Zuid GGD Gooi en Vechtstreek GGD Groningen GGD Haaglanden GGD Hart voor Brabant GGD Hollands Midden GGD Hollands Noorden GGD IJsselland GGD Kennemerland GGD Limburg-Noord GGD Midden-Nederland GGD Noord- en Oost-Gelderland GGD Rotterdam-Rijnmond GGD Twente GGD West-Brabant GGD Zaanstreek-Waterland GGD Zeeland GGD Zuid-Holland Zuid GGD Zuid-Limburg Veiligheids- en Gezondheidsregio Gelderland-Midden
Sampling design We use random sampling, where we take the population N and simply draw randomly from this population. Stratified random sampling, where we take the population N, divide it into strata such as region and density, and draw randomly from each stratum such that the respective sample stratum sizes reflect the actual group sizes in the population N, was not considered given the small N.
Pagina 12 van 30
Sample size requirements In calculating the sample size, we assume the worst case scenario to be on the safe side. Furthermore, when doing the sample size calculation, we choose the following:
0.25 0.20 0.15 0.10 0.05
Variance of Proportion: p*[1-p]
-
The confidence level for confidence interval of an estimate is 95%. This is an oft used value; For illustration purposes, we assume the proportion in the population can assume values of 0.05, 0.1, 0.25 or 0.5. Note that p=0.5 is the worst-case scenario. By definition, a proportion has mean p, and variance [p*(1-p)]. The variance will be maximal for p=0.5; see figure below. The intuitive explanation for this is that proportions near 0 and 1 are bounded by 0 and 1 respectively, therefore making variance smaller than proportions around 0.5.
0.00
-
0.0
0.2
0.4
0.6
0.8
1.0
Proportion: p Below you find a graph containing sample requirements given a specific confidence interval width and proportion p. The interpretation is as follows: -
-
-
The confidence width refers to the width of the confidence interval of the proportion p. For instance, if the width=0.1, and p=0.5, the confidence interval may be [0.45,0.55]. It is intuitive to think that the smaller the width, the higher the precision, and the bigger the required sample size; Depending on what precision we want, and what proportion we expect, we then deduce a required sample size. Sample size requirements are largest for the case p=0.5, because the variance of p is largest there (see previous graph), so we may only consider this case, as this is the worst-case scenario in terms for the size of p. For instance, for width=0.2, and p=0.5, we require a sample size of approx. 19 GGDs. Not shown: p=0.95 is same to the case p=0.05, p=0.9 is same to p=0.1 (see symmetry in previous graph). In other words, sample size requirements for p are the same as for the case (1-p);
Pagina 13 van 30
Recommendation
25
Below you have a table for several scenarios of confidence width, with required sample sizes, when sampling from 25 GGDs. We used a finite population correction factor to adjust the required sample size for the fact that we have a finite and small population (25 GGDs). This essentially implies that confidence bounds are less wide for any given sample size.
15 10 0
5
Required sample size
20
p=0.05 p=0.1 p=0.25 p=0.5
0.0
0.1
0.2
0.3
0.4
0.5
Confidence width for proportion p
Confidence Width 0.2 0.2 0.2 0.2
Proportion p 0.5 0.25 or 0.75 0.1 or 0.9 0.05 or 0.95
Required Sample Size (RSS) 19 17 13 9
Pagina 14 van 30
If we expect that the proportion of GGDs that use the manual is high, we can use a sample of 13 GGDs. Note that if further questions are asked for those who use the RIVM manual, then the actual sample size will be effectively even smaller (e.g. 50% of above numbers). In other words, confidence bands for these questions will be wider.
References Rao, P.S.R.S. (2000). Sampling Methodologies with Applications. In: Texts in Statistical Science. Chapman & Hall/CRC.
Pagina 15 van 30
Bijlage 2 – Steekproef gemeenten Goal We are interested in surveying a population of municipalities such that the sample is representative and in obtaining several proportion estimates (e.g. proportion of users). The sample is considered to be representative when the distribution of municipalities by region and urbanization level in the sample reflects the distribution in the entire population of municipalities. The goal of this document is to describe the sample sizes required to obtain these proportion estimates under a specific assumption for survey non-response and under an a-priori desired precision of the estimates. Description of population We have a total known population of N=404 municipalities in 2014. These municipalities can be subdivided into strata based on region and urbanization level (based on the definition of Statistics Netherlands, running from 1 [urban] to 5 [rural]). Region may be defined in several ways: GGD region, province or landsdeel. The distribution of municipalities by GGD region is as follows:
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25
GGD GGD Amsterdam GGD Brabant-Zuidoost GGD Drenthe GGD Flevoland GGD Fryslân GGD Gelderland-Zuid GGD Gooi en Vechtstreek GGD Groningen GGD Haaglanden GGD Hart voor Brabant GGD Hollands Midden GGD Hollands Noorden GGD IJsselland GGD Kennemerland GGD Limburg-Noord GGD Midden-Nederland GGD Noord- en Oost-Gelderland GGD Rotterdam-Rijnmond GGD Twente GGD West-Brabant GGD Zaanstreek-Waterland GGD Zeeland GGD Zuid-Holland Zuid GGD Zuid-Limburg Veiligheids- en Gezondheidsregio GelderlandMidden
Frequency 6 21 12 6 24 18 9 23 9 28 23 19 11 10 15 26 22 16 14 18 9 13 17 18 16
Pagina 16 van 30
The distribution of municipalities by province is as follows:
1 2 3 4 5 6 7 8 9 10 11 12
Province Drente Flevoland Friesland Gelderland Groningen Limburg NoordBrabant NoordHolland Overijssel Utrecht Zeeland ZuidHolland
Frequency 12 6 24 56 23 33 67 53 25 26 13 65
The distribution of municipalities by landsdeel is as follows:
1 2 3
Landsdeel Midden Noord Zuid
Frequency 132 225 46
The distribution of municipalities by urbanization level is as follows:
Urbanization Level Frequency 1 Matig stedelijk 83 2 Niet stedelijk 99 3 Sterk stedelijk 62 4 Weinig stedelijk 145 5 Zeer sterk stedelijk 14 Given the small number of municipalities per GGD region or provice, we may opt to use landsdeel instead. A cross-tabulation of landsdeel and urbanization gives the following counts per stratum:
Midden Noord Zuid
Matig stedelijk 31 46 6
Niet stedelijk 20 61 18
Sterk stedelijk 27 29 6
Weinig stedelijk 45 84 16
Zeer sterk stedelijk 9 5 0
Pagina 17 van 30
Sampling design There are two main sampling design choices here, 1. Random sampling, where we take the population N and simply draw randomly from this population. 2. Stratified random sampling, where we take the population N, divide it into strata such as those proposed in the previous section, and draw randomly from each stratum such that the respective sample stratum sizes reflect the actual group sizes in the population N. The main advantage of Stratified random sampling (2) over Random sampling (1) is that we can ensure representativeness: we make sure that the sample reflects the population well in terms of the strata. We therefore choose stratified random sampling based on landsdeel and urbanization level. Sample size requirements In calculating the sample size, we assume the worst case scenario to be on the safe side. This corresponds to the random sampling (first or third choice), or stratified random sampling (second choice) in the specific case when the proportions in each stratum are expected to be equal. The reasoning is as follows: from statistical theory we know that these cases are equal, will yield the largest variance of the estimates, and thus, have the most pessimistic sample size requirements. Note that in reality the proportions in each stratum are expected to be not equal; but it is difficult to do sample size calculations for this case, as we have no pilot data to make solid assumptions on the proportions in each stratum. Furthermore, when doing the sample size calculation, we choose the following: -
The confidence level for confidence interval of an estimate is 95%. This is an oft used value; For illustration purposes, we assume the proportion in the population can assume values of 0.05, 0.1, 0.25 or 0.5. Note that p=0.5 is the worst-case scenario. By definition, a proportion has mean p, and variance [p*(1-p)]. The variance will be maximal for p=0.5; see figure below. The intuitive explanation for this is that proportions near 0 and 1 are bounded by 0 and 1 respectively, therefore making variance smaller than proportions
Pagina 18 van 30
0.25 0.20 0.15 0.05 0.10 0.00
Variance of Proportion: p*[1-p]
around 0.5.
0.0
0.2
0.4
0.6
0.8
1.0
Proportion: p Below you find a graph containing sample requirements given a specific confidence interval width and proportion p. The interpretation is as follows: -
-
The confidence width refers to the width of the confidence interval of the proportion p. For instance, if the width=0.1, and p=0.5, the confidence interval may be [0.45,0.55]. It is intuitive to think that the smaller the width, the higher the precision, and the bigger the required sample size; Depending on what precision we want, and what proportion we expect, we then deduce a required sample size. Sample size requirements are largest for the case p=0.5, because the variance of p is largest there (see previous graph), so we may only consider this case, as this is the worst-case scenario in terms for the size of p. For instance, for width=0.2, and p=0.5, we require a sample size of approx. 68 municipalities.
Pagina 19 van 30
Not shown: p=0.95 is same to the case p=0.05, p=0.9 is same to p=0.1 (see symmetry in previous graph). In other words, sample size requirements for p are the same as for the case (1-p);
300
-
200 150 100 0
50
Required sample size
250
p=0.05 p=0.1 p=0.25 p=0.5
0.0
0.1
0.2
0.3
0.4
0.5
Confidence width for proportion p
Recommendation Below you have a table for several scenarios of confidence width, with required sample sizes. Also given also required sample sizes when varying response rates are assumed (20% for schriftelijke benadering) and (80% for telefonische benadering). Confidence Width
Required Sample Size (RSS)
0.2 0.3 0.4 0.5
68 31 17 11
RSS when response is 20% (schriftelijk) 340 155 85 55
RSS when response is 80% (telefonisch) 85 39 22 14
Pagina 20 van 30
Note that if further questions are asked for those who use the RIVM manual, then the actual sample size will be effectively even smaller (e.g. 50% of above numbers). In other words, confidence bands for these questions will be wider. References Rao, P.S.R.S. (2000). Sampling Methodologies with Applications. In: Texts in Statistical Science. Chapman & Hall/CRC.
Pagina 21 van 30
Bijlage 3 - Vragenlijst gebruik Handreiking Gezonde Gemeente 1. Waar bent u werkzaam?
Provinciale sportorganisatie: (naam) ______________________________________ ROS: (naam) ______________________________________ GGD: (naam) ______________________________________ Gemeente: (naam) ______________________________________
2. Wat is uw functie? ______________________________________ [bij gemeenten:] welke beleidsterreinen heeft u in uw portefeuille? _________________________ [GGD/ROS/sportorganisatie:] bent u ook verantwoordelijk voor het adviseren van gemeenten bij gezondheidsbeleid?________________ Het Centrum Gezond Leven van RIVM ondersteunt gemeenten en professionals gezondheidsbevordering. Hiervoor is de digitale Handreiking Gezonde Gemeente ontwikkeld. De Handreiking biedt informatie voor het maken, uitvoeren en evalueren van gezondheidsbeleid. Voor acht gezondheidsthema's vindt u de mogelijkheden voor een integrale aanpak. Het Centrum Gezond Leven werkt doorlopend aan de verbetering van de handreiking en is geïnteresseerd in wie de gebruikers zijn. Dat vormt de aanleiding van dit onderzoek. 3. Bent u bekend met de Handreiking Gezonde Gemeente? nee [ga naar 11] ja 4. Heeft u wel eens informatie opgezocht in de Handreiking? nee [ga naar 5] ja [ga naar 6] 5. Zo nee, waarom niet? [ga naar 11] ___________________________________________________________________________ 6. Zo ja, kunt u aangeven in welke onderdelen u informatie zocht en naar wat voor informatie u heeft gezocht? (meerdere antwoorden mogelijk): A Beleid maken (wettelijk kader, integrale aanpak, leefomgeving etc.) B Uitvoeren (uitvoeringsprogramma, samenwerken en sociale marketing etc.) C Evalueren D Succesfactoren (draagvlak, burgerparticipatie etc.) E Advies en ondersteuning F Nieuw in de handreiking (alle updates op rij) G Een themadeel → Zo ja, welke? H Themadeel Overgewicht I Themadeel Sport en bewegen Pagina 22 van 30
J Themadeel Alcohol K Themadeel Drugs L Themadeel Roken M Themadeel Depressie N Themadeel Seksuele gezondheid O Themadeel Letsel
7. Welke informatie zoekt u in de Handreiking Gezonde Gemeente? A Achtergrondinformatie en cijfers B Tips en stappenplannen C Voorbeelden uit andere gemeenten/organisaties D Instrumenten E Interventies F Anders, namelijk______________________________________ 8. Heeft u deze informatie ook gebruikt? ja nee [ga naar 10] 9. Waarvoor heeft u de informatie gebruikt? [meerdere antwoorden mogelijk] A Schrijven van de nota B Opstellen werkplan/uitvoeringsprogramma C Maken projectplan D Advies aan gemeenten E Inventariseren en/of kiezen van interventies F Anders, nl. ________________________________ 10. Zo nee, waarom heeft u de informatie niet gebruikt? ____________________________________________________________________________ ___ 11. Hoe zou u uw werkervaring op het terrein van volksgezondheid typeren? starter ervaren zeer ervaren 12. Dit is het einde van de vragenlijst. Ik wil u hartelijk danken voor uw medewerking!
Pagina 23 van 30
Bijlage 4 – Betrouwbaarheidsintervallen Betrouwbaarheidsintervallen van bekendheid en gebruik van de HGG per type organisatie Sportservices
ROS’en
GGD professionals GB
GGD professionals GGB
(N = 12) Alle*
(N = 17) Alle*
(N=9)** obv steekproef
(N=13)** obv steekproef
Gemeenten
(N=46) ** 85 gemeenten obv steekproef
Kent de HGG
8 (67%)
11 (65%)
9 (100%) BI (0.81, 1.00)
13 (100%) BI (0.86,1.00)
31 (67%) BI (0.53, 0.80)
Heeft informatie opgezocht in HGG
4 (50% van 8)
6 (55% van 11)
9 (100%) BI (0.81, 1.00)
11 (85% van 13) BI (0.60, 0.97)
25 (81% van 31) BI (0.65, 0.92)
Heeft de informatie uit de HGG gebruikt
4 (50% van 8)
5 (45% van 11)
9 (100%) BI (0.81, 1.00)
11 (85 % van 13) BI (0.60, 0.97)
22 (71% van 31) BI (0.54, 0.85)
* Geen betrouwbaarheidsinterval, omdat iedereen is aangeschreven en respons 100% is ** Betrouwbaarheidsintervallen. Interpretatie: als de steekproef 100 keer wordt herhaald, zal in 95 van deze gevallen de steekproefproportie in dit interval liggen. Het BI geeft dus de variatie weer.
Pagina 24 van 30
Bijlage 5 – Aanvullende informatie per organisatie Tabel met aanvullende informatie vanuit de sportservices (Getal tussen haakjes is steeds het absolute aantal) Reden om geen info op te zoeken in HGG (N=4)
Over welke onderdelen is informatie gezocht (N=4)
Welke informatie is opgezocht (N=4)
Waarvoor is de info gebruikt? (N=4)
Hebben geen gelegenheid om meer info te zoeken (1) Zoekt informatie elders (2) Onderhoud contacten met gemeenten op hoofdlijnen, dus niet inhoudelijk (1) Beleid maken (2) Uitvoeren (2) Evalueren Succesfactoren (1) Advies en ondersteuning (1) Nieuw in de handreiking (1) Een themadeel → Zo ja, welke? Themadeel Overgewicht (2) Themadeel Sport en bewegen (3 Themadeel Alcohol (1) Themadeel Drugs Themadeel Roken Themadeel Depressie Themadeel Seksuele gezondheid Themadeel Letsel
Achtergrondinformatie en cijfers (4) Tips en stappenplannen (3) Voorbeelden uit andere gemeenten/organisaties (4) Instrumenten (3) Interventies (4) Anders nl (0)
Schrijven van de nota (1) Opstellen werkplan/uitvoeringsprogramma (2) Maken projectplan (2) Advies aan gemeenten (4) Inventariseren en/of kiezen van interventies (2) Anders nl (1)
Pagina 25 van 30
Tabel met aanvullende informatie vanuit de ROS (Getal tussen haakjes is steeds het absolute aantal) Reden om geen info op te zoeken in HGG (N=5)
Richt zich met name op 1e lijn zorg (1) Werkt op hoofdlijnen aan gezondheidsbeleid (1) Info is bekend (2) Zoekt info elders (1)
Over welke onderdelen is informatie gezocht (N=6)
Beleid maken (0) Uitvoeren (4) Evalueren (0) Succesfactoren (2) Advies en ondersteuning (1) Nieuw in de handreiking (0) Een themadeel → Zo ja, welke? Themadeel Overgewicht (3) Themadeel Sport en bewegen (1) Themadeel Alcohol (1) Themadeel Drugs (0) Themadeel Roken (1) Themadeel Depressie (1) Themadeel Seksuele gezondheid (0) Themadeel Letsel (0)
Welke informatie is opgezocht (N=6)
Waarvoor is de info gebruikt? (N=5)
Achtergrondinformatie en cijfers (4) Tips en stappenplannen (4) Voorbeelden uit andere gemeenten/organisaties (5) Instrumenten (1) Interventies (5) Anders nl (0)
Schrijven van de nota (1) Opstellen werkplan/uitvoeringsprogramma (2) Maken projectplan (1) Advies aan gemeenten (2) Inventariseren en/of kiezen van interventies (3) Anders nl (0)
Pagina 26 van 30
Tabel met aanvullende informatie vanuit de Gemeente (Getal tussen haakjes is steeds het absolute aantal) Reden om geen info op te zoeken in HGG (N=7)
Over welke onderdelen is informatie gezocht (N=25)
Welke informatie is opgezocht (N=25)
Waarvoor is de info gebruikt? (N=22)
Geen behoefte aan gehad (2) Zoekt info elders (3) Gezondheidsbeleid wordt door externe gemaakt (1) Niet op de hoogte in inzetbaarheid van het product (1) Beleid maken (21) Uitvoeren (7) Evalueren (4) Succesfactoren (7) Advies en ondersteuning (6) Nieuw in de handreiking (1) Een themadeel → Zo ja, welke? Themadeel Overgewicht (8) Themadeel Sport en bewegen (5) Themadeel Alcohol (8) Themadeel Drugs (2) Themadeel Roken (3) Themadeel Depressie (3) Themadeel Seksuele gezondheid (1) Themadeel Letsel (0)
Achtergrondinformatie en cijfers (16) Tips en stappenplannen (16) Voorbeelden uit andere gemeenten/organisaties (15) Instrumenten (8) Interventies (10) Anders nl (1)
Schrijven van de nota (19) Opstellen werkplan/uitvoeringsprogramma (8) Maken projectplan (4) Advies aan gemeenten (7) Inventariseren en/of kiezen van interventies (7) Andes nl: hulpmiddel achtergrond info (1)
Pagina 27 van 30
Tabel met aanvullende informatie vanuit de GGD’en GB (N=9) (Getal tussen haakjes is steeds het absolute aantal) Over welke onderdelen is informatie gezocht (N=9)
Welke informatie is opgezocht (N=9)
Waarvoor is de info gebruikt? (N=9)
Beleid maken (7) Uitvoeren (7) Evalueren (2) Succesfactoren (6) Advies en ondersteuning (4) Nieuw in de handreiking (1) Een themadeel → Zo ja, welke? Themadeel Overgewicht (6) Themadeel Sport en bewegen (6) Themadeel Alcohol (5) Themadeel Drugs (2) Themadeel Roken (2) Themadeel Depressie (3) Themadeel Seksuele gezondheid (4) Themadeel Letsel (1)
Achtergrondinformatie en cijfers (4) Tips en stappenplannen (6) Voorbeelden uit andere gemeenten/organisaties (6) Instrumenten (4) Interventies (6) Anders nl… (1)
Schrijven van de nota (3) Opstellen werkplan/uitvoeringsprogramma (2) Maken projectplan (3) Advies aan gemeenten (5) Inventariseren en/of kiezen van interventies (3) Anders nl 2)
Pagina 28 van 30
Tabel met aanvullende info vanuit de GGD’en GGB (N=11) (Getal tussen haakjes is steeds het absolute aantal) Reden om geen info op te zoeken in HGG (N=2)
Geen behoefte aan (1) Medewerkers gebruiken wel de HGG (1)
Over welke onderdelen is informatie gezocht (N=11)
Beleid maken (11) Uitvoeren (4) Evalueren (4) Succesfactoren (7) Advies en ondersteuning (6) Nieuw in de handreiking (6) Een themadeel → Zo ja, welke? Themadeel Overgewicht (4) Themadeel Sport en bewegen (4) Themadeel Alcohol (4) Themadeel Drugs (2) Themadeel Roken (4) Themadeel Depressie (4) Themadeel Seksuele gezondheid (3) Themadeel Letsel (1)
Welke informatie is opgezocht (N=11)
Waarvoor is de info gebruikt? (N=11)
Achtergrondinformatie en cijfers (7) Tips en stappenplannen (8) Voorbeelden uit andere gemeenten/organisaties (4) Instrumenten (5) Interventies (6) Anders nl… (4)
Schrijven van de nota (8) Opstellen werkplan/uitvoeringsprogramma (4) Maken projectplan (1) Advies aan gemeenten (10) Inventariseren en/of kiezen van interventies (2) Anders nl (4)
Pagina 29 van 30
Bijlage 6 – Werkervaring van professionals Respondenten
Bekend met HGG
Informatie opgezocht in HGG
2 8 2
2 6 0
0 4
6 23 1 15 1
5 16 1 9
3 14 0 8
GGD GB Zeer ervaren Ervaren Starter
2 7 0
2 7
2 7
GGD GGB Zeer ervaren Ervaren Starter Onbekend
8 3 0 2
8 3
8 3
ROS’en Zeer ervaren Ervaren Starter
5 10 2
4 7 0
Sportservice (N=12) Zeer ervaren Ervaren Starter Gemeenten Zeer ervaren Ervaren Redelijk ervaren Starter Onbekend
2
3 3
Pagina 30 van 30