<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE article PUBLIC "-//NLM//DTD JATS (Z39.96) Journal Publishing DTD v1.1 20151215//EN" "https://jats.nlm.nih.gov/publishing/1.1/JATS-journalpublishing1.dtd">
<article article-type="research-article" xmlns:xlink="http://www.w3.org/1999/xlink" xml:lang="dut" dtd-version="1.1">
	<front>
		<journal-meta>
			<journal-id journal-id-type="eissn">2211-7253</journal-id>
			<journal-id journal-id-type="publisher-id">DuJAL</journal-id>
			<journal-title-group>
				<journal-title>Dutch Journal of Applied Linguistics</journal-title>
			</journal-title-group>
			<issn publication-format="print">2211-7245</issn>
			<issn publication-format="online">2211-7253</issn>
			<publisher>
				<publisher-name>Openjournals.nl</publisher-name>
			</publisher>
		</journal-meta>
		<article-meta>
			<article-id pub-id-type="doi">10.51751/DuJAL16273</article-id>
			<title-group>
				<article-title>Het didactiseren van bewuste taalvaardigheid in het grammaticaonderwijs: Grammaticale concepten ingebed in hun grammaticale en taalcontrastieve context</article-title>
				<alt-title alt-title-type="running-head">Het didactiseren van bewuste taalvaardigheid in het grammaticaonderwijs</alt-title>
			</title-group>
			<contrib-group>
				<contrib contrib-type="author" corresp="yes">
					<name name-style="western">
						<surname>Leenders</surname>
						<given-names>Gijs</given-names>
					</name>
					<email xlink:href="mailto:g.p.m.leenders@uu.nl">g.p.m.leenders@uu.nl</email>
					<xref ref-type="aff" rid="AFF000001"/>
					<xref ref-type="aff" rid="AFF000002"/>
				</contrib>
				<contrib contrib-type="author">
					<name name-style="western">
						<surname>van Amstel</surname>
						<given-names>Max</given-names>
					</name>
					<xref ref-type="aff" rid="AFF000001"/>
				</contrib>
				<contrib contrib-type="author">
					<name name-style="western">
						<surname>de Graaff</surname>
						<given-names>Rick</given-names>
					</name>
					<xref ref-type="aff" rid="AFF000001"/>
					<xref ref-type="aff" rid="AFF000003"/>
				</contrib>
				<contrib contrib-type="author">
					<name name-style="western">
						<surname>van Koppen</surname>
						<given-names>Marjo</given-names>
					</name>
					<xref ref-type="aff" rid="AFF000001"/>
					<xref ref-type="aff" rid="AFF000004"/>
				</contrib>
				<aff id="AFF000001">
					<label>1</label>
					<institution-wrap>
						<institution>Universiteit Utrecht</institution>
					</institution-wrap>
				</aff>
				<aff id="AFF000002">
					<label>2</label>
					<institution-wrap>
						<institution>Amadeus Lyceum</institution>
					</institution-wrap>
				</aff>
				<aff id="AFF000003">
					<label>3</label>
					<institution-wrap>
						<institution>Hogeschool Utrecht</institution>
					</institution-wrap>
				</aff>
				<aff id="AFF000004">
					<label>4</label>
					<institution-wrap>
						<institution>Meertens Instituut</institution>
					</institution-wrap>
				</aff>
			</contrib-group>
			<pub-date publication-format="online">
				<day>19</day>
				<month>09</month>
				<year>2024</year>
			</pub-date>
			<volume content-type="number">13</volume>
			<volume content-type="year">2024</volume>
			<fpage specific-use="PDF">1</fpage>
			<lpage>43</lpage>
			<history>
				<date date-type="received">
					<day>06</day>
					<month>09</month>
					<year>2023</year>
				</date>
				<date date-type="accepted">
					<day>31</day>
					<month>05</month>
					<year>2024</year>
				</date>
				<date date-type="pub">
					<day>19</day>
					<month>09</month>
					<year>2024</year>
				</date>
			</history>
			<permissions>
				<copyright-statement>Copyright 2024 by the author(s).</copyright-statement>
				<copyright-year>2024</copyright-year>
				<copyright-holder>the author(s)</copyright-holder>
				<license license-type="open-access" xlink:href="https://creativecommons.org/licenses/by/4.0/" xlink:title="CC BY">
					<license-p>This is an open access article distributed under the terms of the CC BY 4.0 license.</license-p>
				</license>
			</permissions>
			<self-uri content-type="PDF" xlink:href="DuJAL16273_text.pdf"/>
			<abstract>
				<title>Samenvatting</title>
				<p>Diverse ge&#x00EF;ntegreerde en taalcontrastieve grammaticadidactieken hebben aanzienlijke transfereffecten weten te bewerkstelligen op zowel metalingu&#x00EF;stische kennis als op de lees-, schrijf-, luister- en spreekvaardigheid in de eerste en verschillende tweede talen. Niettemin ontbreekt een soortgelijke aanpak in Nederland, wat de discrepantie tussen de beoogde, uitgevoerde en bereikte doelen van het grammaticaonderwijs in stand houdt. In deze studie wordt getracht deze discrepantie te verhelpen door de effectieve kenmerken van lesmateriaal ter bevordering van bewuste taalvaardigheid te onderzoeken. Hiertoe werd een ge&#x00EF;ntegreerde, taalcontrastieve lessenserie bij het concept &#x2018;grammaticale functie&#x2019; ontworpen voor vwo-4 op basis van vier ontwerpprincipes en een taalcontrastieve analyse van het Nederlands, het Engels en het Duits. Vervolgens werd de lessensserie ge&#x00EB;valueerd met behulp van drie toetsingstypen: expertraadpleging, focusgroepinterviews en diverse impactmetingen. De resultaten tonen een aanzienlijk positief effect aan op de motivatie en bewuste taalvaardigheid in alle drie de talen, wat het potentieel van lesmateriaal ter bevordering van bewuste taalvaardigheid onderstreept.</p>
			</abstract>
			<trans-abstract xml:lang="eng">
				<title>Abstract</title>
				<p>Various contextualized and cross-linguistic approaches of grammar teaching have yielded significant transfer effects on both metalinguistic knowledge and proficiency in reading, writing, listening, and speaking in the first and second languages. Nevertheless, a similar approach is absent in language teaching in the Netherlands, perpetuating the discrepancy between the intended, implemented, and attained objectives. This study endeavors to remedy this discrepancy by examining the effective characteristics of teaching materials promoting language awareness. To this end, a contextualized, cross-linguistic lesson series on the concept of &#x2018;syntactical function&#x2019; was designed, targeting pre-university students (aged 15&#x2013;16) drawing from four design principles and an analysis of the Dutch, the English and the German language. Subsequently, the lesson series underwent expert consultation, focus group interviews and various impact measurements, yielding a significant positive influence on students&#x2019; motivation and language awareness in all three languages. This underlines the potential value of teaching materials promoting language awareness.</p>
			</trans-abstract>
			<kwd-group kwd-group-type="uncontrolled">
				<title>Trefwoorden</title>
				<kwd>taalcontrastief grammaticaonderwijs</kwd>
				<kwd>bewuste taalvaardigheid</kwd>
				<kwd>motivatie</kwd>
				<kwd>educatief ontwerponderzoek</kwd>
				<kwd><italic>mixed-methods</italic>-aanpak</kwd>
				<kwd><italic>SItuational Motivation Scale</italic> (<italic><sc>SIMS</sc></italic>)</kwd>
				<kwd>focusgroepinterviews</kwd>
				<kwd>multiniveau-modellen</kwd>
				<kwd><italic>switching-replications</italic>-design</kwd>
				<kwd><italic>fixed-occasion</italic>-design</kwd>
			</kwd-group>
			<kwd-group kwd-group-type="uncontrolled" xml:lang="eng">
				<title>Keywords</title>
				<kwd>cross-linguistic grammar teaching</kwd>
				<kwd>language awareness</kwd>
				<kwd>motivation</kwd>
				<kwd>educational design research</kwd>
				<kwd>mixed methods approach</kwd>
				<kwd>SItuational Motivation Scale (<sc>SIMS</sc>)</kwd>
				<kwd>focus group interviews</kwd>
				<kwd>multilevel modeling</kwd>
				<kwd>switching replications design</kwd>
				<kwd>fixed occasion design</kwd>
			</kwd-group>
			<funding-group>
				<funding-statement>Het onderzoek is gefinancierd met behulp van een subsidie verstrekt door het Ministerie van Onderwijs, Cultuur en Wetenschap (OC&amp;W), als onderdeel van het initiatief voor Duurzame Geesteswetenschappen. De financiering is afkomstig van het Dudoc-Alfa-programma, dat eerstegraads bevoegde docenten de mogelijkheid biedt om gedurende een periode van vier jaar een promotieonderzoek uit te voeren op het gebied van de vakdidactiek van de geesteswetenschappen.</funding-statement>
			</funding-group>
			<custom-meta-group>
				<custom-meta>
					<meta-name>Author contributions</meta-name>
					<meta-value>Gijs Leenders, conceptualization, methodology, software, validation, formal analysis, investigation, resources, data curation, writing&#x00A0;&#x2013; original draft, writing&#x00A0;&#x2013; review and editing, visualization, project administration; Max van Amstel, conceptualization, resources, writing&#x00A0;&#x2013; original draft; Rick de Graaff, conceptualization, supervision; Marjo van Koppen, conceptualization, supervision</meta-value>
				</custom-meta>
				<custom-meta>
					<meta-name>Supporting information</meta-name>
					<meta-value>De bijlagen waarnaar wordt verwezen in dit artikel zijn opgenomen als aanvullend materiaal. Bijlage&#x00A0;S1 Schematische weergave van de opbouw van het onderzoek; Bijlage&#x00A0;S2 Grammaticale en taalcontrastieve analyse van de concepten &#x2018;grammaticale functie&#x2019;, &#x2018;woordvolgorde&#x2019; en &#x2018;congruentie&#x2019; in het Nederlands, het Engels en het Duits; Bijlage&#x00A0;S3 Animatiescripts CLAP (Cross-Linguistic Awareness Program) inclusief bijbehorende QR-codes; Bijlage&#x00A0;S4 Exploratieve factoranalyses in de ontwerp-, ontwikkel- en evaluatiefase; Bijlage&#x00A0;S5 Fit- en passingsvergelijking van de modellen voor het meten van motivatie; Bijlage&#x00A0;S6 Voorbeeldopdrachten per bewustetaalvaardigheidstype; Bijlage&#x00A0;S7 Analysevoorbeeld van een taalbewustzijnsitem en een taalvaardigheidsitem; Bijlage&#x00A0;S8 Fit- en passingsvergelijking van de modellen voor het meten van bewuste taalvaardigheid; Bijlage&#x00A0;S9 Factor- en itemgemiddelden in de ontwikkelfase.</meta-value>
				</custom-meta>
				<custom-meta>
					<meta-name>Statement of interest</meta-name>
					<meta-value>De auteurs hebben verklaard dat er geen sprake was van belangenverstrengeling.</meta-value>
				</custom-meta>
				<custom-meta>
					<meta-name>Statement of technology use</meta-name>
					<meta-value>Bij de voorbereiding van dit manuscript en de uitvoering van het onderzoek waarover het manuscript rapporteert, is geen op AI gebaseerde generatieve technologie gebruikt.</meta-value>
				</custom-meta>
			</custom-meta-group>
		</article-meta>
	</front>
	<body>
		<sec sec-type="heading-1">
			<label>1</label>
			<title>Inleiding</title>
			<p>Er bestaat al geruime tijd een discrepantie tussen de beoogde, uitgevoerde en bereikte doelen van het grammaticaonderwijs in Nederland (Van Rijt &amp; Coppen, 2017; Van Rijt et al., 2019a, 2020). Sommige docenten Nederlands en moderne vreemde talen beogen er instrumentele doelen mee te bewerkstelligen, zoals de verwerving van andere talen of de toepassing van grammatica in andere taalvaardigheden, anderen streven ernaar kennis over taal en inzicht in het belang van taal als een waardevol fenomeen te vergroten (Hulshof, 2002; Leenders et al., 2019, 2021b; Van Rijt &amp; Coppen, 2021). Ook op internationaal niveau wordt het geven van traditioneel grammaticaonderwijs gerechtvaardigd door het potentieel voor het leren van andere talen (o.a Bell et al., 2020; McManus, 2015), de toegevoegde waarde voor leesvaardigheid (o.a. Chipere, 2003; Funke et al., 2013), schrijfvaardigheid (o.a. Jones et al., 2012; Myhill et al., 2012) en de positieve bijdrage aan de ontwikkeling van spelling- en interpunctiekennis (o.a. Chamalaun, 2019; Rastle &amp; Davis, 2008). Er is echter nooit aangetoond dat die beoogde doelen met het Nederlandse traditionele grammaticaonderwijs, voornamelijk gebaseerd op het ontleden van ge&#x00EF;soleerde zinnen, worden bereikt (Bonset &amp; Hoogeveen, 2010).</p>
			<p>Historisch gezien is het overigens niet vreemd dat de doelen van het traditionele grammaticaonderwijs niet worden bereikt. Hoewel het benoemen van woordsoorten en zinsdelen aan het begin van de 19e-eeuw ge&#x00EF;ntroduceerd werd als oefening in de rede, om leerlingen logisch te leren denken in plaats van alleen maar regeltjes te leren opzeggen, is die werkwijze paradoxaal genoeg verworden tot een ezelsbruggendidactiek (Coppen et al., 2019; Hulshof, 2014; Van Rijt, 2020; Van Rijt &amp; Coppen, 2017, 2021; Van Rijt et al., 2019a, 2019b; Wolf, 2019), vrijwel uitsluitend gericht op lagereordevaardigheden, zoals &#x2018;onthouden&#x2019; en &#x2018;toepassen&#x2019; zoals begrepen in de gereviseerde taxonomie van Bloom (1956, cf. Anderson &amp; Krathwohl, 2001; Bloom &amp; Krathwohl, 2020).</p>
			<p>Ook in het modernevreemdetalenonderwijs ontwikkelen leerlingen geen hogereordevaardigheden, omdat daarin eveneens wordt ingezet op contextloze grammaticale invuloefeningen (<italic>focus on forms</italic>), in plaats van op betekenisvolle, meer communicatieve opdrachten (<italic>focus on form</italic>) (Fasoglio et al., 2015; Funk, 2014; Graus &amp; Coppen, 2016; Hulstijn, 2005, 2009; Newby, 2014; R.&#x00A0;Ellis, 2005; Rouffet et al., 2022; West &amp; Verspoor, 2016). Leerlingen blijken op basis daarvan onvoldoende taalinzicht en uitdrukkingsvermogen te hebben om complexere taalconstructies te (de)construeren en de relevante grammaticale regels te beheersen (Bax, 2003; Leenders et al., 2021a; Van Rijt &amp; Coppen; 2021), terwijl vormgerichte instructie over het algemeen w&#x00E9;l effectief lijkt wanneer deze is ingebed in communicatieve activiteiten (R.&#x00A0;Ellis, 2005, 2006, 2009; Funk, 2014; Newby, 2014).</p>
			<p>Concreet is er behoefte aan grammaticaonderwijs waarmee leerlingen inzicht in taal als systeem ontwikkelen en de beoogde (transfer)doelen bereiken. Diverse internationale onderzoeken bieden aanknopingspunten voor een dergelijke contextrijke invulling van het grammaticaonderwijs. Ze rapporteren aanzienlijke transfereffecten van een aanpak waarin grammatica wordt ingebed in een context van schrijfvaardigheid op metalingu&#x00EF;stische kennis en schrijfvaardigheid (o.a. Fontich, 2016; Jones et al., 2012; Myhill et al., 2012; Spada et al., 2014), alsmede substanti&#x00EB;le transfereffecten van een taalcontrastieve aanpak op metalingu&#x00EF;stische kennis en de spreek-, lees- en luistervaardigheid in een tweede taal (o.a. McManus &amp; Marsden, 2017, 2018, 2019a, 2019b; Spada et al., 2005; Tolentino &amp; Tokowicz, 2014).</p>
			<p>De behoefte aan contextrijk grammaticaonderwijs ligt in lijn met de internationale gedachte, die al sinds midden jaren zeventig bestaat, om taalbewustzijn onderdeel uit te laten maken van het talenonderwijs (James &amp; Garret, 1991; Hawkins, 1999). Onder de noemer <italic>&#x2018;language awareness</italic>&#x2019; wordt deze gedachte door Carter (2003) gedefinieerd als een gevoeligheid voor en een bewustzijn van de relatie tussen vorm, functie en betekenis. De reikwijdte van het concept &#x2018;<italic>language awareness</italic>&#x2019; varieert aanzienlijk in de literatuur. Zo hanteren James &amp; Garrett (1991) een veel ruimere definitie dan Carter (2003) waarin ze beschrijven dat het vijf domeinen omvat (<italic>affective, social, power, cognitive en performance</italic>). In het vooronderzoek hebben we verschillende definities nader onderzocht (zie &#x00A7;&#x202F;2. Vooronderzoek: ontwerpprincipes &amp; analyse).</p>
			<p>Met de introductie van &#x2018;bewuste taalvaardigheid&#x2019; als het beoogde doel van het Nederlandse talenonderwijs (Neijt et al., 2015) krijgt taalbewustzijn een prominentere rol toebedeeld. Ook internationaal winnen begrippen als bewustzijn, reflectief denken en hogere denkvaardigheden aan kracht. Voor het domein van taalonderwijs wordt dit in brede zin onderbouwd door Boivin et al. (2018) en taalspecifiek voor de Engelstalige situatie (o.a. Denham, 2020; Denham &amp; Lobeck, 2010; Trousdale, 2010), de Franstalige situatie (o.a. Boivin, 2018), de Spaanstalige situatie (o.a. Camps &amp; Fontich, 2019; Fontich &amp; Garc&#x00ED;a-Folgado, 2018) en de Nederlandse situatie (o.a. Van den Broek 2020; Van Rijt, 2020b). Hoewel docenten het nut van bewuste taalvaardigheid ook binnen het grammaticaonderwijs onderschrijven (Leenders et al., 2021b; Van Rijt et al., 2020b) ontbreekt het hun tot op heden aan bijbehorend lesmateriaal (Leenders et al., 2021a, 2021b). Voordat dergelijk materiaal ontwikkeld kan worden, moet duidelijk zijn waaraan een op bewuste taalvaardigheid gerichte lessenserie moet voldoen. Daarom luidt de onderzoeksvraag: <italic>Wat zijn effectieve kenmerken van een lessenserie ter bevordering van motivatie en bewuste taalvaardigheid in het grammaticaonderwijs in vwo 4?</italic></p>
			<p>Ter beantwoording van deze vraag hebben we hieronder uiteengezet welke taalkundige en didactische ontwerpprincipes aan de basis staan van het ontwerp (vooronderzoek), hoe deze principes tot een relevante, consistente en praktisch uitvoerbare lessenserie hebben geleid (ontwerp- en ontwikkelfase) en wat het effect hiervan was op de motivatie en het bewustetaalvaardigheidsniveau van leerlingen (evaluatiefase). De opbouw van het onderzoek is schematisch weergegeven in Bijlage&#x00A0;S1.</p>
		</sec>
		<sec sec-type="heading-1">
			<label>2</label>
			<title>Vooronderzoek: Ontwerpprincipes en analyse</title>
			<p>Op het eerste gezicht lijken de verschillende beschrijvingen van bewuste taalvaardigheid complex en uiteenlopend, maar waar alle auteurs het over eens zijn, is dat het gaat om een vorm van begrijpen, of dat nu &#x2018;inzicht&#x2019; (Bax et al., 2021), &#x2018;bewustzijn&#x2019; (Carter, 2003) of &#x2018;kennis van het waarom&#x2019; (Bolitho et al., 2003) wordt genoemd. Wat begrepen dient te worden is zowel hoe taal in elkaar zit (<italic>content knowledge</italic>), als hoe kennis daarvan in de praktijk gebruikt kan worden (<italic>procedural knowledge</italic>) (Garrett &amp; James, 2000; Lipman, 2003; Van den Broek, 2020; Van Rijt, 2020), waarbij impliciete kennis wordt aangevuld met expliciete kennis (Svalberg, 2007) als middel om logisch denken te bevorderen (o.a. Benjamin &amp; Oliva, 2007). Bewuste taalvaardigheid behelst daarmee een dieper inzicht, waarbij het &#x2018;hoe&#x2019; wordt aangevuld met het &#x2018;waarom&#x2019;.</p>
			<p>Het is minder eenduidig hoe bewuste taalvaardigheid het beste gestimuleerd kan worden. De aanbevelingen uit de literatuur (zie <italic>infra</italic>.) zijn door ons ingedeeld in drie aanbevelingsrichtingen, waarvan de eerste twee over de inhoud gaan (het bieden van grammaticale en taalcontrastieve context) en de derde over de te volgen didactiek (het centraal stellen van de redenering).</p>
			<p>Over het algemeen zouden de aanbevelingen voor het grammaticaonderwijs, in het verlengde van de eerdere bevindingen in Van Rijt (2020) en Van Rijt en Coppen (2017; 2021), in plaats van vernieuwingen, juist haalbare verrijkingen moeten vormen. Dit gezien de toch al complexe onderwijspraktijk, waarin meerdere doelen gelijktijdig moeten worden gerealiseerd en tijd, kennis en middelen beperkt zijn (Pollock, 2006). Veel onderwijsvernieuwingen hebben een geringe impact op de praktijk, omdat ze voor docenten onpraktisch zijn (Van den Branden, 2009; Janssen et al., 2013). Het succes van een verrijking hangt daarom af van de wenselijkheid van de verwachte opbrengsten van het lesmateriaal en van de waarschijnlijkheid dat docenten die opbrengsten kunnen realiseren in hun eigen context (Janssen et al., 2013).</p>
			<p>Het bovenstaande leidt tot ons eerste ontwerpprincipe voor een lessenserie ter bevordering van motivatie en bewuste taalvaardigheid in het grammaticaonderwijs:</p>
			<disp-quote>
				<p><bold><italic><sc>OP1</sc></italic></bold>&#x00A0;&#x2013; <italic>Een kansrijke aanpak ter bevordering van bewuste taalvaardigheid zou het traditionele grammaticaonderwijs niet hoeven vernieuwen, maar moeten</italic> <bold><italic>verrijken</italic></bold>.</p>
			</disp-quote>
			<sec sec-type="heading-2">
				<label>2.1</label>
				<title>Grammaticale context</title>
				<p>De grammaticadidactiek in zowel de moderne vreemde talen als het schoolvak Nederlands is overwegend prescriptief en instrumenteel van aard (o.a. Graus &amp; Coppen, 2016; Van Rijt &amp; Coppen, 2021). Een gangbare aanpak in de moderne vreemde talen richt zich op het uit het hoofd leren van ge&#x00EF;soleerde regels en lijstjes van bijvoorbeeld vervoegingen (o.a. Hulstijn, 2005, 2009) en in het schoolvak Nederlands op het benoemen van ge&#x00EF;soleerde beschrijvende concepten, zoals een onderwerp of lijdend voorwerp, zonder enig inzicht in wat die concepten inhouden (o.a. Coppen, 2011; Van Rijt, 2020; Van Rijt &amp; Coppen, 2017, 2021; Van Rijt et al., 2019a, 2019b, Wolf, 2019). Daarnaast is de keuze voor de te behandelen woordsoorten en zinsdelen nog altijd gebaseerd op taalkundige principes uit de negentiende eeuw en worden moderne taalkundige inzichten in de praktijk nog niet (voldoende) benut (Coppen et al., 2019; Hudson &amp; Walmsley, 2005; Hulshof, 1985, 2002; Hulshof et al., 2015; Van Rijt &amp; Coppen, 2017, 2021; Van Rijt et al., 2019a).</p>
				<p>Verschillende onderzoeken naar taalverwerving laten zien dat het expliciet aanbieden van grammaticale context een effectieve manier vormt om taalgebruikers van &#x2018;onbewust (on)bekwaam&#x2019; naar &#x2018;bewust bekwaam&#x2019; te begeleiden (Ellis, 2002a; Housen &amp; De Graaff, 2009; Spada &amp; Tomita, 2010; Svalberg, 2007). Zo is het bekend dat een dergelijke contextrijke aanpak het metalingu&#x00EF;stisch bewustzijn kan vergroten (Alderson &amp; Hudson, 2013; Fearn &amp; Farnan, 2007; Fontich, 2016; Jones et al., 2012; Myhill et al., 2012, 2018; Watson &amp; Newman, 2017), mits er aandacht is voor de relatie tussen vorm, functie en betekenis (Carter, 2003; N.&#x00A0;Ellis, 2005). Voor nadere uitleg over deze relatie, zie Bijlage S1 &#x00A7;&#x202F;1.2.2.</p>
				<p>Bij andere schoolvakken, zoals geschiedenis en biologie, heeft onderzoek al aangetoond dat afzonderlijke kenniselementen beter te begrijpen zijn als duidelijk wordt hoe deze zich tot elkaar verhouden (Goldstone &amp; Wilensky, 2008; Havekes, 2015; Havekes et al., 2012, 2017; Van Drie &amp; Van Boxtel, 2008; Verhoeff et al., 2008). In het verlengde daarvan werd geconstateerd dat ook grammatica beter te begrijpen is wanneer het als taalgeneriek systeem wordt gepresenteerd, waarin de onderdelen met elkaar verbonden zijn en ieder onderdeel een specifieke rol vervult (o.a. door Van Rijt &amp; Coppen 2021; Van Rijt et al., 2019a, 2019c, 2021). In Van Rijt et al. (2020a) wordt in dit kader op basis van eerder onderzoek (Van Rijt et al., 2019b) voorgesteld om metaconcepten als &#x2018;valentie&#x2019; te relateren aan de traditionele beschrijvende concepten als &#x2018;onderwerp&#x2019; en &#x2018;lijdend voorwerp&#x2019;. Riggs (2003) verwoordt deze aanpak als volgt:</p>
				<disp-quote>
					<p>Sometimes we come to understand some phenomenon through learning about its <italic>causal provenance</italic>. At other times we come to understand by seeing <italic>how some property or event is part of a wider pattern</italic> regulated by some lawlike statement. And sometimes we come to understand what something is or why it is present by <italic>finding out what its function is</italic> (Riggs, 2003, p.&#x00A0;218, nadruk toegevoegd).</p>
				</disp-quote>
				<p>Hij illustreert dit met een voorbeeld van een automonteur. Die kan zijn beroep niet uitoefenen als hij de onderdelen van een auto alleen zou kunnen benoemen. Begrijpen hoe een auto werkt, vereist namelijk dat je weet hoe alle onderdelen met elkaar verbonden zijn en welke functie ieder afzonderlijk onderdeel vervult binnen het grotere geheel. Op vergelijkbare wijze moet een leerling niet alleen zinsdelen kunnen benoemen, maar ook begrijpen hoe die zinsdelen samenhangen en welke rol ze vervullen in de structuur en betekenis van een zin of tekst. Als de auto het taalsysteem is, dan zijn de onderdelen beschrijvende concepten. Zoals een automonteur moet begrijpen wat schakelen is om te begrijpen wat de functie van een schakelpook is, zo moet een leerling begrijpen wat &#x2018;valentie&#x2019; is om te begrijpen wat de functie van een &#x2018;lijdend voorwerp&#x2019; is. Het metaconcept &#x2018;valentie&#x2019; maakt namelijk dat sommige werkwoorden een &#x2018;ondergaander&#x2019; in de zin nodig hebben om hun volledige betekenis uit te kunnen drukken. Het lijdend voorwerp kan die rol vervullen (Van Rijt, 2016).</p>
				<p>Maar zelfs als we zouden besluiten om grammatica niet langer als een verzameling opzichzelfstaande beschrijvende concepten te onderwijzen, maar als een samenhangend systeem waarin concepten met elkaar verbonden zijn, dan missen we concepten om die grammaticale relaties mee te kunnen leggen. Verschillende onderzoeken pleiten daarom voor een verrijking van het grammaticaonderwijs in de vorm van metaconcepten (o.a. Coppen, 2011; Leenders et al., 2021a, 2021b; Van Rijt &amp; Coppen, 2021). In Van Rijt (2020a) en Van Rijt et al. (2019a, 2020a, 2022) is de effectiviteit van een metaconceptuele benadering bovendien reeds aangetoond.</p>
				<p>De genoemde aandachtspunten leveren een tweede ontwerpprincipe op voor een lessenserie ter bevordering van motivatie en bewuste taalvaardigheid in het grammaticaonderwijs:</p>
				<disp-quote>
					<p><bold><italic><sc>OP2</sc></italic></bold>&#x00A0;&#x2013; <italic>Bevorder bewuste taalvaardigheid door leerlingen</italic> <bold><italic>grammaticale context</italic></bold> <italic>te bieden</italic>.</p>
					<list list-type="alpha-lower">
						<list-item>
							<p><italic>Plaats concepten binnen een taalgeneriek systeem</italic>.</p>
						</list-item>
						<list-item>
							<p><italic>Voeg waar nodig metaconcepten toe om de relaties tussen concepten te leggen</italic>.</p>
						</list-item>
						<list-item>
							<p><italic>Bespreek concepten inhoudelijk door de relatie tussen vorm, functie en betekenis te leggen</italic>.</p>
						</list-item>
					</list>
				</disp-quote>
			</sec>
			<sec sec-type="heading-2">
				<label>2.2</label>
				<title>Taalcontrastieve context</title>
				<p>Er is in Nederland weinig vakoverstijgende samenhang in de aanpak van het grammaticaonderwijs in de verschillende talen (Hendrix &amp; Hulshof, 1999; Leenders et al., 2019, 2021b; Tordoir &amp; Damhuis, 1982; Van Rijt &amp; Coppen, 2017). Grammaticale concepten worden op een verschillend moment, met een verschillende didactiek en verschillende terminologie aangeboden (Tordoir &amp; Damhuis, 1982). Daarmee worden kansen gemist voor het stimuleren van positieve en het voorkomen van negatieve transfer (Odlin, 2003; Ranta &amp; Lyster, 2017).</p>
				<p>Kijkend naar taalverwervingsonderzoek, is het eigenlijk vreemd dat we talen zo ge&#x00EF;soleerd onderwijzen. Ten eerste, omdat bekend is dat de moedertaal-, de tweedetaal- en de derdetaalverwerking en -toepassing elkaar be&#x00EF;nvloeden (Avery &amp; Marsden, 2019; Bardel &amp; Falk, 2007; Cook, 2013; N.&#x00A0;Ellis, 2006, 2008; Falk &amp; Bardel, 2010; McManus, 2013, 2015; Roberts &amp; Liszka, 2013). Ten tweede, omdat een taalcontrastieve aanpak tegemoetkomt aan de natuurlijke neiging van taalgebruikers om taalelementen van de ene taal over te dragen op de andere (Cook, 2008, 2013; Curcio, 2015; Ellis, 2015; Fandrych, 2012; Jarvis &amp; Pavlenko, 2008; Kielh&#x00F6;fer, 1995). En ten derde, omdat een verhoogd bewustzijn van de overeenkomsten en verschillen tussen talen de tweede- en derdetaalbeheersing duurzaam bevordert (Ammar et al., 2010; Falk et al., 2015; Roehr &amp; G&#x00E1;nem-Guti&#x00E9;rrez, 2009; Tellier &amp; Roehr-Brackin, 2017). Mede daarom is er herhaaldelijk gepleit voor een taalcontrastieve didactiek, zoals in Lightbown &amp; Spada (2000), Bolitho et al. (2003), Ammar et al. (2010), Fandrych (2012), Tyler (2012a), James et al. (2014), Curcio (2015) en McManus (2015).</p>
				<p>Een groeiend aantal onderzoeken toont het effect van dergelijke taalcontrastieve didactieken ook empirisch aan. Zo wordt in Spada et al. (2005), White et al. (2007), Horst et al. (2010), Tyler (2012b), Tolentino en Tokowicz (2014), McManus en Marsden (2017, 2018, 2019a) en Tyler en Ortega (2018) bewezen dat een expliciete koppeling van de overeenkomsten en verschillen tussen grammaticale constructies in verschillende talen de gevoeligheid voor vormen en functies vergroot en zo de nauwkeurigheid en snelheid van de tweedetaalprestaties bevordert. In McManus en Marsden (2019b) en McManus (2019, 2021) wordt daar bovendien nog een automatiseringseffect van de prestaties in de tweede taal aan toegevoegd.</p>
				<p>Het voorbeeld van Riggs (2003) indachtig is het gevonden belang van een taalcontrastieve didactiek goed te verklaren. Wie maar &#x00E9;&#x00E9;n auto kent, zou kunnen denken dat alle auto&#x2019;s op ongeveer dezelfde manier functioneren, maar dat klopt niet, want een Deux-Chevaux is bepaald geen Tesla. Een monteur die aan meerdere typen auto&#x2019;s heeft gewerkt, begrijpt beter welke mechanismen universeel zijn en welke specifiek horen bij een individueel type auto. Die monteur zal de werking van een nieuw type auto sneller en beter doorzien dan een monteur die maar &#x00E9;&#x00E9;n auto kent. Om te kunnen begrijpen wat kenmerkend is voor een individuele taal en wat onderdeel is van een overkoepelend taalsysteem, is het dus noodzakelijk dat leerlingen meerdere talen met elkaar vergelijken. Een taalcontrastieve didactiek is daarmee voorwaardelijk voor een grammaticaal-contextuele aanpak en dat voorwaardelijk verband werkt ook andersom: een taaloverstijgende didactiek heeft pas zin als concepten dankzij grammaticale context inhoudelijk begrepen worden.</p>
				<p>Op basis van de tot nu toe gebruikelijke traditionele aanpak is er geen relevante kennis om van de ene taal over te dragen op de andere (Coppen, 2009, 2010; Leenders, 2020; Leenders et al., 2021a; Odlin, 2003; Van Rijt et al., 2020). Dat verklaart waarom Bonset (2011), Neutelings &amp; Van Rijt (2014) en Leenders et al. (2021a) concluderen dat er weinig bewijs is gevonden voor een positief transfereffect van het traditionele grammaticaonderwijs op het leren van moderne vreemde talen.</p>
				<p>Dat brengt ons bij het derde ontwerpprincipe voor een lessenserie ter bevordering van motivatie en bewuste taalvaardigheid in het grammaticaonderwijs:</p>
				<disp-quote>
					<p><bold><italic><sc>OP3</sc></italic></bold>&#x00A0;&#x2013; <italic>Bevorder bewuste taalvaardigheid door leerlingen</italic> <bold><italic>taalcontrastieve context</italic></bold> <italic>te bieden</italic>.</p>
					<list list-type="alpha-lower">
						<list-item>
							<p><italic>Maak inzichtelijk hoe talen binnen het taalgenerieke systeem taalspecifieke vormen gebruiken om betekenis uit te drukken</italic>.</p>
						</list-item>
						<list-item>
							<p><italic>Benadruk de overeenkomsten en verschillen tussen talen</italic>.</p>
						</list-item>
					</list>
				</disp-quote>
			</sec>
			<sec sec-type="heading-2">
				<label>2.3</label>
				<title>De redenering centraal</title>
				<p>Zowel in het schoolvak Nederlands als bij de moderne vreemde talen ligt de nadruk op het benoemingsresultaat als opbrengst van diverse grotendeels taalspecifieke ezelsbruggetjes (Graus &amp; Coppen, 2016; Van Rijt &amp; Coppen; 2021). Bij de toepassing van die regels gaat het voornamelijk om het ontleden en invullen van contextloze (invul)zinnen (Bonset &amp; Hoogeveen, 2010; Coppen, 2011; Van Gelderen, 2010; Graus &amp; Coppen, 2016; Leenders, 2020; Leenders et al., 2021a; Tammenga-Helmantel &amp; Maijala, 2019; Van Rijt et al., 2020b). Ge&#x00EF;soleerde vuistregels zijn inmiddels verworden tot de norm en hebben de plaats ingenomen van een inhoudelijke uitleg van grammaticale principes (Coppen; 2010; Coppen et al., 2019; Tammenga-Helmantel &amp; Maijala, 2019; Van Rijt &amp; Coppen, 2017, 2021; Van Rijt et al., 2019c).</p>
				<p>Ondanks dat deze vormgerichte aanpak het doceren en nakijken vergemakkelijkt vanwege het schijnbaar binaire karakter, levert die aanpak tal van problemen op: ten eerste stelt de aanpak leerlingen niet in staat om te redeneren over grammaticale vraagstukken (Coppen, 2009, 2011; Van Rijt et al., 2020); ten tweede werken de ezelsbruggen vaak niet in zinnen die niet speciaal daartoe geconstrueerd zijn (Coppen, 2010; Leenders, 2020; Leenders et al., 2021a); ten derde lopen leerlingen vast wanneer ze de vuistregels, die grotendeels taalspecifiek zijn, toepassen in een andere taal (Leenders 2020; Leenders et al., 2021a); ten vierde wordt op geen enkele manier het inzicht gestimuleerd dat er meerdere goede antwoorden kunnen bestaan en dat de context bepaalt welke daarvan het beste past (Coppen, 2010, 2011; Dielemans &amp; Coppen, 2020; Wijnands et al., 2021); ten slotte wordt de didactiek door leerlingen als weinig zinvol beschouwd (Van Rijt et al., 2022). Leerlingen richten zich om al deze redenen voornamelijk op het vinden van &#x2018;het juiste antwoord&#x2019; en besteden niet of nauwelijks aandacht aan het doorgronden van de relatie tussen vorm, functie en betekenis (Coppen, 2009, 2010; Van Rijt &amp; Coppen, 2017; Van Rijt et al., 2019b; Wijnands et al., 2021), terwijl de leerwinst juist in het begrip van die relatie zit (Leenders, 2020; Leenders et al., 2021a; Dielemans &amp; Coppen, 2020; Wijnands et al., 2021).</p>
				<p>De huidige, vormgerichte aanpak leidt niet tot enig inzicht in taal, laat staan tot bewuste taalvaardigheid (Coppen, 2009, 2011; Van Rijt &amp; Coppen, 2017; Van Rijt et al., 2019a, 2019b). Daarom is voorgesteld om de balans in een alternatieve invulling van het grammaticaonderwijs te verschuiven van het resultaat naar de redenering die eraan voorafgaat (Bax et al., 2021; Coppen, 2009, 2010, 2011; Neijt et al., 2015, 2016; Van Rijt et al., 2020), zoals in het schoolvak wiskunde, waarin leerlingen gewend zijn om een bewering aan de hand van opeenvolgende redeneerstappen te bevestigen of te ontkrachten (cTWO, 2012; <sc>SLO</sc>, 2020).</p>
				<p>Contextloze (ontleed)opdrachten in het grammaticaonderwijs wekken de suggestie dat grammaticale vraagstukken net zo gestructureerd zijn als die in het wiskundeonderwijs. Ze suggereren dat er een onbetwistbare oplossing bestaat die met een vast stappenplan kan worden gevonden. Dat is echter in de praktijk vaak niet het geval. Een realistische grammatica-opdracht wordt daarom in de literatuur geregeld als <italic>ill-structured</italic> of rommelig probleem gekarakteriseerd (o.a. Coppen, 2010, 2011; Dielemans &amp; Coppen, 2020; King &amp; Kitchener, 1994; Van Rijt et al., 2019c, 2020a; Wijnands et al., 2021, 2022a, 2022b). Het ontbreken van een duidelijk antwoord dwingt leerlingen om verschillende perspectieven te verkennen en net als taalkundigen zowel convergent als divergent te redeneren (Dielemans &amp; Coppen, 2020). In plaats van lagereordevaardigheden (gesimplificeerde regelkennis) zullen ze zich daarbij moeten beroepen op hogereordevaardigheden als &#x2018;analyseren, &#x2018;evalueren&#x2019; en &#x2018;manipuleren&#x2019; (Anderson &amp; Krathwohl, 2001; Bax et al., 2021; Bloom &amp; Krathwohl, 2020; Coppen, 2011; Neijt et al., 2015, 2016; Van Rijt et al, 2019c). In recent onderzoek naar andere schoolvakken (zie bijvoorbeeld Havekes, 2015; Havekes et al., 2012, 2017) wordt zelfs aangenomen dat een goed begrip van hogereordeconcepten noodzakelijk is om lagereordeconcepten te leren beheersen.</p>
				<p>Een grammaticale redenering op basis van hogereordevaardigheden zou kunnen bestaan uit de opbrengst van drie denkfasen: waarneming, verwondering en reflectie (Carter, 2003; Dielemans &amp; Coppen, 2020; Ellis, 1991; Moseley et al., 2005; Van den Broek &amp; Dielemans, 2017). De eerste fase, waarin het waarnemen centraal staat, beslaat het doorgronden van de taaluiting op het gebied van vorm, functie en betekenis, ook wel &#x2018;<italic>(semantic) processing</italic>&#x2019; (Ellis, 1991), &#x2018;<italic>information gathering</italic>&#x2019; (Moseley et al., 2005) of &#x2018;voelen&#x2019; (Dielemans &amp; Coppen, 2020; Van den Broek &amp; Dielemans, 2017) genoemd. In deze fase observeren leerlingen een zin en relateren ze wat ze zien aan hun voorkennis (Dielemans &amp; Coppen, 2020; Van den Broek &amp; Dielemans, 2017).</p>
				<p>De tweede fase draait om de verwondering, ook wel bekend onder de termen &#x2018;<italic>noticing</italic>&#x2019; (Carter, 2003; Ellis, 1991), &#x2018;<italic>building understanding</italic>&#x2019; (Moseley et al., 2005) en &#x2018;vatten&#x2019; (Dielemans &amp; Coppen, 2020; Van den Broek &amp; Dielemans, 2017). Hierin structureren leerlingen de verzamelde informatie, onderzoeken ze de gevonden patronen en beoordelen ze of de betekenis zoals die uit de context voortvloeit, blijkt uit de gekozen vorm. Bredel (2013) presenteert hiervoor drie uitgangspunten: afstand nemen, deautomatiseren en decontextualiseren. Leerlingen moeten afstand leren cre&#x00EB;ren tussen zichzelf en het taalgebruik, omdat taalgebruik meestal zonder bewuste aandachtssturing plaatsvindt, ze moeten de geautomatiseerde uitvoering van taalhandelingen leren uitschakelen, zodat de taalmiddelen zelf het aandachtsobject worden en ze moeten leren om de te bestuderen taalfenomenen uit hun context te halen (Bredel, 2013). Wanneer ze de waarneming van talige verschijnselen kunnen de-contextualiseren, is het aannemelijk dat dit verwondering en daarmee bewuste taalvaardigheid bevordert aangezien verwondering nieuwsgierigheid naar aanvullende perspectieven impliceert (Rodgers, 2002). Corver (2002) vergelijkt dit proces met een zonsverduistering: iedereen vindt het de normaalste zaak van de wereld dat de zon elke dag waarneembaar is. Pas als dat even niet meer zo is, zoals tijdens een zonsverduistering, dan wordt een alledaags verschijnsel als de zon weer bijzonder. Door te laten zien hoe bijzonder talige verschijnselen zijn, worden leerlingen zich er wellicht van bewust hoe zoiets alledaags en automatisch als taal in elkaar zit.</p>
				<p>De derde fase beslaat reflectie, waarin leerlingen de ge&#x00EF;dentificeerde relaties analyseren en interpreteren. Het moedigt leerlingen aan om te redeneren op basis van regels in plaats van op gevoel of intu&#x00EF;tie, wat volgens Ellis (2009) expliciete kennis van het taalsysteem vereist. Deze laatste fase wordt in Ellis (2004) &#x2018;<italic>metalinguistic reflection</italic>&#x2019; genoemd, in (Moseley et al., 2005) &#x2018;<italic>productive thinking</italic>&#x2019; en in Dielemans en Coppen (2020) en Van den Broek en Dielemans (2017) &#x2018;verwerken&#x2019;.</p>
				<p>Met deze focusverschuiving van het antwoord naar de redenering die eraan voorafgaat, wordt beoogd dat leerlingen voortaan ook authentieke taaluitingen kunnen analyseren en aan de hand van de context kunnen bepalen wat het optimale antwoord is (Bax et al., 2021; Coppen, 2010; James et al., 2014; Neijt et al., 2015, 2016; Tammenga-Helmantel &amp; Le Bruyn, 2016; Wijnands et al., 2021). Het kan een bijdrage leveren aan het verhogen van het talige bewustzijn van leerlingen in relatie tot de doeltaal (Carter, 2003). Ze ontwikkelen namelijk niet alleen kennis en inzicht, maar ook hun leervaardigheid en daarmee hun zelfstandigheid (Svalberg, 2007). Docenten staan open voor een dergelijke invulling van het grammaticaonderwijs, al blijkt hun metalingu&#x00EF;stische kennis nog niet altijd toereikend (Alderson &amp; Hudson, 2013; Giovanelli, 2015, 2016; Sangster et al., 2013; Van Rijt &amp; Coppen 2017; Van Rijt et al., 2019a, 2019b, 2019c, 2020b; Wijnands et al., 2022a, 2022b), wat hun vermogen om hun leerlingen goed ge&#x00EF;nformeerde beslissingen te laten nemen over taalkwesties belemmert (Van Rijt &amp; Coppen, 2017; Van Rijt et al., 2020b). Bovendien ervaren veel docenten &#x00FC;berhaupt terughoudendheid als het aankomt op het onderwijzen van grammatica (Giovanelli, 2015, 2016) en ontbreekt het hun aan authentiek les- en toetsmateriaal gericht op het bevorderen van bewuste taalvaardigheid (Leenders et al., 2019, 2021b).</p>
				<p>Bovenstaande levert een vierde ontwerpprincipe op voor een lessenserie ter bevordering van motivatie en bewuste taalvaardigheid in het grammaticaonderwijs:</p>
				<disp-quote>
					<p><bold><italic><sc>OP4</sc></italic></bold>&#x00A0;&#x2013; <italic>Bevorder bewuste taalvaardigheid door leerlingen niet het antwoord maar</italic> <bold><italic>de redenering centraal</italic></bold> <italic>te laten stellen</italic>.</p>
					<list list-type="alpha-lower">
						<list-item>
							<p><italic>Stimuleer grammaticaal redeneren op basis van hogereordevaardigheden als &#x2018;analyseren&#x2019;, &#x2018;evalueren&#x2019; en &#x2018;manipuleren&#x2019;</italic>.</p>
						</list-item>
						<list-item>
							<p><italic>Leer leerlingen de opbrengst van drie denkfasen (waarneming, verwondering en reflectie) te beschrijven</italic>.</p>
						</list-item>
						<list-item>
							<p><italic>Cre&#x00EB;er het inzicht dat taal geen geordende puzzel is, maar dat de juiste interpretatie(s) afhankelijk is/zijn van de context(en) waarin deze gecontextualiseerd is/zijn</italic>.</p>
						</list-item>
						<list-item>
							<p><italic>Ontwikkel hiertoe authentiek oefen- en toetsmateriaal</italic>.</p>
						</list-item>
					</list>
				</disp-quote>
			</sec>
			<sec sec-type="heading-2">
				<label>2.4</label>
				<title>Grammaticale en taalcontrastieve analyse</title>
				<p>Het vooronderzoek heeft geleid tot vier ontwerpprincipes, waarvan er drie gebruikt werden bij het schrijven van een grammaticale en taalcontrastieve analyse, die de wetenschappelijke basis vormt voor de lessenserie in deze studie. In navolging van Van Rijt en Coppen (2017), die de hi&#x00EB;rarchie van zesentwintig metaconcepten onder taalkundigen onderzochten, werd in Leenders et al. (2021b) op basis van digitale vragenlijsten en focusgroepinterviews met docenten Nederlands, Engels en Duits vastgesteld dat &#x2018;grammaticale functie&#x2019;, &#x2018;woordvolgorde&#x2019; en &#x2018;congruentie&#x2019; als eerste in aanmerking komen voor een verrijking van de traditionele grammatica in een taalcontrastieve context (<sc>OP1</sc>).</p>
				<p>Deze concepten worden in de analyse niet met vuistregels, maar inhoudelijk besproken door ze binnen een grammaticale context te plaatsen (<sc>OP2</sc>a). Waar nodig worden er metaconcepten als &#x2018;predicatie&#x2019; en &#x2018;valentie&#x2019; ge&#x00EF;ntroduceerd om de onderlinge relaties tussen de concepten te kunnen leggen (<sc>OP2</sc>b). Daarbij wordt steeds benadrukt hoe de grammaticale functie van de concepten tot betekenis leidt en hoe die met vorm(en) gemarkeerd kan worden (<sc>OP2</sc>c). Vervolgens wordt er een taalcontrastieve context gecre&#x00EB;erd door een aantal contrasterende verschijningsvormen van de concepten te tonen (<sc>OP3</sc>a) en die met elkaar te vergelijken (<sc>OP3</sc>b), waarbij de meeste aandacht uitgaat naar het Nederlands, het Engels en het Duits.</p>
				<p>Hoewel de taalwetenschap heel wat verschillende richtingen en benaderingen kent, is deze inhoudelijke beschrijving zo veel mogelijk gebaseerd op inzichten waarover een zekere mate van consensus bestaat onder lingu&#x00EF;sten. Daarbij is gebruikgemaakt van taalgenerieke, taalwetenschappelijke overzichten zoals die van Baker et al. (2013) en Banga et al. (2022), en taalspecifieke grammatica&#x2019;s zoals die van Aarts (2001), Haeseryn et al. (1997) en Sch&#x00E4;fer (2018). De gehele analyse is te vinden in Bijlage S2, inclusief een uitgebreidere uitwerking van de ontwerpprincipes.</p>
			</sec>
		</sec>
		<sec sec-type="heading-1">
			<label>3</label>
			<title>Methode</title>
			<p>Ter beantwoording van de onderzoeksvragen werd gebruikgemaakt van educatief ontwerponderzoek, waarin theorievorming en praktijkverbetering hand in hand gaan (McKenney &amp; Reeves, 2018; Plomp &amp; Nieveen, 2013). Het onderzoek werd goedgekeurd door de Ethische ToetsingsCommissie Lingu&#x00EF;stiek van de Universiteit Utrecht.</p>
			<sec sec-type="heading-2">
				<label>3.1</label>
				<title>Ontwerpproces</title>
				<p>Op basis van de ontwerpprincipes en de grammaticale en taalcontrastieve analyse (Bijlage S2) werd door de eerste auteur een lessenserie ter bevordering van bewuste taalvaardigheid in de schoolvakken Nederlands, Engels en Duits in vwo-4 ontworpen die de naam <sc>CLAP</sc> kreeg (Cross-Linguistic Awareness Program). Omdat de samenhang tussen beoogde, uitgevoerde en bereikte doelen kenmerkend is voor succesvolle onderwijsinnovaties (Van den Akker, 2003), werd ter beoordeling van die samenhang in <sc>CLAP</sc> binnen een <italic>mixed-methods</italic>-aanpak (Creswell &amp; Plano Clark, 2018) gebruikgemaakt van de vier kwaliteitscriteria van Plomp en Nieveen (2013): relevantie, consistentie, bruikbaarheid en effectiviteit, en de drie toetsingstypen zoals beschreven door McKenney en Reeves (2018): alfa-, b&#x00E8;ta- en gammatoetsing.</p>
				<list list-type="bullet">
					<list-item>
						<p>In de ontwerpfase werden de beoogde doelen (&#x2018;relevantie&#x2019;) en de interne structuur (&#x2018;consistentie&#x2019;) beoordeeld door middel van expertraadpleging en leerling- en docentervaringen (&#x2018;alfatoetsing&#x2019;).</p>
					</list-item>
					<list-item>
						<p>In de ontwikkelfase werd de praktische uitvoerbaarheid (&#x2018;bruikbaarheid&#x2019;) van de uitgevoerde doelen beoordeeld aan de hand van leerling- en docentervaringen (&#x2018;b&#x00E8;tatoetsing&#x2019;).</p>
					</list-item>
					<list-item>
						<p>In de evaluatiefase werd beoordeeld of de beoogde doelen werden bereikt (&#x2018;effectiviteit&#x2019;) op basis van de motivatie- en bewustetaalvaardigheidscores van de leerlingen (&#x2018;gammatoetsing&#x2019;).</p>
					</list-item>
				</list>
			</sec>
			<sec sec-type="heading-2">
				<label>3.2</label>
				<title>Ontwerpoverwegingen</title>
				<p>De implementatie van het eerste ontwerpprincipe (&#x2018;verrijk&#x2019;), vormde een eerste uitdaging. Om de slagingskans van onze verrijking van het traditionele grammaticaonderwijs te maximaliseren, werd ingezet op de twee door Pollock (2006) en Janssen et al. (2013) genoemde voorwaarden voor succesvolle educatieve verrijkingen: de wenselijkheid van de verwachte opbrengsten en de waarschijnlijkheid dat die opbrengsten gerealiseerd kunnen worden in de eigen context van de docent. In verschillende publicaties werd (voor het grammaticaonderwijs) de wenselijkheid van het bevorderen van bewuste taalvaardigheid en motivatie al beschreven (Bax et al., 2021; Ellis, 2002b; Leenders et al., 2019, 2021b; Neijt et al., 2015, 2016). Met als doel de waarschijnlijkheid op succes te maximaliseren, hebben we animaties ontwikkeld waarin de bekende terminologie uit de traditionele grammatica werd gehandhaafd en alleen werd aangevuld met metaconcepten wanneer dat nodig was om de traditionele concepten in een groter verband te presenteren (zie Bijlage S2 en S3).</p>
				<p>Bij de implementatie van het tweede ontwerpprincipe (&#x2018;bied grammaticale context&#x2019;) bleek niet ieder concept zich even goed te lenen om grammaticaal ingebed te worden. Dat komt doordat er bij het ene concept meer metaconcepten en mechanismen ge&#x00EF;ntroduceerd moeten worden dan bij het andere. Voorbeelden van concepten waarbij dat w&#x00E9;l goed mogelijk blijkt, zijn subjecten en objecten, omdat die grammaticaal in te bedden zijn met &#x2018;slechts&#x2019; twee metaconcepten: &#x2018;predicatie&#x2019; en &#x2018;valentie&#x2019; (zie bijvoorbeeld Van Rijt, 2016). Bij andere concepten, zoals de woordvolgorde binnen grotere werkwoordclusters en de zinspositie van bijwoordelijke bepalingen, blijken de achterliggende mechanismen erg complex en het aantal benodigde metaconcepten erg groot. De volgorde binnen werkwoordclusters wordt daarom wel taalcontrastief beschreven, maar niet aan de hand van een achterliggend taalgeneriek mechanisme verklaard en van de analyse van de bijwoordelijke bepalingen is tijdens het vooronderzoek afgezien.</p>
				<p>Bij de implementatie van het derde ontwerpprincipe (&#x2018;bied taalcontrastieve context&#x2019;) vormde het afbakenen van de variatie die menselijke taal biedt een complexe aangelegenheid. Idealiter zien leerlingen zo veel mogelijk taalspecifieke invullingen van universele concepten, maar het risico daarbij is dat een al te brede blik het voor leerlingen eerder complexer maakt dan overzichtelijker. Daarom hebben we er zowel in de analyse als bij het didactiseren daarvan voor gekozen om alleen voorbeelden van andere talen en andere taalsystemen te geven indien het Nederlands, het Engels en het Duits geen variatie vertoonden. Op die manier wilden we voorkomen dat de leerlingen het idee zouden opvatten dat de strategie van deze drie talen door alle talen gebruikt wordt (Odlin, 2003). Voor werkwoordvervoegingen leek het bijvoorbeeld handig om aan de hand van het Frans te laten zien dat er meer congruerende werkwoorden bestaan dan alleen de persoonsvorm (ook deelwoorden) en dat er meer kenmerken zijn die in aanmerking komen voor congruentie dan alleen &#x2018;persoon&#x2019; en &#x2018;getal&#x2019; (ook &#x2018;geslacht&#x2019;).</p>
				<p>Een andere uitdaging bij dit ontwerpprincipe was de manier waarop we de verschillen en overeenkomsten tussen talen zouden expliciteren, zodanig dat het de verwerving van metalingu&#x00EF;stische kennis zou bevorderen. Vooruitlopend op het volgende ontwerpprincipe werd, in lijn met onderzoeken van onder andere Spada et al. (2005), Tolentino en Tokowicz (2014) en McManus en Marsden (2017, 2018, 2019a, 2019b), besloten taalcontrastief te werken door alle voorbeeldzinnen in meerdere talen weer te geven. In de lessenserie <sc>CLAP</sc> werden de Nederlandse voorbeeldzinnen daarom consequent gecontrasteerd met minimaal het Engels en het Duits.</p>
				<p>Bij de implementatie van het vierde ontwerpprincipe (&#x2018;stel de redenering centraal&#x2019;) bleek het een uitdaging om van de theoretische en abstracte analyse een concrete en toegankelijke lessenserie te maken. Om zo veel mogelijk aan te sluiten bij de voorkennis van de leerlingen is daarom de traditionele terminologie zo veel mogelijk gehandhaafd, het aantal nieuw ge&#x00EF;ntroduceerde concepten tot een minimum beperkt en de rol van alle voorbeeldzinnen veranderd. Waar die in de analyse gebruikt worden om de inhoudelijke uitleg te illustreren, fungeren ze in het ontwikkelde materiaal als het start- en middelpunt van de uitleg.</p>
				<p>Een volgende uitdaging bij dit ontwerpprincipe was om de leerlingen aan te leren om hun redenering tot resultaat te maken, binnen een context waarin een redenering normaliter voorafgaat aan een antwoord. Hoewel het aanleren van lingu&#x00EF;stische manipulaties waardevol is voor het vermogen van leerlingen om taalkundig te redeneren en het hun algemene grammaticale begrip positief lijkt te be&#x00EF;nvloeden (Van Rijt, 2019b), zijn er redenen om aan te nemen dat ze moeilijker te leren en lastiger te verwerken zijn, omdat ze een hogere cognitieve belasting vereisen (Sweller et al., 1998). De belangrijkste reden hiervoor is dat manipulaties meestal uit meer stappen bestaan dan ezelsbruggetjes. In het ontwikkelde materiaal besloten we daarom het nut van redeneren en de tekortkomingen van ezelsbruggetjes te demonstreren en leerlingen met behulp van speciaal daartoe ontwikkelde opdrachten te stimuleren om een bewering aan de hand van opeenvolgende redeneerstappen te bevestigen of te ontkrachten.</p>
			</sec>
			<sec sec-type="heading-2">
				<label>3.3</label>
				<title>Deelnemers, instrumenten en data-analyse per fase</title>
				<sec sec-type="heading-3">
					<label>3.3.1</label>
					<title>Ontwerpfase: Van prototype naar <sc>CLAP1</sc></title>
					<p>De beoogde doelen en de interne structuur van het prototype bij de concepten &#x2018;grammaticale functie&#x2019;, &#x2018;woordvolgorde&#x2019; en &#x2018;congruentie&#x2019; werd door drie gepromoveerde taalkundigen, twee gepromoveerde vakdidactici (<sc>MVT</sc> en Nederlands) en drie eerstegraads taaldocenten (Nederlands, Engels en Duits) met gemiddeld 14 jaar leservaring (<sc>SD</sc> = 5.57) beoordeeld. Hun feedback werd ge&#x00EF;ntegreerd in het prototype, waarna we een proefinterventie ontwikkelden voor het concept &#x2018;grammaticale functie&#x2019;, genaamd <sc>CLAP</sc>.</p>
					<p>Eind oktober 2019 werden 45 vwo 4-leerlingen (twee klassen, 19 jongens en 26 meisjes) gevraagd naar hun ervaringen bij de grammaticalessen in de onderbouw met behulp van een door ons ontwikkelde digitale vragenlijst. Ze gaven voor tien stellingen aan op een vijfpunts-Likertschaal in hoeverre ze het ermee eens waren. Zes stellingen gingen over hun motivatie voor de gevolgde lessen aan de hand van de drie basisbehoeften: competentie, autonomie en betrokkenheid (Deci &amp; Ryan, 2000; Ebbens en Ettekoven, 2013; Geerts &amp; Van Kralingen, 2017; Vansteenkiste et al., 2008). In de vier overige stellingen werd naar de relevantie en de consistentie van de lessen gevraagd (Ebbens &amp; Ettekoven, 2013; Plomp &amp; Nieveen, 2013; Van den Akker, 2003).</p>
					<p>Na het invullen van de vragenlijst namen de leerlingen bij het schoolvak Nederlands deel aan <sc>CLAP</sc>, bestaande uit een website met daarop vijf taalcontrastieve lessen en twee digitale bewustetaalvaardigheidstoetsversies. Elke les van vijfenveertig minuten startte met een animatie bij een deelconcept, gevolgd door zes meerkeuze- en zes open vragen. Na afloop van de lessenserie werd met de hierboven beschreven vragenlijst gevraagd naar de ervaringen bij <sc>CLAP</sc>. De docenten vervulden een procesmatige rol en kregen de taak om hun leerlingen inzicht te bieden in hun voortgang aan de hand van het voortgangsoverzicht dat door de website werd gegenereerd. Op basis van dit overzicht konden zij zieke leerlingen en leerlingen die om andere redenen lessen hadden gemist, helpen bij het opstellen van een gepersonaliseerde planning. Met een exploratieve factoranalyse werd de groepering van items in de vragenlijst per meetmoment vastgesteld, waarbij negatief geformuleerde items werden omgepoold (zie Bijlage&#x00A0;S4). Voor de gevonden factoren werd er een betrouwbaarheidsanalyse en een gepaarde t-test uitgevoerd.</p>
					<p>Om betrouwbare en valide informatie te verzamelen over de implementatie van de lessenserie werden alle inhoudelijke lessen geobserveerd door de eerste auteur volgens een werkwijze ge&#x00EF;nspireerd op die van Elving-Heida (2019). Daarbij werden tijdens elke les zowel de docent als drie leerlingen geobserveerd met behulp van een schema op basis van systematische directe observatie (vgl. Briesch et al., 2010). Voor de docentobservatie gold de volgende handelwijze: de eerste auteur observeerde de docent per minuut telkens tien seconden en legde diens leshandeling vast gedurende dit korte tijdvak. Daarbij kon hij kiezen uit klassikale activiteiten als opstarten of instructie geven, individuele activiteiten als een leerling hulp bieden en handelingen waarbij de docent zich niet actief met de inhoud van de les bezighield, zoals het observeren/corrigeren van leerlinggedrag en het noteren van de absenties.</p>
					<p>Een vergelijkbare handelswijze werd gevolgd bij het observeren van de leerlingen. Eerst werden drie leerlingen gekozen die goed zichtbaar waren voor de onderzoeker. Zij werden niet ge&#x00EF;nformeerd dat ze werden geobserveerd. Vervolgens observeerde de eerste auteur elke leerling per minuut telkens tien seconden en legde met een observatieschema de lesactiviteit van de leerling vast gedurende dit tijdvak. Het observatieschema omvatte enerzijds aan de lesinhoud gerelateerde activiteiten zoals het bekijken van de animatie, het beantwoorden van de meerkeuze- of open vragen en hulp vragen aan de docent. Anderzijds omvatte het ook niet aan de lesinhoud gerelateerde activiteiten, zoals om zich heen kijken, kletsen met een klasgenoot en &#x2018;andere dingen doen&#x2019;.</p>
					<p>Een week na de lessenserie hebben we zes van de deelnemende leerlingen (twee jongens en vier meisjes) en de twee deelnemende docenten Nederlands met gemiddeld tien jaar leservaring (<sc>SD</sc> = 2.83) gevraagd om de kwantitatieve resultaten te interpreteren in afzonderlijke focusgroepinterviews. De eerste auteur heeft deze sessies samengevat en enkele karakteristieke uitspraken geselecteerd. De deelnemers ontvingen die informatie in combinatie met een eerdere versie van dit artikel om te kunnen beoordelen of de samenvatting en de geselecteerde uitspraken een accurate weergave vormden van hun interpretaties. Alle deelnemers hebben hun goedkeuring gegeven. Met het verwerken van de kwantitatieve en kwalitatieve opbrengsten in <sc>CLAP1</sc> werd de ontwerpfase eind februari 2020 afgerond.</p>
				</sec>
				<sec sec-type="heading-3">
					<label>3.3.2</label>
					<title>Ontwikkelfase: Van <sc>CLAP1</sc> naar <sc>CLAP2</sc></title>
					<p>Eind april 2020 namen 61 vwo 4-leerlingen (2 klassen, 22 jongens en 39 meisjes) en twee docenten Nederlands met gemiddeld 12 jaar leservaring (<sc>SD</sc> = 5.66) deel aan <sc>CLAP1</sc>. Opnieuw vervulden de docenten een procesmatige rol en werden alle inhoudelijke lessen door de eerste auteur geobserveerd (volgens de werkwijze die we hierboven voor de ontwerpfase ook al beschreven).</p>
					<p>Met een door ons ontwikkelde digitale vragenlijst, die bestond uit vijfenveertig stellingen gebaseerd op het curriculaire spinnenweb van Van den Akker (2003), werd de praktische uitvoerbaarheid van <sc>CLAP1</sc> beoordeeld. De leerlingen gaven hiertoe voor elke stelling aan op een vijfpunts-Likertschaal in hoeverre ze het ermee eens waren. Er werd vervolgens een exploratieve factoranalyse uitgevoerd op dezelfde wijze als in de ontwerpfase (zie Bijlage&#x00A0;S4), zodat er voor alle factoren een gemiddelde berekend kon worden. Direct na het analyseren van de kwantitatieve resultaten, werd er zowel een focusgroepinterview afgenomen met zes van de deelnemende leerlingen (4 jongens en 2 meisjes) als met de twee betrokken docenten. De sessies werden door de eerste auteur samengevat en om ook in deze fase te kunnen beoordelen of die informatie een accurate weergave vormde van de interpretaties van de deelnemers, ontvingen zij die samenvatting in combinatie met enkele geselecteerde karakteristieke uitspraken en een eerdere versie van dit artikel. Alle deelnemers hebben hun goedkeuring gegeven. Naar aanleiding van de focusgroepinterviews werden de tekenaar, voice-over en animator aan het werk gezet om de voorgestelde aanpassingen door te voeren in <sc>CLAP2</sc>. De ontwikkelfase werd hiermee in mei 2020 afgerond.</p>
				</sec>
				<sec sec-type="heading-3">
					<label>3.3.3</label>
					<title>Evaluatiefase: Van <sc>CLAP2</sc> naar <sc>CLAP3</sc></title>
					<p>Tussen oktober 2021 en februari 2022 namen 213 vwo 4-leerlingen (twee scholen, negen klassen, 82 jongens en 131 meisjes) deel aan <sc>CLAP2</sc>. Ook in deze fase werden alle inhoudelijke lessen door de eerste auteur geobserveerd en vervulden de docenten een procesmatige rol. Omdat <sc>CLAP2</sc> werd uitgevoerd volgens een <italic>switching replications</italic>-design (Shadish et al., 2002), werd er in deze fase een derde toets toegevoegd aan het lesmateriaal.</p>
					<p>In Tabel 1 is het verloop van de interventie schematisch weergegeven. Alle klassen zijn gestart met een eerste meetmoment gevolgd door vijf lessen <sc>CLAP2</sc> (groep A en B), of vijf lessen van het reguliere programma (leesvaardigheid in groep C en spreekvaardigheid in groep D). Vervolgens werd een tweede meting afgenomen en volgden de leerlingen vijf reguliere lessen (leesvaardigheid in groep A en spreekvaardigheid in groep B) of vijf lessen <sc>CLAP2</sc> (groep C). Groep&#x00A0;D was later gestart en moest in deze fase afhaken als gevolg van een <sc>COVID</sc>-lockdown. In de overige groepen werd de interventie afgerond met een derde meetmoment. Zowel voor bewuste taalvaardigheid als voor motivatie zijn de observaties daarbij steeds genest binnen leerlingen en klassen.</p>
					<table-wrap>
						<caption>
							<title>Tabel 1</title>
							<p>Schematische weergave van het verloop van de interventie</p>
						</caption>
						<table frame="void" cellpadding="5">
							<thead>
								<tr>
									<th>
										<p></p>
										<p><bold>Beschrijving</bold></p>
									</th>
									<th>
										<p><bold>Groep A*</bold> <bold>(3 klassen, N= 79)</bold></p>
									</th>
									<th>
										<p><bold>Groep B*</bold> <bold>(2 klassen, N= 43)</bold></p>
									</th>
									<th>
										<p><bold>Groep&#x00A0;C*</bold> <bold>(2 klassen, N= 42)</bold></p>
									</th>
									<th>
										<p><bold>Groep&#x00A0;D*</bold> <bold>(2 klassen, N= 49)</bold></p>
									</th>
								</tr>
							</thead>
							<tbody>
								<tr>
									<td>
										<p><bold>Meetmoment 1</bold></p>
									</td>
									<td>
										<p></p>
									</td>
									<td>
										<p></p>
									</td>
									<td>
										<p></p>
									</td>
									<td>
										<p></p>
									</td>
								</tr>
								<tr>
									<td>
										<p><bold>Motivatievragenlijst</bold></p>
									</td>
									<td>
										<p>X</p>
									</td>
									<td>
										<p>X</p>
									</td>
									<td>
										<p>X</p>
									</td>
									<td>
										<p>X</p>
									</td>
								</tr>
								<tr>
									<td>
										<p><bold>Bewustetaalvaardigheidstoets</bold></p>
									</td>
									<td>
										<p>X</p>
									</td>
									<td>
										<p>X</p>
									</td>
									<td>
										<p>X</p>
									</td>
									<td>
										<p>X</p>
									</td>
								</tr>
								<tr>
									<td>
										<p><bold>Lessenserie</bold></p>
									</td>
									<td>
										<p><sc>CLAP2</sc></p>
									</td>
									<td>
										<p><sc>CLAP2</sc></p>
									</td>
									<td>
										<p>Leesvaardigheid</p>
									</td>
									<td>
										<p>Spreekvaardigheid</p>
									</td>
								</tr>
								<tr>
									<td>
										<p><bold>Meetmoment 2</bold></p>
									</td>
									<td>
										<p></p>
									</td>
									<td>
										<p></p>
									</td>
									<td>
										<p></p>
									</td>
									<td>
										<p></p>
									</td>
								</tr>
								<tr>
									<td>
										<p><bold>Motivatievragenlijst</bold></p>
									</td>
									<td>
										<p>X</p>
									</td>
									<td>
										<p>X</p>
									</td>
									<td>
										<p></p>
									</td>
									<td>
										<p></p>
									</td>
								</tr>
								<tr>
									<td>
										<p><bold>Bewustetaalvaardigheidstoets</bold></p>
									</td>
									<td>
										<p>X</p>
									</td>
									<td>
										<p>X</p>
									</td>
									<td>
										<p>X</p>
									</td>
									<td>
										<p>X</p>
									</td>
								</tr>
								<tr>
									<td>
										<p><bold>Lessenserie</bold></p>
									</td>
									<td>
										<p>Leesvaardigheid</p>
									</td>
									<td>
										<p>Spreekvaardigheid</p>
									</td>
									<td>
										<p><sc>CLAP2</sc></p>
									</td>
									<td>
										<p></p>
									</td>
								</tr>
								<tr>
									<td>
										<p><bold>Meetmoment 3</bold></p>
									</td>
									<td>
										<p></p>
									</td>
									<td>
										<p></p>
									</td>
									<td>
										<p></p>
									</td>
									<td>
										<p></p>
									</td>
								</tr>
								<tr>
									<td>
										<p><bold>Motivatievragenlijst</bold></p>
									</td>
									<td>
										<p></p>
									</td>
									<td>
										<p></p>
									</td>
									<td>
										<p>X</p>
									</td>
									<td>
										<p></p>
									</td>
								</tr>
								<tr>
									<td>
										<p><bold>Bewustetaalvaardigheidstoets</bold></p>
									</td>
									<td>
										<p>X</p>
									</td>
									<td>
										<p>X</p>
									</td>
									<td>
										<p>X</p>
									</td>
									<td>
										<p></p>
									</td>
								</tr>
							</tbody>
						</table>
						<table-wrap-foot>
							<p>* Groep A en C behoren tot school <sc>I</sc>, groep B en D tot school <sc>II</sc></p>
						</table-wrap-foot>
					</table-wrap>
					<sec sec-type="heading-4">
						<label>3.3.3.1</label>
						<title>Motivatie</title>
						<p>Met een aangepaste, digitale variant van de <sc>SIMS</sc>, <italic>Situational Motivation Scale</italic> (Guay et al., 2000) werd de motivatie van de leerlingen ge&#x00EB;valueerd. De <sc>SIMS</sc> bestaat uit zestien stellingen waarvan leerlingen met behulp van een vijfpunts-Likertschaal kunnen aangeven in welke mate deze op hen van toepassing zijn. We vroegen hun dit te doen voor grammatica binnen de schoolvakken Nederlands, Engels en Duits: voorafgaand aan <sc>CLAP2</sc> en direct na afloop ervan.</p>
						<p>Met een exploratieve factoranalyse per meetmoment werd de groepering van items vastgesteld (zie Bijlage&#x00A0;S4). Vervolgens werd gebruikgemaakt van multiniveau-modellen volgens het <italic>fixed-occasion</italic>-design (Goldstein, 1987; Quen&#x00E9; &amp; Van den Bergh, 2004), waarbij a) het motivatietype, b) het meetmoment en c) de interactie daartussen als vaste effecten werden meegenomen. In Bijlage&#x00A0;S5 is de modellenopbouw voor het evalueren van motivatie schematisch weergegeven per onderzocht schoolvak. De ge&#x00EF;llustreerde fit- en passingsvergelijkingen worden in de begeleidende tekst per toegevoegd model beschreven. De motivatiescores werden in een focusgroepinterview voorgelegd aan zes van de deelnemende leerlingen uit groep A (3 jongens en 3 meisjes) en de twee docenten Nederlands van groep A en B met gemiddeld 12 jaar leservaring (<sc>SD</sc> = 5.66).</p>
					</sec>
					<sec sec-type="heading-4">
						<label>3.3.3.2</label>
						<title>Bewuste taalvaardigheid</title>
						<p>Op drie meetmomenten werd het bewustetaalvaardigheidsniveau van de leerlingen vastgesteld met behulp van door ons ontwikkelde taalcontrastieve bewustetaalvaardigheidstoetsversies. Daarbij hebben we onderscheid gemaakt tussen items die voornamelijk gericht zijn op het evalueren van het taalvaardigheidsniveau en items die voornamelijk gericht zijn op het evalueren van het taalbewustzijnsniveau. Omdat we de mate waarin leerlingen hun grammaticale kennis konden toepassen evalueren, werd voor het schoolvak Duits een overzicht van de naamvallen uitgedeeld dat de leerlingen als naslagwerk mochten gebruiken tijdens de toets.</p>
						<p>Elke toetsversie bestond uit vijf verschillende opdrachten per taal. In Bijlage&#x00A0;S6 hebben we van elke opdracht een voorbeeld van een van de drie talen opgenomen. In opdracht <sc>I</sc> beoordeelden de leerlingen de grammaticaliteit van vijf zinnen per taal door per zin &#x2018;correct&#x2019; of &#x2018;incorrect&#x2019; aan te kruisen. Dit type taalvaardigheidsitems staat ook wel bekend onder de naam grammaticaliteitsbeoordelingsitems en is gericht op de impliciete taalkennis en het taalgevoel (Ellis, 1991). We hebben ons bij dit itemtype laten inspireren door de materialen bij Ammar et al. (2010) en Derwing et al. (2002).</p>
						<p>De items in opdracht <sc>II</sc> zijn gebaseerd op de <italic>Error Correction Test</italic> bij Spada et al. (2014) en de eerste sectie van de <italic>Test of metalinguistic knowledge&#x00A0;&#x2013; L2 German</italic> bij Roehr en G&#x00E1;nem-Guti&#x00E9;rrez (2009). In het verlengde van hun werkwijzen bestaan ook onze items uit twee delen. In het eerste deel vroegen we de leerlingen om van grammaticaal incorrecte zinnen uit te leggen waarom ze grammaticaal incorrect waren (taalbewustzijn) en in het tweede deel vroegen we hun de zin te verbeteren en de verbeterde fout in hoofletters te zetten (taalvaardigheid). In opdracht <sc>III</sc> beoordeelden ze de juistheid van vier grammaticale relaties bij een correcte zin. De leerlingen werden daarbij beoordeeld op hun vermogen om de relatie tussen taalvorm, functie en betekenis op waarde te schatten.</p>
						<p>In opdracht <sc>IV</sc> vroegen we de leerlingen om van twee incorrecte grammaticale relaties bij een correcte zin uit te leggen a) waarom ze grammaticaal incorrect waren (taalbewustzijn) om ze vervolgens in het tweede deel te verbeteren (taalvaardigheid). In opdracht <sc>V</sc> vroegen we de leerlingen in het eerste deel de juistheid van vier visueel weergegeven interpretaties van een ambigue zin te beoordelen (taalvaardigheid). In het tweede deel lieten we hen hun oordeel onderbouwen door voor twee van de interpretaties uit te leggen waarom ze een (in)correcte weergave vormden van de gegeven zin (taalbewustzijn). Het beantwoorden daarvan vereist vooral <italic>metalinguistic reflection</italic> (Ellis, 2004). Voor dit type items hebben we ons laten inspireren door een opgave in de <italic>Test of metalinguistic knowledge</italic> bij Tellier en Roehr-Brackin (2017).</p>
						<p>Voor de analyse van de taalbewustzijnsitems werd na een eerste verkenning een analysemodel opgesteld waarin voor elke vraag voorbeelden van vijf antwoordcategorie&#x00EB;n werden verzameld, bedoeld om verschillende gradaties van begrip te weerspiegelen in lijn met literatuur over begrip, waarin wordt gesteld dat begrip gradueel is (Baumberger, Beisbart, &amp; Brun, 2016; Baumberger, 2019; De Regt, 2009). Indien de redenering ontbrak of als deze onjuist was, ontvingen de leerlingen nul punten (categorie a en b). Voor onvolledige of slechts gedeeltelijk correcte redeneringen ontvingen ze &#x00E9;&#x00E9;n punt (categorie c en d) en voor redeneringen die zowel volledig als correct waren twee punten (categorie e). Het &#x2018;blind&#x2019; gebruik van terminologie waarover wordt geschreven in Van Rijt et al. (2020; 2021) leverde ook in onze analyse automatisch nul punten op. Bij het analyseren van de taalvaardigheidsitems werden twee categorie&#x00EB;n gebruikt: incorrecte antwoorden leverden nul punten op en correcte antwoorden &#x00E9;&#x00E9;n punt. In Bijlage&#x00A0;S7 hebben we een analysevoorbeeld opgenomen van zowel een taalbewustzijnsitem (onderdeel A) waarin de leerlingen moesten uitleggen waarom de gegeven incorrecte grammaticale relatie incorrect was, als van een taalvaardigheidsitem (onderdeel B) waarin de leerlingen de gegeven incorrecte grammaticale relatie moesten verbeteren.</p>
						<p>Per meetmoment werden de eerste 22 toetsen (10&#x202F;%) zowel in zijn geheel door de eerste auteur, als vakspecifiek door een docent Nederlands, Engels of Duits nagekeken. Het interbeoordelaarsbetrouwbaarheidsbereik bleek uitstekend (Krippendorffs alfa = .97&#x2013;.98, Hayes &amp; Krippendorff, 2007) en werd in Tabel 2 uitgesplitst per meetmoment en taal. De verschillen werden besproken tot er overeenstemming werd bereikt. Vanwege de hoge mate van initi&#x00EB;le overeenstemming werd besloten de overige toetsen door de eerste auteur te laten beoordelen.</p>
						<table-wrap>
							<caption>
								<title>Tabel&#x00A0;2</title>
								<p>Interbeoordelaarsbetrouwbaarheid per <italic>Meetmoment</italic> en <italic>Taal</italic></p>
							</caption>
							<table frame="void" cellpadding="5">
								<thead>
									<tr>
										<th>
											<p>Meetmoment</p>
										</th>
										<th>
											<p>Nederlands</p>
										</th>
										<th>
											<p>Engels</p>
										</th>
										<th>
											<p>Duits</p>
										</th>
									</tr>
								</thead>
								<tbody>
									<tr>
										<td>
											<p>M1</p>
										</td>
										<td>
											<p>.98</p>
										</td>
										<td>
											<p>.98</p>
										</td>
										<td>
											<p>.97</p>
										</td>
									</tr>
									<tr>
										<td>
											<p>M2</p>
										</td>
										<td>
											<p>.97</p>
										</td>
										<td>
											<p>.97</p>
										</td>
										<td>
											<p>.97</p>
										</td>
									</tr>
									<tr>
										<td>
											<p>M3</p>
										</td>
										<td>
											<p>.98</p>
										</td>
										<td>
											<p>.98</p>
										</td>
										<td>
											<p>.97</p>
										</td>
									</tr>
								</tbody>
							</table>
						</table-wrap>
						<p>Voor bewuste taalvaardigheid werd eveneens gebruikgemaakt van een exploratieve factoranalyse per meetmoment (zie Bijlage&#x00A0;S4) en multiniveau-modellen volgens het <italic>fixed-occasion</italic>-design (Goldstein, 1987; Quen&#x00E9; &amp; Van den Bergh, 2004), waarbij a) het bewustetaalvaardigheidstype (taalbewustzijn/taalvaardigheid), b) het meetmoment, c) de interventie en d) het interventiemoment (<italic>switching replications</italic>) en e) de interactie daartussen als vaste effecten werden meegenomen. In Bijlage&#x00A0;S8 is de modellenopbouw voor het evalueren van bewuste taalvaardigheid schematisch weergegeven per onderzocht schoolvak. De ge&#x00EF;llustreerde fit- en passingsvergelijkingen worden in de begeleidende tekst per toegevoegd model beschreven. Om het verschil in toetsniveau als verklarende factor voor een eventueel verschil in bewustetaalvaardigheidsniveau op de drie meetmomenten uit te kunnen sluiten, werd bovendien <italic>counterbalancing</italic> (Wickens &amp; Keppel, 2004) toegepast en werd in de modellenopbouw gecontroleerd voor een niveauverschil tussen de drie bewustetaalvaardigheidstoetsversies (zie Bijlage S8, Tabel S16, S18 en S20). In april 2022 werd de evaluatiefase afgerond met het verwerken van de kwantitatieve en kwalitatieve opbrengsten.</p>
					</sec>
				</sec>
			</sec>
		</sec>
		<sec sec-type="heading-1">
			<label>4</label>
			<title>Resultaten</title>
			<sec sec-type="heading-2">
				<label>4.1</label>
				<title>Ontwerpfase: Van prototype naar <sc>CLAP1</sc></title>
				<p>De geraadpleegde taalkundigen gaven vooral feedback op de juistheid en volledigheid van de lesinhoud, de bijbehorende terminologie en de voorbeeldzinnen in het prototype. De feedback van de vakdidactici en docenten was voornamelijk gericht op de haalbaarheid van de beoogde lesdoelen, de aansluiting op de voorkennis en de volgorde van concepten binnen de lessen(serie). Bovendien adviseerden ze een vaste lesopzet, bestaande uit een terugblik op de vorige les, een afwisselend inductieve/deductieve uitleg van de nieuwe inhoud en een samenvatting daarvan.</p>
				<p>Zoals bleek uit de lesobservaties, werd <sc>CLAP</sc> in beide klassen volgens plan uitgevoerd, wat resulteerde in een volledige dataset. De analyse van de vragenlijsten leverde drie factoren op, te weten <italic>Motivatie</italic>, <italic>Consistentie</italic> en <italic>Relevantie</italic> met een betrouwbaarheid (<sc>KMO</sc>) van .58 op de voormeting en .62 op de nameting (zie Bijlage&#x00A0;S4, Tabel&#x00A0;S6). Het betrouwbaarheidsbereik van de factor <italic>Motivatie</italic> bleek goed (6 items, <italic><inline-graphic xlink:href="DuJAL16273_i0001.png"/> =</italic> .83&#x2013;.93), van de factor <italic>Consistentie</italic> uitstekend (2 items, <italic><inline-graphic xlink:href="DuJAL16273_i0002.png"/> =</italic> .90&#x2013;.91) en van de factor <italic>Relevantie</italic> acceptabel (2 items, <italic><inline-graphic xlink:href="DuJAL16273_i0003.png"/> =</italic> .73&#x2013;.80). Met behulp van een gepaarde t-toets konden de resultaten op basis van <sc>CLAP</sc> nu vergeleken worden met die op basis van de grammaticalessen in de onderbouw. In Tabel 3 zijn de gemiddelden en bijbehorende standaarddeviaties weergegeven.</p>
				<table-wrap>
					<caption>
						<title>Tabel&#x00A0;3</title>
						<p>Gemiddelden (en standaarddeviaties) voor de factoren <italic>Motivatie, Consistentie</italic> en <italic>Relevantie</italic></p>
					</caption>
					<table frame="void" cellpadding="5">
						<thead>
							<tr>
								<th>
									<p></p>
								</th>
								<th colspan="2">
									<p><italic>M</italic> (<italic><sc>SD</sc></italic>)</p>
								</th>
							</tr>
							<tr>
								<th>
									<p></p>
								</th>
								<th>
									<p>Grammaticalessen</p>
								</th>
								<th>
									<p><sc>CLAP</sc></p>
								</th>
							</tr>
							<tr>
								<th>
									<p>Factor</p>
								</th>
								<th>
									<p>in de onderbouw</p>
								</th>
								<th>
									<p></p>
								</th>
							</tr>
						</thead>
						<tbody>
							<tr>
								<td>
									<p>Motivatie</p>
								</td>
								<td>
									<p>1.99 (.61)</p>
								</td>
								<td>
									<p>3.92 (.82)</p>
								</td>
							</tr>
							<tr>
								<td>
									<p>Consistentie</p>
								</td>
								<td>
									<p>2.53 (.83)</p>
								</td>
								<td>
									<p>3.62 (.87)</p>
								</td>
							</tr>
							<tr>
								<td>
									<p>Relevantie</p>
								</td>
								<td>
									<p>2.41 (.81)</p>
								</td>
								<td>
									<p>3.50 (.85)</p>
								</td>
							</tr>
						</tbody>
					</table>
				</table-wrap>
				<p>De motivatiescore voor grammatica na <sc>CLAP</sc> bleek aanzienlijk hoger dan die na de grammaticalessen in de onderbouw, t(44) = 22.11, p &lt; .001, <italic>d</italic> = .6. Door de ge&#x00EF;nterviewde leerlingen en docenten werden de animaties, de taalcontrastieve aanpak en de directe feedback op de meerkeuzevragen als belangrijkste verklarende factoren hiervoor genoemd.</p>
				<p>De waardering van de consistentie van <sc>CLAP</sc> bleek eveneens hoger dan die van de lessen in de onderbouw, t(44) = 25.38, p &lt; .001, <italic>d</italic> = .3. De ge&#x00EF;nterviewde leerlingen verklaarden dat aan de hand van de voorspelbaarheid van <sc>CLAP</sc>: &#x201C;Het was fijn dat je precies wist wat er elke les van je verwacht werd, dat was in de onderbouw wel anders.&#x201D; Door de ge&#x00EF;nterviewde docenten werd vooral het effect daarvan ervaren: &#x201C;De eenduidige opbouw maakte de leerlingen zelfstandiger.&#x201D;</p>
				<p>Verder bleek ook de waardering van de relevantie van <sc>CLAP</sc> aanzienlijk hoger dan die van de lessen in de onderbouw, t(44) = 11.70, p &lt; .001, <italic>d</italic> = .6. De ge&#x00EF;nterviewde docenten noemden de vergrote toepasbaarheid van grammatica in verschillende onderwijsdomeinen en talen als belangrijkste verklarende factor voor deze toename. Een van de leerlingen zei hierover het volgende: &#x201C;Ik had altijd het gevoel dat elke taal zijn eigen regels en enorm veel uitzonderingen had, maar nu snap ik dat dat eigenlijk helemaal niet zo is. Ik heb bijvoorbeeld dingen geleerd die ik nu ook bij Spaans kan gebruiken!&#x201D;</p>
			</sec>
			<sec sec-type="heading-2">
				<label>4.2</label>
				<title>Ontwikkelfase: Van <sc>CLAP1</sc> naar <sc>CLAP2</sc></title>
				<p>Op basis van de lesobservaties konden we concluderen dat <sc>CLAP1</sc> in beide klassen volgens plan is uitgevoerd, wat resulteerde in een volledige dataset. De analyse van de vragenlijsten leverde negen factoren op, te weten <italic>Leerdoelen, Lesinhoud, Website, Animaties, Meerkeuzevragen, Open vragen, Voorbeelden</italic>, <italic>Tijd</italic> en <italic>Toetsing</italic> met een betrouwbaarheid (<sc>KMO</sc>) van .57 (zie Bijlage S4, Tabel S7). De betrouwbaarheid van deze factoren bleek goed tot uitstekend (<italic><styled-content xml:lang="el-Grek">&#x03B1;</styled-content></italic> = .86&#x2013;.95), waardoor er voor elke factor een gemiddelde en standaarddeviatie kon worden berekend op basis van de bijbehorende items (zie Bijlage S9).</p>
				<p>Met betrekking tot de factorgemiddelden benoemden de ge&#x00EF;nterviewde leerlingen het hoge gemiddelde voor de factor <italic>Website</italic> en het lagere gemiddelde voor de factor <italic>Toetsing</italic>. Het hoge gemiddelde was in hun ogen logisch: &#x201C;Het is gewoon een overzichtelijke site met rustige kleuren en een duidelijke indeling.&#x201D; Het lagere gemiddelde had volgens hen vooral te maken met het feit dat toetsen altijd vervelend zijn. Een van de leerlingen noemde daarnaast de Duitse toetsvragen als mogelijke verklaring: &#x201C;Een deel van de leerlingen heeft geen Duits in zijn [vakken]pakket. Ik hoorde dat veel leerlingen het vet raar vonden dat ook zij vragen over Duitse zinnen moesten beantwoorden.&#x201D;</p>
				<p>De betrokken docenten was niet echt iets bijzonders opgevallen aan de factorgemiddelden, al benoemde docent A heel kort het verschil in de waardering van de open- en meerkeuzevragen: &#x201C;Die [meerkeuzevragen] vonden ze vast makkelijker denk ik.&#x201D; In de itemgemiddelden vonden ze vervolgens een onderbouwing voor die redenering over de vraagtypen. De meerkeuzevragen (<italic>Item 21</italic>) werden door de leerlingen inderdaad makkelijker gevonden dan de open vragen (<italic>Item 26</italic>). Verder viel het hoge gemiddelde van <italic>Item 33</italic> over het gebruik van taalcontrastieve voorbeelden hun in positieve zin op.</p>
				<p>De leerlingen bespraken <italic>Item 18</italic> en <italic>34</italic> als belangrijkste verbeterpunten. Het tempo in de bespreking van sommige voorbeelden in de animaties was voor hen te snel, waardoor ze niet altijd wisten waar ze moesten kijken. Dat werd versterkt door de grote hoeveelheid tekst en beeld op elke &#x2018;dia&#x2019;. In de literatuur vonden we hier zowel een verklaring als mogelijke oplossingen voor. Onderzoek toont namelijk aan dat het risico bij het leren van multimediale leermiddelen groot is dat er te veel informatie tegelijkertijd verwerkt moet worden, waardoor er een &#x2018;<italic>split attention effect</italic>&#x2019; kan optreden, waarbij de aandacht verdeeld moet worden tussen tekst een beeld (Sweller, 2010).</p>
				<p>Een van de manieren om dit effect te minimaliseren is het &#x2018;<italic>spatial contiguity principle</italic>&#x2019; (Mayer, 2003), waarbij de gedrukte woorden dicht bij de corresponderende gedeeltes in een afbeelding geplaatst worden (Florax &amp; Ploetzner, 2010). Een andere manier om het &#x2018;<italic>split attention effect</italic>&#x2019; te minimaliseren is het &#x2018;<italic>signaling principle</italic>&#x2019;. Hierbij worden signalen toegevoegd die de structuur verduidelijken (Mayer, 2003), zoals kleurcoderingen (Ozcelik et al., 2009) of typografische aandachtstrekkers als cursieve of onderstreepte letters (Hartley, 2004). Wanneer leerlingen geholpen worden om de relevante informatie te vinden en om verbale en visuele informatie met elkaar te integreren, dan wordt de informatie dieper verwerkt en dat bevordert betekenisvol leren (Mayer, 2003; Mayer &amp; Chandler, 2001; Seufert, 2003). We besloten in overleg met de tekenaar, de voice-over en de animator beide principes toe te passen in <sc>CLAP2</sc> en daarnaast de gesproken tekst uit te breiden om leerlingen meer tijd te geven de visuele verbeelding van de taalcontrastieve uitleg te verwerken.</p>
			</sec>
			<sec sec-type="heading-2">
				<label>4.3</label>
				<title>Evaluatiefase: Van <sc>CLAP2</sc> naar <sc>CLAP3</sc></title>
				<p>De uitvoering van <sc>CLAP2</sc> verliep in zeven klassen (groep A, B en C) volgens plan, zoals bleek uit de lesobservaties. In de twee overige klassen (groep D) moest de interventie vroegtijdig afgebroken worden als gevolg van een <sc>COVID</sc>-lockdown. Tot dat moment werden er geen noemenswaardige verschillen tussen de groepen geobserveerd.</p>
				<sec sec-type="heading-3">
					<label>4.3.1</label>
					<title>Motivatie</title>
					<p>De analyse van de motivatievragenlijsten leverde per taal vier factoren op, te weten <italic>Intrinsieke motivatie, Ge&#x00EF;dentificeerde motivatie, Extrinsieke motivatie</italic> en <italic>Amotivatie</italic> (zie Bijlage&#x00A0;S4, Tabel&#x00A0;S8) met een betrouwbaarheid (<sc>KMO</sc>) van .77 (<italic>Voormeting</italic>) en .80 (<italic>Nameting</italic>) voor het Nederlands, .77 en .81 voor het Engels en .69 en .71 voor het Duits. Het betrouwbaarheidsbereik van de factor <italic>Intrinsieke motivatie</italic> per taal bleek goed (<italic><inline-graphic xlink:href="DuJAL16273_i0004.png"/> =</italic> .85&#x2013;.91) en dat van de factoren <italic>Ge&#x00EF;dentificeerde motivatie</italic>, <italic>Extrinsieke motivatie</italic> en <italic>Amotivatie</italic> acceptabel tot goed (<italic><inline-graphic xlink:href="DuJAL16273_i0005.png"/> =</italic> .70&#x2013;.85), zoals in Tabel 4 te zien is.</p>
					<p>In Tabel 5 zijn de parameterschattingen voor zowel de gemiddelde motivatie op de voormeting als de gemiddelde groei weergegeven per motivatietype en taal. Uitgaande van de vooraf opgestelde modellenopbouw, uitgewerkt in Bijlage S5, bleken de scores voor de vier motivatietypen in de drie talen significant toegenomen. De grootste gemiddelde groei werd waargenomen voor het Nederlands (<italic>d&#x0304;</italic> = .3), gevolgd door het Engels (<italic>d&#x0304;</italic> = .1) en het Duits (<italic>d&#x0304;</italic> =.1). De gemiddelde motivatiescores zijn weergegeven in Figuur 1.</p>
					<table-wrap>
						<caption>
							<title>Tabel&#x00A0;4</title>
							<p>Betrouwbaarheidsbereik per <italic>Motivatietype</italic> en <italic>Taal</italic></p>
						</caption>
						<table frame="void" cellpadding="5">
							<thead>
								<tr>
									<th>
										<p>Factor (elk bestaande uit 4 items)</p>
									</th>
									<th>
										<p>Nederlands</p>
									</th>
									<th>
										<p>Engels</p>
									</th>
									<th>
										<p>Duits</p>
									</th>
								</tr>
							</thead>
							<tbody>
								<tr>
									<td>
										<p>Intrinsieke motivatie</p>
									</td>
									<td>
										<p>.86&#x2013;.91</p>
									</td>
									<td>
										<p>.85&#x2013;.91</p>
									</td>
									<td>
										<p>.87&#x2013;.89</p>
									</td>
								</tr>
								<tr>
									<td>
										<p>Ge&#x00EF;dentificeerde motivatie</p>
									</td>
									<td>
										<p>.75&#x2013;.83</p>
									</td>
									<td>
										<p>.83&#x2013;.78</p>
									</td>
									<td>
										<p>.83&#x2013;.83</p>
									</td>
								</tr>
								<tr>
									<td>
										<p>Extrinsieke motivatie</p>
									</td>
									<td>
										<p>.72&#x2013;.85</p>
									</td>
									<td>
										<p>.70&#x2013;.85</p>
									</td>
									<td>
										<p>.81&#x2013;.82</p>
									</td>
								</tr>
								<tr>
									<td>
										<p>Amotivatie*</p>
									</td>
									<td>
										<p>.73&#x2013;.78</p>
									</td>
									<td>
										<p>.73&#x2013;.79</p>
									</td>
									<td>
										<p>.71&#x2013;.71</p>
									</td>
								</tr>
							</tbody>
						</table>
						<table-wrap-foot>
							<p>* De bijbehorende items zijn omgepoold.</p>
						</table-wrap-foot>
					</table-wrap>
					<table-wrap>
						<caption>
							<title>Tabel&#x00A0;5</title>
							<p>Parameterschattingen voor de gemiddelde motivatie op de voormeting en de gemiddelde groei per <italic>Motivatietype</italic> en <italic>Taal</italic></p>
						</caption>
						<table frame="void" cellpadding="5">
							<thead>
								<tr>
									<th>
										<p></p>
									</th>
									<th>
										<p>Nederlands</p>
									</th>
									<th>
										<p>Engels</p>
									</th>
									<th>
										<p>Duits</p>
									</th>
								</tr>
								<tr>
									<th>
										<p>Parameter </p>
									</th>
									<th>
										<p><italic><styled-content xml:lang="el-Grek">&#x03B2;</styled-content></italic> <italic>(se)</italic></p>
									</th>
									<th>
										<p><italic><styled-content xml:lang="el-Grek">&#x03B2;</styled-content></italic> <italic>(se)</italic></p>
									</th>
									<th>
										<p><italic><styled-content xml:lang="el-Grek">&#x03B2;</styled-content></italic> <italic>(se)</italic></p>
									</th>
								</tr>
							</thead>
							<tbody>
								<tr>
									<td>
										<p>Motivatie</p>
									</td>
									<td>
										<p></p>
									</td>
								</tr>
								<tr>
									<td>
										<p>Intrinsieke motivatie</p>
									</td>
									<td>
										<p>1.99 (.05)</p>
									</td>
									<td>
										<p>2.12 (.05)</p>
									</td>
									<td>
										<p>1.55 (.05)</p>
									</td>
								</tr>
								<tr>
									<td>
										<p>Ge&#x00EF;dentificeerde motivatie</p>
									</td>
									<td>
										<p>3.14 (.05)</p>
									</td>
									<td>
										<p>3.24 (.05)</p>
									</td>
									<td>
										<p>2.62 (.05)</p>
									</td>
								</tr>
								<tr>
									<td>
										<p>Extrinsieke motivatie</p>
									</td>
									<td>
										<p>3.61 (.04)</p>
									</td>
									<td>
										<p>3.77 (.04)</p>
									</td>
									<td>
										<p>3.70 (.06)</p>
									</td>
								</tr>
								<tr>
									<td>
										<p>Amotivatie*</p>
									</td>
									<td>
										<p>2.42 (.05)</p>
									</td>
									<td>
										<p>2.53 (.05)</p>
									</td>
									<td>
										<p>2.27 (.05)</p>
									</td>
								</tr>
								<tr>
									<td>
										<p><styled-content xml:lang="el-Grek">&#x0394;</styled-content>Groei</p>
									</td>
									<td>
										<p>.26 (.05)</p>
									</td>
									<td>
										<p>.12 (.05)</p>
									</td>
									<td>
										<p>.12 (.05)</p>
									</td>
								</tr>
							</tbody>
						</table>
						<table-wrap-foot>
							<p>* De bijbehorende items zijn omgepoold.</p>
						</table-wrap-foot>
					</table-wrap>
					<fig orientation="portrait" position="float">
						<caption>
							<title>Figuur&#x00A0;1</title>
							<p>Gemiddelde motivatiescores per <italic>Taal, Motivatietype</italic> en <italic>Meetmoment</italic></p>
						</caption>
						<graphic xlink:href="DuJAL16273_i0006.png"/>
					</fig>
					<p>De ge&#x00EF;nterviewde leerlingen en docenten gaven aan dat ze de gemiddelde toename voor de drie talen vonden tegenvallen op basis van hun positieve ervaringen in de klas en noemden de geringe omvang van <sc>CLAP2</sc> en de beperkte tijd tussen de meetmomenten als mogelijke oorzaken daarvan. Het verschil in effectgrootte tussen de talen kwam voor hen niet als een verrassing omdat <sc>CLAP2</sc> binnen de lessen Nederlands werd afgenomen en de nadruk daardoor gevoelsmatig toch op het Nederlands lag.</p>
				</sec>
				<sec sec-type="heading-3">
					<label>4.3.2</label>
					<title>Bewuste taalvaardigheid</title>
					<p>De analyse van de bewustetaalvaardigheidstoetsversies leverde per taal twee factoren op, te weten <italic>Taalbewustzijn</italic> en <italic>Taalvaardigheid</italic> (zie Bijlage S4, Tabel S9) met een betrouwbaarheid (<sc>KMO</sc>) van .80 (M1), .80 (M2) en .77 (M3) voor het Nederlands, .78, .82 en .75 voor het Engels en .77, .76 en .81 voor het Duits. Het betrouwbaarheidsbereik van beide factoren (<italic><inline-graphic xlink:href="DuJAL16273_i0007.png"/> =</italic> .77&#x2013;.96) bleek acceptabel tot uitstekend (zie Tabel 6).</p>
					<p>In Tabel 7 zijn de parameterschattingen voor zowel de gemiddelde groei als de gemiddelde groei per bewustetaalvaardigheidstype weergegeven per taal. Uitgaande van de vooraf opgestelde modellenopbouw, uitgewerkt in Bijlage S8, bleken de scores voor de twee bewustetaalvaardigheidstypen in de drie talen significant toegenomen. Doordat bij de uitvoering van het onderzoek <italic>counterbalancing</italic> (Wickens &amp; Keppel, 2004) is toegepast, kunnen verschillen tussen meetmomenten ge&#x00EF;nterpreteerd worden als verschillen in het bewustetaalvaardigheidsniveau van de leerlingen en niet als verschillen tussen de toetsversies (ondanks het ontbreken van validatie voor de toetsversies). De grootste gemiddelde groei werd waargenomen voor het Nederlands (<italic>d&#x0304;</italic> &#x2264; .6), gevolgd door het Engels (<italic>d&#x0304;</italic> = .5) en het Duits (<italic>d&#x0304;</italic> =.4).</p>
					<p>Een grafische visualisatie van de gemiddelde bewustetaalvaardigheidsscores uitgesplitst per <italic>Taal</italic>, <italic>Bewustetaalvaardigheidstype</italic>, <italic>Meetmoment</italic> en <italic>Groep</italic> in &#x00E9;&#x00E9;n figuur bleek praktisch onleesbaar, daarom kozen we ervoor de visualisatie per taal op te splitsen (Figuur 2, 3 en 4).</p>
					<table-wrap>
						<caption>
							<title>Tabel&#x00A0;6</title>
							<p>Betrouwbaarheidsbereik per <italic>Bewustetaalvaardigheidstypen</italic> en <italic>Taal</italic></p>
						</caption>
						<table frame="void" cellpadding="5">
							<thead>
								<tr>
									<th>
										<p></p>
									</th>
									<th colspan="3">
										<p>Betrouwbaarheidsbereik</p>
									</th>
								</tr>
								<tr>
									<th>
										<p>Factor</p>
									</th>
									<th>
										<p>Nederlands</p>
									</th>
									<th>
										<p>Engels</p>
									</th>
									<th>
										<p>Duits</p>
									</th>
								</tr>
							</thead>
							<tbody>
								<tr>
									<td>
										<p>Taalbewustzijn (5 items)</p>
									</td>
									<td>
										<p>.82&#x2013;.89</p>
									</td>
									<td>
										<p>.82&#x2013;.90</p>
									</td>
									<td>
										<p>.90&#x2013;.96</p>
									</td>
								</tr>
								<tr>
									<td>
										<p>Taalvaardigheid (16 items)</p>
									</td>
									<td>
										<p>.84&#x2013;.89</p>
									</td>
									<td>
										<p>.84&#x2013;.89</p>
									</td>
									<td>
										<p>.77&#x2013;.96</p>
									</td>
								</tr>
							</tbody>
						</table>
					</table-wrap>
					<table-wrap>
						<caption>
							<title>Tabel&#x00A0;7</title>
							<p>Parameterschattingen voor de gemiddelde groei per <italic>Bewustetaalvaardigheidstype</italic> en <italic>Taal</italic></p>
						</caption>
						<table frame="void" cellpadding="5">
							<thead>
								<tr>
									<th>
										<p></p>
									</th>
									<th>
										<p>Nederlands</p>
									</th>
									<th>
										<p>Engels</p>
									</th>
									<th>
										<p>Duits</p>
									</th>
								</tr>
								<tr>
									<th>
										<p>Parameter</p>
									</th>
									<th>
										<p><italic><styled-content xml:lang="el-Grek">&#x03B2;</styled-content></italic> <italic>(se)</italic></p>
									</th>
									<th>
										<p><italic><styled-content xml:lang="el-Grek">&#x03B2;</styled-content></italic> <italic>(se)</italic></p>
									</th>
									<th>
										<p><italic><styled-content xml:lang="el-Grek">&#x03B2;</styled-content></italic> <italic>(se)</italic></p>
									</th>
								</tr>
							</thead>
							<tbody>
								<tr>
									<td>
										<p><styled-content xml:lang="el-Grek">&#x0394;</styled-content>Groei</p>
									</td>
									<td>
										<p>.57 (.32)</p>
									</td>
									<td>
										<p>.48 (.32)</p>
									</td>
									<td>
										<p>.44 (.31)</p>
									</td>
								</tr>
								<tr>
									<td>
										<p><styled-content xml:lang="el-Grek">&#x0394;</styled-content>Groei taalbewustzijn</p>
									</td>
									<td>
										<p>.66 (.35)</p>
									</td>
									<td>
										<p>.61 (.32)</p>
									</td>
									<td>
										<p>.54 (.31)</p>
									</td>
								</tr>
								<tr>
									<td>
										<p><styled-content xml:lang="el-Grek">&#x0394;</styled-content>Groei taalvaardigheid</p>
									</td>
									<td>
										<p>.49 (65)</p>
									</td>
									<td>
										<p>.34 (.80)</p>
									</td>
									<td>
										<p>.34 (.78)</p>
									</td>
								</tr>
							</tbody>
						</table>
					</table-wrap>
					<fig orientation="portrait" position="anchor">
						<caption>
							<title>Figuur&#x00A0;2</title>
							<p>Gemiddelde bewustetaalvaardigheidsscores Nederlands uitgesplitst per <italic>Bewustetaalvaardigheidstype, Meetmoment</italic> en <italic>Groep</italic></p>
						</caption>
						<graphic xlink:href="DuJAL16273_i0008.png"/>
					</fig>
					<fig orientation="portrait" position="anchor">
						<caption>
							<title>Figuur&#x00A0;3</title>
							<p>Gemiddelde bewustetaalvaardigheidsscores Engels uitgesplitst per <italic>Bewustetaalvaardigheidstype, Meetmoment</italic> en <italic>Groep</italic></p>
						</caption>
						<graphic xlink:href="DuJAL16273_i0009.png"/>
					</fig>
					<fig orientation="portrait" position="anchor">
						<caption>
							<title>Figuur&#x00A0;4</title>
							<p>Gemiddelde bewustetaalvaardigheidsscores Duits uitgesplitst per <italic>Bewustetaalvaardigheidstype, Meetmoment</italic> en <italic>Groep</italic></p>
						</caption>
						<graphic xlink:href="DuJAL16273_i0010.png"/>
					</fig>
				</sec>
			</sec>
		</sec>
		<sec sec-type="heading-1">
			<label>5</label>
			<title>Discussie</title>
			<p>Met dit educatieve ontwerponderzoek hebben we getracht een bijdrage te leveren aan het didactiseren van bewuste taalvaardigheid in het grammaticaonderwijs. Enerzijds hebben we onderzocht waaraan een op bewuste taalvaardigheid gerichte lessenserie moet voldoen en anderzijds hebben we laten zien hoe de vier ge&#x00EF;dentificeerde taalkundige en didactische ontwerpprincipes ge&#x00EF;mplementeerd kunnen worden in een relevante, consistente, praktisch uitvoerbare en effectieve lessenserie. Voor de grammaticale en taalcontrastieve analyse waarin de eerste drie ontwerpprincipes tot uiting komen, verwijzen we naar Bijlage S2. Bijlage S3 bevat de daarop gebaseerde animatiescripts die de basis vormen van de lessenserie <sc>CLAP</sc>, voorzien van <sc>QR</sc>-codes die doorverwijzen naar de bijbehorende animaties.</p>
			<p>In de ontwerpfase leverde de implementatie van de vier ontwerpprincipes in <sc>CLAP</sc> een globaal oordeel op. Zowel de motivatiescore, als de waardering van de consistentie en relevantie bleek bovengemiddeld tot goed en hoger dan die op basis van de lessen in de onderbouw. We zijn erin geslaagd om zowel in de lessen als in het type toetsing de balans te verschuiven van het resultaat naar de redenering die eraan voorafgaat, zoals in Coppen (2009, 2011), Neijt et al. (2015, 2016) en Bax et al. (2021) al werd bepleit. Bovendien kon de impact van het (on)bewuste gebrek aan de nodige grammaticale kennis en vaardigheden van docenten (Alderson &amp; Hudson, 2013; Giovanelli, 2015, 2016; Sangster et al., 2013; Van Rijt &amp; Coppen, 2017; Van Rijt et al., 2019a, 2019b, 2019c, 2020b; Wijnands et al., 2022a, 2022b), wat hun vermogen om hun leerlingen goed ge&#x00EF;nformeerde beslissingen te laten nemen over taalkwesties belemmert (Van Rijt &amp; Coppen, 2017; Van Rijt et al., 2020b), dankzij de inzet van de ontwikkelde animaties worden beperkt. De animaties zorgden er namelijk voor dat de docent vooral een procesmatige rol vervulde. In de toekomst zouden onze animaties eventueel ook ingezet kunnen worden als vorm van docentprofessionalisering.</p>
			<p>In de ontwikkelfase werd de praktische uitvoerbaarheid van <sc>CLAP1</sc> beoordeeld als (boven)gemiddeld tot goed. Op basis van de twee focusgroepinterviews, waarin we de leerlingen en docenten vroegen om de factor- en itemgemiddelden te duiden, hebben we verschillende aanpassingen doorgevoerd in <sc>CLAP2</sc>. Zo hebben we de teksten in de animaties dichter bij de corresponderende gedeeltes in de afbeeldingen geplaatst (Florax &amp; Ploetzner, 2010) en signalen toegevoegd die de structuur van de animaties verduidelijken, zoals kleurcoderingen (Ozcelik et al., 2009) en typografische aandachtstrekkers als cursieve en onderstreepte woorden (Hartley, 2004).</p>
			<p>Nadat de implementatie herhaaldelijk werd geoptimaliseerd in de ontwerp- en ontwikkelfase, konden we in de evaluatiefase aanzienlijke positieve effecten vaststellen van <sc>CLAP2</sc> op de motivatie voor grammatica en het bewustetaalvaardigheidsniveau van vwo 4-leerlingen in de verschillende talen. De motivatie voor grammatica bleek significant toegenomen voor het Nederlands (<italic>d&#x0304;</italic> &#x2264; .3), het Engels (<italic>d&#x0304;</italic> = .1) en het Duits (<italic>d&#x0304;</italic> =.1). Hoewel de grootte van deze effecten traditioneel als &#x2018;klein&#x2019; of zelfs &#x2018;verwaarloosbaar&#x2019; wordt beschouwd (Cohen, 1988), werd er recentelijk betoogd dat een effectgrootte van &gt; .2 binnen onderwijsonderzoek juist als een groot effect moet worden beschouwd (Kraft, 2020). Dit kan betekenen dat het motivatieverhogende effect van onze lessenserie voor grammatica in het schoolvak Nederlands groter is dan traditioneel wordt aangenomen.</p>
			<p>De effectiviteit van het bieden van grammaticale en taalcontrastieve context voor het bevorderen van taalbewustzijn en taalvaardigheid is aangetoond, in overeenstemming met de resultaten in onder andere Spada et al. (2005), Svalberg (2007), Tolentino &amp; Tokowicz (2014), McManus en Marsden (2017, 2018, 2019a, 2019b) en Van Rijt et al. (2019b, 2021, 2022). We constateerden aanzienlijk toegenomen bewustetaalvaardigheidsscores voor het Nederlands (<italic>d&#x0304;</italic> &#x2264; .6), het Engels (<italic>d&#x0304;</italic> = .5) en het Duits (<italic>d&#x0304;</italic> =.4), wat de aanname van de docenten in het onderzoek van Leenders et al. (2021b) onderschrijft dat bewuste taalvaardigheid mogelijk een vakoverstijgende vaardigheid betreft. Daarnaast resulteerde het gebruik van de door Coppen (2011) ge&#x00EF;ntroduceerde metaconcepten in een toenemende tendens onder de leerlingen om gebruik te maken van het taalgenerieke systeem om taalspecifieke vormen te verklaren. Zo werden bijvoorbeeld argumentstructuren gebruikt om op zinsbouw te reflecteren. De toename in het gebruik van deze relevante terminologie is veelbelovend, omdat eerder al werd aangetoond dat dit een goede voorspeller is van beter taalkundig redeneren (Van Rijt et al., 2019b).</p>
			<p>Deze studie is echter niet zonder beperkingen en omdat we het belang erkennen van een zorgvuldige interpretatie zullen we enkele kanttekeningen plaatsen bij de gebruikte methoden, de interpretatie van de resultaten en de daaruit voortvloeiende aanbevelingen. In de eerste plaats omdat het onderzoek alleen werd afgenomen bij vwo 4-leerlingen, waardoor er geen uitspraken gedaan kunnen worden over de effectiviteit van <sc>CLAP</sc> voor bijvoorbeeld vmbo- of havo-leerlingen.</p>
			<p>Ten tweede vervulden de auteurs een dubbelrol als ontwerper en onderzoeker. Hoewel dit belangenconflict onvermijdelijk is in ontwerponderzoek (Design-Based Research Collective, 2003), hebben we in elke fase een beroep gedaan op de expertise van taalkundigen, vakdidactici, docenten en leerlingen om eventuele effecten hiervan te kunnen minimaliseren.</p>
			<p>Ten derde wees een van de reviewers ons op het ontbreken van het werken in tweetallen als ontwerpprincipe. Vooral gezien de effectiviteit van verschillende vormen van samenwerkend leren, zoals het gebruik van <italic>exploratory talk</italic> (Mercer, 2013) in interventies zoals die van Van Rijt et al. (2020a). In deze benadering worden leerlingen aangemoedigd om (grammaticale) problemen met elkaar te bespreken en via gezamenlijke afwegingen tot consensus te komen over mogelijke oplossingen. Hoewel we dit niet expliciet als ontwerpprincipe hebben opgenomen, zijn de opdrachten zo geformuleerd dat ze goed in tweetallen uitgevoerd konden worden. Uit de resultaten in de ontwikkelfase blijkt dat de leerlingen de mogelijkheid om al dan niet samen te werken waardeerden en dat ze er overwegend voor kozen om de opdrachten gezamenlijk uit te voeren.</p>
			<p>Ten vierde kan de effectiviteit van de individuele ontwerpprincipes op basis van deze studie niet vastgesteld worden. Dit is echter inherent aan ontwerponderzoek, waarin de nadruk op het ontwikkelen, implementeren en evalueren van een specifieke interventie ligt, in plaats van het isoleren van afzonderlijke principes om hun afzonderlijke effect apart te evalueren (McKenney &amp; Reeves, 2018; Plomp &amp; Nieveen, 2013).</p>
			<p>Ten vijfde hebben we in de ontwerpfase onder andere gevraagd naar de motivatie van de leerlingen voor het onderdeel grammatica. Eerst op basis van de onderbouwlessen en vervolgens aangaande de lessenserie <sc>CLAP</sc>. Dit is geen zuivere vergelijking. Aangezien we de vragenlijsten hebben afgenomen op twee scholen is het alleen daarom al logisch dat er op de voormeting verschillen waar te nemen zijn tussen de scholen, de klassen en de leerlingen. Hoewel de factorstructuur voor beide meetmomenten hetzelfde bleek en er statistisch dus geen reden is om aan te nemen dat we iets anders hebben ge&#x00EB;valueerd dan de motivatie voor grammatica (J&#x00F6;reskog, 1971), interpreteren we de resultaten daarom slechts als globale oordelen.</p>
			<p>Ten zesde hebben we in de evaluatiefase gebruikgemaakt van een niet-gevalideerd meetinstrument, waardoor voorzichtigheid geboden is bij het trekken van conclusies op basis van de verzamelde gegevens. Om het verschil in toetsniveau als verklarende factor voor het verschil in bewustetaalvaardigheidsniveau op de drie meetmomenten uit te kunnen sluiten, hebben we <italic>counterbalancing</italic> (Wickens &amp; Keppel, 2004) toegepast en gecontroleerd voor een niveauverschil tussen de drie bewustetaalvaardigheidstoetsversies (zie Bijlage S8).</p>
			<p>Ten zevende hebben we gebruikgemaakt van citaten uit de focusgroepinterviews om de percepties van de deelnemers te illustreren en daarmee de kwantitatieve resultaten in te bedden. Om het risico op &#x2018;<italic>cherry picking</italic>&#x2019; te verminderen, hebben we ervoor gekozen om de geselecteerde citaten terug te koppelen aan de deelnemers samen met een samenvatting van het gehele interview. We vroegen hun of de geselecteerde uitspraken een accurate weergave vormden van hun gedachten. We erkennen echter dat zelfevaluatie door deelnemers niet hetzelfde is als een onafhankelijke, systematische analyse en raden aan om in toekomstig onderzoek een systematisch codeerproces toe te passen om de data grondiger te analyseren en om een meer representatieve weergave van de verzamelde informatie te kunnen waarborgen.</p>
			<p>Ten achtste werden we tijdens de evaluatiefase geconfronteerd met de uitbraak van <sc>COVID</sc>-19. Vanwege de beperkte beschikbaarheid van klassen besloten we <sc>CLAP2</sc> te evalueren in klassen waarin slechts de helft van de leerlingen Duits in hun vakkenpakket had. Het is mogelijk dat de toename van de motivatie- en bewustetaalvaardigheidsscores groter geweest zou zijn bij leerlingen die al beter vertrouwd waren met het Duits. Daarnaast moest groep D voortijdig stoppen met de interventie, wat zorgde voor een onvolledige dataset. Desondanks geloven we dat we de impact van dit gegevensverlies hebben geminimaliseerd door gebruik te maken van een <italic>switching-replications</italic>-design (Shadish et al., 2002) en multiniveau-modellen volgens het <italic>fixed-occasion</italic>-design (Goldstein, 1987; Quen&#x00E9; &amp; Van den Bergh, 2004).</p>
			<p>Deze studie toont het potentieel aan van bewuste taalvaardigheid binnen het grammaticacurriculum. Het zou interessant zijn om de generaliseerbaarheid van de resultaten naar verschillende schooltypen en onderwijsniveaus te onderzoeken en de inzetbaarheid van <sc>CLAP</sc> daarmee te vergroten. Bovendien zou deze studie gerepliceerd kunnen worden met klassen waarin alle leerlingen Duits in hun vakkenpakket hebben, om een realistischer beeld te kunnen schetsen van de motivatie en het bewustetaalvaardigheidsniveau voor Duits ten opzichte van de andere talen. Verder zou een studie naar verschillende versies van <sc>CLAP</sc> betekenisvol kunnen zijn, omdat het een diepgaand inzicht kan opleveren in de effectiviteit van de afzonderlijke ontwerpprincipes.</p>
			<p>Een andere relevante invalshoek betreft het onderzoeken van de effectiviteit van de ontwikkelde animaties voor docentenprofessionaliseringstrajecten. Dat onderzoek zou niet alleen een bijdrage kunnen leveren aan de verdere ontwikkeling van taalcontrastief grammaticaonderwijs en het doen afnemen van de schroom die veel docenten hebben omtrent het onderwijzen van grammatica (Giovanelli, 2015, 2016), maar het zou ook belangrijke inzichten kunnen opleveren waarmee het ontwerp en de implementatie van dergelijke middelen verbeterd kan worden.</p>
			<p>In vervolg op de voorliggende studie zullen we zelf een instrumentatie-onderzoek uitvoeren, gericht op de ontwikkeling van een gevalideerd instrument voor het evalueren van bewuste taalvaardigheid in het grammaticaonderwijs in zowel de L1 (Nederlands), als de L2 (Engels en Duits) in vwo 4. Vervolgens zullen we hiermee het effect van <sc>CLAP3</sc> op de motivatie en bewuste taalvaardigheid onderzoeken. In deze versie van de lessenserie is <sc>CLAP2</sc> aangevuld met vier lessen over het concept &#x2018;woordvolgorde&#x2019; en twee lessen over het concept &#x2018;congruentie&#x2019;. Bijlagen S2 en S3 bevatten ook voor deze lessen de analyses en bijbehorende animatiescripts.</p>
		</sec>
	</body>
	<back>
		<ack>
			<title>Acknowledgements</title>
			<p>Hierbij willen we Dudoc-Alfa, het Amadeus Lyceum te Vleuten en het Marnix College te Ede bedanken voor het faciliteren van dit onderzoek, de betrokken docenten, taalkundigen en vakdidactici (MVT en Nederlands) voor hun expertise bij het samenstellen van het prototype, Mad&#x00E9; Wirawas (de tekenaar), Jeroen Santen (de voice-over) en Wilbert Schuurman Hess (de animator) voor hun expertise bij het verbeelden van onze idee&#x00EB;n in de animaties, Huub van den Bergh voor zijn statistische expertise en natuurlijk alle docenten en leerlingen die hebben deelgenomen aan verschillende fasen van ons onderzoek. In het bijzonder willen we ook de recensenten bedanken voor hun feedback op eerdere versies van het manuscript. Jullie input heeft ons geholpen om onze keuzes beter te begrijpen en te presenteren, wat heeft bijgedragen aan de verbetering van dit artikel.</p>
		</ack>
		<ref-list>
			<title>Literatuur</title>
			<ref id="R000001">
				<mixed-citation><person-group person-group-type="author"><string-name><given-names>Aarts</given-names></string-name></person-group> (<date><year>2001</year></date>). <source><italic>English syntax and argumentation</italic></source> (2de editie). <publisher-name>Palgrave Macmillan</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000002">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Alderson, J.C., &#x0026;amp; Hudson, R.</suffix></string-name></person-group> (<date><year>2013</year></date>). <article-title>The metalinguistic knowledge of undergraduate students of English language or linguistics</article-title>. <italic>Language Awareness, 22</italic>(<issue>4</issue>), <page-range>320</page-range>&#x2013;<page-range>337</page-range>. <ext-link xlink:href="https://doi.org/10.1080/09658416.2012.722644">https://doi.org/10.1080/09658416.2012.722644</ext-link></mixed-citation>
			</ref>
			<ref id="R000003">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Ammar, A., Lightbown, P.M., &#x0026;amp; Spada, N.</suffix></string-name></person-group> (<date><year>2010</year></date>). <article-title>Awareness of L1/L2 differences: Does it matter?</article-title>. <italic>Language Awareness, 19</italic>(<issue>2</issue>), <page-range>129</page-range>&#x2013;<page-range>146</page-range>. <ext-link xlink:href="https://doi.org/10.1080/09658411003746612">https://doi.org/10.1080/09658411003746612</ext-link></mixed-citation>
			</ref>
			<ref id="R000004">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Anderson, L. &#x0026;amp; Krathwohl, D. (Reds.</suffix></string-name></person-group>) (<date><year>2001</year></date>). <source><italic>A taxonomy for learning, Teaching and Assessing: a revision of Bloom&#x2019;s taxonomy of educational objectives</italic></source>. <publisher-name>Longman</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000005">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Avery, N., &#x0026;amp; Marsden, E.</suffix></string-name></person-group> (<date><year>2019</year></date>). <article-title>A meta-analysis of sensitivity to grammatical information during self-paced reading: Towards a framework of reference for reading time effect sizes</article-title>. <italic>Studies in Second Language Acquisition, 41</italic>(<issue>5</issue>), <page-range>1055</page-range>&#x2013;<page-range>1087</page-range>. <ext-link xlink:href="https://doi.org/10.1017/S0272263119000196">https://doi.org/10.1017/S0272263119000196</ext-link></mixed-citation>
			</ref>
			<ref id="R000006">
				<mixed-citation>Baker, A.E., Don, J., &#x0026;amp; Hengeveld, K. (Reds.) (<date><year>2013</year></date>). <source><italic>Taal en taalwetenschap</italic> (2de editie</source>). <publisher-name>John Wiley &#x0026;amp; Sons, Incorporated</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000007">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Banga, A., Poelmans, P., Sweep, J., &#x0026;amp; Verhagen, V.</suffix></string-name></person-group> (<date><year>2022</year></date>), <source><italic>Handboek Taalkunde</italic></source>. <publisher-name>Coutinho</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000008">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Bardel, C., &#x0026;amp; Falk, Y.</suffix></string-name></person-group> (<date><year>2007</year></date>). <article-title>The role of the second language in third language acquisition: The case of Germanic syntax</article-title>. <italic>Second Language Research, 23</italic>(<issue>4</issue>), <page-range>459</page-range>&#x2013;<page-range>484</page-range>. <ext-link xlink:href="https://doi.org/10.1177/0267658307080557">https://doi.org/10.1177/0267658307080557</ext-link></mixed-citation>
			</ref>
			<ref id="R000009">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Baumberger</surname>, <given-names>C.</given-names></string-name></person-group> (<date><year>2019</year></date>). <article-title>Explicating objectual understanding: Taking degrees seriously</article-title>. <italic>Journal for General Philosophy of Science, 50</italic>(<issue>3</issue>), <page-range>367</page-range>&#x2013;<page-range>388</page-range>. <ext-link xlink:href="https://doi.org/10.1007/s10838-019-09474-6">https://doi.org/10.1007/s10838-019-09474-6</ext-link></mixed-citation>
			</ref>
			<ref id="R000010">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Baumberger, C., Beisbart, C., &#x0026;amp; Brun, G.</suffix></string-name></person-group> (<date><year>2016</year></date>). <chapter-title>What is understanding? An overview of recent debates in epistemology and philosophy of science</chapter-title>. <person-group person-group-type="editor"><string-name><suffix>In S.R. Grimm, C. Baumberger, &#x0026;amp; S. Ammon (Reds.</suffix></string-name></person-group>) <source><italic>Explaining understanding: New perspectives from epistemology and philosophy of science</italic></source> (pp. <page-range>1</page-range>&#x2013;<page-range>34</page-range>). <publisher-name>Routledge</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000011">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Bax</surname>, <given-names>S.</given-names></string-name></person-group> (<date><year>2003</year></date>). <article-title>The end of CLT: a context approach to language teaching</article-title>. <italic>ELT journal, 57</italic>(<issue>3</issue>), <page-range>278</page-range>&#x2013;<page-range>287</page-range>. <ext-link xlink:href="https://doi.org/10.1093/elt/57.3.278">https://doi.org/10.1093/elt/57.3.278</ext-link></mixed-citation>
			</ref>
			<ref id="R000012">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Bax, S., Coppen, P.-A., Evers-Vermeul, J., De Glopper, K., van Herten, M., Mantingh, E., Van Oostendorp, M., &#x0026;amp; Van Voorst, S.</suffix></string-name></person-group> (<date><year>2021</year></date>). <source><italic>Bewuste geletterdheid in perspectief: kennis, vaardigheden en inzichten</italic></source>. <publisher-name>Meesterschapsteam Nederlands. Vakdidactiek Geesteswetenschappen</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000013">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Bell, P., Fortier, V. &#x0026;amp; Gauvin, I.</suffix></string-name></person-group> (<date><year>2020</year></date>). <article-title>Using L1 knowledge about language during L2 error correction: do students make cross-linguistic connections?</article-title> <italic>Language Awareness, 29</italic>(<issue>2</issue>), <page-range>95</page-range>&#x2013;<page-range>113</page-range>. <ext-link xlink:href="https://doi.org/10.1080/09658416.2020.1729783">https://doi.org/10.1080/09658416.2020.1729783</ext-link></mixed-citation>
			</ref>
			<ref id="R000014">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Benjamin, A. &#x0026;amp; Oliva, T.</suffix></string-name></person-group> (<date><year>2007</year></date>). <article-title><italic>Engaging grammar. Practical advice for real classrooms</italic></article-title>. <source>NCTE</source></mixed-citation>
			</ref>
			<ref id="R000015">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Bloom, B.S., &#x0026;amp; Krathwohl, D.R. (Reds.</suffix></string-name></person-group>) (<date><year>2020</year></date>). <italic>Taxonomy of educational objectives: The classification of educational goals. Book 1, Cognitive domain</italic>. <publisher-name>Longmans, Green &#x0026;amp; Co</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000016">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Boivin</surname>, <given-names>M.-C.</given-names></string-name></person-group> (<date><year>2018</year></date>). <article-title>A review of the current empirical research on grammar instruction in the francophone regions</article-title>. <italic>L1-Educational Studies in Language and Literature, 18</italic>(<issue>3</issue>), <page-range>1</page-range>&#x2013;<page-range>47</page-range>. <ext-link xlink:href="https://doi.org/10.17239/L1ESLL-2018.18.04.03">https://doi.org/10.17239/L1ESLL-2018.18.04.03</ext-link></mixed-citation>
			</ref>
			<ref id="R000017">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Boivin, M.-C., Fontich, X., Funke, R., Garc&#x00ED;a-Folgado, M.-J., &#x0026;amp; Myhill, D.</suffix></string-name></person-group> (<date><year>2018</year></date>). <article-title>Working on grammar at school in L1 education: Empirical research across linguistic regions</article-title>. <italic>L1-Educational Studies in Language and Literature, 18</italic>(<issue>3</issue>), <page-range>1</page-range>&#x2013;<page-range>6</page-range>. <ext-link xlink:href="https://doi.org/10.17239/L1ESLL-2018.18.04.01">https://doi.org/10.17239/L1ESLL-2018.18.04.01</ext-link></mixed-citation>
			</ref>
			<ref id="R000018">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Bolitho, R., Carter, R., Hughes, R., Ivani&#x010D;, R., Masuhara, H., &#x0026;amp; Tomlinson, B.</suffix></string-name></person-group> (<date><year>2003</year></date>). <article-title>Ten questions about language awareness</article-title>. <italic>ELT journal, 57</italic>(<issue>3</issue>), <page-range>251</page-range>&#x2013;<page-range>259</page-range>. <ext-link xlink:href="https://doi.org/10.1093/elt/57.3.251">https://doi.org/10.1093/elt/57.3.251</ext-link></mixed-citation>
			</ref>
			<ref id="R000019">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Bonset, E.H., &#x0026;amp; Hoogeveen, M.</suffix></string-name></person-group> (<date><year>2010</year></date>). <source><italic>Taalbeschouwing: Een inventarisatie van empirisch onderzoek in basis-en voortgezet onderwijs</italic></source>. SLO, nationaal expertisecentrum leerplanontwikkeling.</mixed-citation>
			</ref>
			<ref id="R000020">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Bonset</surname>, <given-names>H.</given-names></string-name></person-group> (<date><year>2011</year></date>). <article-title>Taalkundeonderwijs: Veel geloof, weinig empirie</article-title>. <italic>Levende Talen Magazine, 98</italic>(<issue>2</issue>), <page-range>12</page-range>&#x2013;<page-range>16</page-range>. <ext-link xlink:href="https://lt-tijdschriften.nl/ojs/index.php/ltm/article/view/40/40">https://lt-tijdschriften.nl/ojs/index.php/ltm/article/view/40/40</ext-link></mixed-citation>
			</ref>
			<ref id="R000021">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Bredel</surname>, <given-names>U.</given-names></string-name></person-group> (<date><year>2013</year></date>). <source><italic>Sprachbetrachtung und Grammatikunterricht</italic></source>. <publisher-name>UTB GmbH Sch&#x00F6;ningh</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000022">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Briesch, A.M., Chafouleas, S.M., &#x0026;amp; Riley-Tillman, T.C.</suffix></string-name></person-group> (<date><year>2010</year></date>). <article-title>Generalizability and dependability of behavior assessment methods to estimate academic engagement: A comparison of systematic direct observation and direct behavior rating</article-title>. <italic>School Psychology Review, 39</italic>(<issue>1</issue>), <page-range>408</page-range>&#x2013;<page-range>421</page-range>. <ext-link xlink:href="https://doi.org/10.1080/02796015.2010.12087761">https://doi.org/10.1080/02796015.2010.12087761</ext-link></mixed-citation>
			</ref>
			<ref id="R000023">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Camps, A., &#x0026;amp; Fontich, X.</suffix></string-name></person-group> (<date><year>2019</year></date>). <article-title>Teachers&#x2019; concepts on the teaching of grammar in relation to the teaching of writing in Spain: A case study</article-title>. <italic>L1-Educational Studies in Language and Literature, 19</italic>(<issue>2</issue>), <page-range>1</page-range>&#x2013;<page-range>36</page-range>. <ext-link xlink:href="https://doi.org/10.17239/L1ESLL-2019.19.02.02">https://doi.org/10.17239/L1ESLL-2019.19.02.02</ext-link></mixed-citation>
			</ref>
			<ref id="R000024">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Carter</surname>, <given-names>R.</given-names></string-name></person-group> (<date><year>2003</year></date>). <article-title>Language awareness</article-title>. <italic>ELT Journal, 57</italic>(<issue>1</issue>), <page-range>64</page-range>&#x2013;<page-range>65</page-range>. <ext-link xlink:href="https://doi.org/10.1093/elt/57.1.64">https://doi.org/10.1093/elt/57.1.64</ext-link></mixed-citation>
			</ref>
			<ref id="R000025">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Chamalaun</surname>, <given-names>R.</given-names></string-name></person-group> (<date><year>2019</year></date>). <chapter-title>Het onderwijzen van werkwoordspelling: de rol van grammatica</chapter-title>. <person-group person-group-type="editor"><string-name><suffix>In A. Mottart, &#x0026;amp; S. Vanhooren (Reds.</suffix></string-name></person-group>), <source><italic>Drie&#x00EB;ndertigste conferentie Het Schoolvak Nederlands</italic></source> (pp. <page-range>40</page-range>&#x2013;<page-range>44</page-range>). <publisher-name>Scribis</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000026">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Chipere</surname>, <given-names>N.</given-names></string-name></person-group> (<date><year>2003</year></date>). <source><italic>Understanding complex sentences. Native speaker variation in syntactic competence</italic></source>. <publisher-name>Palgrave Macmillan</publisher-name>. <ext-link xlink:href="https://doi.org/10.1057/9780230005884">https://doi.org/10.1057/9780230005884</ext-link></mixed-citation>
			</ref>
			<ref id="R000027">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Cohen</surname>, <given-names>J.</given-names></string-name></person-group> (<date><year>1988</year></date>). <source><italic>Statistical power analysis for the behavioral sciences</italic></source> (2de editie). <publisher-name>Academic press</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000028">
				<mixed-citation><person-group person-group-type="author"><string-name><given-names>Commissie Toekomst Wiskunde</given-names> <surname>Onderwijs</surname></string-name></person-group> (cTWO) (<date><year>2012</year></date>). <italic>Denken &#x0026;amp; Doen. Wiskunde op havo en vwo per 2015. Eindrapport van de vernieuwingscommissie wiskunde cTWO</italic>. cTWO.</mixed-citation>
			</ref>
			<ref id="R000029">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Cook</surname>, <given-names>V.</given-names></string-name></person-group> (<date><year>2008</year></date>). <chapter-title>Multi-competence: Black hole or wormhole for second language acquisition research</chapter-title>. In <person-group person-group-type="editor"><string-name><given-names>Z.</given-names> <surname>Han</surname></string-name></person-group> (Red.), <source><italic>Understanding second language process</italic></source> (pp. <page-range>16</page-range>&#x2013;<page-range>26</page-range>). <publisher-name>Multilingual Matters</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000030">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Cook</surname>, <given-names>V.</given-names></string-name></person-group> (<date><year>2013</year></date>). <source><italic>Second language learning and language teaching</italic></source>. <publisher-name>Routledge</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000031">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Coppen</surname>, <given-names>P.-A.</given-names></string-name></person-group> (<date><year>2009</year></date>). <chapter-title>Actief grammaticaal denken</chapter-title>. <person-group person-group-type="editor"><string-name><suffix>In A. Mottart, &#x0026;amp; S. Vanhooren (Reds.</suffix></string-name></person-group>), <source><italic>Drie&#x00EB;ntwintigste conferentie Het Schoolvak Nederlands</italic></source> (pp. <page-range>236</page-range>&#x2013;<page-range>239</page-range>). <publisher-name>Academia Press</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000032">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Coppen</surname>, <given-names>P.-A.</given-names></string-name></person-group> (<date><year>2010</year></date>). <chapter-title>De taal is een rommeltje</chapter-title>. <person-group person-group-type="editor"><string-name><suffix>In H. Hulshof &#x0026;amp; T. Hendrix (Reds.).</suffix></string-name></person-group> <source><italic>Taalkunde en het schoolvak Nederlands</italic> [Special Levende Talen Magazine</source>] (pp. <page-range>26</page-range>&#x2013;<page-range>29</page-range>). <publisher-name>VLLT</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000033">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Coppen</surname>, <given-names>P.-A.</given-names></string-name></person-group> (<date><year>2011</year></date>). <chapter-title>Grammatica is een werkwoord</chapter-title>. <person-group person-group-type="editor"><string-name><suffix>In A. Mottart, &#x0026;amp; S. Vanhooren (Reds.</suffix></string-name></person-group>), <source><italic>Vijfendertigste conferentie Het Schoolvak Nederlands</italic></source> (pp. <page-range>222</page-range>&#x2013;<page-range>228</page-range>). <publisher-name>Skribis</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000034">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Coppen</surname>, <given-names>P.-A.</given-names></string-name></person-group> (<date><year>2013</year></date>). <chapter-title>Tegen het leed dat grammatica heet</chapter-title>. <person-group person-group-type="editor"><string-name><suffix>In A. Mottart &#x0026;amp; S. Vanhooren (Reds.</suffix></string-name></person-group>), <source><italic>Zevenentwintigste conferentie Het Schoolvak Nederlands</italic></source> (pp. XXXIV&#x2013;XXXIX). <publisher-name>Academia Press</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000035">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Coppen, P.-A., Van Rijt, J., Wijnands, A. &#x0026;amp; Dielemans, R.</suffix></string-name></person-group> (<date><year>2019</year></date>). <article-title>Vakdidactisch onderzoek naar grammaticaonderwijs in Nederland</article-title>. <italic>Tijdschrift voor Nederlandse Taal- en Letterkunde, 135</italic>(<issue>2</issue>), <page-range>85</page-range>&#x2013;<page-range>99</page-range>. <ext-link xlink:href="https://doi.org/10.5117/TNTL2019.2.002.COPP">https://doi.org/10.5117/TNTL2019.2.002.COPP</ext-link></mixed-citation>
			</ref>
			<ref id="R000036">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Corver</surname>, <given-names>N.F.M.</given-names></string-name></person-group> (<date><year>2002</year></date>). <source><italic>Taal in zicht</italic></source>. <publisher-loc>Utrecht</publisher-loc>: <publisher-name>Faculteit der Letteren, Universiteit Utrecht</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000037">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Creswell, J.W., &#x0026;amp; Plano Clark, V.L.</suffix></string-name></person-group> (<date><year>2018</year></date>). <source><italic>Designing and Conducting Mixed Methods Research</italic></source> (3de editie). <publisher-loc>Sage</publisher-loc>.</mixed-citation>
			</ref>
			<ref id="R000038">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Curcio</surname>, <given-names>M.</given-names></string-name></person-group> (<date><year>2015</year></date>). <chapter-title>Kontrastive Linguistik, Sprachbewusstheit und Mehrsprachigkeit</chapter-title>. In <person-group person-group-type="editor"><string-name><given-names>V.</given-names> <surname>Gannuscio</surname></string-name></person-group> (Red.), <source><italic>Kontrastive Perspektiven im deutschen Sprach- und Kulturerwerb: Deutsche Sprachwissenschaft international</italic></source> (pp. <page-range>8</page-range>&#x2013;<page-range>35</page-range>). <publisher-name>Peter Lang</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000039">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Deci, E.L. &#x0026;amp; Ryan, R.M.</suffix></string-name></person-group> (<date><year>2000</year></date>). <article-title>The &#x2018;what&#x2019; and &#x2018;why&#x2019; of goal pursuits: Human needs and the self-determination of behavior</article-title>. <italic>Psychological Inquiry, 11</italic>, <page-range>319</page-range>&#x2013;<page-range>338</page-range>. <ext-link xlink:href="https://doi.org/10.1207/S15327965PLI1104_01">https://doi.org/10.1207/S15327965PLI1104_01</ext-link></mixed-citation>
			</ref>
			<ref id="R000040">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Denham</surname>, <given-names>K.</given-names></string-name></person-group> (<date><year>2020</year></date>). <article-title>Positioning students as linguistic and social experts: teaching grammar and linguistics in the United States</article-title>. <source>L1-Educational Studies in Language and Literature</source> <volume>20</volume>, <page-range>1</page-range>&#x2013;<page-range>16</page-range>. <ext-link xlink:href="https://doi.org/10.17239/L1ESLL-2020.20.03.02">https://doi.org/10.17239/L1ESLL-2020.20.03.02</ext-link></mixed-citation>
			</ref>
			<ref id="R000041">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Denham, K., &#x0026;amp; Lobeck, A.</suffix></string-name></person-group> (<date><year>2010</year></date>). (<person-group person-group-type="editor"><string-name><suffix>Eds.</suffix></string-name></person-group>), <source>Linguistics at school: language awareness in primary and secondary education</source>. <publisher-name>Cambridge University Press</publisher-name>. <ext-link xlink:href="https://doi.org/10.1017/CBO9780511770791">https://doi.org/10.1017/CBO9780511770791</ext-link></mixed-citation>
			</ref>
			<ref id="R000042">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Derwing, T.M., Rossiter, M.J., &#x0026;amp; Ehrensberger-Dow, M.</suffix></string-name></person-group> (<date><year>2002</year></date>). &#x2018;<article-title>They speaked and wrote real good&#x2019;: Judgements of non-native and native grammar</article-title>. <italic>Language awareness, 11</italic>(<issue>2</issue>), <page-range>84</page-range>&#x2013;<page-range>99</page-range>. <ext-link xlink:href="https://doi.org/10.1080/09658410208667048">https://doi.org/10.1080/09658410208667048</ext-link></mixed-citation>
			</ref>
			<ref id="R000043">
				<mixed-citation><person-group person-group-type="author"><string-name><given-names>Design-Based Research</given-names> <surname>Collective</surname></string-name></person-group>. (<date><year>2003</year></date>). <article-title>Design-based research: An emerging paradigm for educational inquiry</article-title>. <italic>Educational researcher, 32</italic>(<issue>1</issue>), <page-range>5</page-range>&#x2013;<page-range>8</page-range>. <ext-link xlink:href="https://doi.org/10.3102/0013189X032001005">https://doi.org/10.3102/0013189X032001005</ext-link></mixed-citation>
			</ref>
			<ref id="R000044">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>De</suffix> <surname>Regt</surname>, <given-names>H.</given-names></string-name></person-group> (<date><year>2009</year></date>). <article-title>The epistemic value of understanding</article-title>. <italic>Philosophy of Science, 76</italic>(<issue>5</issue>), <page-range>585</page-range>&#x2013;<page-range>597</page-range>. <ext-link xlink:href="https://doi.org/10.1086/605795">https://doi.org/10.1086/605795</ext-link></mixed-citation>
			</ref>
			<ref id="R000045">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Dielemans, R., &#x0026;amp; Coppen, P.-A.</suffix></string-name></person-group> (<date><year>2020</year></date>). <article-title>Defining linguistic reasoning: Transposing and grounding a model for historical reasoning to the linguistic domain</article-title>. <italic>Dutch Journal of Applied Linguistics, 9</italic>(<issue>1&#x2013;2</issue>), <page-range>182</page-range>&#x2013;<page-range>206</page-range>. <ext-link xlink:href="https://doi.org/10.1075/dujal.19038.die">https://doi.org/10.1075/dujal.19038.die</ext-link></mixed-citation>
			</ref>
			<ref id="R000046">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Ebbens, S., &#x0026;amp; Ettekoven, S.</suffix></string-name></person-group> (<date><year>2013</year></date>). <source><italic>Effectief leren</italic></source> (3e druk). <publisher-name>Noordhoff Uitgevers</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000047">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Ellis</surname>, <given-names>N.C.</given-names></string-name></person-group> (<date><year>2005</year></date>). <article-title>At the interface: Dynamic interactions of explicit and implicit language knowledge</article-title>. <italic>Studies in Second Language Acquisition, 27</italic>(<issue>2</issue>), <page-range>305</page-range>&#x2013;<page-range>352</page-range>. <ext-link xlink:href="https://doi.org/10.1017/S027226310505014X">https://doi.org/10.1017/S027226310505014X</ext-link></mixed-citation>
			</ref>
			<ref id="R000048">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Ellis</surname>, <given-names>N.C.</given-names></string-name></person-group> (<date><year>2006</year></date>). <article-title>Selective attention and transfer phenomena in L2 acquisition: Contingency, cue competition, salience, interference, overshadowing, blocking, and perceptual learning</article-title>. <italic>Applied Linguistics, 27</italic>, <page-range>164</page-range>&#x2013;<page-range>194</page-range>. <ext-link xlink:href="https://doi.org/10.1093/applin/aml015">https://doi.org/10.1093/applin/aml015</ext-link></mixed-citation>
			</ref>
			<ref id="R000049">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Ellis</surname>, <given-names>N.C.</given-names></string-name></person-group> (<date><year>2008</year></date>). <chapter-title>The associative learning of construc-tions, learned attention, and the limited L2 end-state</chapter-title>. <person-group person-group-type="editor"><string-name><suffix>In P. Robinson &#x0026;amp; N.C. Ellis (Reds.</suffix></string-name></person-group>), <source><italic>Handbook of cognitive linguistics and second language acquisition</italic></source> (pp. <page-range>372</page-range>&#x2013;<page-range>405</page-range>). <publisher-name>Routledge</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000050">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Ellis</surname>, <given-names>R.</given-names></string-name></person-group> (<date><year>1991</year></date>). <source><italic>Instructed second language acquisition: Learning in the classroom</italic></source>. <publisher-name>Wiley-Blackwell</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000051">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Ellis</surname>, <given-names>R.</given-names></string-name></person-group> (<date><year>2002</year></date>a). <article-title>Does form-focused instruction affect the acquisition of implicit knowledge? A review of the research</article-title>. <italic>Studies in second language acquisition, 24</italic>(<issue>2</issue>), <page-range>223</page-range>&#x2013;<page-range>236</page-range>. <ext-link xlink:href="https://doi.org/10.1017/S0272263102002073">https://doi.org/10.1017/S0272263102002073</ext-link></mixed-citation>
			</ref>
			<ref id="R000052">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Ellis</surname>, <given-names>R.</given-names></string-name></person-group> (<date><year>2002</year></date>b). <chapter-title>The place of grammar instruction in the second/foreign language curriculum</chapter-title>. <person-group person-group-type="editor"><string-name><suffix>In E. Hinkel &#x0026;amp; S. Fotos (Reds.</suffix></string-name></person-group>), <source><italic>New Perspectives on Grammar Teaching in Second Language Classrooms</italic></source> (pp. <page-range>14</page-range>&#x2013;<page-range>34</page-range>). Routledge. <ext-link xlink:href="https://doi.org/10.4324/9781410605030">https://doi.org/10.4324/9781410605030</ext-link></mixed-citation>
			</ref>
			<ref id="R000053">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Ellis</surname>, <given-names>R.</given-names></string-name></person-group> (<date><year>2004</year></date>). <article-title>The definition and measurement of L2 explicit knowledge</article-title>. <italic>Language learning, 54</italic>(<issue>2</issue>), <page-range>227</page-range>&#x2013;<page-range>275</page-range>. <ext-link xlink:href="https://doi.org/10.1111/j.1467-9922.2004.00255.x">https://doi.org/10.1111/j.1467-9922.2004.00255.x</ext-link></mixed-citation>
			</ref>
			<ref id="R000054">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Ellis</surname>, <given-names>R.</given-names></string-name></person-group> (<date><year>2005</year></date>). <article-title>Principles of instructed language learning</article-title>. <italic>System, 33</italic>(<issue>2</issue>), <page-range>209</page-range>&#x2013;<page-range>224</page-range>. <ext-link xlink:href="https://doi.org/10.1016/j.system.2004.12.006">https://doi.org/10.1016/j.system.2004.12.006</ext-link>.</mixed-citation>
			</ref>
			<ref id="R000055">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Ellis</surname> <given-names>R.</given-names></string-name></person-group> (<date><year>2006</year></date>). <article-title>Current issues in the teaching of grammar: An SLA perspective</article-title>. <italic>TESOL Quarterly, 40</italic>(<issue>1</issue>), <page-range>83</page-range>&#x2013;<page-range>107</page-range>. <ext-link xlink:href="https://doi.org/10.2307/40264512">https://doi.org/10.2307/40264512</ext-link></mixed-citation>
			</ref>
			<ref id="R000056">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Ellis</surname> <given-names>R.</given-names></string-name></person-group> (<date><year>2009</year></date>). <article-title>Task-based language teaching: Sorting out the misunderstandings</article-title>. <italic>International Journal of Applied Linguistics, 19</italic>(<issue>3</issue>), <page-range>221</page-range>&#x2013;<page-range>246</page-range>. <ext-link xlink:href="https://doi.org/10.1111/j.14734192.2009.00231.x">https://doi.org/10.1111/j.14734192.2009.00231.x</ext-link></mixed-citation>
			</ref>
			<ref id="R000057">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Ellis</surname>, <given-names>R.</given-names></string-name></person-group> (<date><year>2015</year></date>). <source><italic>Understanding second language acquisition</italic></source> (2de editie). <publisher-name>Oxford university press</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000058">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Elving-Heida</surname>, <given-names>K.T.A.</given-names></string-name></person-group> (<date><year>2019</year></date>). <source><italic>Effectieve leeractiviteiten voor het schrijfonderwijs in havo 4</italic></source>. [<publisher-name>Doctorale dissertatie</publisher-name>, <publisher-loc>Universiteit Utrecht]. LOT</publisher-loc>.</mixed-citation>
			</ref>
			<ref id="R000059">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Falk, Y. &#x0026;amp; Bardel, C.</suffix></string-name></person-group> (<date><year>2010</year></date>). <article-title>The study of the role of the background languages in third language acquisition</article-title>. <italic>The state of the art, 48</italic>(<issue>2&#x2013;3</issue>), <page-range>185</page-range>&#x2013;<page-range>220</page-range>. <ext-link xlink:href="https://doi.org/10.1515/iral.2010.009">https://doi.org/10.1515/iral.2010.009</ext-link></mixed-citation>
			</ref>
			<ref id="R000060">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Falk, Y., Lindqvist, C., &#x0026;amp; Bardel, C.</suffix></string-name></person-group> (<date><year>2015</year></date>). <article-title>The role of L1 explicit metalinguistic knowledge in L3 oral production at the initial state</article-title>. <italic>Bilingualism: Language and cognition, 18</italic>(<issue>2</issue>), <page-range>227</page-range>&#x2013;<page-range>235</page-range>. <ext-link xlink:href="https://doi.org/10.1017/S1366728913000552">https://doi.org/10.1017/S1366728913000552</ext-link></mixed-citation>
			</ref>
			<ref id="R000061">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Fandrych</surname>, <given-names>C.</given-names></string-name></person-group> (<date><year>2012</year></date>). <chapter-title>Ordnung und Variation in Satz und Text. Wortstellung entdecken, erkunden, erproben</chapter-title>. <person-group person-group-type="editor"><string-name><suffix>In B. Hufeisen, C. Fandrych, P. Bimmel, R.E. Wicke, &#x0026;amp; S. Schm&#x00F6;lzer-Eibinger, (Reds.</suffix></string-name></person-group>), <source><italic>Fremdsprache Deutsch</italic></source> (pp. <page-range>5</page-range>&#x2013;<page-range>11</page-range>). <publisher-name>Hueber Verlag</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000062">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Fasoglio, D., Jong, K. de, Pennewaard, L., Trimbos, B., &#x0026;amp; Tuin, D.</suffix></string-name></person-group> (<date><year>2015</year></date>). <source><italic>Moderne vreemde talen: Vakspecifieke trendanalyse 2015</italic></source>. <publisher-name>SLO</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000063">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Fearn, L., &#x0026;amp; Farnan, N.</suffix></string-name></person-group> (<date><year>2007</year></date>). <article-title>When Is a Verb? Using Functional Grammar to Teach Writing</article-title>. <source><italic>Journal of Basic Writing</italic></source>, <italic>26</italic>(<issue>1</issue>), <page-range>63</page-range>&#x2013;<page-range>87</page-range>. <ext-link xlink:href="http://www.jstor.org/stable/43443838">http://www.jstor.org/stable/43443838</ext-link></mixed-citation>
			</ref>
			<ref id="R000064">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Florax, M., &#x0026;amp; Ploetzner, R.</suffix></string-name></person-group> (<date><year>2010</year></date>). <article-title>What contributes to the split-attention effect? The role of text segmentation, picture labelling, and spatial proximity</article-title>. <italic>Learning and instruction, 20</italic>(<issue>3</issue>), <page-range>216</page-range>&#x2013;<page-range>224</page-range>. <ext-link xlink:href="https://doi.org/10.1016/j.learninstruc.2009.02.021">https://doi.org/10.1016/j.learninstruc.2009.02.021</ext-link></mixed-citation>
			</ref>
			<ref id="R000065">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Fontich</surname>, <given-names>X.</given-names></string-name></person-group> (<date><year>2016</year></date>). <article-title>L1 Grammar Instruction and Writing: Metalinguistic Activity as a teaching and research focus</article-title>. <italic>Language and Linguistics Compass, 10</italic>(<issue>5</issue>), <page-range>238</page-range>&#x2013;<page-range>254</page-range>. <ext-link xlink:href="https://doi.org/10.1111/lnc3.12184">https://doi.org/10.1111/lnc3.12184</ext-link></mixed-citation>
			</ref>
			<ref id="R000066">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Fontich, X., &#x0026;amp; Garc&#x00ED;a-Folgado, M.J.</suffix></string-name></person-group> (<date><year>2018</year></date>). <article-title>Grammar instruction in the Hispanic area: The case of Spain with attention to empirical studies on metalinguistic activity</article-title>. <italic>L1-Educational Studies in Language and Literature, 18</italic>(<issue>3</issue>), <page-range>1</page-range>&#x2013;<page-range>39</page-range>. <ext-link xlink:href="https://doi.org/10.17239/L1ESLL-2018.18.04.02">https://doi.org/10.17239/L1ESLL-2018.18.04.02</ext-link></mixed-citation>
			</ref>
			<ref id="R000067">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Funk</surname> <given-names>H.</given-names></string-name></person-group> (<date><year>2014</year></date>). <chapter-title>&#x00DC;bungsformen im fremdsprachlichen Grammatikunterricht</chapter-title>. In: <person-group person-group-type="editor"><string-name><given-names>S.</given-names> <surname>Dengscherz</surname></string-name></person-group>, <person-group person-group-type="editor"><string-name><given-names>M.</given-names> <surname>Businger</surname></string-name></person-group>, <person-group person-group-type="editor"><string-name><given-names>J.</given-names> <surname>Taraskina</surname></string-name></person-group> (Reds.), <source><italic>Grammatikunterricht zwischen Linguistik und Didaktik: DaF/DaZ lernen und lehren im Spannungsfeld von Sprachwissenschaft, empirischer Unterrichtsforschung und Vermittlungskonzepten</italic></source> (pp. <page-range>183</page-range>&#x2013;<page-range>197</page-range>). <publisher-name>Narr</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000068">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Funke, R., Wieland, R., Sch&#x00F6;nenberg, S., &#x0026;amp; Melzer, F.</suffix></string-name></person-group> (<date><year>2013</year></date>). <article-title>Exploring syntactic structures in first-language education: effects on literacy-related achievements</article-title>. <source><italic>L1-Educational Studies in Language and Literature</italic></source>, <volume>13</volume>, <page-range>1</page-range>&#x2013;<page-range>24</page-range>. <ext-link xlink:href="https://doi.org/10.17239/L1ESLL-2013.01.03">https://doi.org/10.17239/L1ESLL-2013.01.03</ext-link></mixed-citation>
			</ref>
			<ref id="R000069">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Garrett, P. &#x0026;amp; James, C.</suffix></string-name></person-group> (<date><year>2000</year></date>). <chapter-title>Language awareness</chapter-title>. In <person-group person-group-type="editor"><string-name><given-names>M.</given-names> <surname>Byram</surname></string-name></person-group>, (Red.), <source><italic>Routledge Encyclopedia of Language Teaching and Learning</italic></source> (pp. <page-range>330</page-range>&#x2013;<page-range>332</page-range>). <publisher-name>Routledge</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000070">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Geerts, W., &#x0026;amp; Van Kralingen, R.</suffix></string-name></person-group> (<date><year>2017</year></date>). <source><italic>Handboek voor leraren</italic></source> (2e druk). <publisher-name>Coutinho</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000071">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Giovanelli</surname>, <given-names>M.</given-names></string-name></person-group> (<date><year>2015</year></date>). <article-title>Becoming an English language teacher: Linguistic knowledge, anxieties and the shifting sense of identity</article-title>. <italic>Language and Education, 29</italic>(<issue>5</issue>), <page-range>416</page-range>&#x2013;<page-range>429</page-range>. <ext-link xlink:href="https://doi.org/10.1080/09500782.2015.1031677">https://doi.org/10.1080/09500782.2015.1031677</ext-link></mixed-citation>
			</ref>
			<ref id="R000072">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Giovanelli</surname>, <given-names>M.</given-names></string-name></person-group> (<date><year>2016</year></date>). <chapter-title><italic>Developing beginning teachers&#x2019; linguistic awareness: Issues and practice in initial teacher education</italic></chapter-title>. <person-group person-group-type="editor"><string-name><suffix>In M. Giovanelli &#x0026;amp; D. Clayton (Reds.</suffix></string-name></person-group>), <source>Knowing about language. Linguistics and the secondary English classroom</source> (pp. <page-range>186</page-range>&#x2013;<page-range>197</page-range>). Routledge. <ext-link xlink:href="https://doi.org/10.4324/9781315719818">https://doi.org/10.4324/9781315719818</ext-link></mixed-citation>
			</ref>
			<ref id="R000073">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Goldstein</surname>, <given-names>H.</given-names></string-name></person-group> (<date><year>1987</year></date>). <source><italic>Multilevel models in education and social research</italic></source>. <publisher-name>Oxford University Press</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000074">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Goldstone, R.L., &#x0026;amp; Wilensky, U.</suffix></string-name></person-group> (<date><year>2008</year></date>). <article-title>Promoting transfer by grounding complex systems principles</article-title>. <italic>The Journal of the Learning Sciences, 17</italic>(<issue>4</issue>), <page-range>465</page-range>&#x2013;<page-range>516</page-range>. <ext-link xlink:href="https://doi.org/10.1080/10508400802394898">https://doi.org/10.1080/10508400802394898</ext-link></mixed-citation>
			</ref>
			<ref id="R000075">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Graus, J., &#x0026;amp; Coppen, P.-A.</suffix></string-name></person-group> (<date><year>2016</year></date>). <article-title>Student teacher beliefs on grammar instruction</article-title>. <italic>Language Teaching Research, 20</italic>(<issue>5</issue>), <page-range>571</page-range>&#x2013;<page-range>599</page-range>. <ext-link xlink:href="https://doi.org/10.1177/1362168815603237">https://doi.org/10.1177/1362168815603237</ext-link></mixed-citation>
			</ref>
			<ref id="R000076">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Guay, F., Vallerand, R.J., &#x0026;amp; Blanchard, C.</suffix></string-name></person-group> (<date><year>2000</year></date>). <article-title>On the assessment of situational intrinsic and extrinsic motivation: The Situational Motivation Scale (SIMS</article-title>). <italic>Motivation and emotion, 24</italic>, <page-range>175</page-range>&#x2013;<page-range>213</page-range>. <ext-link xlink:href="https://doi.org/10.1023/A:1005614228250">https://doi.org/10.1023/A:1005614228250</ext-link></mixed-citation>
			</ref>
			<ref id="R000077">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Haeseryn, W., Romijn, K., Geerts, G., de Rooij, J. &#x0026;amp; van den Toorn, M.</suffix></string-name></person-group> (<date><year>1997</year></date>). <source><italic>Algemene Nederlandse Spraakkunst</italic></source>. Geraadpleegd op 9 augustus 2023, van <ext-link xlink:href="https://e-ans.ivdnt.org/">https://e-ans.ivdnt.org/</ext-link></mixed-citation>
			</ref>
			<ref id="R000078">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Hartley</surname>, <given-names>J.</given-names></string-name></person-group> (<date><year>2004</year></date>). <chapter-title>Designing instructional and informational text</chapter-title>. In <person-group person-group-type="editor"><string-name><given-names>D.H.</given-names> <surname>Jonassen</surname></string-name></person-group> (Red.), <source><italic>Handbook of research on educational communications and technology</italic></source> (2de editie). (pp. <page-range>906</page-range>&#x2013;<page-range>936</page-range>). <publisher-name>Routledge</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000079">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Havekes</surname>, <given-names>H.</given-names></string-name></person-group> (<date><year>2015</year></date>). <source><italic>Knowing and doing History. Learning historical thinking in the classroom</italic></source>. [Doctorale dissertatie, Radboud Universiteit Nijmegen]. <ext-link xlink:href="http://dx.doi.org/10.13140/RG.2.2.26937.57449">http://dx.doi.org/10.13140/RG.2.2.26937.57449</ext-link></mixed-citation>
			</ref>
			<ref id="R000080">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Havekes, H., Coppen, P.-A., Luttenberg, J. &#x0026;amp; Van Boxtel, C.</suffix></string-name></person-group> (<date><year>2012</year></date>). <article-title>Knowing and doing history: a conceptual framework and pedagogy for teaching historical contextualisation</article-title>. <italic>History Education Research Journal, 11</italic>(<issue>1</issue>), <page-range>72</page-range>&#x2013;<page-range>93</page-range>. <ext-link xlink:href="https://doi.org/10.18546/HERJ.11.1.06">https://doi.org/10.18546/HERJ.11.1.06</ext-link></mixed-citation>
			</ref>
			<ref id="R000081">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Havekes, H., van Boxtel, C., Coppen, P-A., &#x0026;amp; Luttenberg, J.</suffix></string-name></person-group> (<date><year>2017</year></date>). <article-title>Stimulating historical thinking in a classroom discussion: The role of the teacher</article-title>. <source><italic>Historical Encounters: A journal of historical consciousness, historical cultures and history education</italic></source>, <volume>4</volume>(<issue>2</issue>), <page-range>71</page-range>&#x2013;<page-range>93</page-range>.</mixed-citation>
			</ref>
			<ref id="R000082">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Hayes, A.F., &#x0026;amp; Krippendorff, K.</suffix></string-name></person-group> (<date><year>2007</year></date>). <article-title>Answering the call for a standard reliability measure for coding data</article-title>. <italic>Communication Methods and Measures, 1</italic>(<issue>1</issue>), <page-range>77</page-range>&#x2013;<page-range>89</page-range>. <ext-link xlink:href="https://doi.org/10.1080/19312450709336664">https://doi.org/10.1080/19312450709336664</ext-link></mixed-citation>
			</ref>
			<ref id="R000083">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Hawkins</surname>, <given-names>E.W.</given-names></string-name></person-group> (<date><year>1999</year></date>). <article-title>Foreign language study and language awareness</article-title>. <italic>Language Awareness, 8</italic>(<issue>3&#x0026;amp;4</issue>), <page-range>124</page-range>&#x2013;<page-range>142</page-range>. <ext-link xlink:href="https://doi.org/10.1080/09658419908667124">https://doi.org/10.1080/09658419908667124</ext-link></mixed-citation>
			</ref>
			<ref id="R000084">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Hendrix, T., &#x0026;amp; Hulshof, H.</suffix></string-name></person-group> (<date><year>1999</year></date>). <article-title>Op taalkunde afgestemd; Algemene vaardigheden en vakspecifieke leerstof in het studiehuis: het geval Nederlands</article-title>. <italic>Levende Talen Magazine, 86</italic>(<issue>537</issue>), <page-range>122</page-range>&#x2013;<page-range>131</page-range>. <ext-link xlink:href="https://lt-tijdschriften.nl/ojs/index.php/ltm/article/view/949">https://lt-tijdschriften.nl/ojs/index.php/ltm/article/view/949</ext-link></mixed-citation>
			</ref>
			<ref id="R000085">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Horst, M., White, J., &#x0026;amp; Bell, P.</suffix></string-name></person-group> (<date><year>2010</year></date>). <article-title>First and second language knowledge in the language classroom</article-title>. <italic>International Journal of bilingualism, 14</italic>(<issue>3</issue>), <page-range>331</page-range>&#x2013;<page-range>349</page-range>. <ext-link xlink:href="https://doi.org/10.1177/1367006910367848">https://doi.org/10.1177/1367006910367848</ext-link></mixed-citation>
			</ref>
			<ref id="R000086">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Housen, A., &#x0026;amp; De Graaff, R.</suffix></string-name></person-group> (<date><year>2009</year></date>). <chapter-title>Investigating the effects and effectiveness of L2 instruction</chapter-title>. In <person-group person-group-type="editor"><string-name><given-names>M.H.</given-names> <surname>Long</surname></string-name></person-group>, <person-group person-group-type="editor"><string-name><given-names>C.J.</given-names> <surname>Doughty</surname></string-name></person-group> (Reds.), <source><italic>The handbook of language teaching</italic></source> (pp. <page-range>736</page-range>&#x2013;<page-range>755</page-range>). <publisher-name>Wiley-Blackwell</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000087">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Hudson, R., &#x0026;amp; Walmsley, J.</suffix></string-name></person-group> (<date><year>2005</year></date>). <article-title>The English Patient: English grammar and teaching in the twentieth century</article-title>. <italic>Journal of Linguistics, 41</italic>(<issue>3</issue>), <page-range>593</page-range>&#x2013;<page-range>622</page-range>. <ext-link xlink:href="https://doi.org/10.1017/S0022226705003464">https://doi.org/10.1017/S0022226705003464</ext-link></mixed-citation>
			</ref>
			<ref id="R000088">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Hulshof</surname>, <given-names>H.</given-names></string-name></person-group> (<date><year>1985</year></date>). <source><italic>CH den Hertog als grammaticus: een hoofdstuk uit de geschiedenis van de Nederlandse taalkunde, in het bijzonder op het gebied van de schoolgrammatica in de laatste decennia van de negentiende eeuw</italic> [Doctorale dissertatie, Radboud Universiteit Nijmegen</source>]. <publisher-name>Coutinho</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000089">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Hulshof</surname>, <given-names>H.</given-names></string-name></person-group> (<date><year>2002</year></date>). <source>Vormen van taalkennis. <italic>Over grammatica, taalbeschouwing en taalkundige vorming in het onderwijs Nederlands</italic>. Inaugurele rede</source>. <publisher-name>Universiteit Leiden</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000090">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Hulshof</surname>, <given-names>H.</given-names></string-name></person-group> (<date><year>2014</year></date>). <article-title>De &#x2018;triviale&#x2019; herkomst van het redekundig ontleden: Uit de geschiedenis van de schoolgrammatica in Nederland</article-title>. <italic>Levende Talen Magazine, 101</italic>(<issue>7</issue>), <page-range>20</page-range>&#x2013;<page-range>25</page-range>. <ext-link xlink:href="https://lt-tijdschriften.nl/ojs/index.php/ltm/article/view/907/879">https://lt-tijdschriften.nl/ojs/index.php/ltm/article/view/907/879</ext-link></mixed-citation>
			</ref>
			<ref id="R000091">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Hulshof, H., Kwakernaak, E. &#x0026;amp; Wilhelm, F.</suffix></string-name></person-group> (<date><year>2015</year></date>). <source><italic>Geschiedenis van het talenonderwijs in Nederland. Onderwijs in de moderne talen van 1500 tot heden</italic></source>. <publisher-name>Passage</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000092">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Hulstijn</surname>, <given-names>J.H.</given-names></string-name></person-group> (<date><year>2005</year></date>). <article-title>Theoretical and empirical issues in the study of implicit and explicit second-language learning</article-title>. <italic>Studies in Second Language Acquisition, 27</italic>(<issue>2</issue>), <page-range>129</page-range>&#x2013;<page-range>140</page-range>. <ext-link xlink:href="https://doi.org/10.1017/S0272263105050084">https://doi.org/10.1017/S0272263105050084</ext-link></mixed-citation>
			</ref>
			<ref id="R000093">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Hulstijn</surname>, <given-names>J.H.</given-names></string-name></person-group> (<date><year>2009</year></date>). <chapter-title>Vreemde talen leren over vijftig jaar</chapter-title>. <person-group person-group-type="editor"><string-name><suffix>In R. de Graaff, &#x0026;amp; D. Tuin (Reds.</suffix></string-name></person-group>), <source><italic>De toekomst van het talenonderwijs: Nodig? Anders? Beter?</italic></source> (pp. <page-range>95</page-range>&#x2013;<page-range>102</page-range>). <publisher-name>Budde Grafimedia</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000094">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>James, C. &#x0026;amp; Garrett, P. (Reds.</suffix></string-name></person-group>) (<date><year>1991</year></date>). <source><italic>Language Awareness in the Classroom</italic></source>. Longman. <ext-link xlink:href="https://doi.org/10.4324/9781315845524">https://doi.org/10.4324/9781315845524</ext-link></mixed-citation>
			</ref>
			<ref id="R000095">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>James, C., Garrett, P., &#x0026;amp; Candlin, C.N.</suffix></string-name></person-group> (<date><year>2014</year></date>). <source><italic>Language awareness in the classroom</italic></source>. <publisher-name>Routledge</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000096">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Janssen, F.J.J.M., Westbroek, H.B., Doyle, W. &#x0026;amp; Van Driel, J.H.</suffix></string-name></person-group> (<date><year>2013</year></date>). <article-title>How to make innovations practical</article-title>. <italic>Teachers College Record, 115</italic>(<issue>7</issue>), <page-range>1</page-range>&#x2013;<page-range>42</page-range>. <ext-link xlink:href="https://doi.org/10.1177/016146811311500703">https://doi.org/10.1177/016146811311500703</ext-link></mixed-citation>
			</ref>
			<ref id="R000097">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Jarvis, S., &#x0026;amp; Pavlenko, A.</suffix></string-name></person-group> (<date><year>2008</year></date>). <source><italic>Crosslinguistic influence in language and cognition</italic></source>. <publisher-name>Routledge</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000098">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Jones, S., Myhill, D., &#x0026;amp; Bailey, T.C.</suffix></string-name></person-group> (<date><year>2012</year></date>). <article-title>Grammar for Writing? An investigation of the Effects of Contextualised grammar teaching on Students&#x2019; writing</article-title>. <italic>Reading and Writing, 26</italic>(<issue>8</issue>), <page-range>1241</page-range>&#x2013;<page-range>1263</page-range>. <ext-link xlink:href="https://doi.org/10.1007/s11145-012-9416-1">https://doi.org/10.1007/s11145-012-9416-1</ext-link></mixed-citation>
			</ref>
			<ref id="R000099">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>J&#x00F6;reskog</surname>, <given-names>K.G.</given-names></string-name></person-group> (<date><year>1971</year></date>). <article-title>Statistical analysis of sets of congeneric tests</article-title>. <source><italic>Psychometrika</italic></source>, <italic>36</italic>(<issue>2</issue>), <page-range>109</page-range>&#x2013;<page-range>133</page-range>.</mixed-citation>
			</ref>
			<ref id="R000100">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Kielh&#x00F6;fer</surname>, <given-names>B.</given-names></string-name></person-group> (<date><year>1995</year></date>). <chapter-title>Die Rolle der Kontrastivit&#x00E4;t beim Fremdsprachenerwerb</chapter-title>. <person-group person-group-type="editor"><string-name><suffix>In N. Dittmar, &#x0026;amp; M. Rost-Roth (Reds.</suffix></string-name></person-group>), <source><italic>Deutsch als Zweit- und Fremdsprache. Methoden und Perspektiven einer akademischen Disziplin</italic></source> (pp. <page-range>35</page-range>&#x2013;<page-range>53</page-range>). <publisher-name>Peter Lang</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000101">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>King, P.M., &#x0026;amp; Kitchener, K.S.</suffix></string-name></person-group> (<date><year>1994</year></date>). <article-title><italic>Developing reflective judgment: understanding and promoting intellectual growth and critical thinking in adolescents and adults</italic></article-title>. <source>Jossey-Bass</source></mixed-citation>
			</ref>
			<ref id="R000102">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Leenders</surname>, <given-names>G.</given-names></string-name></person-group> (<date><year>2020</year></date>). <article-title>Grammaticaal taalbewustzijn in de vakken Nederlands, Engels en Duits: Wie/wat+ waar ben ik nou eigenlijk mee bezig?</article-title> <italic>Levende Talen Magazine, 107</italic>(<issue>3</issue>), <page-range>14</page-range>&#x2013;<page-range>20</page-range>. <ext-link xlink:href="https://lt-tijdschriften.nl/ojs/index.php/ltm/article/view/2018">https://lt-tijdschriften.nl/ojs/index.php/ltm/article/view/2018</ext-link></mixed-citation>
			</ref>
			<ref id="R000103">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Leenders, G., De Graaff, H.C.J., &#x0026;amp; Van Koppen, J.M.</suffix></string-name></person-group> (<date><year>2019</year></date>). <chapter-title>Verschillen de grammaticale concepten in het moedertaalonderwijs (Nederlands) en het vreemdetalenonderwijs (Duits en Engels</chapter-title>). <person-group person-group-type="editor"><string-name><suffix>In A. Mottart, &#x0026;amp; S. Vanhooren. (Reds.</suffix></string-name></person-group>), <source><italic>33ste Conferentie Onderwijs Nederlands</italic></source> (pp. <page-range>336</page-range>&#x2013;<page-range>341</page-range>). <publisher-name>Nederlandse Taalunie</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000104">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Leenders, G., De Graaff, R., &#x0026;amp; Van Koppen, M.</suffix></string-name></person-group> (<date><year>2021</year></date>a). <article-title>Niederl&#x00E4;ndisch-, Englisch- und Deutschlehrer &#x00FC;ber den Nutzen von linguistischen Konzepten im Grammatikunterricht</article-title>. <italic>Germanistische Mitteilungen, 47</italic>(<issue>1</issue>), <page-range>121</page-range>&#x2013;<page-range>167</page-range>. <ext-link xlink:href="https://doi.org/10.33675/GM/2021/47/9">https://doi.org/10.33675/GM/2021/47/9</ext-link></mixed-citation>
			</ref>
			<ref id="R000105">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Leenders, G.P.M., De Graaff, H.C.J., &#x0026;amp; Van Koppen, J.M.</suffix></string-name></person-group> (<date><year>2021</year></date>b). <article-title>Hoe meet je bewuste taalvaardigheid? Grammaticaal redeneren in de vakken Nederlands, Engels en Duits</article-title>. <italic>Pedagogische Studi&#x00EB;n, 98</italic>(<issue>1</issue>), <page-range>67</page-range>&#x2013;<page-range>93</page-range>. <ext-link xlink:href="https://pedagogischestudien.nl/article/view/13696">https://pedagogischestudien.nl/article/view/13696</ext-link></mixed-citation>
			</ref>
			<ref id="R000106">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Lightbown, P.M., &#x0026;amp; Spada, N.</suffix></string-name></person-group> (<date><year>2000</year></date>). <article-title>Do they know what they&#x2019;re doing? L2 learners&#x2019; awareness of L1 influence</article-title>. <italic>Language Awareness, 9</italic>(<issue>4</issue>), <page-range>198</page-range>&#x2013;<page-range>217</page-range>. <ext-link xlink:href="https://doi.org/10.1080/09658410008667146">https://doi.org/10.1080/09658410008667146</ext-link></mixed-citation>
			</ref>
			<ref id="R000107">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Lipman</surname>, <given-names>M.</given-names></string-name></person-group> (<date><year>2003</year></date>). <italic>Thinking in Education (Second Edition)</italic>. <publisher-name>Cambridge University Press</publisher-name>. <ext-link xlink:href="https://doi.org/10.1017/CBO9780511840272">https://doi.org/10.1017/CBO9780511840272</ext-link>.</mixed-citation>
			</ref>
			<ref id="R000108">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Mayer</surname>, <given-names>R.E.</given-names></string-name></person-group> (<date><year>2003</year></date>). <article-title>The promise of multimedia learning: using the same instructional design methods across different media</article-title>. <italic>Learning and instruction, 13</italic>(<issue>2</issue>), <page-range>125</page-range>&#x2013;<page-range>139</page-range>. <ext-link xlink:href="https://doi.org/10.1016/S0959-4752(02)00016-6">https://doi.org/10.1016/S0959-4752(02)00016-6</ext-link></mixed-citation>
			</ref>
			<ref id="R000109">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Mayer, R.E., &#x0026;amp; Chandler, P.</suffix></string-name></person-group> (<date><year>2001</year></date>). <article-title>When learning is just a click away: Does simple user interaction foster deeper understanding of multimedia messages?</article-title>. <italic>Journal of educational psychology, 93</italic>(<issue>2</issue>), <page-range>390</page-range>&#x2013;<page-range>397</page-range>. <ext-link xlink:href="https://psycnet.apa.org/doi/10.1037/0022-0663.93.2.390">https://psycnet.apa.org/doi/10.1037/0022-0663.93.2.390</ext-link></mixed-citation>
			</ref>
			<ref id="R000110">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>McKenney, S., &#x0026;amp; Reeves, T.C.</suffix></string-name></person-group> (<date><year>2018</year></date>). <source><italic>Conducting educational design research</italic></source> (2de editie). <publisher-name>Routledge</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000111">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>McManus</surname>, <given-names>K.</given-names></string-name></person-group> (<date><year>2013</year></date>). <article-title>Prototypical influence in second language acquisition: What now for the Aspect Hypothesis</article-title>. <italic>International Review of Applied Linguistics in Language Teaching, 51</italic>(<issue>3</issue>), <page-range>299</page-range>&#x2013;<page-range>322</page-range>. <ext-link xlink:href="https://doi.org/10.1515/iral-2013-0013">https://doi.org/10.1515/iral-2013-0013</ext-link></mixed-citation>
			</ref>
			<ref id="R000112">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>McManus</surname>, <given-names>K.</given-names></string-name></person-group> (<date><year>2015</year></date>). <article-title>L1&#x2013;L2 differences in the acquisition of form-meaning pairings in a second language</article-title>. <italic>Canadian Modern Language Review, 71</italic>(<issue>2</issue>), <page-range>155</page-range>&#x2013;<page-range>181</page-range>. <ext-link xlink:href="https://doi.org/10.3138/cmlr.2070.51">https://doi.org/10.3138/cmlr.2070.51</ext-link></mixed-citation>
			</ref>
			<ref id="R000113">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>McManus</surname>, <given-names>K.</given-names></string-name></person-group> (<date><year>2019</year></date>). <article-title>Awareness of L1 form-meaning mappings can reduce crosslinguistic effects in L2 grammatical learning</article-title>. <italic>Language Awareness, 28</italic>(<issue>2</issue>), <page-range>114</page-range>&#x2013;<page-range>138</page-range>. <ext-link xlink:href="https://doi.org/10.1080/09658416.2019.1620756">https://doi.org/10.1080/09658416.2019.1620756</ext-link></mixed-citation>
			</ref>
			<ref id="R000114">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>McManus</surname>, <given-names>K.</given-names></string-name></person-group> (<date><year>2021</year></date>). <article-title>Examining the effectiveness of language-switching practice for reducing cross-language competition in L2 grammatical processing</article-title>. <italic>Bilingualism: Language and Cognition, 24</italic>(<issue>1</issue>), <page-range>167</page-range>&#x2013;<page-range>184</page-range>. <ext-link xlink:href="https://doi.org/10.1017/S1366728920000218">https://doi.org/10.1017/S1366728920000218</ext-link></mixed-citation>
			</ref>
			<ref id="R000115">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>McManus, K., &#x0026;amp; Marsden, E.</suffix></string-name></person-group> (<date><year>2017</year></date>). <article-title>L1 explicit instruction can improve L2 online and offline performance</article-title>. <italic>Studies in Second Language Acquisition, 39</italic>(<issue>3</issue>), <page-range>459</page-range>&#x2013;<page-range>492</page-range>. <ext-link xlink:href="https://doi.org/10.1017/S027226311600022X">https://doi.org/10.1017/S027226311600022X</ext-link></mixed-citation>
			</ref>
			<ref id="R000116">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>McManus, K., &#x0026;amp; Marsden, E.</suffix></string-name></person-group> (<date><year>2018</year></date>). <article-title>Online and offline effects of L1 practice in L2 grammar learning: A partial replication</article-title>. <italic>Studies in Second Language Acquisition, 40</italic>(<issue>2</issue>), <page-range>459</page-range>&#x2013;<page-range>475</page-range>. <ext-link xlink:href="https://doi.org/10.1017/S0272263117000171">https://doi.org/10.1017/S0272263117000171</ext-link></mixed-citation>
			</ref>
			<ref id="R000117">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>McManus, K., &#x0026;amp; Marsden, E.</suffix></string-name></person-group> (<date><year>2019</year></date>a). <article-title>Using explicit instruction about L1 to reduce crosslinguistic effects in L2 grammar learning: Evidence from oral production in L2 French</article-title>. <italic>The Modern Language Journal, 103</italic>(<issue>2</issue>), <page-range>459</page-range>&#x2013;<page-range>480</page-range>. <ext-link xlink:href="https://doi.org/10.1111/modl.12567">https://doi.org/10.1111/modl.12567</ext-link></mixed-citation>
			</ref>
			<ref id="R000118">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>McManus, K., &#x0026;amp; Marsden, E.</suffix></string-name></person-group> (<date><year>2019</year></date>b). <article-title>Signatures of automaticity during practice: Explicit instruction about L1 processing routines can improve L2 grammatical processing</article-title>. <italic>Applied Psycholinguistics, 40</italic>(<issue>1</issue>), <page-range>205</page-range>&#x2013;<page-range>234</page-range>. <ext-link xlink:href="https://doi.org/10.1017/S0142716418000553">https://doi.org/10.1017/S0142716418000553</ext-link></mixed-citation>
			</ref>
			<ref id="R000119">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Mercer</surname>, <given-names>N.</given-names></string-name></person-group> (<date><year>2013</year></date>). <article-title>The social brain, language, and goal-directed collective thinking: A social conception of cognition and its implications for understanding how we think, teach, and learn</article-title>. <italic>Educational Psychologist, 48</italic>(<issue>3</issue>), <page-range>148</page-range>&#x2013;<page-range>168</page-range>. <ext-link xlink:href="https://doi.org/10.1080/00461520.2013.804394">https://doi.org/10.1080/00461520.2013.804394</ext-link></mixed-citation>
			</ref>
			<ref id="R000120">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Moseley, D., Baumfield, V., Elliott, J., Gregson, M., Higgins, S., Miller, J., &#x0026;amp; Newton, D.P.</suffix></string-name></person-group> (<date><year>2005</year></date>). <source><italic>Frameworks for thinking: A handbook for teaching and learning</italic></source>. <publisher-name>Cambridge University Press</publisher-name>. <ext-link xlink:href="https://doi.org/10.1017/CBO9780511489914">https://doi.org/10.1017/CBO9780511489914</ext-link></mixed-citation>
			</ref>
			<ref id="R000121">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Myhill, D., Jones, S., Lines, H., &#x0026;amp; Watson, A.</suffix></string-name></person-group> (<date><year>2012</year></date>). <article-title>Re-thinking grammar: The impact of embedded grammar teaching on students&#x2019; writing and students&#x2019; metalinguistic understanding</article-title>. <italic>Research Papers in Education, 27</italic>(<issue>2</issue>), <page-range>151</page-range>&#x2013;<page-range>163</page-range>. <ext-link xlink:href="https://doi.org/10.1080/02671522.2011.637640">https://doi.org/10.1080/02671522.2011.637640</ext-link></mixed-citation>
			</ref>
			<ref id="R000122">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Myhill, D., Jones, S., &#x0026;amp; Lines, H.</suffix></string-name></person-group> (<date><year>2018</year></date>). <article-title>Supporting less proficient writers through linguistically aware teaching</article-title>. <italic>Language and Education, 32</italic>(<issue>4</issue>), <page-range>333</page-range>&#x2013;<page-range>349</page-range>. <ext-link xlink:href="https://doi.org/10.1080/09500782.2018.1438468">https://doi.org/10.1080/09500782.2018.1438468</ext-link></mixed-citation>
			</ref>
			<ref id="R000123">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Neijt</surname>, <given-names>A.</given-names></string-name></person-group>, <person-group person-group-type="author"><string-name><surname>Coppen</surname>, <given-names>P.-A.</given-names></string-name></person-group>, <person-group person-group-type="author"><string-name><suffix>De</suffix> <surname>Glopper</surname>, <given-names>K.</given-names></string-name></person-group> (<date><year>2015</year></date>). <chapter-title>Bewuste taalvaardigheid als eindterm voor het schoolvak Nederlands in havo en vwo: visie en voorbeelden</chapter-title>. <person-group person-group-type="editor"><string-name><suffix>In A. Mottart, &#x0026;amp; S. Vanhooren (Reds.</suffix></string-name></person-group>), <source><italic>Negenentwintigste Conferentie Onderwijs Nederlands</italic></source> (pp. <page-range>198</page-range>&#x2013;<page-range>202</page-range>). <publisher-name>Academia Press</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000124">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Neijt, A., Mantingh, E., Coppen, P.-A., Oosterholt, J., De Glopper, K., &#x0026;amp; Witte, T.</suffix></string-name></person-group> (<date><year>2016</year></date>). <article-title>Manifest voor het schoolvak Nederlands: &#x2018;Bewust geletterd&#x2019; als nieuwe koers</article-title>. <italic>Levende Talen Magazine, 103</italic>(<issue>1</issue>), <page-range>28</page-range>&#x2013;<page-range>29</page-range>.</mixed-citation>
			</ref>
			<ref id="R000125">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Neutelings, T., &#x0026;amp; Van Rijt, J.</suffix></string-name></person-group> (<date><year>2014</year></date>). <chapter-title>Syntaxis op een bont bedje van didactiek</chapter-title>. <person-group person-group-type="editor"><string-name><suffix>In A. Mottart, &#x0026;amp; S. Vanhooren (Reds.</suffix></string-name></person-group>), <source><italic>Achtentwintigste conferentie Het Schoolvak Nederlands</italic></source> (pp. <page-range>208</page-range>&#x2013;<page-range>212</page-range>). <publisher-name>Academia Press</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000126">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Newby</surname> <given-names>D.</given-names></string-name></person-group> (<date><year>2014</year></date>). <chapter-title>Do grammar exercises help? Assessing the effectiveness of grammar pedagogy</chapter-title>. <person-group person-group-type="editor"><string-name><suffix>In: C. Haase &#x0026;amp; N. Orlova (Reds.</suffix></string-name></person-group>), <source><italic>ELT: Harmony and diversity</italic></source> (pp. <page-range>3</page-range>&#x2013;<page-range>16</page-range>). <publisher-loc>Cambridge Scholars</publisher-loc>.</mixed-citation>
			</ref>
			<ref id="R000127">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Odlin</surname>, <given-names>T.</given-names></string-name></person-group> (<date><year>2003</year></date>). <chapter-title>Cross-linguistic influence</chapter-title>. <person-group person-group-type="editor"><string-name><suffix>In C.J. Doughty, &#x0026;amp; H. Michael, (Reds.</suffix></string-name></person-group>), <source><italic>The Handbook of Second Language Acquisition. Blackwell Handbooks In Linguistics</italic></source> (pp. <page-range>436</page-range>&#x2013;<page-range>486</page-range>). <publisher-name>Blackwell Publishing</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000128">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Ozcelik, E., Karakus, T., Kursun, E. &#x0026;amp; Cagiltay, K.</suffix></string-name></person-group> (<date><year>2009</year></date>). <article-title>An Eye-tracking Study of How Color Coding Affects Multimedia Learning</article-title>. <italic>Computers &#x0026;amp; Education (SCSI), 53</italic>(<issue>2</issue>), <page-range>445</page-range>&#x2013;<page-range>453</page-range>. <ext-link xlink:href="https://doi.org/10.1016/j.compedu.2009.03.002">https://doi.org/10.1016/j.compedu.2009.03.002</ext-link></mixed-citation>
			</ref>
			<ref id="R000129">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Plomp, T., &#x0026;amp; Nieveen, N.</suffix></string-name></person-group> (<date><year>2013</year></date>). <source><italic>Educational design research</italic></source>. <publisher-name>Netherlands Institute for Curriculum Development</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000130">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Pollock</surname>, <given-names>J.L.</given-names></string-name></person-group> (<date><year>2006</year></date>). <source><italic>Thinking about acting. Logical foundations for rational decision making</italic></source>. <publisher-name>Oxford University Press</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000131">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Quen&#x00E9;, H., &#x0026;amp; Van den Bergh, H.</suffix></string-name></person-group> (<date><year>2004</year></date>). <article-title>On multi-level modeling of data from repeated measures designs: A tutorial</article-title>. <source><italic>Speech communication</italic></source>, <italic>43</italic>(<issue>1&#x2013;2</issue>), <page-range>103</page-range>&#x2013;<page-range>121</page-range>. <ext-link xlink:href="https://doi.org/10.1016/j.specom.2004.02.004">https://doi.org/10.1016/j.specom.2004.02.004</ext-link></mixed-citation>
			</ref>
			<ref id="R000132">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Ranta, L., &#x0026;amp; Lyster, R.</suffix></string-name></person-group> (<date><year>2017</year></date>). <chapter-title>Form-focused instruction</chapter-title>. <person-group person-group-type="editor"><string-name><suffix>In P. Garrett, &#x0026;amp; J.M. Cots, (Reds.</suffix></string-name></person-group>), <source><italic>The Routledge handbook of language awareness</italic></source> (pp. <page-range>40</page-range>&#x2013;<page-range>56</page-range>). <publisher-name>Routledge</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000133">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Rastle, K., &#x0026;amp; Davis, M.</suffix></string-name></person-group> (<date><year>2008</year></date>). <article-title>Morphological decomposition based on the analysis of orthography</article-title>. <italic>Language and Cognitive Processes, 23</italic>(<issue>7</issue>), <page-range>942</page-range>&#x2013;<page-range>971</page-range>. <ext-link xlink:href="https://doi.org/10.1080/01690960802069730">https://doi.org/10.1080/01690960802069730</ext-link></mixed-citation>
			</ref>
			<ref id="R000134">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Riggs</surname>, <given-names>W.</given-names></string-name></person-group> (<date><year>2003</year></date>). <chapter-title>Understanding &#x2018;Virtue&#x2019; and the Virtue of Understanding</chapter-title>. <person-group person-group-type="editor"><string-name><suffix>In M. DePaul, &#x0026;amp; L. Zagzebski, (Reds.</suffix></string-name></person-group>), <source><italic>Intellectual Virtue</italic></source> (pp. <page-range>203</page-range>&#x2013;<page-range>226</page-range>). <publisher-name>Clarendon Press</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000135">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Roberts, L., &#x0026;amp; Liszka, S.A.</suffix></string-name></person-group> (<date><year>2013</year></date>). <article-title>Processing tense/aspect-agreement violations on-line in the second language: A self-paced reading study with French and German L2 learners of English</article-title>. <italic>Second Language Research, 29</italic>(<issue>4</issue>), <page-range>413</page-range>&#x2013;<page-range>439</page-range>. <ext-link xlink:href="https://doi.org/10.1177/0267658313503171">https://doi.org/10.1177/0267658313503171</ext-link></mixed-citation>
			</ref>
			<ref id="R000136">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Roehr, K., &#x0026;amp; G&#x00E1;nem-Guti&#x00E9;rrez, G.A.</suffix></string-name></person-group> (<date><year>2009</year></date>). <article-title>The status of metalinguistic knowledge in instructed adult L2 learning</article-title>. <italic>Language Awareness, 18</italic>(<issue>2</issue>), <page-range>165</page-range>&#x2013;<page-range>181</page-range>. <ext-link xlink:href="https://doi.org/10.1080/09658410902855854">https://doi.org/10.1080/09658410902855854</ext-link></mixed-citation>
			</ref>
			<ref id="R000137">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Sangster, P., Anderson, C., &#x0026;amp; O&#x2019;Hara, P.</suffix></string-name></person-group> (<date><year>2013</year></date>). <article-title>Perceived and actual levels of knowledge about lan-guage amongst primary and secondary student teachers: Do they know what they think they know?</article-title> <italic>Language Awareness, 22</italic>(<issue>4</issue>), <page-range>293</page-range>&#x2013;<page-range>319</page-range>. <ext-link xlink:href="https://doi.org/10.1080/09658416.2012.722643Stroop">https://doi.org/10.1080/09658416.2012.722643Stroop</ext-link>,</mixed-citation>
			</ref>
			<ref id="R000138">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Sch&#x00E4;fer</surname>, <given-names>R.</given-names></string-name></person-group> (<date><year>2018</year></date>). <source><italic>Einf&#x00FC;hrung in die grammatische Beschreibung des Deutschen: Dritte, &#x00FC;berarbeitete und erweiterte Auflage</italic></source>. <publisher-name>Language Science Press</publisher-name>. <ext-link xlink:href="https://doi.org/10.5281/zenodo.1421660">https://doi.org/10.5281/zenodo.1421660</ext-link></mixed-citation>
			</ref>
			<ref id="R000139">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Seufert</surname>, <given-names>T.</given-names></string-name></person-group> (<date><year>2003</year></date>). <article-title>Supporting coherence formation in learning from multiple representations</article-title>. <italic>Learning and instruction, 13</italic>(<issue>2</issue>), <page-range>227</page-range>&#x2013;<page-range>237</page-range>. <ext-link xlink:href="https://doi.org/10.1016/S0959-4752(02)00022-1">https://doi.org/10.1016/S0959-4752(02)00022-1</ext-link></mixed-citation>
			</ref>
			<ref id="R000140">
				<mixed-citation>Shadish, W.R., Cook, T.D., &#x0026;amp; Campbell, D.T. (Reds.) (<date><year>2002</year></date>). <source><italic>Experimental and Quasi-Experimental Designs for Generalized Causal Inference</italic></source>. <publisher-name>Houghton Mifflin</publisher-name></mixed-citation>
			</ref>
			<ref id="R000141">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Spada, N., Jessop, L., Tomita, Y., Suzuki, W., &#x0026;amp; Valeo, A.</suffix></string-name></person-group> (<date><year>2014</year></date>). <article-title>Isolated and Integrated form-focused instruction: Effects on different types of L2 knowledge</article-title>. <italic>Language Teaching Research, 18</italic>(<issue>4</issue>), <page-range>453</page-range>&#x2013;<page-range>473</page-range>. <ext-link xlink:href="https://doi.org/10.1177/1362168813519883">https://doi.org/10.1177/1362168813519883</ext-link></mixed-citation>
			</ref>
			<ref id="R000142">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Spada, N., Lightbown, P.M., &#x0026;amp; White, J.</suffix></string-name></person-group> (<date><year>2005</year></date>). <chapter-title>The importance of form/meaning mappings in explicit form-focused instruction</chapter-title>. <person-group person-group-type="editor"><string-name><suffix>In A. Housen &#x0026;amp; M. Pierrard (Reds.</suffix></string-name></person-group>), <source><italic>Investigations in instructed second language acquisition</italic></source> (pp. <page-range>199</page-range>&#x2013;<page-range>234</page-range>). <publisher-name>Gruyter</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000143">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Spada, N., &#x0026;amp; Tomita, Y.</suffix></string-name></person-group> (<date><year>2010</year></date>). <article-title>Interactions between type of instruction and type of language feature: A meta-analysis</article-title>. <italic>Language learning, 60</italic>(<issue>2</issue>), <page-range>263</page-range>&#x2013;<page-range>308</page-range>. <ext-link xlink:href="https://doi.org/10.1111/j.1467-9922.2010.00562.x">https://doi.org/10.1111/j.1467-9922.2010.00562.x</ext-link></mixed-citation>
			</ref>
			<ref id="R000144">
				<mixed-citation><person-group person-group-type="author"><string-name><given-names>Stichting Leerplan</given-names> <surname>Ontwikkeling</surname></string-name></person-group> (<date><year>2020</year></date>, 28 januari). <article-title>Redeneren. Toekomstbestendig reken/wiskundeonderwijs</article-title>. <source><italic>SLO</italic>. Geraadpleegd op</source> 29 juli <date><year>2023</year></date>, van <ext-link xlink:href="https://www.slo.nl/thema/vakspecifieke-thema/rekenen-wiskunde/toekomstbestendig/redeneren/">https://www.slo.nl/thema/vakspecifieke-thema/rekenen-wiskunde/toekomstbestendig/redeneren/</ext-link></mixed-citation>
			</ref>
			<ref id="R000145">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Svalberg</surname>, <given-names>A.</given-names></string-name></person-group> (<date><year>2007</year></date>). <article-title>Language awareness and language learning</article-title>. <italic>Language Teaching, 40</italic>(<issue>4</issue>), <page-range>287</page-range>&#x2013;<page-range>308</page-range>. <ext-link xlink:href="https://doi.org/10.1017/S0261444807004491">https://doi.org/10.1017/S0261444807004491</ext-link></mixed-citation>
			</ref>
			<ref id="R000146">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Sweller</surname>, <given-names>J.</given-names></string-name></person-group> (<date><year>2010</year></date>). <chapter-title>Cognitive load theory: Recent theoretical advances</chapter-title>. <person-group person-group-type="editor"><string-name><suffix>In J.L. Plass, R. Moreno, &#x0026;amp; R. Br&#x00FC;nken (Reds.</suffix></string-name></person-group>), <source><italic>Cognitive load theory</italic></source> (pp. <page-range>29</page-range>&#x2013;<page-range>47</page-range>). <publisher-name>Cambridge University Press</publisher-name>. <ext-link xlink:href="https://doi.org/10.1017/CBO9780511844744.004">https://doi.org/10.1017/CBO9780511844744.004</ext-link></mixed-citation>
			</ref>
			<ref id="R000147">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Sweller, J., Van Merrienboer, J.J.G., &#x0026;amp; Paas, F.G.W.C.</suffix></string-name></person-group> (<date><year>1998</year></date>). <article-title>Cognitive architecture and instructional design</article-title>. <italic>Educational psychology review, 10</italic>, <page-range>251</page-range>&#x2013;<page-range>296</page-range>. <ext-link xlink:href="https://doi.org/10.1023/A:1022193728205">https://doi.org/10.1023/A:1022193728205</ext-link></mixed-citation>
			</ref>
			<ref id="R000148">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Tammenga-Helmantel, M., &#x0026;amp; Le Bruyn, B.</suffix></string-name></person-group> (<date><year>2016</year></date>). <article-title>Mvt-onderwijs: Hoe willen we het hebben en wat willen we weten?</article-title> <italic>Levende Talen Magazine, 103</italic>(<issue>8</issue>), <page-range>44</page-range>&#x2013;<page-range>45</page-range>. <ext-link xlink:href="https://lt-tijdschriften.nl/ojs/index.php/ltm/article/view/1647/1255">https://lt-tijdschriften.nl/ojs/index.php/ltm/article/view/1647/1255</ext-link></mixed-citation>
			</ref>
			<ref id="R000149">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Tammenga-Helmantel, M., &#x0026;amp; Maijala, M.</suffix></string-name></person-group> (<date><year>2019</year></date>). <article-title>The position of grammar in Finnish, Dutch, and global course books for German as a foreign language</article-title>. <italic>Language Teaching Research, 23</italic>(<issue>5</issue>), <page-range>562</page-range>&#x2013;<page-range>583</page-range>. <ext-link xlink:href="https://doi.org/10.1177/1362168817752542">https://doi.org/10.1177/1362168817752542</ext-link></mixed-citation>
			</ref>
			<ref id="R000150">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Tellier, A. &#x0026;amp; Roehr-Brackin, K.</suffix></string-name></person-group> (<date><year>2017</year></date>). <chapter-title>2. Raising Children&#x2019;s Metalinguistic Awareness to Enhance Classroom Second Language Learning</chapter-title>. In <person-group person-group-type="editor"><string-name><given-names>M. Garc&#x00ED;a</given-names> <surname>Mayo</surname></string-name></person-group> (Red.), <source><italic>Learning Foreign Languages in Primary School: Research Insights</italic></source> (pp. <page-range>22</page-range>&#x2013;<page-range>48</page-range>). Multilingual Matters. <ext-link xlink:href="https://doi.org/10.21832/9781783098118-004">https://doi.org/10.21832/9781783098118-004</ext-link></mixed-citation>
			</ref>
			<ref id="R000151">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Tolentino, L.C., &#x0026;amp; Tokowicz, N.</suffix></string-name></person-group> (<date><year>2014</year></date>). <article-title>Cross-language similarity modulates effectiveness of second language grammar instruction</article-title>. <italic>Language Learning, 64</italic>(<issue>2</issue>), <page-range>279</page-range>&#x2013;<page-range>309</page-range>. <ext-link xlink:href="https://doi.org/10.1111/lang.12048">https://doi.org/10.1111/lang.12048</ext-link></mixed-citation>
			</ref>
			<ref id="R000152">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Tordoir, A. &#x0026;amp; Damhuis, R.</suffix></string-name></person-group> (<date><year>1982</year></date>). <source><italic>Grammatika en vreemdetalenonderwijs in de brugklas: een onderzoek naar de aansluiting van het moedertaal grammatikaonderwijs op het vreemdetalenonderwijs</italic></source>. <publisher-name>SCO</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000153">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Trousdale</surname>, <given-names>G</given-names></string-name></person-group> (<date><year>2010</year></date>), <chapter-title>Knowledge about language in the English classroom: a Scottish perspective</chapter-title>. In <person-group person-group-type="editor"><string-name><given-names>T.</given-names> <surname>Locke</surname></string-name></person-group> (Red.), <source><italic>Beyond the grammar wars: A resource for teachers and students on developing language knowledge in the English/literacy classroom</italic></source> (pp. <page-range>73</page-range>&#x2013;<page-range>87</page-range>). <publisher-name>Routledge</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000154">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Tyler</surname>, <given-names>A.</given-names></string-name></person-group> (<date><year>2012</year></date>a). <article-title>Spatial language, polysemy, and cross-linguistic semantic mismatches: Cognitive linguistics insights into challenges for second language learners</article-title>. <italic>Spatial Cognition &#x0026;amp; Computation: An Interdisciplinary Journal, 12</italic>(<issue>4</issue>), <page-range>305</page-range>&#x2013;<page-range>335</page-range>. <ext-link xlink:href="https://doi.org/10.1080/13875868.2012.698670">https://doi.org/10.1080/13875868.2012.698670</ext-link></mixed-citation>
			</ref>
			<ref id="R000155">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Tyler</surname>, <given-names>A.</given-names></string-name></person-group> (<date><year>2012</year></date>b). <source><italic>Cognitive linguistics and second language learning: Theoretical basics and experimental evidence</italic></source>. <publisher-name>Routledge</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000156">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Tyler, A., &#x0026;amp; Ortega, L.</suffix></string-name></person-group> (<date><year>2018</year></date>). <source><italic>Usage-inspired L2 instruction: Researched pedagogy</italic></source>. <publisher-name>John Benjamins</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000157">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Van den</suffix> <surname>Akker</surname>, <given-names>J.</given-names></string-name></person-group> (<date><year>2003</year></date>). <chapter-title>Curriculum perspectives: An introduction</chapter-title>. <person-group person-group-type="editor"><string-name><suffix>In J. Van den Akker, W. Kuiper, &#x0026;amp; U. Hameyer (Reds.</suffix></string-name></person-group>), <source><italic>Curriculum landscapes and trends</italic></source> (pp. <page-range>1</page-range>&#x2013;<page-range>10</page-range>). <publisher-name>Kluwer Academic</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000158">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Van den</suffix> <surname>Branden</surname>, <given-names>K.</given-names></string-name></person-group> (<date><year>2009</year></date>). <chapter-title>Diffusion and implementation of innovations</chapter-title>. <person-group person-group-type="editor"><string-name><suffix>In M.H. Long &#x0026;amp; C.J. Doughty (Reds.</suffix></string-name></person-group>), <source><italic>The handbook of language teaching</italic></source> (pp. <page-range>659</page-range>&#x2013;<page-range>672</page-range>). <publisher-name>Blackwell Publishing</publisher-name>. <ext-link xlink:href="https://doi.org/10.1002/9781444315783">https://doi.org/10.1002/9781444315783</ext-link></mixed-citation>
			</ref>
			<ref id="R000159">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Van den</suffix> <surname>Broek</surname>, <given-names>E.W.R.</given-names></string-name></person-group> (<date><year>2020</year></date>). <source>Language awareness in foreign language education. Exploring teachers&#x2019; beliefs, practices and change processes</source>. [Doctorale dissertatie, <publisher-name>Radboud Universiteit Nijmegen</publisher-name>].</mixed-citation>
			</ref>
			<ref id="R000160">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Van den Broek, E., &#x0026;amp; Dielemans, R.</suffix></string-name></person-group> (<date><year>2017</year></date>). <article-title>Bewuste taalvaardigheid in de klas</article-title>. <italic>Levende Talen Magazine, 104</italic>(<issue>4</issue>), <page-range>12</page-range>&#x2013;<page-range>16</page-range>.</mixed-citation>
			</ref>
			<ref id="R000161">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Van Drie, J., &#x0026;amp; Van Boxtel, C.</suffix></string-name></person-group> (<date><year>2008</year></date>). <article-title>Historical reasoning: Towards a framework for analyzing students&#x2019; reasoning about the past</article-title>. <italic>Educational Psychology Review, 20</italic>, <page-range>87</page-range>&#x2013;<page-range>110</page-range>. <ext-link xlink:href="https://doi.org/10.1007/s10648-007-9056-1">https://doi.org/10.1007/s10648-007-9056-1</ext-link></mixed-citation>
			</ref>
			<ref id="R000162">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Van</suffix> <surname>Gelderen</surname>, <given-names>A.</given-names></string-name></person-group> (<date><year>2010</year></date>). <chapter-title>Does explicit teaching of grammar help students to become better writers? Insights from empirical research</chapter-title>. In <person-group person-group-type="editor"><string-name><given-names>T.</given-names> <surname>Locke</surname></string-name></person-group> (Red.), <source><italic>Beyond the grammar wars. A resource for teachers and students on developing language knowledge in the English/literacy classroom</italic></source> (pp. <page-range>109</page-range>&#x2013;<page-range>128</page-range>). <publisher-name>Routledge</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000163">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Vansteenkiste, M., Ryan, R.M. &#x0026;amp; Deci, E.L.</suffix></string-name></person-group> (<date><year>2008</year></date>). <chapter-title>Self-determination theory and the explanatory role of psychological needs in human well-being</chapter-title>. <person-group person-group-type="editor"><string-name><suffix>In L. Bruni, F. Comim &#x0026;amp; M. Pugno (Reds.</suffix></string-name></person-group>), <source><italic>Capabilities and happiness</italic></source> (pp. <page-range>187</page-range>&#x2013;<page-range>223</page-range>). <publisher-name>Oxford University Press</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000164">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Van</suffix> <surname>Rijt</surname>, <given-names>J.</given-names></string-name></person-group> (<date><year>2016</year></date>). <article-title>De meerwaarde van valentie als taalkundig concept binnen het grammaticaonderwijs: meer grip op taalkundige structuren</article-title>. <italic>Levende Talen Magazine, 103</italic>(<issue>7</issue>), <page-range>6</page-range>&#x2013;<page-range>10</page-range>. <ext-link xlink:href="https://lt-tijdschriften.nl/ojs/index.php/ltm/article/view/1609">https://lt-tijdschriften.nl/ojs/index.php/ltm/article/view/1609</ext-link></mixed-citation>
			</ref>
			<ref id="R000165">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Van</suffix> <surname>Rijt</surname>, <given-names>J.H.M.</given-names></string-name></person-group> (<date><year>2020</year></date>). <source><italic>Understanding grammar. The impact of linguistic metaconcepts on L1 grammar education</italic></source>. [Doctorale dissertatie, <publisher-name>Radboud Universiteit Nijmegen</publisher-name>, <publisher-loc>Nijmegen</publisher-loc>]. <ext-link xlink:href="https://doi.org/10.1080/02671522.2020.1784258">https://doi.org/10.1080/02671522.2020.1784258</ext-link></mixed-citation>
			</ref>
			<ref id="R000166">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Van Rijt, J., &#x0026;amp; Coppen, P.-A.</suffix></string-name></person-group> (<date><year>2017</year></date>). <article-title>Bridging the gap between linguistic theory and L1 grammar education &#x2013; experts&#x2019; views on essential linguistic concepts</article-title>. <italic>Language awareness, 26</italic>(<issue>4</issue>), <page-range>360</page-range>&#x2013;<page-range>380</page-range>. <ext-link xlink:href="https://doi.org/10.1080/09658416.2017.1410552">https://doi.org/10.1080/09658416.2017.1410552</ext-link></mixed-citation>
			</ref>
			<ref id="R000167">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Van Rijt, J.H., &#x0026;amp; Coppen, P.-A.J.</suffix></string-name></person-group> (<date><year>2021</year></date>). <article-title>The conceptual importance of grammar: Knowledge-related rationales for grammar teaching</article-title>. <italic>Pedagogical Linguistics, 2</italic>(<issue>2</issue>), <page-range>175</page-range>&#x2013;<page-range>199</page-range>. <ext-link xlink:href="https://doi.org/10.1075/pl.21008.van">https://doi.org/10.1075/pl.21008.van</ext-link></mixed-citation>
			</ref>
			<ref id="R000168">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Van Rijt, J., De Swart, P., &#x0026;amp; Coppen, P.-A.</suffix></string-name></person-group> (<date><year>2019</year></date>a). <article-title>Linguistic concepts in L1 Grammar education: A systematic literature review</article-title>. <italic>Research Papers in Education, 34</italic>(<issue>5</issue>), <page-range>621</page-range>&#x2013;<page-range>648</page-range>. <ext-link xlink:href="https://doi.org/10.1080/02671522.2018.1493742">https://doi.org/10.1080/02671522.2018.1493742</ext-link></mixed-citation>
			</ref>
			<ref id="R000169">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Van Rijt, J., De Swart, P., Wijnands, A. &#x0026;amp; Coppen, P.-A.</suffix></string-name></person-group> (<date><year>2019</year></date>b). <article-title>When students tackle grammatical problems: Exploring linguistic reasoning with linguistic metaconcepts</article-title>. <italic>Linguistics and Education, 52</italic>, <page-range>78</page-range>&#x2013;<page-range>88</page-range>. <ext-link xlink:href="https://doi.org/10.1016/j.linged.2019.06.004">https://doi.org/10.1016/j.linged.2019.06.004</ext-link></mixed-citation>
			</ref>
			<ref id="R000170">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Van Rijt, J., Hulshof, H., &#x0026;amp; Coppen, P.-A.</suffix></string-name></person-group> (<date><year>2021</year></date>). &#x2018;<article-title>X is the odd one out, because the other two are more about the farmland&#x2019; &#x2013; Dutch L1 student teachers&#x2019; struggles to reason about grammar in odd one out tasks</article-title>. <italic>Studies in Educational Evaluation, 70</italic>, <page-range>1</page-range>&#x2013;<page-range>13</page-range>. <ext-link xlink:href="https://doi.org/10.1016/j.stueduc.2021.101007">https://doi.org/10.1016/j.stueduc.2021.101007</ext-link></mixed-citation>
			</ref>
			<ref id="R000171">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Van Rijt, J., Myhill, D., De Maeyer, S., &#x0026;amp; Coppen, P-A.</suffix></string-name></person-group> (<date><year>2022</year></date>). <article-title>Linguistic metaconcepts can improve grammatical understanding in L1 education: evidence from a Dutch quasi-experimental study</article-title>. <italic>PLOS ONE, 17</italic>(<issue>2</issue>), <page-range>1</page-range>&#x2013;<page-range>25</page-range>. <ext-link xlink:href="https://doi.org/10.1371/journal.pone.0263123">https://doi.org/10.1371/journal.pone.0263123</ext-link></mixed-citation>
			</ref>
			<ref id="R000172">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Van Rijt, J., Wijnands, A., &#x0026;amp; Coppen, P.-A.</suffix></string-name></person-group> (<date><year>2019</year></date>c). <article-title>Dutch teachers&#x2019; beliefs on linguistic concepts and reflective judgement in grammar teaching</article-title>. <italic>L1-Educational Studies in Language and Literature, 19</italic>(<issue>2</issue>), <page-range>1</page-range>&#x2013;<page-range>28</page-range>. <ext-link xlink:href="https://doi.org/10.17239/L1ESLL-2019.19.02.03">https://doi.org/10.17239/L1ESLL-2019.19.02.03</ext-link></mixed-citation>
			</ref>
			<ref id="R000173">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Van Rijt, J., Wijnands, A. &#x0026;amp; Coppen, P.-A.</suffix></string-name></person-group> (<date><year>2020</year></date>a). <article-title>How secondary school students may benefit from linguistic metaconcepts to reason about L1 grammatical problems</article-title>. <italic>Language and Education, 34</italic>(<issue>3</issue>), <page-range>231</page-range>&#x2013;<page-range>248</page-range>. <ext-link xlink:href="https://doi.org/10.1080/09500782.2019.1690503">https://doi.org/10.1080/09500782.2019.1690503</ext-link></mixed-citation>
			</ref>
			<ref id="R000174">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Van Rijt, J., Wijnands, A. &#x0026;amp; Coppen, P.-A.</suffix></string-name></person-group> (<date><year>2020</year></date>b) <article-title>Investigating Dutch teachers&#x2019; beliefs on working with linguistic metaconcepts to improve students&#x2019; L1 grammatical understanding</article-title>, <italic>Research Papers in Education, 37</italic>(<page-range>1</page-range>), <issue>1</issue>&#x2013;<page-range>29</page-range>, <ext-link xlink:href="https://doi.org/10.1080/02671522.2020.1784258">https://doi.org/10.1080/02671522.2020.1784258</ext-link></mixed-citation>
			</ref>
			<ref id="R000175">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Verhoeff, R.P., Waarlo, A.J., &#x0026;amp; Boersma, K.T.</suffix></string-name></person-group> (<date><year>2008</year></date>). <article-title>Systems modelling and the development of coherent understanding of cell biology</article-title>. <italic>International Journal of Science Education, 30</italic>(<issue>4</issue>), <page-range>543</page-range>&#x2013;<page-range>568</page-range>. <ext-link xlink:href="https://doi.org/10.1080/09500690701237780">https://doi.org/10.1080/09500690701237780</ext-link></mixed-citation>
			</ref>
			<ref id="R000176">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Watson, A., &#x0026;amp; Newman, R.</suffix></string-name></person-group> (<date><year>2017</year></date>). <article-title>Talking grammatically: L1 adolescent metalinguistic reflection on writing</article-title>. <italic>Language Awareness, 26</italic>(<issue>4</issue>), <page-range>381</page-range>&#x2013;<page-range>398</page-range>. <ext-link xlink:href="https://doi.org/10.1080/09658416.2017.1410554">https://doi.org/10.1080/09658416.2017.1410554</ext-link></mixed-citation>
			</ref>
			<ref id="R000177">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>West, L., &#x0026;amp; Verspoor, M.</suffix></string-name></person-group> (<date><year>2016</year></date>). <article-title>An impression of foreign language teaching approaches in The Netherlands</article-title>. <italic>Levende Talen Tijdschrift, 17</italic>(<issue>4</issue>), <page-range>26</page-range>&#x2013;<page-range>36</page-range>.</mixed-citation>
			</ref>
			<ref id="R000178">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>White, J., Munoz, C., &#x0026;amp; Collins, L.</suffix></string-name></person-group> (<date><year>2007</year></date>). <article-title>The His/Her challenge: Making progress in a &#x201C;regular&#x201D; second language program</article-title>. <italic>Language Awareness, 16</italic>(<issue>4</issue>), <page-range>278</page-range>&#x2013;<page-range>299</page-range>. <ext-link xlink:href="https://doi.org/10.2167/la419.0">https://doi.org/10.2167/la419.0</ext-link></mixed-citation>
			</ref>
			<ref id="R000179">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Wickens, T.D., &#x0026;amp; Keppel, G.</suffix></string-name></person-group> (<date><year>2004</year></date>). <source><italic>Design and analysis: A researcher&#x2019;s handbook</italic></source> (3de editie). <publisher-name>Pearson Prentice-Hall</publisher-name>.</mixed-citation>
			</ref>
			<ref id="R000180">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Wijnands, A., van Rijt, J., &#x0026;amp; Coppen, P.-A.</suffix></string-name></person-group> (<date><year>2021</year></date>). <article-title>Learning to think about language step by step: a pedagogical template for the development of cognitive and reflective thinking skills in L1 grammar education</article-title>. <source><italic>Language Awareness</italic></source>, <italic>30</italic>(<issue>4</issue>), <page-range>317</page-range>&#x2013;<page-range>335</page-range>. <ext-link xlink:href="https://doi.org/10.1080/09658416.2021.1871911">https://doi.org/10.1080/09658416.2021.1871911</ext-link></mixed-citation>
			</ref>
			<ref id="R000181">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Wijnands, A., van Rijt, J., &#x0026;amp; Coppen, P.-A.</suffix></string-name></person-group> (<date><year>2022</year></date>a). <article-title>Measuring epistemic beliefs about grammar</article-title>. <italic>L1-Educational Studies in Language and Literature, 22</italic>(<page-range>1</page-range>), <issue>1</issue>&#x2013;<page-range>29</page-range>. <ext-link xlink:href="https://doi.org/10.21248/l1esll.2022.22.1.362">https://doi.org/10.21248/l1esll.2022.22.1.362</ext-link></mixed-citation>
			</ref>
			<ref id="R000182">
				<mixed-citation><person-group person-group-type="author"><string-name><suffix>Wijnands, A., van Rijt, J., Stoel, G., &#x0026;amp; Coppen, P-A.</suffix></string-name></person-group> (<date><year>2022</year></date>b). <article-title>Balancing between uncertainty and control: Teaching reflective thinking about language in the classroom</article-title>. <italic>Linguistics &#x0026;amp; Education, 71</italic>, <page-range>1</page-range>&#x2013;<page-range>19</page-range>. <ext-link xlink:href="https://doi.org/10.1016/j.linged.2022.101087">https://doi.org/10.1016/j.linged.2022.101087</ext-link></mixed-citation>
			</ref>
			<ref id="R000183">
				<mixed-citation><person-group person-group-type="author"><string-name><surname>Wolf</surname>, <given-names>H.</given-names></string-name></person-group> (<date><year>2019</year></date>). <chapter-title>Leren ontleden: het moet en kan anders</chapter-title>. <person-group person-group-type="editor"><string-name><suffix>In A. Mottart, &#x0026;amp; S. Vanhooren (Reds.</suffix></string-name></person-group>), <source><italic>Drieendertigste conferentie Het Schoolvak Nederlands</italic></source> (pp. <page-range>282</page-range>&#x2013;<page-range>284</page-range>). <publisher-name>Skribis</publisher-name>.</mixed-citation>
			</ref>
		</ref-list>
	</back>
</article>