Validity of the listening module of international English language testing system: multiple sources of evidence

Language Testing in Asia

Table 8 Differential item functioning through Mantel-Haenszel’s method

Items	Chi-square	P	DIF/non-DIF	Delta MH	Effect size
1	0.72	0.39	Non-DIF	− 0.57	A
2	8.31	0.00	DIF	− 1.41	B
3	2.31	0.12	Non-DIF	0.79	A
4	15.21	0.00	DIF	2.23	C
5	2.38	0.12	Non-DIF	0.83	A
6	4.99	0.02	DIF	1.29	B
7	6.93	0.00	DIF	1.32	B
8	24.67	0.00	DIF	2.48	C
9	1.52	0.21	Non-DIF	− 0.61	A
10	23.81	0.00	DIF	2.60	C
11	5.20	0.02	DIF	1.47	B
12	0.01	0.90	Non-DIF	0.11	A
13	0.81	0.36	Non-DIF	− 0.55	A
14	0.00	0.94	Non-DIF	0.07	A
15	7.39	0.00	DIF	− 1.40	B
16	38.80	0.00	DIF	− 3.04	C
17	55.07	0.00	DIF	− 3.66	C
18	45.80	0.00	DIF	− 3.35	C
19	39.59	0.00	DIF	− 2.84	C
20	16.66	0.00	DIF	− 2.01	C
21	2.62	0.10	Non-DIF	− 0.83	A
22	0.16	0.68	Non-DIF	0.27	A
23	0.06	0.80	Non-DIF	0.18	A
24	0.94	0.33	Non-DIF	0.50	A
25	0.10	0.74	Non-DIF	0.20	A
26	3.48	0.06	Non-DIF	− 1.04	B
27	0.00	0.96	Non-DIF	0.07	A
28	2.23	0.13	Non-DIF	0.76	A
29	1.22	0.26	Non-DIF	0.66	A
30	3.43	0.06	Non-DIF	1.01	B
31	6.25	0.01	DIF	1.27	B
32	0.03	0.84	Non-DIF	0.13	A
33	3.21	0.07	Non-DIF	0.92	A
34	2.12	0.14	Non-DIF	− 0.74	A
35	0.24	0.62	Non-DIF	0.26	A
36	7.60	0.00	DIF	1.33	B
37	3.07	0.07	Non-DIF	0.90	A
38	2.89	0.08	Non-DIF	0.84	A
39	3.65	0.05	Non-DIF	0.95	A
40	0.86	0.35	Non-DIF	0.49	A