1 // SPDX-License-Identifier: MIT 2 /* 3 * Copyright © 2020 Intel Corporation 4 */ 5 6 #include "display/bxt_dpio_phy_regs.h" 7 #include "display/i9xx_plane_regs.h" 8 #include "display/i9xx_wm_regs.h" 9 #include "display/intel_audio_regs.h" 10 #include "display/intel_backlight_regs.h" 11 #include "display/intel_color_regs.h" 12 #include "display/intel_crt_regs.h" 13 #include "display/intel_cursor_regs.h" 14 #include "display/intel_display_core.h" 15 #include "display/intel_display_types.h" 16 #include "display/intel_dmc_regs.h" 17 #include "display/intel_dp_aux_regs.h" 18 #include "display/intel_dpio_phy.h" 19 #include "display/intel_fbc_regs.h" 20 #include "display/intel_fdi_regs.h" 21 #include "display/intel_lvds_regs.h" 22 #include "display/intel_pfit_regs.h" 23 #include "display/intel_psr_regs.h" 24 #include "display/intel_sbi_regs.h" 25 #include "display/intel_sprite_regs.h" 26 #include "display/intel_vga_regs.h" 27 #include "display/skl_universal_plane_regs.h" 28 #include "display/skl_watermark_regs.h" 29 #include "display/vlv_dsi_pll_regs.h" 30 #include "gt/intel_engine_regs.h" 31 #include "gt/intel_gt_regs.h" 32 #include "gvt/reg.h" 33 34 #include "i915_drv.h" 35 #include "i915_pvinfo.h" 36 #include "i915_reg.h" 37 #include "display/intel_display_regs.h" 38 #include "intel_gvt.h" 39 #include "intel_mchbar_regs.h" 40 41 #define MMIO_F(reg, s) do { \ 42 int ret; \ 43 ret = iter->handle_mmio_cb(iter, i915_mmio_reg_offset(reg), s); \ 44 if (ret) \ 45 return ret; \ 46 } while (0) 47 48 #define MMIO_D(reg) MMIO_F(reg, 4) 49 50 #define MMIO_RING_F(prefix, s) do { \ 51 MMIO_F(prefix(RENDER_RING_BASE), s); \ 52 MMIO_F(prefix(BLT_RING_BASE), s); \ 53 MMIO_F(prefix(GEN6_BSD_RING_BASE), s); \ 54 MMIO_F(prefix(VEBOX_RING_BASE), s); \ 55 if (HAS_ENGINE(to_gt(iter->i915), VCS1)) \ 56 MMIO_F(prefix(GEN8_BSD2_RING_BASE), s); \ 57 } while (0) 58 59 #define MMIO_RING_D(prefix) \ 60 MMIO_RING_F(prefix, 4) 61 62 static int iterate_generic_mmio(struct intel_gvt_mmio_table_iter *iter) 63 { 64 struct drm_i915_private *dev_priv = iter->i915; 65 66 MMIO_RING_D(RING_IMR); 67 MMIO_D(SDEIMR); 68 MMIO_D(SDEIER); 69 MMIO_D(SDEIIR); 70 MMIO_D(SDEISR); 71 MMIO_RING_D(RING_HWSTAM); 72 MMIO_D(BSD_HWS_PGA_GEN7); 73 MMIO_D(BLT_HWS_PGA_GEN7); 74 MMIO_D(VEBOX_HWS_PGA_GEN7); 75 76 #define RING_REG(base) _MMIO((base) + 0x28) 77 MMIO_RING_D(RING_REG); 78 #undef RING_REG 79 80 #define RING_REG(base) _MMIO((base) + 0x134) 81 MMIO_RING_D(RING_REG); 82 #undef RING_REG 83 84 #define RING_REG(base) _MMIO((base) + 0x6c) 85 MMIO_RING_D(RING_REG); 86 #undef RING_REG 87 MMIO_D(_MMIO(0x2148)); 88 MMIO_D(CCID(RENDER_RING_BASE)); 89 MMIO_D(_MMIO(0x12198)); 90 MMIO_D(GEN7_CXT_SIZE); 91 MMIO_RING_D(RING_TAIL); 92 MMIO_RING_D(RING_HEAD); 93 MMIO_RING_D(RING_CTL); 94 MMIO_RING_D(RING_ACTHD); 95 MMIO_RING_D(RING_START); 96 97 /* RING MODE */ 98 #define RING_REG(base) _MMIO((base) + 0x29c) 99 MMIO_RING_D(RING_REG); 100 #undef RING_REG 101 102 MMIO_RING_D(RING_MI_MODE); 103 MMIO_RING_D(RING_INSTPM); 104 MMIO_RING_D(RING_TIMESTAMP); 105 MMIO_RING_D(RING_TIMESTAMP_UDW); 106 MMIO_D(GEN7_GT_MODE); 107 MMIO_D(CACHE_MODE_0_GEN7); 108 MMIO_D(CACHE_MODE_1); 109 MMIO_D(CACHE_MODE_0); 110 MMIO_D(_MMIO(0x2124)); 111 MMIO_D(_MMIO(0x20dc)); 112 MMIO_D(_3D_CHICKEN3); 113 MMIO_D(_MMIO(0x2088)); 114 MMIO_D(FF_SLICE_CS_CHICKEN2); 115 MMIO_D(_MMIO(0x2470)); 116 MMIO_D(GAM_ECOCHK); 117 MMIO_D(GEN7_COMMON_SLICE_CHICKEN1); 118 MMIO_D(COMMON_SLICE_CHICKEN2); 119 MMIO_D(_MMIO(0x9030)); 120 MMIO_D(_MMIO(0x20a0)); 121 MMIO_D(_MMIO(0x2420)); 122 MMIO_D(_MMIO(0x2430)); 123 MMIO_D(_MMIO(0x2434)); 124 MMIO_D(_MMIO(0x2438)); 125 MMIO_D(_MMIO(0x243c)); 126 MMIO_D(_MMIO(0x7018)); 127 MMIO_D(HSW_HALF_SLICE_CHICKEN3); 128 MMIO_D(GEN7_HALF_SLICE_CHICKEN1); 129 /* display */ 130 MMIO_F(_MMIO(0x60220), 0x20); 131 MMIO_D(_MMIO(0x602a0)); 132 MMIO_D(_MMIO(0x65050)); 133 MMIO_D(_MMIO(0x650b4)); 134 MMIO_D(_MMIO(0xc4040)); 135 MMIO_D(DERRMR); 136 MMIO_D(PIPEDSL(dev_priv, PIPE_A)); 137 MMIO_D(PIPEDSL(dev_priv, PIPE_B)); 138 MMIO_D(PIPEDSL(dev_priv, PIPE_C)); 139 MMIO_D(PIPEDSL(dev_priv, _PIPE_EDP)); 140 MMIO_D(TRANSCONF(dev_priv, TRANSCODER_A)); 141 MMIO_D(TRANSCONF(dev_priv, TRANSCODER_B)); 142 MMIO_D(TRANSCONF(dev_priv, TRANSCODER_C)); 143 MMIO_D(TRANSCONF(dev_priv, TRANSCODER_EDP)); 144 MMIO_D(PIPESTAT(dev_priv, PIPE_A)); 145 MMIO_D(PIPESTAT(dev_priv, PIPE_B)); 146 MMIO_D(PIPESTAT(dev_priv, PIPE_C)); 147 MMIO_D(PIPESTAT(dev_priv, _PIPE_EDP)); 148 MMIO_D(PIPE_FLIPCOUNT_G4X(dev_priv, PIPE_A)); 149 MMIO_D(PIPE_FLIPCOUNT_G4X(dev_priv, PIPE_B)); 150 MMIO_D(PIPE_FLIPCOUNT_G4X(dev_priv, PIPE_C)); 151 MMIO_D(PIPE_FLIPCOUNT_G4X(dev_priv, _PIPE_EDP)); 152 MMIO_D(PIPE_FRMCOUNT_G4X(dev_priv, PIPE_A)); 153 MMIO_D(PIPE_FRMCOUNT_G4X(dev_priv, PIPE_B)); 154 MMIO_D(PIPE_FRMCOUNT_G4X(dev_priv, PIPE_C)); 155 MMIO_D(PIPE_FRMCOUNT_G4X(dev_priv, _PIPE_EDP)); 156 MMIO_D(CURCNTR(dev_priv, PIPE_A)); 157 MMIO_D(CURCNTR(dev_priv, PIPE_B)); 158 MMIO_D(CURCNTR(dev_priv, PIPE_C)); 159 MMIO_D(CURPOS(dev_priv, PIPE_A)); 160 MMIO_D(CURPOS(dev_priv, PIPE_B)); 161 MMIO_D(CURPOS(dev_priv, PIPE_C)); 162 MMIO_D(CURBASE(dev_priv, PIPE_A)); 163 MMIO_D(CURBASE(dev_priv, PIPE_B)); 164 MMIO_D(CURBASE(dev_priv, PIPE_C)); 165 MMIO_D(CUR_FBC_CTL(dev_priv, PIPE_A)); 166 MMIO_D(CUR_FBC_CTL(dev_priv, PIPE_B)); 167 MMIO_D(CUR_FBC_CTL(dev_priv, PIPE_C)); 168 MMIO_D(_MMIO(0x700ac)); 169 MMIO_D(_MMIO(0x710ac)); 170 MMIO_D(_MMIO(0x720ac)); 171 MMIO_D(_MMIO(0x70090)); 172 MMIO_D(_MMIO(0x70094)); 173 MMIO_D(_MMIO(0x70098)); 174 MMIO_D(_MMIO(0x7009c)); 175 MMIO_D(DSPCNTR(dev_priv, PIPE_A)); 176 MMIO_D(DSPADDR(dev_priv, PIPE_A)); 177 MMIO_D(DSPSTRIDE(dev_priv, PIPE_A)); 178 MMIO_D(DSPPOS(dev_priv, PIPE_A)); 179 MMIO_D(DSPSIZE(dev_priv, PIPE_A)); 180 MMIO_D(DSPSURF(dev_priv, PIPE_A)); 181 MMIO_D(DSPOFFSET(dev_priv, PIPE_A)); 182 MMIO_D(DSPSURFLIVE(dev_priv, PIPE_A)); 183 MMIO_D(REG_50080(PIPE_A, PLANE_PRIMARY)); 184 MMIO_D(DSPCNTR(dev_priv, PIPE_B)); 185 MMIO_D(DSPADDR(dev_priv, PIPE_B)); 186 MMIO_D(DSPSTRIDE(dev_priv, PIPE_B)); 187 MMIO_D(DSPPOS(dev_priv, PIPE_B)); 188 MMIO_D(DSPSIZE(dev_priv, PIPE_B)); 189 MMIO_D(DSPSURF(dev_priv, PIPE_B)); 190 MMIO_D(DSPOFFSET(dev_priv, PIPE_B)); 191 MMIO_D(DSPSURFLIVE(dev_priv, PIPE_B)); 192 MMIO_D(REG_50080(PIPE_B, PLANE_PRIMARY)); 193 MMIO_D(DSPCNTR(dev_priv, PIPE_C)); 194 MMIO_D(DSPADDR(dev_priv, PIPE_C)); 195 MMIO_D(DSPSTRIDE(dev_priv, PIPE_C)); 196 MMIO_D(DSPPOS(dev_priv, PIPE_C)); 197 MMIO_D(DSPSIZE(dev_priv, PIPE_C)); 198 MMIO_D(DSPSURF(dev_priv, PIPE_C)); 199 MMIO_D(DSPOFFSET(dev_priv, PIPE_C)); 200 MMIO_D(DSPSURFLIVE(dev_priv, PIPE_C)); 201 MMIO_D(REG_50080(PIPE_C, PLANE_PRIMARY)); 202 MMIO_D(SPRCTL(PIPE_A)); 203 MMIO_D(SPRLINOFF(PIPE_A)); 204 MMIO_D(SPRSTRIDE(PIPE_A)); 205 MMIO_D(SPRPOS(PIPE_A)); 206 MMIO_D(SPRSIZE(PIPE_A)); 207 MMIO_D(SPRKEYVAL(PIPE_A)); 208 MMIO_D(SPRKEYMSK(PIPE_A)); 209 MMIO_D(SPRSURF(PIPE_A)); 210 MMIO_D(SPRKEYMAX(PIPE_A)); 211 MMIO_D(SPROFFSET(PIPE_A)); 212 MMIO_D(SPRSCALE(PIPE_A)); 213 MMIO_D(SPRSURFLIVE(PIPE_A)); 214 MMIO_D(REG_50080(PIPE_A, PLANE_SPRITE0)); 215 MMIO_D(SPRCTL(PIPE_B)); 216 MMIO_D(SPRLINOFF(PIPE_B)); 217 MMIO_D(SPRSTRIDE(PIPE_B)); 218 MMIO_D(SPRPOS(PIPE_B)); 219 MMIO_D(SPRSIZE(PIPE_B)); 220 MMIO_D(SPRKEYVAL(PIPE_B)); 221 MMIO_D(SPRKEYMSK(PIPE_B)); 222 MMIO_D(SPRSURF(PIPE_B)); 223 MMIO_D(SPRKEYMAX(PIPE_B)); 224 MMIO_D(SPROFFSET(PIPE_B)); 225 MMIO_D(SPRSCALE(PIPE_B)); 226 MMIO_D(SPRSURFLIVE(PIPE_B)); 227 MMIO_D(REG_50080(PIPE_B, PLANE_SPRITE0)); 228 MMIO_D(SPRCTL(PIPE_C)); 229 MMIO_D(SPRLINOFF(PIPE_C)); 230 MMIO_D(SPRSTRIDE(PIPE_C)); 231 MMIO_D(SPRPOS(PIPE_C)); 232 MMIO_D(SPRSIZE(PIPE_C)); 233 MMIO_D(SPRKEYVAL(PIPE_C)); 234 MMIO_D(SPRKEYMSK(PIPE_C)); 235 MMIO_D(SPRSURF(PIPE_C)); 236 MMIO_D(SPRKEYMAX(PIPE_C)); 237 MMIO_D(SPROFFSET(PIPE_C)); 238 MMIO_D(SPRSCALE(PIPE_C)); 239 MMIO_D(SPRSURFLIVE(PIPE_C)); 240 MMIO_D(REG_50080(PIPE_C, PLANE_SPRITE0)); 241 MMIO_D(TRANS_HTOTAL(dev_priv, TRANSCODER_A)); 242 MMIO_D(TRANS_HBLANK(dev_priv, TRANSCODER_A)); 243 MMIO_D(TRANS_HSYNC(dev_priv, TRANSCODER_A)); 244 MMIO_D(TRANS_VTOTAL(dev_priv, TRANSCODER_A)); 245 MMIO_D(TRANS_VBLANK(dev_priv, TRANSCODER_A)); 246 MMIO_D(TRANS_VSYNC(dev_priv, TRANSCODER_A)); 247 MMIO_D(BCLRPAT(dev_priv, TRANSCODER_A)); 248 MMIO_D(TRANS_VSYNCSHIFT(dev_priv, TRANSCODER_A)); 249 MMIO_D(PIPESRC(dev_priv, TRANSCODER_A)); 250 MMIO_D(TRANS_HTOTAL(dev_priv, TRANSCODER_B)); 251 MMIO_D(TRANS_HBLANK(dev_priv, TRANSCODER_B)); 252 MMIO_D(TRANS_HSYNC(dev_priv, TRANSCODER_B)); 253 MMIO_D(TRANS_VTOTAL(dev_priv, TRANSCODER_B)); 254 MMIO_D(TRANS_VBLANK(dev_priv, TRANSCODER_B)); 255 MMIO_D(TRANS_VSYNC(dev_priv, TRANSCODER_B)); 256 MMIO_D(BCLRPAT(dev_priv, TRANSCODER_B)); 257 MMIO_D(TRANS_VSYNCSHIFT(dev_priv, TRANSCODER_B)); 258 MMIO_D(PIPESRC(dev_priv, TRANSCODER_B)); 259 MMIO_D(TRANS_HTOTAL(dev_priv, TRANSCODER_C)); 260 MMIO_D(TRANS_HBLANK(dev_priv, TRANSCODER_C)); 261 MMIO_D(TRANS_HSYNC(dev_priv, TRANSCODER_C)); 262 MMIO_D(TRANS_VTOTAL(dev_priv, TRANSCODER_C)); 263 MMIO_D(TRANS_VBLANK(dev_priv, TRANSCODER_C)); 264 MMIO_D(TRANS_VSYNC(dev_priv, TRANSCODER_C)); 265 MMIO_D(BCLRPAT(dev_priv, TRANSCODER_C)); 266 MMIO_D(TRANS_VSYNCSHIFT(dev_priv, TRANSCODER_C)); 267 MMIO_D(PIPESRC(dev_priv, TRANSCODER_C)); 268 MMIO_D(TRANS_HTOTAL(dev_priv, TRANSCODER_EDP)); 269 MMIO_D(TRANS_HBLANK(dev_priv, TRANSCODER_EDP)); 270 MMIO_D(TRANS_HSYNC(dev_priv, TRANSCODER_EDP)); 271 MMIO_D(TRANS_VTOTAL(dev_priv, TRANSCODER_EDP)); 272 MMIO_D(TRANS_VBLANK(dev_priv, TRANSCODER_EDP)); 273 MMIO_D(TRANS_VSYNC(dev_priv, TRANSCODER_EDP)); 274 MMIO_D(BCLRPAT(dev_priv, TRANSCODER_EDP)); 275 MMIO_D(TRANS_VSYNCSHIFT(dev_priv, TRANSCODER_EDP)); 276 MMIO_D(PIPE_DATA_M1(dev_priv, TRANSCODER_A)); 277 MMIO_D(PIPE_DATA_N1(dev_priv, TRANSCODER_A)); 278 MMIO_D(PIPE_DATA_M2(dev_priv, TRANSCODER_A)); 279 MMIO_D(PIPE_DATA_N2(dev_priv, TRANSCODER_A)); 280 MMIO_D(PIPE_LINK_M1(dev_priv, TRANSCODER_A)); 281 MMIO_D(PIPE_LINK_N1(dev_priv, TRANSCODER_A)); 282 MMIO_D(PIPE_LINK_M2(dev_priv, TRANSCODER_A)); 283 MMIO_D(PIPE_LINK_N2(dev_priv, TRANSCODER_A)); 284 MMIO_D(PIPE_DATA_M1(dev_priv, TRANSCODER_B)); 285 MMIO_D(PIPE_DATA_N1(dev_priv, TRANSCODER_B)); 286 MMIO_D(PIPE_DATA_M2(dev_priv, TRANSCODER_B)); 287 MMIO_D(PIPE_DATA_N2(dev_priv, TRANSCODER_B)); 288 MMIO_D(PIPE_LINK_M1(dev_priv, TRANSCODER_B)); 289 MMIO_D(PIPE_LINK_N1(dev_priv, TRANSCODER_B)); 290 MMIO_D(PIPE_LINK_M2(dev_priv, TRANSCODER_B)); 291 MMIO_D(PIPE_LINK_N2(dev_priv, TRANSCODER_B)); 292 MMIO_D(PIPE_DATA_M1(dev_priv, TRANSCODER_C)); 293 MMIO_D(PIPE_DATA_N1(dev_priv, TRANSCODER_C)); 294 MMIO_D(PIPE_DATA_M2(dev_priv, TRANSCODER_C)); 295 MMIO_D(PIPE_DATA_N2(dev_priv, TRANSCODER_C)); 296 MMIO_D(PIPE_LINK_M1(dev_priv, TRANSCODER_C)); 297 MMIO_D(PIPE_LINK_N1(dev_priv, TRANSCODER_C)); 298 MMIO_D(PIPE_LINK_M2(dev_priv, TRANSCODER_C)); 299 MMIO_D(PIPE_LINK_N2(dev_priv, TRANSCODER_C)); 300 MMIO_D(PIPE_DATA_M1(dev_priv, TRANSCODER_EDP)); 301 MMIO_D(PIPE_DATA_N1(dev_priv, TRANSCODER_EDP)); 302 MMIO_D(PIPE_DATA_M2(dev_priv, TRANSCODER_EDP)); 303 MMIO_D(PIPE_DATA_N2(dev_priv, TRANSCODER_EDP)); 304 MMIO_D(PIPE_LINK_M1(dev_priv, TRANSCODER_EDP)); 305 MMIO_D(PIPE_LINK_N1(dev_priv, TRANSCODER_EDP)); 306 MMIO_D(PIPE_LINK_M2(dev_priv, TRANSCODER_EDP)); 307 MMIO_D(PIPE_LINK_N2(dev_priv, TRANSCODER_EDP)); 308 MMIO_D(PF_CTL(PIPE_A)); 309 MMIO_D(PF_WIN_SZ(PIPE_A)); 310 MMIO_D(PF_WIN_POS(PIPE_A)); 311 MMIO_D(PF_VSCALE(PIPE_A)); 312 MMIO_D(PF_HSCALE(PIPE_A)); 313 MMIO_D(PF_CTL(PIPE_B)); 314 MMIO_D(PF_WIN_SZ(PIPE_B)); 315 MMIO_D(PF_WIN_POS(PIPE_B)); 316 MMIO_D(PF_VSCALE(PIPE_B)); 317 MMIO_D(PF_HSCALE(PIPE_B)); 318 MMIO_D(PF_CTL(PIPE_C)); 319 MMIO_D(PF_WIN_SZ(PIPE_C)); 320 MMIO_D(PF_WIN_POS(PIPE_C)); 321 MMIO_D(PF_VSCALE(PIPE_C)); 322 MMIO_D(PF_HSCALE(PIPE_C)); 323 MMIO_D(WM0_PIPE_ILK(PIPE_A)); 324 MMIO_D(WM0_PIPE_ILK(PIPE_B)); 325 MMIO_D(WM0_PIPE_ILK(PIPE_C)); 326 MMIO_D(WM1_LP_ILK); 327 MMIO_D(WM2_LP_ILK); 328 MMIO_D(WM3_LP_ILK); 329 MMIO_D(WM1S_LP_ILK); 330 MMIO_D(WM2S_LP_IVB); 331 MMIO_D(WM3S_LP_IVB); 332 MMIO_D(BLC_PWM_CPU_CTL2); 333 MMIO_D(BLC_PWM_CPU_CTL); 334 MMIO_D(BLC_PWM_PCH_CTL1); 335 MMIO_D(BLC_PWM_PCH_CTL2); 336 MMIO_D(_MMIO(0x48268)); 337 MMIO_F(PCH_GMBUS0, 4 * 4); 338 MMIO_F(PCH_GPIO_BASE, 6 * 4); 339 MMIO_F(_MMIO(0xe4f00), 0x28); 340 MMIO_D(_MMIO(_PCH_TRANSACONF)); 341 MMIO_D(_MMIO(_PCH_TRANSBCONF)); 342 MMIO_D(FDI_RX_IIR(PIPE_A)); 343 MMIO_D(FDI_RX_IIR(PIPE_B)); 344 MMIO_D(FDI_RX_IIR(PIPE_C)); 345 MMIO_D(FDI_RX_IMR(PIPE_A)); 346 MMIO_D(FDI_RX_IMR(PIPE_B)); 347 MMIO_D(FDI_RX_IMR(PIPE_C)); 348 MMIO_D(FDI_RX_CTL(PIPE_A)); 349 MMIO_D(FDI_RX_CTL(PIPE_B)); 350 MMIO_D(FDI_RX_CTL(PIPE_C)); 351 MMIO_D(_MMIO(_PCH_TRANS_HTOTAL_A)); 352 MMIO_D(_MMIO(_PCH_TRANS_HBLANK_A)); 353 MMIO_D(_MMIO(_PCH_TRANS_HSYNC_A)); 354 MMIO_D(_MMIO(_PCH_TRANS_VTOTAL_A)); 355 MMIO_D(_MMIO(_PCH_TRANS_VBLANK_A)); 356 MMIO_D(_MMIO(_PCH_TRANS_VSYNC_A)); 357 MMIO_D(_MMIO(_PCH_TRANS_VSYNCSHIFT_A)); 358 MMIO_D(_MMIO(_PCH_TRANS_HTOTAL_B)); 359 MMIO_D(_MMIO(_PCH_TRANS_HBLANK_B)); 360 MMIO_D(_MMIO(_PCH_TRANS_HSYNC_B)); 361 MMIO_D(_MMIO(_PCH_TRANS_VTOTAL_B)); 362 MMIO_D(_MMIO(_PCH_TRANS_VBLANK_B)); 363 MMIO_D(_MMIO(_PCH_TRANS_VSYNC_B)); 364 MMIO_D(_MMIO(_PCH_TRANS_VSYNCSHIFT_B)); 365 MMIO_D(_MMIO(_PCH_TRANSA_DATA_M1)); 366 MMIO_D(_MMIO(_PCH_TRANSA_DATA_N1)); 367 MMIO_D(_MMIO(_PCH_TRANSA_DATA_M2)); 368 MMIO_D(_MMIO(_PCH_TRANSA_DATA_N2)); 369 MMIO_D(_MMIO(_PCH_TRANSA_LINK_M1)); 370 MMIO_D(_MMIO(_PCH_TRANSA_LINK_N1)); 371 MMIO_D(_MMIO(_PCH_TRANSA_LINK_M2)); 372 MMIO_D(_MMIO(_PCH_TRANSA_LINK_N2)); 373 MMIO_D(TRANS_DP_CTL(PIPE_A)); 374 MMIO_D(TRANS_DP_CTL(PIPE_B)); 375 MMIO_D(TRANS_DP_CTL(PIPE_C)); 376 MMIO_D(TVIDEO_DIP_CTL(PIPE_A)); 377 MMIO_D(TVIDEO_DIP_DATA(PIPE_A)); 378 MMIO_D(TVIDEO_DIP_GCP(PIPE_A)); 379 MMIO_D(TVIDEO_DIP_CTL(PIPE_B)); 380 MMIO_D(TVIDEO_DIP_DATA(PIPE_B)); 381 MMIO_D(TVIDEO_DIP_GCP(PIPE_B)); 382 MMIO_D(TVIDEO_DIP_CTL(PIPE_C)); 383 MMIO_D(TVIDEO_DIP_DATA(PIPE_C)); 384 MMIO_D(TVIDEO_DIP_GCP(PIPE_C)); 385 MMIO_D(_MMIO(_FDI_RXA_MISC)); 386 MMIO_D(_MMIO(_FDI_RXB_MISC)); 387 MMIO_D(_MMIO(_FDI_RXA_TUSIZE1)); 388 MMIO_D(_MMIO(_FDI_RXA_TUSIZE2)); 389 MMIO_D(_MMIO(_FDI_RXB_TUSIZE1)); 390 MMIO_D(_MMIO(_FDI_RXB_TUSIZE2)); 391 MMIO_D(PCH_PP_CONTROL); 392 MMIO_D(PCH_PP_DIVISOR); 393 MMIO_D(PCH_PP_STATUS); 394 MMIO_D(PCH_LVDS); 395 MMIO_D(_MMIO(_PCH_DPLL_A)); 396 MMIO_D(_MMIO(_PCH_DPLL_B)); 397 MMIO_D(_MMIO(_PCH_FPA0)); 398 MMIO_D(_MMIO(_PCH_FPA1)); 399 MMIO_D(_MMIO(_PCH_FPB0)); 400 MMIO_D(_MMIO(_PCH_FPB1)); 401 MMIO_D(PCH_DREF_CONTROL); 402 MMIO_D(PCH_RAWCLK_FREQ); 403 MMIO_D(PCH_DPLL_SEL); 404 MMIO_D(_MMIO(0x61208)); 405 MMIO_D(_MMIO(0x6120c)); 406 MMIO_D(PCH_PP_ON_DELAYS); 407 MMIO_D(PCH_PP_OFF_DELAYS); 408 MMIO_D(_MMIO(0xe651c)); 409 MMIO_D(_MMIO(0xe661c)); 410 MMIO_D(_MMIO(0xe671c)); 411 MMIO_D(_MMIO(0xe681c)); 412 MMIO_D(_MMIO(0xe6c04)); 413 MMIO_D(_MMIO(0xe6e1c)); 414 MMIO_D(PCH_PORT_HOTPLUG); 415 MMIO_D(LCPLL_CTL); 416 MMIO_D(FUSE_STRAP); 417 MMIO_D(DIGITAL_PORT_HOTPLUG_CNTRL); 418 MMIO_D(DISP_ARB_CTL); 419 MMIO_D(DISP_ARB_CTL2); 420 MMIO_D(ILK_DISPLAY_CHICKEN1); 421 MMIO_D(ILK_DISPLAY_CHICKEN2); 422 MMIO_D(ILK_DSPCLK_GATE_D); 423 MMIO_D(SOUTH_CHICKEN1); 424 MMIO_D(SOUTH_CHICKEN2); 425 MMIO_D(_MMIO(_TRANSA_CHICKEN1)); 426 MMIO_D(_MMIO(_TRANSB_CHICKEN1)); 427 MMIO_D(SOUTH_DSPCLK_GATE_D); 428 MMIO_D(_MMIO(_TRANSA_CHICKEN2)); 429 MMIO_D(_MMIO(_TRANSB_CHICKEN2)); 430 MMIO_D(ILK_DPFC_CB_BASE(INTEL_FBC_A)); 431 MMIO_D(ILK_DPFC_CONTROL(INTEL_FBC_A)); 432 MMIO_D(ILK_DPFC_RECOMP_CTL(INTEL_FBC_A)); 433 MMIO_D(ILK_DPFC_STATUS(INTEL_FBC_A)); 434 MMIO_D(ILK_DPFC_FENCE_YOFF(INTEL_FBC_A)); 435 MMIO_D(ILK_DPFC_CHICKEN(INTEL_FBC_A)); 436 MMIO_D(ILK_FBC_RT_BASE); 437 MMIO_D(IPS_CTL); 438 MMIO_D(PIPE_CSC_COEFF_RY_GY(PIPE_A)); 439 MMIO_D(PIPE_CSC_COEFF_BY(PIPE_A)); 440 MMIO_D(PIPE_CSC_COEFF_RU_GU(PIPE_A)); 441 MMIO_D(PIPE_CSC_COEFF_BU(PIPE_A)); 442 MMIO_D(PIPE_CSC_COEFF_RV_GV(PIPE_A)); 443 MMIO_D(PIPE_CSC_COEFF_BV(PIPE_A)); 444 MMIO_D(PIPE_CSC_MODE(PIPE_A)); 445 MMIO_D(PIPE_CSC_PREOFF_HI(PIPE_A)); 446 MMIO_D(PIPE_CSC_PREOFF_ME(PIPE_A)); 447 MMIO_D(PIPE_CSC_PREOFF_LO(PIPE_A)); 448 MMIO_D(PIPE_CSC_POSTOFF_HI(PIPE_A)); 449 MMIO_D(PIPE_CSC_POSTOFF_ME(PIPE_A)); 450 MMIO_D(PIPE_CSC_POSTOFF_LO(PIPE_A)); 451 MMIO_D(PIPE_CSC_COEFF_RY_GY(PIPE_B)); 452 MMIO_D(PIPE_CSC_COEFF_BY(PIPE_B)); 453 MMIO_D(PIPE_CSC_COEFF_RU_GU(PIPE_B)); 454 MMIO_D(PIPE_CSC_COEFF_BU(PIPE_B)); 455 MMIO_D(PIPE_CSC_COEFF_RV_GV(PIPE_B)); 456 MMIO_D(PIPE_CSC_COEFF_BV(PIPE_B)); 457 MMIO_D(PIPE_CSC_MODE(PIPE_B)); 458 MMIO_D(PIPE_CSC_PREOFF_HI(PIPE_B)); 459 MMIO_D(PIPE_CSC_PREOFF_ME(PIPE_B)); 460 MMIO_D(PIPE_CSC_PREOFF_LO(PIPE_B)); 461 MMIO_D(PIPE_CSC_POSTOFF_HI(PIPE_B)); 462 MMIO_D(PIPE_CSC_POSTOFF_ME(PIPE_B)); 463 MMIO_D(PIPE_CSC_POSTOFF_LO(PIPE_B)); 464 MMIO_D(PIPE_CSC_COEFF_RY_GY(PIPE_C)); 465 MMIO_D(PIPE_CSC_COEFF_BY(PIPE_C)); 466 MMIO_D(PIPE_CSC_COEFF_RU_GU(PIPE_C)); 467 MMIO_D(PIPE_CSC_COEFF_BU(PIPE_C)); 468 MMIO_D(PIPE_CSC_COEFF_RV_GV(PIPE_C)); 469 MMIO_D(PIPE_CSC_COEFF_BV(PIPE_C)); 470 MMIO_D(PIPE_CSC_MODE(PIPE_C)); 471 MMIO_D(PIPE_CSC_PREOFF_HI(PIPE_C)); 472 MMIO_D(PIPE_CSC_PREOFF_ME(PIPE_C)); 473 MMIO_D(PIPE_CSC_PREOFF_LO(PIPE_C)); 474 MMIO_D(PIPE_CSC_POSTOFF_HI(PIPE_C)); 475 MMIO_D(PIPE_CSC_POSTOFF_ME(PIPE_C)); 476 MMIO_D(PIPE_CSC_POSTOFF_LO(PIPE_C)); 477 MMIO_D(PREC_PAL_INDEX(PIPE_A)); 478 MMIO_D(PREC_PAL_DATA(PIPE_A)); 479 MMIO_F(PREC_PAL_GC_MAX(PIPE_A, 0), 4 * 3); 480 MMIO_D(PREC_PAL_INDEX(PIPE_B)); 481 MMIO_D(PREC_PAL_DATA(PIPE_B)); 482 MMIO_F(PREC_PAL_GC_MAX(PIPE_B, 0), 4 * 3); 483 MMIO_D(PREC_PAL_INDEX(PIPE_C)); 484 MMIO_D(PREC_PAL_DATA(PIPE_C)); 485 MMIO_F(PREC_PAL_GC_MAX(PIPE_C, 0), 4 * 3); 486 MMIO_D(_MMIO(0x60110)); 487 MMIO_D(_MMIO(0x61110)); 488 MMIO_F(_MMIO(0x70400), 0x40); 489 MMIO_F(_MMIO(0x71400), 0x40); 490 MMIO_F(_MMIO(0x72400), 0x40); 491 MMIO_D(WM_LINETIME(PIPE_A)); 492 MMIO_D(WM_LINETIME(PIPE_B)); 493 MMIO_D(WM_LINETIME(PIPE_C)); 494 MMIO_D(SPLL_CTL); 495 MMIO_D(_MMIO(_WRPLL_CTL1)); 496 MMIO_D(_MMIO(_WRPLL_CTL2)); 497 MMIO_D(PORT_CLK_SEL(PORT_A)); 498 MMIO_D(PORT_CLK_SEL(PORT_B)); 499 MMIO_D(PORT_CLK_SEL(PORT_C)); 500 MMIO_D(PORT_CLK_SEL(PORT_D)); 501 MMIO_D(PORT_CLK_SEL(PORT_E)); 502 MMIO_D(TRANS_CLK_SEL(TRANSCODER_A)); 503 MMIO_D(TRANS_CLK_SEL(TRANSCODER_B)); 504 MMIO_D(TRANS_CLK_SEL(TRANSCODER_C)); 505 MMIO_D(HSW_NDE_RSTWRN_OPT); 506 MMIO_D(_MMIO(0x46508)); 507 MMIO_D(_MMIO(0x49080)); 508 MMIO_D(_MMIO(0x49180)); 509 MMIO_D(_MMIO(0x49280)); 510 MMIO_F(_MMIO(0x49090), 0x14); 511 MMIO_F(_MMIO(0x49190), 0x14); 512 MMIO_F(_MMIO(0x49290), 0x14); 513 MMIO_D(GAMMA_MODE(PIPE_A)); 514 MMIO_D(GAMMA_MODE(PIPE_B)); 515 MMIO_D(GAMMA_MODE(PIPE_C)); 516 MMIO_D(TRANS_MULT(dev_priv, TRANSCODER_A)); 517 MMIO_D(TRANS_MULT(dev_priv, TRANSCODER_B)); 518 MMIO_D(TRANS_MULT(dev_priv, TRANSCODER_C)); 519 MMIO_D(HSW_TVIDEO_DIP_CTL(dev_priv, TRANSCODER_A)); 520 MMIO_D(HSW_TVIDEO_DIP_CTL(dev_priv, TRANSCODER_B)); 521 MMIO_D(HSW_TVIDEO_DIP_CTL(dev_priv, TRANSCODER_C)); 522 MMIO_D(SFUSE_STRAP); 523 MMIO_D(SBI_ADDR); 524 MMIO_D(SBI_DATA); 525 MMIO_D(SBI_CTL_STAT); 526 MMIO_D(PIXCLK_GATE); 527 MMIO_F(DP_AUX_CH_CTL(AUX_CH_A), 6 * 4); 528 MMIO_D(DDI_BUF_CTL(PORT_A)); 529 MMIO_D(DDI_BUF_CTL(PORT_B)); 530 MMIO_D(DDI_BUF_CTL(PORT_C)); 531 MMIO_D(DDI_BUF_CTL(PORT_D)); 532 MMIO_D(DDI_BUF_CTL(PORT_E)); 533 MMIO_D(DP_TP_CTL(PORT_A)); 534 MMIO_D(DP_TP_CTL(PORT_B)); 535 MMIO_D(DP_TP_CTL(PORT_C)); 536 MMIO_D(DP_TP_CTL(PORT_D)); 537 MMIO_D(DP_TP_CTL(PORT_E)); 538 MMIO_D(DP_TP_STATUS(PORT_A)); 539 MMIO_D(DP_TP_STATUS(PORT_B)); 540 MMIO_D(DP_TP_STATUS(PORT_C)); 541 MMIO_D(DP_TP_STATUS(PORT_D)); 542 MMIO_D(DP_TP_STATUS(PORT_E)); 543 MMIO_F(_MMIO(_DDI_BUF_TRANS_A), 0x50); 544 MMIO_F(_MMIO(0x64e60), 0x50); 545 MMIO_F(_MMIO(0x64eC0), 0x50); 546 MMIO_F(_MMIO(0x64f20), 0x50); 547 MMIO_F(_MMIO(0x64f80), 0x50); 548 MMIO_D(HSW_AUD_CFG(PIPE_A)); 549 MMIO_D(HSW_AUD_PIN_ELD_CP_VLD); 550 MMIO_D(HSW_AUD_MISC_CTRL(PIPE_A)); 551 MMIO_D(_MMIO(_TRANS_DDI_FUNC_CTL_A)); 552 MMIO_D(_MMIO(_TRANS_DDI_FUNC_CTL_B)); 553 MMIO_D(_MMIO(_TRANS_DDI_FUNC_CTL_C)); 554 MMIO_D(_MMIO(_TRANS_DDI_FUNC_CTL_EDP)); 555 MMIO_D(_MMIO(_TRANSA_MSA_MISC)); 556 MMIO_D(_MMIO(_TRANSB_MSA_MISC)); 557 MMIO_D(_MMIO(_TRANSC_MSA_MISC)); 558 MMIO_D(_MMIO(_TRANS_EDP_MSA_MISC)); 559 MMIO_D(FORCEWAKE); 560 MMIO_D(FORCEWAKE_ACK); 561 MMIO_D(GEN6_GT_CORE_STATUS); 562 MMIO_D(GEN6_GT_THREAD_STATUS_REG); 563 MMIO_D(GTFIFODBG); 564 MMIO_D(GTFIFOCTL); 565 MMIO_D(ECOBUS); 566 MMIO_D(GEN6_RC_CONTROL); 567 MMIO_D(GEN6_RC_STATE); 568 MMIO_D(GEN6_RPNSWREQ); 569 MMIO_D(GEN6_RC_VIDEO_FREQ); 570 MMIO_D(GEN6_RP_DOWN_TIMEOUT); 571 MMIO_D(GEN6_RP_INTERRUPT_LIMITS); 572 MMIO_D(GEN6_RPSTAT1); 573 MMIO_D(GEN6_RP_CONTROL); 574 MMIO_D(GEN6_RP_UP_THRESHOLD); 575 MMIO_D(GEN6_RP_DOWN_THRESHOLD); 576 MMIO_D(GEN6_RP_CUR_UP_EI); 577 MMIO_D(GEN6_RP_CUR_UP); 578 MMIO_D(GEN6_RP_PREV_UP); 579 MMIO_D(GEN6_RP_CUR_DOWN_EI); 580 MMIO_D(GEN6_RP_CUR_DOWN); 581 MMIO_D(GEN6_RP_PREV_DOWN); 582 MMIO_D(GEN6_RP_UP_EI); 583 MMIO_D(GEN6_RP_DOWN_EI); 584 MMIO_D(GEN6_RP_IDLE_HYSTERSIS); 585 MMIO_D(GEN6_RC1_WAKE_RATE_LIMIT); 586 MMIO_D(GEN6_RC6_WAKE_RATE_LIMIT); 587 MMIO_D(GEN6_RC6pp_WAKE_RATE_LIMIT); 588 MMIO_D(GEN6_RC_EVALUATION_INTERVAL); 589 MMIO_D(GEN6_RC_IDLE_HYSTERSIS); 590 MMIO_D(GEN6_RC_SLEEP); 591 MMIO_D(GEN6_RC1e_THRESHOLD); 592 MMIO_D(GEN6_RC6_THRESHOLD); 593 MMIO_D(GEN6_RC6p_THRESHOLD); 594 MMIO_D(GEN6_RC6pp_THRESHOLD); 595 MMIO_D(GEN6_PMINTRMSK); 596 597 MMIO_D(RSTDBYCTL); 598 MMIO_D(GEN6_GDRST); 599 MMIO_F(FENCE_REG_GEN6_LO(0), 0x80); 600 MMIO_D(CPU_VGACNTRL); 601 MMIO_D(TILECTL); 602 MMIO_D(GEN6_UCGCTL1); 603 MMIO_D(GEN6_UCGCTL2); 604 MMIO_F(_MMIO(0x4f000), 0x90); 605 MMIO_D(GEN6_PCODE_DATA); 606 MMIO_D(_MMIO(0x13812c)); 607 MMIO_D(GEN7_ERR_INT); 608 MMIO_D(HSW_EDRAM_CAP); 609 MMIO_D(HSW_IDICR); 610 MMIO_D(GFX_FLSH_CNTL_GEN6); 611 MMIO_D(_MMIO(0x3c)); 612 MMIO_D(_MMIO(0x860)); 613 MMIO_D(ECOSKPD(RENDER_RING_BASE)); 614 MMIO_D(_MMIO(0x121d0)); 615 MMIO_D(ECOSKPD(BLT_RING_BASE)); 616 MMIO_D(_MMIO(0x41d0)); 617 MMIO_D(GAC_ECO_BITS); 618 MMIO_D(_MMIO(0x6200)); 619 MMIO_D(_MMIO(0x6204)); 620 MMIO_D(_MMIO(0x6208)); 621 MMIO_D(_MMIO(0x7118)); 622 MMIO_D(_MMIO(0x7180)); 623 MMIO_D(_MMIO(0x7408)); 624 MMIO_D(_MMIO(0x7c00)); 625 MMIO_D(GEN6_MBCTL); 626 MMIO_D(_MMIO(0x911c)); 627 MMIO_D(_MMIO(0x9120)); 628 MMIO_D(GEN7_UCGCTL4); 629 MMIO_D(GAB_CTL); 630 MMIO_D(_MMIO(0x48800)); 631 MMIO_D(_MMIO(0xce044)); 632 MMIO_D(_MMIO(0xe6500)); 633 MMIO_D(_MMIO(0xe6504)); 634 MMIO_D(_MMIO(0xe6600)); 635 MMIO_D(_MMIO(0xe6604)); 636 MMIO_D(_MMIO(0xe6700)); 637 MMIO_D(_MMIO(0xe6704)); 638 MMIO_D(_MMIO(0xe6800)); 639 MMIO_D(_MMIO(0xe6804)); 640 MMIO_D(PCH_GMBUS4); 641 MMIO_D(PCH_GMBUS5); 642 MMIO_D(_MMIO(0x902c)); 643 MMIO_D(_MMIO(0xec008)); 644 MMIO_D(_MMIO(0xec00c)); 645 MMIO_D(_MMIO(0xec008 + 0x18)); 646 MMIO_D(_MMIO(0xec00c + 0x18)); 647 MMIO_D(_MMIO(0xec008 + 0x18 * 2)); 648 MMIO_D(_MMIO(0xec00c + 0x18 * 2)); 649 MMIO_D(_MMIO(0xec008 + 0x18 * 3)); 650 MMIO_D(_MMIO(0xec00c + 0x18 * 3)); 651 MMIO_D(_MMIO(0xec408)); 652 MMIO_D(_MMIO(0xec40c)); 653 MMIO_D(_MMIO(0xec408 + 0x18)); 654 MMIO_D(_MMIO(0xec40c + 0x18)); 655 MMIO_D(_MMIO(0xec408 + 0x18 * 2)); 656 MMIO_D(_MMIO(0xec40c + 0x18 * 2)); 657 MMIO_D(_MMIO(0xec408 + 0x18 * 3)); 658 MMIO_D(_MMIO(0xec40c + 0x18 * 3)); 659 MMIO_D(_MMIO(0xfc810)); 660 MMIO_D(_MMIO(0xfc81c)); 661 MMIO_D(_MMIO(0xfc828)); 662 MMIO_D(_MMIO(0xfc834)); 663 MMIO_D(_MMIO(0xfcc00)); 664 MMIO_D(_MMIO(0xfcc0c)); 665 MMIO_D(_MMIO(0xfcc18)); 666 MMIO_D(_MMIO(0xfcc24)); 667 MMIO_D(_MMIO(0xfd000)); 668 MMIO_D(_MMIO(0xfd00c)); 669 MMIO_D(_MMIO(0xfd018)); 670 MMIO_D(_MMIO(0xfd024)); 671 MMIO_D(_MMIO(0xfd034)); 672 MMIO_D(FPGA_DBG); 673 MMIO_D(_MMIO(0x2054)); 674 MMIO_D(_MMIO(0x12054)); 675 MMIO_D(_MMIO(0x22054)); 676 MMIO_D(_MMIO(0x1a054)); 677 MMIO_D(_MMIO(0x44070)); 678 MMIO_D(_MMIO(0x2178)); 679 MMIO_D(_MMIO(0x217c)); 680 MMIO_D(_MMIO(0x12178)); 681 MMIO_D(_MMIO(0x1217c)); 682 MMIO_F(_MMIO(0x5200), 32); 683 MMIO_F(_MMIO(0x5240), 32); 684 MMIO_F(_MMIO(0x5280), 16); 685 MMIO_D(BCS_SWCTRL); 686 MMIO_F(HS_INVOCATION_COUNT, 8); 687 MMIO_F(DS_INVOCATION_COUNT, 8); 688 MMIO_F(IA_VERTICES_COUNT, 8); 689 MMIO_F(IA_PRIMITIVES_COUNT, 8); 690 MMIO_F(VS_INVOCATION_COUNT, 8); 691 MMIO_F(GS_INVOCATION_COUNT, 8); 692 MMIO_F(GS_PRIMITIVES_COUNT, 8); 693 MMIO_F(CL_INVOCATION_COUNT, 8); 694 MMIO_F(CL_PRIMITIVES_COUNT, 8); 695 MMIO_F(PS_INVOCATION_COUNT, 8); 696 MMIO_F(PS_DEPTH_COUNT, 8); 697 MMIO_D(ARB_MODE); 698 MMIO_RING_D(RING_BBADDR); 699 MMIO_D(_MMIO(0x2220)); 700 MMIO_D(_MMIO(0x12220)); 701 MMIO_D(_MMIO(0x22220)); 702 MMIO_RING_D(RING_SYNC_1); 703 MMIO_RING_D(RING_SYNC_0); 704 MMIO_D(GUC_STATUS); 705 706 MMIO_F(_MMIO(MCHBAR_MIRROR_BASE_SNB), 0x40000); 707 MMIO_F(_MMIO(VGT_PVINFO_PAGE), VGT_PVINFO_SIZE); 708 MMIO_F(LGC_PALETTE(PIPE_A, 0), 1024); 709 MMIO_F(LGC_PALETTE(PIPE_B, 0), 1024); 710 MMIO_F(LGC_PALETTE(PIPE_C, 0), 1024); 711 712 return 0; 713 } 714 715 static int iterate_bdw_only_mmio(struct intel_gvt_mmio_table_iter *iter) 716 { 717 MMIO_D(HSW_PWR_WELL_CTL1); 718 MMIO_D(HSW_PWR_WELL_CTL2); 719 MMIO_D(HSW_PWR_WELL_CTL3); 720 MMIO_D(HSW_PWR_WELL_CTL4); 721 MMIO_D(HSW_PWR_WELL_CTL5); 722 MMIO_D(HSW_PWR_WELL_CTL6); 723 724 MMIO_D(WM_MISC); 725 MMIO_D(_MMIO(_SRD_CTL_EDP)); 726 727 MMIO_D(_MMIO(0xb1f0)); 728 MMIO_D(_MMIO(0xb1c0)); 729 MMIO_D(_MMIO(0xb100)); 730 MMIO_D(_MMIO(0xb10c)); 731 MMIO_D(_MMIO(0xb110)); 732 MMIO_D(_MMIO(0x83a4)); 733 MMIO_D(_MMIO(0x8430)); 734 MMIO_D(_MMIO(0x2248)); 735 MMIO_D(FORCEWAKE_ACK_HSW); 736 737 return 0; 738 } 739 740 static int iterate_bdw_plus_mmio(struct intel_gvt_mmio_table_iter *iter) 741 { 742 struct drm_i915_private *dev_priv = iter->i915; 743 744 MMIO_D(GEN8_GT_IMR(0)); 745 MMIO_D(GEN8_GT_IER(0)); 746 MMIO_D(GEN8_GT_IIR(0)); 747 MMIO_D(GEN8_GT_ISR(0)); 748 MMIO_D(GEN8_GT_IMR(1)); 749 MMIO_D(GEN8_GT_IER(1)); 750 MMIO_D(GEN8_GT_IIR(1)); 751 MMIO_D(GEN8_GT_ISR(1)); 752 MMIO_D(GEN8_GT_IMR(2)); 753 MMIO_D(GEN8_GT_IER(2)); 754 MMIO_D(GEN8_GT_IIR(2)); 755 MMIO_D(GEN8_GT_ISR(2)); 756 MMIO_D(GEN8_GT_IMR(3)); 757 MMIO_D(GEN8_GT_IER(3)); 758 MMIO_D(GEN8_GT_IIR(3)); 759 MMIO_D(GEN8_GT_ISR(3)); 760 MMIO_D(GEN8_DE_PIPE_IMR(PIPE_A)); 761 MMIO_D(GEN8_DE_PIPE_IER(PIPE_A)); 762 MMIO_D(GEN8_DE_PIPE_IIR(PIPE_A)); 763 MMIO_D(GEN8_DE_PIPE_ISR(PIPE_A)); 764 MMIO_D(GEN8_DE_PIPE_IMR(PIPE_B)); 765 MMIO_D(GEN8_DE_PIPE_IER(PIPE_B)); 766 MMIO_D(GEN8_DE_PIPE_IIR(PIPE_B)); 767 MMIO_D(GEN8_DE_PIPE_ISR(PIPE_B)); 768 MMIO_D(GEN8_DE_PIPE_IMR(PIPE_C)); 769 MMIO_D(GEN8_DE_PIPE_IER(PIPE_C)); 770 MMIO_D(GEN8_DE_PIPE_IIR(PIPE_C)); 771 MMIO_D(GEN8_DE_PIPE_ISR(PIPE_C)); 772 MMIO_D(GEN8_DE_PORT_IMR); 773 MMIO_D(GEN8_DE_PORT_IER); 774 MMIO_D(GEN8_DE_PORT_IIR); 775 MMIO_D(GEN8_DE_PORT_ISR); 776 MMIO_D(GEN8_DE_MISC_IMR); 777 MMIO_D(GEN8_DE_MISC_IER); 778 MMIO_D(GEN8_DE_MISC_IIR); 779 MMIO_D(GEN8_DE_MISC_ISR); 780 MMIO_D(GEN8_PCU_IMR); 781 MMIO_D(GEN8_PCU_IER); 782 MMIO_D(GEN8_PCU_IIR); 783 MMIO_D(GEN8_PCU_ISR); 784 MMIO_D(GEN8_MASTER_IRQ); 785 MMIO_RING_D(RING_ACTHD_UDW); 786 787 #define RING_REG(base) _MMIO((base) + 0xd0) 788 MMIO_RING_D(RING_REG); 789 #undef RING_REG 790 791 #define RING_REG(base) _MMIO((base) + 0x230) 792 MMIO_RING_D(RING_REG); 793 #undef RING_REG 794 795 #define RING_REG(base) _MMIO((base) + 0x234) 796 MMIO_RING_F(RING_REG, 8); 797 #undef RING_REG 798 799 #define RING_REG(base) _MMIO((base) + 0x244) 800 MMIO_RING_D(RING_REG); 801 #undef RING_REG 802 803 #define RING_REG(base) _MMIO((base) + 0x370) 804 MMIO_RING_F(RING_REG, 48); 805 #undef RING_REG 806 807 #define RING_REG(base) _MMIO((base) + 0x3a0) 808 MMIO_RING_D(RING_REG); 809 #undef RING_REG 810 811 MMIO_D(PIPE_MISC(PIPE_A)); 812 MMIO_D(PIPE_MISC(PIPE_B)); 813 MMIO_D(PIPE_MISC(PIPE_C)); 814 MMIO_D(_MMIO(0x1c1d0)); 815 MMIO_D(GEN6_MBCUNIT_SNPCR); 816 MMIO_D(GEN7_MISCCPCTL); 817 MMIO_D(_MMIO(0x1c054)); 818 MMIO_D(GEN6_PCODE_MAILBOX); 819 if (!IS_BROXTON(dev_priv)) 820 MMIO_D(GEN8_PRIVATE_PAT_LO); 821 MMIO_D(GEN8_PRIVATE_PAT_HI); 822 MMIO_D(GAMTARBMODE); 823 824 #define RING_REG(base) _MMIO((base) + 0x270) 825 MMIO_RING_F(RING_REG, 32); 826 #undef RING_REG 827 828 MMIO_RING_D(RING_HWS_PGA); 829 MMIO_D(HDC_CHICKEN0); 830 MMIO_D(CHICKEN_PIPESL_1(PIPE_A)); 831 MMIO_D(CHICKEN_PIPESL_1(PIPE_B)); 832 MMIO_D(CHICKEN_PIPESL_1(PIPE_C)); 833 MMIO_D(_MMIO(0x6671c)); 834 MMIO_D(_MMIO(0x66c00)); 835 MMIO_D(_MMIO(0x66c04)); 836 MMIO_D(HSW_GTT_CACHE_EN); 837 MMIO_D(GEN8_EU_DISABLE0); 838 MMIO_D(GEN8_EU_DISABLE1); 839 MMIO_D(GEN8_EU_DISABLE2); 840 MMIO_D(_MMIO(0xfdc)); 841 MMIO_D(GEN8_ROW_CHICKEN); 842 MMIO_D(GEN7_ROW_CHICKEN2); 843 MMIO_D(GEN8_UCGCTL6); 844 MMIO_D(GEN8_L3SQCREG4); 845 MMIO_D(GEN9_SCRATCH_LNCF1); 846 MMIO_F(_MMIO(0x24d0), 48); 847 MMIO_D(_MMIO(0x44484)); 848 MMIO_D(_MMIO(0x4448c)); 849 MMIO_D(GEN8_L3_LRA_1_GPGPU); 850 MMIO_D(_MMIO(0x110000)); 851 MMIO_D(_MMIO(0x48400)); 852 MMIO_D(_MMIO(0x6e570)); 853 MMIO_D(_MMIO(0x65f10)); 854 MMIO_D(_MMIO(0xe194)); 855 MMIO_D(_MMIO(0xe188)); 856 MMIO_D(HALF_SLICE_CHICKEN2); 857 MMIO_D(_MMIO(0x2580)); 858 MMIO_D(_MMIO(0xe220)); 859 MMIO_D(_MMIO(0xe230)); 860 MMIO_D(_MMIO(0xe240)); 861 MMIO_D(_MMIO(0xe260)); 862 MMIO_D(_MMIO(0xe270)); 863 MMIO_D(_MMIO(0xe280)); 864 MMIO_D(_MMIO(0xe2a0)); 865 MMIO_D(_MMIO(0xe2b0)); 866 MMIO_D(_MMIO(0xe2c0)); 867 MMIO_D(_MMIO(0x21f0)); 868 MMIO_D(GEN8_GAMW_ECO_DEV_RW_IA); 869 MMIO_D(_MMIO(0x215c)); 870 MMIO_F(_MMIO(0x2290), 8); 871 MMIO_D(_MMIO(0x2b00)); 872 MMIO_D(_MMIO(0x2360)); 873 MMIO_D(_MMIO(0x1c17c)); 874 MMIO_D(_MMIO(0x1c178)); 875 MMIO_D(_MMIO(0x4260)); 876 MMIO_D(_MMIO(0x4264)); 877 MMIO_D(_MMIO(0x4268)); 878 MMIO_D(_MMIO(0x426c)); 879 MMIO_D(_MMIO(0x4270)); 880 MMIO_D(_MMIO(0x4094)); 881 MMIO_D(_MMIO(0x22178)); 882 MMIO_D(_MMIO(0x1a178)); 883 MMIO_D(_MMIO(0x1a17c)); 884 MMIO_D(_MMIO(0x2217c)); 885 MMIO_D(EDP_PSR_IMR); 886 MMIO_D(EDP_PSR_IIR); 887 MMIO_D(_MMIO(0xe4cc)); 888 MMIO_D(GEN7_SC_INSTDONE); 889 890 return 0; 891 } 892 893 static int iterate_pre_skl_mmio(struct intel_gvt_mmio_table_iter *iter) 894 { 895 MMIO_D(FORCEWAKE_MT); 896 897 MMIO_D(PCH_ADPA); 898 MMIO_F(PCH_DP_AUX_CH_CTL(AUX_CH_B), 6 * 4); 899 MMIO_F(PCH_DP_AUX_CH_CTL(AUX_CH_C), 6 * 4); 900 MMIO_F(PCH_DP_AUX_CH_CTL(AUX_CH_D), 6 * 4); 901 902 MMIO_F(_MMIO(0x70440), 0xc); 903 MMIO_F(_MMIO(0x71440), 0xc); 904 MMIO_F(_MMIO(0x72440), 0xc); 905 MMIO_F(_MMIO(0x7044c), 0xc); 906 MMIO_F(_MMIO(0x7144c), 0xc); 907 MMIO_F(_MMIO(0x7244c), 0xc); 908 909 return 0; 910 } 911 912 static int iterate_skl_plus_mmio(struct intel_gvt_mmio_table_iter *iter) 913 { 914 struct drm_i915_private *dev_priv = iter->i915; 915 916 MMIO_D(FORCEWAKE_RENDER_GEN9); 917 MMIO_D(FORCEWAKE_ACK_RENDER_GEN9); 918 MMIO_D(FORCEWAKE_GT_GEN9); 919 MMIO_D(FORCEWAKE_ACK_GT_GEN9); 920 MMIO_D(FORCEWAKE_MEDIA_GEN9); 921 MMIO_D(FORCEWAKE_ACK_MEDIA_GEN9); 922 MMIO_F(DP_AUX_CH_CTL(AUX_CH_B), 6 * 4); 923 MMIO_F(DP_AUX_CH_CTL(AUX_CH_C), 6 * 4); 924 MMIO_F(DP_AUX_CH_CTL(AUX_CH_D), 6 * 4); 925 MMIO_D(HSW_PWR_WELL_CTL1); 926 MMIO_D(HSW_PWR_WELL_CTL2); 927 MMIO_D(DBUF_CTL_S(0)); 928 MMIO_D(GEN9_PG_ENABLE); 929 MMIO_D(GEN9_MEDIA_PG_IDLE_HYSTERESIS); 930 MMIO_D(GEN9_RENDER_PG_IDLE_HYSTERESIS); 931 MMIO_D(GEN9_GAMT_ECO_REG_RW_IA); 932 MMIO_D(MMCD_MISC_CTRL); 933 MMIO_D(CHICKEN_PAR1_1); 934 MMIO_D(DC_STATE_EN); 935 MMIO_D(DC_STATE_DEBUG); 936 MMIO_D(CDCLK_CTL); 937 MMIO_D(LCPLL1_CTL); 938 MMIO_D(LCPLL2_CTL); 939 MMIO_D(_MMIO(_DPLL1_CFGCR1)); 940 MMIO_D(_MMIO(_DPLL2_CFGCR1)); 941 MMIO_D(_MMIO(_DPLL3_CFGCR1)); 942 MMIO_D(_MMIO(_DPLL1_CFGCR2)); 943 MMIO_D(_MMIO(_DPLL2_CFGCR2)); 944 MMIO_D(_MMIO(_DPLL3_CFGCR2)); 945 MMIO_D(DPLL_CTRL1); 946 MMIO_D(DPLL_CTRL2); 947 MMIO_D(DPLL_STATUS); 948 MMIO_D(SKL_PS_WIN_POS(PIPE_A, 0)); 949 MMIO_D(SKL_PS_WIN_POS(PIPE_A, 1)); 950 MMIO_D(SKL_PS_WIN_POS(PIPE_B, 0)); 951 MMIO_D(SKL_PS_WIN_POS(PIPE_B, 1)); 952 MMIO_D(SKL_PS_WIN_POS(PIPE_C, 0)); 953 MMIO_D(SKL_PS_WIN_POS(PIPE_C, 1)); 954 MMIO_D(SKL_PS_WIN_SZ(PIPE_A, 0)); 955 MMIO_D(SKL_PS_WIN_SZ(PIPE_A, 1)); 956 MMIO_D(SKL_PS_WIN_SZ(PIPE_B, 0)); 957 MMIO_D(SKL_PS_WIN_SZ(PIPE_B, 1)); 958 MMIO_D(SKL_PS_WIN_SZ(PIPE_C, 0)); 959 MMIO_D(SKL_PS_WIN_SZ(PIPE_C, 1)); 960 MMIO_D(SKL_PS_CTRL(PIPE_A, 0)); 961 MMIO_D(SKL_PS_CTRL(PIPE_A, 1)); 962 MMIO_D(SKL_PS_CTRL(PIPE_B, 0)); 963 MMIO_D(SKL_PS_CTRL(PIPE_B, 1)); 964 MMIO_D(SKL_PS_CTRL(PIPE_C, 0)); 965 MMIO_D(SKL_PS_CTRL(PIPE_C, 1)); 966 MMIO_D(PLANE_BUF_CFG(PIPE_A, 0)); 967 MMIO_D(PLANE_BUF_CFG(PIPE_A, 1)); 968 MMIO_D(PLANE_BUF_CFG(PIPE_A, 2)); 969 MMIO_D(PLANE_BUF_CFG(PIPE_A, 3)); 970 MMIO_D(PLANE_BUF_CFG(PIPE_B, 0)); 971 MMIO_D(PLANE_BUF_CFG(PIPE_B, 1)); 972 MMIO_D(PLANE_BUF_CFG(PIPE_B, 2)); 973 MMIO_D(PLANE_BUF_CFG(PIPE_B, 3)); 974 MMIO_D(PLANE_BUF_CFG(PIPE_C, 0)); 975 MMIO_D(PLANE_BUF_CFG(PIPE_C, 1)); 976 MMIO_D(PLANE_BUF_CFG(PIPE_C, 2)); 977 MMIO_D(PLANE_BUF_CFG(PIPE_C, 3)); 978 MMIO_D(CUR_BUF_CFG(PIPE_A)); 979 MMIO_D(CUR_BUF_CFG(PIPE_B)); 980 MMIO_D(CUR_BUF_CFG(PIPE_C)); 981 MMIO_F(PLANE_WM(PIPE_A, 0, 0), 4 * 8); 982 MMIO_F(PLANE_WM(PIPE_A, 1, 0), 4 * 8); 983 MMIO_F(PLANE_WM(PIPE_A, 2, 0), 4 * 8); 984 MMIO_F(PLANE_WM(PIPE_B, 0, 0), 4 * 8); 985 MMIO_F(PLANE_WM(PIPE_B, 1, 0), 4 * 8); 986 MMIO_F(PLANE_WM(PIPE_B, 2, 0), 4 * 8); 987 MMIO_F(PLANE_WM(PIPE_C, 0, 0), 4 * 8); 988 MMIO_F(PLANE_WM(PIPE_C, 1, 0), 4 * 8); 989 MMIO_F(PLANE_WM(PIPE_C, 2, 0), 4 * 8); 990 MMIO_F(CUR_WM(PIPE_A, 0), 4 * 8); 991 MMIO_F(CUR_WM(PIPE_B, 0), 4 * 8); 992 MMIO_F(CUR_WM(PIPE_C, 0), 4 * 8); 993 MMIO_D(PLANE_WM_TRANS(PIPE_A, 0)); 994 MMIO_D(PLANE_WM_TRANS(PIPE_A, 1)); 995 MMIO_D(PLANE_WM_TRANS(PIPE_A, 2)); 996 MMIO_D(PLANE_WM_TRANS(PIPE_B, 0)); 997 MMIO_D(PLANE_WM_TRANS(PIPE_B, 1)); 998 MMIO_D(PLANE_WM_TRANS(PIPE_B, 2)); 999 MMIO_D(PLANE_WM_TRANS(PIPE_C, 0)); 1000 MMIO_D(PLANE_WM_TRANS(PIPE_C, 1)); 1001 MMIO_D(PLANE_WM_TRANS(PIPE_C, 2)); 1002 MMIO_D(CUR_WM_TRANS(PIPE_A)); 1003 MMIO_D(CUR_WM_TRANS(PIPE_B)); 1004 MMIO_D(CUR_WM_TRANS(PIPE_C)); 1005 MMIO_D(PLANE_NV12_BUF_CFG(PIPE_A, 0)); 1006 MMIO_D(PLANE_NV12_BUF_CFG(PIPE_A, 1)); 1007 MMIO_D(PLANE_NV12_BUF_CFG(PIPE_A, 2)); 1008 MMIO_D(PLANE_NV12_BUF_CFG(PIPE_A, 3)); 1009 MMIO_D(PLANE_NV12_BUF_CFG(PIPE_B, 0)); 1010 MMIO_D(PLANE_NV12_BUF_CFG(PIPE_B, 1)); 1011 MMIO_D(PLANE_NV12_BUF_CFG(PIPE_B, 2)); 1012 MMIO_D(PLANE_NV12_BUF_CFG(PIPE_B, 3)); 1013 MMIO_D(PLANE_NV12_BUF_CFG(PIPE_C, 0)); 1014 MMIO_D(PLANE_NV12_BUF_CFG(PIPE_C, 1)); 1015 MMIO_D(PLANE_NV12_BUF_CFG(PIPE_C, 2)); 1016 MMIO_D(PLANE_NV12_BUF_CFG(PIPE_C, 3)); 1017 MMIO_D(PLANE_AUX_DIST(PIPE_A, 0)); 1018 MMIO_D(PLANE_AUX_DIST(PIPE_A, 1)); 1019 MMIO_D(PLANE_AUX_DIST(PIPE_A, 2)); 1020 MMIO_D(PLANE_AUX_DIST(PIPE_A, 3)); 1021 MMIO_D(PLANE_AUX_DIST(PIPE_B, 0)); 1022 MMIO_D(PLANE_AUX_DIST(PIPE_B, 1)); 1023 MMIO_D(PLANE_AUX_DIST(PIPE_B, 2)); 1024 MMIO_D(PLANE_AUX_DIST(PIPE_B, 3)); 1025 MMIO_D(PLANE_AUX_DIST(PIPE_C, 0)); 1026 MMIO_D(PLANE_AUX_DIST(PIPE_C, 1)); 1027 MMIO_D(PLANE_AUX_DIST(PIPE_C, 2)); 1028 MMIO_D(PLANE_AUX_DIST(PIPE_C, 3)); 1029 MMIO_D(PLANE_AUX_OFFSET(PIPE_A, 0)); 1030 MMIO_D(PLANE_AUX_OFFSET(PIPE_A, 1)); 1031 MMIO_D(PLANE_AUX_OFFSET(PIPE_A, 2)); 1032 MMIO_D(PLANE_AUX_OFFSET(PIPE_A, 3)); 1033 MMIO_D(PLANE_AUX_OFFSET(PIPE_B, 0)); 1034 MMIO_D(PLANE_AUX_OFFSET(PIPE_B, 1)); 1035 MMIO_D(PLANE_AUX_OFFSET(PIPE_B, 2)); 1036 MMIO_D(PLANE_AUX_OFFSET(PIPE_B, 3)); 1037 MMIO_D(PLANE_AUX_OFFSET(PIPE_C, 0)); 1038 MMIO_D(PLANE_AUX_OFFSET(PIPE_C, 1)); 1039 MMIO_D(PLANE_AUX_OFFSET(PIPE_C, 2)); 1040 MMIO_D(PLANE_AUX_OFFSET(PIPE_C, 3)); 1041 MMIO_D(PLANE_CTL(PIPE_A, 2)); 1042 MMIO_D(PLANE_CTL(PIPE_B, 2)); 1043 MMIO_D(PLANE_CTL(PIPE_C, 2)); 1044 MMIO_D(PLANE_SURF(PIPE_A, 2)); 1045 MMIO_D(PLANE_SURF(PIPE_B, 2)); 1046 MMIO_D(PLANE_SURF(PIPE_C, 2)); 1047 MMIO_D(DMC_SSP_BASE); 1048 MMIO_D(DMC_HTP_SKL); 1049 MMIO_D(DMC_LAST_WRITE); 1050 MMIO_D(BDW_SCRATCH1); 1051 MMIO_D(SKL_DFSM); 1052 MMIO_D(DISPIO_CR_TX_BMU_CR0); 1053 MMIO_F(GEN9_GFX_MOCS(0), 0x7f8); 1054 MMIO_F(GEN7_L3CNTLREG2, 0x80); 1055 MMIO_D(RPM_CONFIG0); 1056 MMIO_D(_MMIO(0xd08)); 1057 MMIO_D(RC6_LOCATION); 1058 MMIO_D(GEN7_FF_SLICE_CS_CHICKEN1); 1059 MMIO_D(GEN9_CS_DEBUG_MODE1); 1060 /* TRTT */ 1061 MMIO_D(TRVATTL3PTRDW(0)); 1062 MMIO_D(TRVATTL3PTRDW(1)); 1063 MMIO_D(TRVATTL3PTRDW(2)); 1064 MMIO_D(TRVATTL3PTRDW(3)); 1065 MMIO_D(TRVADR); 1066 MMIO_D(TRTTE); 1067 MMIO_D(_MMIO(0x4dfc)); 1068 MMIO_D(_MMIO(0x46430)); 1069 MMIO_D(_MMIO(0x46520)); 1070 MMIO_D(_MMIO(0xc403c)); 1071 MMIO_D(GEN8_GARBCNTL); 1072 MMIO_D(DMA_CTRL); 1073 MMIO_D(_MMIO(0x65900)); 1074 MMIO_D(GEN6_STOLEN_RESERVED); 1075 MMIO_D(_MMIO(0x4068)); 1076 MMIO_D(_MMIO(0x67054)); 1077 MMIO_D(_MMIO(0x6e560)); 1078 MMIO_D(_MMIO(0x6e554)); 1079 MMIO_D(_MMIO(0x2b20)); 1080 MMIO_D(_MMIO(0x65f00)); 1081 MMIO_D(_MMIO(0x65f08)); 1082 MMIO_D(_MMIO(0x320f0)); 1083 MMIO_D(_MMIO(0x70034)); 1084 MMIO_D(_MMIO(0x71034)); 1085 MMIO_D(_MMIO(0x72034)); 1086 MMIO_D(PLANE_KEYVAL(PIPE_A, 0)); 1087 MMIO_D(PLANE_KEYVAL(PIPE_B, 0)); 1088 MMIO_D(PLANE_KEYVAL(PIPE_C, 0)); 1089 MMIO_D(PLANE_KEYMAX(PIPE_A, 0)); 1090 MMIO_D(PLANE_KEYMAX(PIPE_B, 0)); 1091 MMIO_D(PLANE_KEYMAX(PIPE_C, 0)); 1092 MMIO_D(PLANE_KEYMSK(PIPE_A, 0)); 1093 MMIO_D(PLANE_KEYMSK(PIPE_B, 0)); 1094 MMIO_D(PLANE_KEYMSK(PIPE_C, 0)); 1095 MMIO_D(_MMIO(0x44500)); 1096 #define CSFE_CHICKEN1_REG(base) _MMIO((base) + 0xD4) 1097 MMIO_RING_D(CSFE_CHICKEN1_REG); 1098 #undef CSFE_CHICKEN1_REG 1099 MMIO_D(GEN8_HDC_CHICKEN1); 1100 MMIO_D(GEN9_WM_CHICKEN3); 1101 1102 if (IS_KABYLAKE(dev_priv) || 1103 IS_COFFEELAKE(dev_priv) || IS_COMETLAKE(dev_priv)) 1104 MMIO_D(GAMT_CHKN_BIT_REG); 1105 if (!IS_BROXTON(dev_priv)) 1106 MMIO_D(GEN9_CTX_PREEMPT_REG); 1107 MMIO_F(_MMIO(DMC_MMIO_START_RANGE), 0x3000); 1108 return 0; 1109 } 1110 1111 static int iterate_bxt_mmio(struct intel_gvt_mmio_table_iter *iter) 1112 { 1113 struct drm_i915_private *dev_priv = iter->i915; 1114 1115 MMIO_F(_MMIO(0x80000), 0x3000); 1116 MMIO_D(GEN7_SAMPLER_INSTDONE); 1117 MMIO_D(GEN7_ROW_INSTDONE); 1118 MMIO_D(GEN8_FAULT_TLB_DATA0); 1119 MMIO_D(GEN8_FAULT_TLB_DATA1); 1120 MMIO_D(ERROR_GEN6); 1121 MMIO_D(DONE_REG); 1122 MMIO_D(EIR); 1123 MMIO_D(PGTBL_ER); 1124 MMIO_D(_MMIO(0x4194)); 1125 MMIO_D(_MMIO(0x4294)); 1126 MMIO_D(_MMIO(0x4494)); 1127 MMIO_RING_D(RING_PSMI_CTL); 1128 MMIO_RING_D(RING_DMA_FADD); 1129 MMIO_RING_D(RING_DMA_FADD_UDW); 1130 MMIO_RING_D(RING_IPEHR); 1131 MMIO_RING_D(RING_INSTPS); 1132 MMIO_RING_D(RING_BBADDR_UDW); 1133 MMIO_RING_D(RING_BBSTATE); 1134 MMIO_RING_D(RING_IPEIR); 1135 MMIO_F(SOFT_SCRATCH(0), 16 * 4); 1136 MMIO_D(BXT_P_CR_GT_DISP_PWRON); 1137 MMIO_D(BXT_RP_STATE_CAP); 1138 MMIO_D(BXT_PHY_CTL_FAMILY(DPIO_PHY0)); 1139 MMIO_D(BXT_PHY_CTL_FAMILY(DPIO_PHY1)); 1140 MMIO_D(BXT_PHY_CTL(PORT_A)); 1141 MMIO_D(BXT_PHY_CTL(PORT_B)); 1142 MMIO_D(BXT_PHY_CTL(PORT_C)); 1143 MMIO_D(BXT_PORT_PLL_ENABLE(PORT_A)); 1144 MMIO_D(BXT_PORT_PLL_ENABLE(PORT_B)); 1145 MMIO_D(BXT_PORT_PLL_ENABLE(PORT_C)); 1146 MMIO_D(BXT_PORT_CL1CM_DW0(DPIO_PHY0)); 1147 MMIO_D(BXT_PORT_CL1CM_DW9(DPIO_PHY0)); 1148 MMIO_D(BXT_PORT_CL1CM_DW10(DPIO_PHY0)); 1149 MMIO_D(BXT_PORT_CL1CM_DW28(DPIO_PHY0)); 1150 MMIO_D(BXT_PORT_CL1CM_DW30(DPIO_PHY0)); 1151 MMIO_D(BXT_PORT_CL2CM_DW6(DPIO_PHY0)); 1152 MMIO_D(BXT_PORT_REF_DW3(DPIO_PHY0)); 1153 MMIO_D(BXT_PORT_REF_DW6(DPIO_PHY0)); 1154 MMIO_D(BXT_PORT_REF_DW8(DPIO_PHY0)); 1155 MMIO_D(BXT_PORT_CL1CM_DW0(DPIO_PHY1)); 1156 MMIO_D(BXT_PORT_CL1CM_DW9(DPIO_PHY1)); 1157 MMIO_D(BXT_PORT_CL1CM_DW10(DPIO_PHY1)); 1158 MMIO_D(BXT_PORT_CL1CM_DW28(DPIO_PHY1)); 1159 MMIO_D(BXT_PORT_CL1CM_DW30(DPIO_PHY1)); 1160 MMIO_D(BXT_PORT_CL2CM_DW6(DPIO_PHY1)); 1161 MMIO_D(BXT_PORT_REF_DW3(DPIO_PHY1)); 1162 MMIO_D(BXT_PORT_REF_DW6(DPIO_PHY1)); 1163 MMIO_D(BXT_PORT_REF_DW8(DPIO_PHY1)); 1164 MMIO_D(BXT_PORT_PLL_EBB_0(DPIO_PHY0, DPIO_CH0)); 1165 MMIO_D(BXT_PORT_PLL_EBB_4(DPIO_PHY0, DPIO_CH0)); 1166 MMIO_D(BXT_PORT_PCS_DW10_LN01(DPIO_PHY0, DPIO_CH0)); 1167 MMIO_D(BXT_PORT_PCS_DW10_GRP(DPIO_PHY0, DPIO_CH0)); 1168 MMIO_D(BXT_PORT_PCS_DW12_LN01(DPIO_PHY0, DPIO_CH0)); 1169 MMIO_D(BXT_PORT_PCS_DW12_LN23(DPIO_PHY0, DPIO_CH0)); 1170 MMIO_D(BXT_PORT_PCS_DW12_GRP(DPIO_PHY0, DPIO_CH0)); 1171 MMIO_D(BXT_PORT_TX_DW2_LN(DPIO_PHY0, DPIO_CH0, 0)); 1172 MMIO_D(BXT_PORT_TX_DW2_GRP(DPIO_PHY0, DPIO_CH0)); 1173 MMIO_D(BXT_PORT_TX_DW3_LN(DPIO_PHY0, DPIO_CH0, 0)); 1174 MMIO_D(BXT_PORT_TX_DW3_GRP(DPIO_PHY0, DPIO_CH0)); 1175 MMIO_D(BXT_PORT_TX_DW4_LN(DPIO_PHY0, DPIO_CH0, 0)); 1176 MMIO_D(BXT_PORT_TX_DW4_GRP(DPIO_PHY0, DPIO_CH0)); 1177 MMIO_D(BXT_PORT_TX_DW14_LN(DPIO_PHY0, DPIO_CH0, 0)); 1178 MMIO_D(BXT_PORT_TX_DW14_LN(DPIO_PHY0, DPIO_CH0, 1)); 1179 MMIO_D(BXT_PORT_TX_DW14_LN(DPIO_PHY0, DPIO_CH0, 2)); 1180 MMIO_D(BXT_PORT_TX_DW14_LN(DPIO_PHY0, DPIO_CH0, 3)); 1181 MMIO_D(BXT_PORT_PLL(DPIO_PHY0, DPIO_CH0, 0)); 1182 MMIO_D(BXT_PORT_PLL(DPIO_PHY0, DPIO_CH0, 1)); 1183 MMIO_D(BXT_PORT_PLL(DPIO_PHY0, DPIO_CH0, 2)); 1184 MMIO_D(BXT_PORT_PLL(DPIO_PHY0, DPIO_CH0, 3)); 1185 MMIO_D(BXT_PORT_PLL(DPIO_PHY0, DPIO_CH0, 6)); 1186 MMIO_D(BXT_PORT_PLL(DPIO_PHY0, DPIO_CH0, 8)); 1187 MMIO_D(BXT_PORT_PLL(DPIO_PHY0, DPIO_CH0, 9)); 1188 MMIO_D(BXT_PORT_PLL(DPIO_PHY0, DPIO_CH0, 10)); 1189 MMIO_D(BXT_PORT_PLL_EBB_0(DPIO_PHY0, DPIO_CH1)); 1190 MMIO_D(BXT_PORT_PLL_EBB_4(DPIO_PHY0, DPIO_CH1)); 1191 MMIO_D(BXT_PORT_PCS_DW10_LN01(DPIO_PHY0, DPIO_CH1)); 1192 MMIO_D(BXT_PORT_PCS_DW10_GRP(DPIO_PHY0, DPIO_CH1)); 1193 MMIO_D(BXT_PORT_PCS_DW12_LN01(DPIO_PHY0, DPIO_CH1)); 1194 MMIO_D(BXT_PORT_PCS_DW12_LN23(DPIO_PHY0, DPIO_CH1)); 1195 MMIO_D(BXT_PORT_PCS_DW12_GRP(DPIO_PHY0, DPIO_CH1)); 1196 MMIO_D(BXT_PORT_TX_DW2_LN(DPIO_PHY0, DPIO_CH1, 0)); 1197 MMIO_D(BXT_PORT_TX_DW2_GRP(DPIO_PHY0, DPIO_CH1)); 1198 MMIO_D(BXT_PORT_TX_DW3_LN(DPIO_PHY0, DPIO_CH1, 0)); 1199 MMIO_D(BXT_PORT_TX_DW3_GRP(DPIO_PHY0, DPIO_CH1)); 1200 MMIO_D(BXT_PORT_TX_DW4_LN(DPIO_PHY0, DPIO_CH1, 0)); 1201 MMIO_D(BXT_PORT_TX_DW4_GRP(DPIO_PHY0, DPIO_CH1)); 1202 MMIO_D(BXT_PORT_TX_DW14_LN(DPIO_PHY0, DPIO_CH1, 0)); 1203 MMIO_D(BXT_PORT_TX_DW14_LN(DPIO_PHY0, DPIO_CH1, 1)); 1204 MMIO_D(BXT_PORT_TX_DW14_LN(DPIO_PHY0, DPIO_CH1, 2)); 1205 MMIO_D(BXT_PORT_TX_DW14_LN(DPIO_PHY0, DPIO_CH1, 3)); 1206 MMIO_D(BXT_PORT_PLL(DPIO_PHY0, DPIO_CH1, 0)); 1207 MMIO_D(BXT_PORT_PLL(DPIO_PHY0, DPIO_CH1, 1)); 1208 MMIO_D(BXT_PORT_PLL(DPIO_PHY0, DPIO_CH1, 2)); 1209 MMIO_D(BXT_PORT_PLL(DPIO_PHY0, DPIO_CH1, 3)); 1210 MMIO_D(BXT_PORT_PLL(DPIO_PHY0, DPIO_CH1, 6)); 1211 MMIO_D(BXT_PORT_PLL(DPIO_PHY0, DPIO_CH1, 8)); 1212 MMIO_D(BXT_PORT_PLL(DPIO_PHY0, DPIO_CH1, 9)); 1213 MMIO_D(BXT_PORT_PLL(DPIO_PHY0, DPIO_CH1, 10)); 1214 MMIO_D(BXT_PORT_PLL_EBB_0(DPIO_PHY1, DPIO_CH0)); 1215 MMIO_D(BXT_PORT_PLL_EBB_4(DPIO_PHY1, DPIO_CH0)); 1216 MMIO_D(BXT_PORT_PCS_DW10_LN01(DPIO_PHY1, DPIO_CH0)); 1217 MMIO_D(BXT_PORT_PCS_DW10_GRP(DPIO_PHY1, DPIO_CH0)); 1218 MMIO_D(BXT_PORT_PCS_DW12_LN01(DPIO_PHY1, DPIO_CH0)); 1219 MMIO_D(BXT_PORT_PCS_DW12_LN23(DPIO_PHY1, DPIO_CH0)); 1220 MMIO_D(BXT_PORT_PCS_DW12_GRP(DPIO_PHY1, DPIO_CH0)); 1221 MMIO_D(BXT_PORT_TX_DW2_LN(DPIO_PHY1, DPIO_CH0, 0)); 1222 MMIO_D(BXT_PORT_TX_DW2_GRP(DPIO_PHY1, DPIO_CH0)); 1223 MMIO_D(BXT_PORT_TX_DW3_LN(DPIO_PHY1, DPIO_CH0, 0)); 1224 MMIO_D(BXT_PORT_TX_DW3_GRP(DPIO_PHY1, DPIO_CH0)); 1225 MMIO_D(BXT_PORT_TX_DW4_LN(DPIO_PHY1, DPIO_CH0, 0)); 1226 MMIO_D(BXT_PORT_TX_DW4_GRP(DPIO_PHY1, DPIO_CH0)); 1227 MMIO_D(BXT_PORT_TX_DW14_LN(DPIO_PHY1, DPIO_CH0, 0)); 1228 MMIO_D(BXT_PORT_TX_DW14_LN(DPIO_PHY1, DPIO_CH0, 1)); 1229 MMIO_D(BXT_PORT_TX_DW14_LN(DPIO_PHY1, DPIO_CH0, 2)); 1230 MMIO_D(BXT_PORT_TX_DW14_LN(DPIO_PHY1, DPIO_CH0, 3)); 1231 MMIO_D(BXT_PORT_PLL(DPIO_PHY1, DPIO_CH0, 0)); 1232 MMIO_D(BXT_PORT_PLL(DPIO_PHY1, DPIO_CH0, 1)); 1233 MMIO_D(BXT_PORT_PLL(DPIO_PHY1, DPIO_CH0, 2)); 1234 MMIO_D(BXT_PORT_PLL(DPIO_PHY1, DPIO_CH0, 3)); 1235 MMIO_D(BXT_PORT_PLL(DPIO_PHY1, DPIO_CH0, 6)); 1236 MMIO_D(BXT_PORT_PLL(DPIO_PHY1, DPIO_CH0, 8)); 1237 MMIO_D(BXT_PORT_PLL(DPIO_PHY1, DPIO_CH0, 9)); 1238 MMIO_D(BXT_PORT_PLL(DPIO_PHY1, DPIO_CH0, 10)); 1239 MMIO_D(BXT_DE_PLL_CTL); 1240 MMIO_D(BXT_DE_PLL_ENABLE); 1241 MMIO_D(BXT_DSI_PLL_CTL); 1242 MMIO_D(BXT_DSI_PLL_ENABLE); 1243 MMIO_D(GEN9_CLKGATE_DIS_0); 1244 MMIO_D(GEN9_CLKGATE_DIS_4); 1245 MMIO_D(HSW_TVIDEO_DIP_GCP(dev_priv, TRANSCODER_A)); 1246 MMIO_D(HSW_TVIDEO_DIP_GCP(dev_priv, TRANSCODER_B)); 1247 MMIO_D(HSW_TVIDEO_DIP_GCP(dev_priv, TRANSCODER_C)); 1248 MMIO_D(RC6_CTX_BASE); 1249 MMIO_D(GEN8_PUSHBUS_CONTROL); 1250 MMIO_D(GEN8_PUSHBUS_ENABLE); 1251 MMIO_D(GEN8_PUSHBUS_SHIFT); 1252 MMIO_D(GEN6_GFXPAUSE); 1253 MMIO_D(GEN8_L3SQCREG1); 1254 MMIO_D(GEN8_L3CNTLREG); 1255 MMIO_D(_MMIO(0x20D8)); 1256 MMIO_F(GEN8_RING_CS_GPR(RENDER_RING_BASE, 0), 0x40); 1257 MMIO_F(GEN8_RING_CS_GPR(GEN6_BSD_RING_BASE, 0), 0x40); 1258 MMIO_F(GEN8_RING_CS_GPR(BLT_RING_BASE, 0), 0x40); 1259 MMIO_F(GEN8_RING_CS_GPR(VEBOX_RING_BASE, 0), 0x40); 1260 MMIO_D(GEN9_CTX_PREEMPT_REG); 1261 MMIO_D(GEN8_PRIVATE_PAT_LO); 1262 1263 return 0; 1264 } 1265 1266 /** 1267 * intel_gvt_iterate_mmio_table - Iterate the GVT MMIO table 1268 * @iter: the iterator 1269 * 1270 * This function is called for iterating the GVT MMIO table when i915 is 1271 * taking the snapshot of the HW and GVT is building MMIO tracking table. 1272 */ 1273 int intel_gvt_iterate_mmio_table(struct intel_gvt_mmio_table_iter *iter) 1274 { 1275 struct drm_i915_private *i915 = iter->i915; 1276 int ret; 1277 1278 ret = iterate_generic_mmio(iter); 1279 if (ret) 1280 goto err; 1281 1282 if (IS_BROADWELL(i915)) { 1283 ret = iterate_bdw_only_mmio(iter); 1284 if (ret) 1285 goto err; 1286 ret = iterate_bdw_plus_mmio(iter); 1287 if (ret) 1288 goto err; 1289 ret = iterate_pre_skl_mmio(iter); 1290 if (ret) 1291 goto err; 1292 } else if (IS_SKYLAKE(i915) || 1293 IS_KABYLAKE(i915) || 1294 IS_COFFEELAKE(i915) || 1295 IS_COMETLAKE(i915)) { 1296 ret = iterate_bdw_plus_mmio(iter); 1297 if (ret) 1298 goto err; 1299 ret = iterate_skl_plus_mmio(iter); 1300 if (ret) 1301 goto err; 1302 } else if (IS_BROXTON(i915)) { 1303 ret = iterate_bdw_plus_mmio(iter); 1304 if (ret) 1305 goto err; 1306 ret = iterate_skl_plus_mmio(iter); 1307 if (ret) 1308 goto err; 1309 ret = iterate_bxt_mmio(iter); 1310 if (ret) 1311 goto err; 1312 } 1313 1314 return 0; 1315 err: 1316 return ret; 1317 } 1318 EXPORT_SYMBOL_NS_GPL(intel_gvt_iterate_mmio_table, "I915_GVT"); 1319