kvm: arm64: Enable hardware updates of the Access Flag for Stage 2 page tables
[cascardo/linux.git] / arch / arm64 / include / asm / kvm_arm.h
index bef6e92..ffde15f 100644 (file)
@@ -23,6 +23,7 @@
 #include <asm/types.h>
 
 /* Hyp Configuration Register (HCR) bits */
+#define HCR_E2H                (UL(1) << 34)
 #define HCR_ID         (UL(1) << 33)
 #define HCR_CD         (UL(1) << 32)
 #define HCR_RW_SHIFT   31
@@ -61,7 +62,7 @@
 
 /*
  * The bits we set in HCR:
- * RW:         64bit by default, can be overriden for 32bit VMs
+ * RW:         64bit by default, can be overridden for 32bit VMs
  * TAC:                Trap ACTLR
  * TSC:                Trap SMC
  * TVM:                Trap VM ops (until M+C set in SCTLR_EL1)
@@ -81,7 +82,7 @@
                         HCR_AMO | HCR_SWIO | HCR_TIDCP | HCR_RW)
 #define HCR_VIRT_EXCP_MASK (HCR_VA | HCR_VI | HCR_VF)
 #define HCR_INT_OVERRIDE   (HCR_FMO | HCR_IMO)
-
+#define HCR_HOST_VHE_FLAGS (HCR_RW | HCR_TGE | HCR_E2H)
 
 /* Hyp System Control Register (SCTLR_EL2) bits */
 #define SCTLR_EL2_EE   (1 << 25)
                         SCTLR_EL2_SA | SCTLR_EL2_I)
 
 /* TCR_EL2 Registers bits */
-#define TCR_EL2_RES1   ((1 << 31) | (1 << 23))
-#define TCR_EL2_TBI    (1 << 20)
-#define TCR_EL2_PS     (7 << 16)
-#define TCR_EL2_PS_40B (2 << 16)
-#define TCR_EL2_TG0    (1 << 14)
-#define TCR_EL2_SH0    (3 << 12)
-#define TCR_EL2_ORGN0  (3 << 10)
-#define TCR_EL2_IRGN0  (3 << 8)
-#define TCR_EL2_T0SZ   0x3f
-#define TCR_EL2_MASK   (TCR_EL2_TG0 | TCR_EL2_SH0 | \
-                        TCR_EL2_ORGN0 | TCR_EL2_IRGN0 | TCR_EL2_T0SZ)
-
-#define TCR_EL2_FLAGS  (TCR_EL2_RES1 | TCR_EL2_PS_40B)
+#define TCR_EL2_RES1           ((1 << 31) | (1 << 23))
+#define TCR_EL2_TBI            (1 << 20)
+#define TCR_EL2_PS_SHIFT       16
+#define TCR_EL2_PS_MASK                (7 << TCR_EL2_PS_SHIFT)
+#define TCR_EL2_PS_40B         (2 << TCR_EL2_PS_SHIFT)
+#define TCR_EL2_TG0_MASK       TCR_TG0_MASK
+#define TCR_EL2_SH0_MASK       TCR_SH0_MASK
+#define TCR_EL2_ORGN0_MASK     TCR_ORGN0_MASK
+#define TCR_EL2_IRGN0_MASK     TCR_IRGN0_MASK
+#define TCR_EL2_T0SZ_MASK      0x3f
+#define TCR_EL2_MASK   (TCR_EL2_TG0_MASK | TCR_EL2_SH0_MASK | \
+                        TCR_EL2_ORGN0_MASK | TCR_EL2_IRGN0_MASK | TCR_EL2_T0SZ_MASK)
 
 /* VTCR_EL2 Registers bits */
 #define VTCR_EL2_RES1          (1 << 31)
-#define VTCR_EL2_PS_MASK       (7 << 16)
-#define VTCR_EL2_TG0_MASK      (1 << 14)
-#define VTCR_EL2_TG0_4K                (0 << 14)
-#define VTCR_EL2_TG0_64K       (1 << 14)
-#define VTCR_EL2_SH0_MASK      (3 << 12)
-#define VTCR_EL2_SH0_INNER     (3 << 12)
-#define VTCR_EL2_ORGN0_MASK    (3 << 10)
-#define VTCR_EL2_ORGN0_WBWA    (1 << 10)
-#define VTCR_EL2_IRGN0_MASK    (3 << 8)
-#define VTCR_EL2_IRGN0_WBWA    (1 << 8)
-#define VTCR_EL2_SL0_MASK      (3 << 6)
-#define VTCR_EL2_SL0_LVL1      (1 << 6)
+#define VTCR_EL2_HD            (1 << 22)
+#define VTCR_EL2_HA            (1 << 21)
+#define VTCR_EL2_PS_MASK       TCR_EL2_PS_MASK
+#define VTCR_EL2_TG0_MASK      TCR_TG0_MASK
+#define VTCR_EL2_TG0_4K                TCR_TG0_4K
+#define VTCR_EL2_TG0_16K       TCR_TG0_16K
+#define VTCR_EL2_TG0_64K       TCR_TG0_64K
+#define VTCR_EL2_SH0_MASK      TCR_SH0_MASK
+#define VTCR_EL2_SH0_INNER     TCR_SH0_INNER
+#define VTCR_EL2_ORGN0_MASK    TCR_ORGN0_MASK
+#define VTCR_EL2_ORGN0_WBWA    TCR_ORGN0_WBWA
+#define VTCR_EL2_IRGN0_MASK    TCR_IRGN0_MASK
+#define VTCR_EL2_IRGN0_WBWA    TCR_IRGN0_WBWA
+#define VTCR_EL2_SL0_SHIFT     6
+#define VTCR_EL2_SL0_MASK      (3 << VTCR_EL2_SL0_SHIFT)
+#define VTCR_EL2_SL0_LVL1      (1 << VTCR_EL2_SL0_SHIFT)
 #define VTCR_EL2_T0SZ_MASK     0x3f
 #define VTCR_EL2_T0SZ_40B      24
-#define VTCR_EL2_VS            19
+#define VTCR_EL2_VS_SHIFT      19
+#define VTCR_EL2_VS_8BIT       (0 << VTCR_EL2_VS_SHIFT)
+#define VTCR_EL2_VS_16BIT      (1 << VTCR_EL2_VS_SHIFT)
 
 /*
  * We configure the Stage-2 page tables to always restrict the IPA space to be
  * (see hyp-init.S).
  *
  * Note that when using 4K pages, we concatenate two first level page tables
- * together.
+ * together. With 16K pages, we concatenate 16 first level page tables.
  *
  * The magic numbers used for VTTBR_X in this patch can be found in Tables
  * D4-23 and D4-25 in ARM DDI 0487A.b.
  */
+
+#define VTCR_EL2_T0SZ_IPA      VTCR_EL2_T0SZ_40B
+#define VTCR_EL2_COMMON_BITS   (VTCR_EL2_SH0_INNER | VTCR_EL2_ORGN0_WBWA | \
+                                VTCR_EL2_IRGN0_WBWA | VTCR_EL2_RES1)
+
 #ifdef CONFIG_ARM64_64K_PAGES
 /*
  * Stage2 translation configuration:
- * 40bits input  (T0SZ = 24)
  * 64kB pages (TG0 = 1)
  * 2 level page tables (SL = 1)
  */
-#define VTCR_EL2_FLAGS         (VTCR_EL2_TG0_64K | VTCR_EL2_SH0_INNER | \
-                                VTCR_EL2_ORGN0_WBWA | VTCR_EL2_IRGN0_WBWA | \
-                                VTCR_EL2_SL0_LVL1 | VTCR_EL2_T0SZ_40B | \
-                                VTCR_EL2_RES1)
-#define VTTBR_X                (38 - VTCR_EL2_T0SZ_40B)
-#else
+#define VTCR_EL2_TGRAN_FLAGS           (VTCR_EL2_TG0_64K | VTCR_EL2_SL0_LVL1)
+#define VTTBR_X_TGRAN_MAGIC            38
+#elif defined(CONFIG_ARM64_16K_PAGES)
+/*
+ * Stage2 translation configuration:
+ * 16kB pages (TG0 = 2)
+ * 2 level page tables (SL = 1)
+ */
+#define VTCR_EL2_TGRAN_FLAGS           (VTCR_EL2_TG0_16K | VTCR_EL2_SL0_LVL1)
+#define VTTBR_X_TGRAN_MAGIC            42
+#else  /* 4K */
 /*
  * Stage2 translation configuration:
- * 40bits input  (T0SZ = 24)
  * 4kB pages (TG0 = 0)
  * 3 level page tables (SL = 1)
  */
-#define VTCR_EL2_FLAGS         (VTCR_EL2_TG0_4K | VTCR_EL2_SH0_INNER | \
-                                VTCR_EL2_ORGN0_WBWA | VTCR_EL2_IRGN0_WBWA | \
-                                VTCR_EL2_SL0_LVL1 | VTCR_EL2_T0SZ_40B | \
-                                VTCR_EL2_RES1)
-#define VTTBR_X                (37 - VTCR_EL2_T0SZ_40B)
+#define VTCR_EL2_TGRAN_FLAGS           (VTCR_EL2_TG0_4K | VTCR_EL2_SL0_LVL1)
+#define VTTBR_X_TGRAN_MAGIC            37
 #endif
 
+#define VTCR_EL2_FLAGS                 (VTCR_EL2_COMMON_BITS | VTCR_EL2_TGRAN_FLAGS)
+#define VTTBR_X                                (VTTBR_X_TGRAN_MAGIC - VTCR_EL2_T0SZ_IPA)
+
 #define VTTBR_BADDR_SHIFT (VTTBR_X - 1)
 #define VTTBR_BADDR_MASK  (((UL(1) << (PHYS_MASK_SHIFT - VTTBR_X)) - 1) << VTTBR_BADDR_SHIFT)
 #define VTTBR_VMID_SHIFT  (UL(48))
        ECN(SOFTSTP_CUR), ECN(WATCHPT_LOW), ECN(WATCHPT_CUR), \
        ECN(BKPT32), ECN(VECTOR32), ECN(BRK64)
 
+#define CPACR_EL1_FPEN         (3 << 20)
+#define CPACR_EL1_TTA          (1 << 28)
+
 #endif /* __ARM64_KVM_ARM_H__ */