riscv: Move kernel mapping outside of linear mapping
[linux-2.6-microblaze.git] / arch / riscv / include / asm / page.h
1 /* SPDX-License-Identifier: GPL-2.0-only */
2 /*
3  * Copyright (C) 2009 Chen Liqin <liqin.chen@sunplusct.com>
4  * Copyright (C) 2012 Regents of the University of California
5  * Copyright (C) 2017 SiFive
6  * Copyright (C) 2017 XiaojingZhu <zhuxiaoj@ict.ac.cn>
7  */
8
9 #ifndef _ASM_RISCV_PAGE_H
10 #define _ASM_RISCV_PAGE_H
11
12 #include <linux/pfn.h>
13 #include <linux/const.h>
14
15 #define PAGE_SHIFT      (12)
16 #define PAGE_SIZE       (_AC(1, UL) << PAGE_SHIFT)
17 #define PAGE_MASK       (~(PAGE_SIZE - 1))
18
19 #ifdef CONFIG_64BIT
20 #define HUGE_MAX_HSTATE         2
21 #else
22 #define HUGE_MAX_HSTATE         1
23 #endif
24 #define HPAGE_SHIFT             PMD_SHIFT
25 #define HPAGE_SIZE              (_AC(1, UL) << HPAGE_SHIFT)
26 #define HPAGE_MASK              (~(HPAGE_SIZE - 1))
27 #define HUGETLB_PAGE_ORDER      (HPAGE_SHIFT - PAGE_SHIFT)
28
29 /*
30  * PAGE_OFFSET -- the first address of the first page of memory.
31  * When not using MMU this corresponds to the first free page in
32  * physical memory (aligned on a page boundary).
33  */
34 #define PAGE_OFFSET             _AC(CONFIG_PAGE_OFFSET, UL)
35
36 #define KERN_VIRT_SIZE (-PAGE_OFFSET)
37
38 #ifndef __ASSEMBLY__
39
40 #define PAGE_UP(addr)   (((addr)+((PAGE_SIZE)-1))&(~((PAGE_SIZE)-1)))
41 #define PAGE_DOWN(addr) ((addr)&(~((PAGE_SIZE)-1)))
42
43 /* align addr on a size boundary - adjust address up/down if needed */
44 #define _ALIGN_UP(addr, size)   (((addr)+((size)-1))&(~((size)-1)))
45 #define _ALIGN_DOWN(addr, size) ((addr)&(~((size)-1)))
46
47 /* align addr on a size boundary - adjust address up if needed */
48 #define _ALIGN(addr, size)      _ALIGN_UP(addr, size)
49
50 #define clear_page(pgaddr)                      memset((pgaddr), 0, PAGE_SIZE)
51 #define copy_page(to, from)                     memcpy((to), (from), PAGE_SIZE)
52
53 #define clear_user_page(pgaddr, vaddr, page)    memset((pgaddr), 0, PAGE_SIZE)
54 #define copy_user_page(vto, vfrom, vaddr, topg) \
55                         memcpy((vto), (vfrom), PAGE_SIZE)
56
57 /*
58  * Use struct definitions to apply C type checking
59  */
60
61 /* Page Global Directory entry */
62 typedef struct {
63         unsigned long pgd;
64 } pgd_t;
65
66 /* Page Table entry */
67 typedef struct {
68         unsigned long pte;
69 } pte_t;
70
71 typedef struct {
72         unsigned long pgprot;
73 } pgprot_t;
74
75 typedef struct page *pgtable_t;
76
77 #define pte_val(x)      ((x).pte)
78 #define pgd_val(x)      ((x).pgd)
79 #define pgprot_val(x)   ((x).pgprot)
80
81 #define __pte(x)        ((pte_t) { (x) })
82 #define __pgd(x)        ((pgd_t) { (x) })
83 #define __pgprot(x)     ((pgprot_t) { (x) })
84
85 #ifdef CONFIG_64BIT
86 #define PTE_FMT "%016lx"
87 #else
88 #define PTE_FMT "%08lx"
89 #endif
90
91 #ifdef CONFIG_MMU
92 extern unsigned long va_pa_offset;
93 #ifdef CONFIG_64BIT
94 extern unsigned long va_kernel_pa_offset;
95 #endif
96 extern unsigned long pfn_base;
97 #define ARCH_PFN_OFFSET         (pfn_base)
98 #else
99 #define va_pa_offset            0
100 #ifdef CONFIG_64BIT
101 #define va_kernel_pa_offset     0
102 #endif
103 #define ARCH_PFN_OFFSET         (PAGE_OFFSET >> PAGE_SHIFT)
104 #endif /* CONFIG_MMU */
105
106 #ifdef CONFIG_64BIT
107 extern unsigned long kernel_virt_addr;
108
109 #define linear_mapping_pa_to_va(x)      ((void *)((unsigned long)(x) + va_pa_offset))
110 #define kernel_mapping_pa_to_va(x)      ((void *)((unsigned long)(x) + va_kernel_pa_offset))
111 #define __pa_to_va_nodebug(x)           linear_mapping_pa_to_va(x)
112
113 #define linear_mapping_va_to_pa(x)      ((unsigned long)(x) - va_pa_offset)
114 #define kernel_mapping_va_to_pa(x)      ((unsigned long)(x) - va_kernel_pa_offset)
115 #define __va_to_pa_nodebug(x)   ({                                              \
116         unsigned long _x = x;                                                   \
117         (_x < kernel_virt_addr) ?                                               \
118                 linear_mapping_va_to_pa(_x) : kernel_mapping_va_to_pa(_x);      \
119         })
120 #else
121 #define __pa_to_va_nodebug(x)  ((void *)((unsigned long) (x) + va_pa_offset))
122 #define __va_to_pa_nodebug(x)  ((unsigned long)(x) - va_pa_offset)
123 #endif
124
125 #ifdef CONFIG_DEBUG_VIRTUAL
126 extern phys_addr_t __virt_to_phys(unsigned long x);
127 extern phys_addr_t __phys_addr_symbol(unsigned long x);
128 #else
129 #define __virt_to_phys(x)       __va_to_pa_nodebug(x)
130 #define __phys_addr_symbol(x)   __va_to_pa_nodebug(x)
131 #endif /* CONFIG_DEBUG_VIRTUAL */
132
133 #define __pa_symbol(x)  __phys_addr_symbol(RELOC_HIDE((unsigned long)(x), 0))
134 #define __pa(x)         __virt_to_phys((unsigned long)(x))
135 #define __va(x)         ((void *)__pa_to_va_nodebug((phys_addr_t)(x)))
136
137 #define phys_to_pfn(phys)       (PFN_DOWN(phys))
138 #define pfn_to_phys(pfn)        (PFN_PHYS(pfn))
139
140 #define virt_to_pfn(vaddr)      (phys_to_pfn(__pa(vaddr)))
141 #define pfn_to_virt(pfn)        (__va(pfn_to_phys(pfn)))
142
143 #define virt_to_page(vaddr)     (pfn_to_page(virt_to_pfn(vaddr)))
144 #define page_to_virt(page)      (pfn_to_virt(page_to_pfn(page)))
145
146 #define page_to_phys(page)      (pfn_to_phys(page_to_pfn(page)))
147 #define page_to_bus(page)       (page_to_phys(page))
148 #define phys_to_page(paddr)     (pfn_to_page(phys_to_pfn(paddr)))
149
150 #ifdef CONFIG_FLATMEM
151 #define pfn_valid(pfn) \
152         (((pfn) >= ARCH_PFN_OFFSET) && (((pfn) - ARCH_PFN_OFFSET) < max_mapnr))
153 #endif
154
155 #endif /* __ASSEMBLY__ */
156
157 #define virt_addr_valid(vaddr)  ({                                              \
158         unsigned long _addr = (unsigned long)vaddr;                             \
159         (unsigned long)(_addr) >= PAGE_OFFSET && pfn_valid(virt_to_pfn(_addr)); \
160 })
161
162 #define VM_DATA_DEFAULT_FLAGS   VM_DATA_FLAGS_NON_EXEC
163
164 #include <asm-generic/memory_model.h>
165 #include <asm-generic/getorder.h>
166
167 #endif /* _ASM_RISCV_PAGE_H */