hc
2024-12-19 9370bb92b2d16684ee45cf24e879c93c509162da
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
97
98
99
100
101
102
103
104
105
106
/* SPDX-License-Identifier: GPL-2.0-or-later */
#ifndef _ASM_POWERPC_PAGE_64_H
#define _ASM_POWERPC_PAGE_64_H
 
/*
 * Copyright (C) 2001 PPC64 Team, IBM Corp
 */
 
#include <asm/asm-const.h>
 
/*
 * We always define HW_PAGE_SHIFT to 12 as use of 64K pages remains Linux
 * specific, every notion of page number shared with the firmware, TCEs,
 * iommu, etc... still uses a page size of 4K.
 */
#define HW_PAGE_SHIFT        12
#define HW_PAGE_SIZE        (ASM_CONST(1) << HW_PAGE_SHIFT)
#define HW_PAGE_MASK        (~(HW_PAGE_SIZE-1))
 
/*
 * PAGE_FACTOR is the number of bits factor between PAGE_SHIFT and
 * HW_PAGE_SHIFT, that is 4K pages.
 */
#define PAGE_FACTOR        (PAGE_SHIFT - HW_PAGE_SHIFT)
 
/* Segment size; normal 256M segments */
#define SID_SHIFT        28
#define SID_MASK        ASM_CONST(0xfffffffff)
#define ESID_MASK        0xfffffffff0000000UL
#define GET_ESID(x)        (((x) >> SID_SHIFT) & SID_MASK)
 
/* 1T segments */
#define SID_SHIFT_1T        40
#define SID_MASK_1T        0xffffffUL
#define ESID_MASK_1T        0xffffff0000000000UL
#define GET_ESID_1T(x)        (((x) >> SID_SHIFT_1T) & SID_MASK_1T)
 
#ifndef __ASSEMBLY__
#include <asm/cache.h>
 
typedef unsigned long pte_basic_t;
 
static inline void clear_page(void *addr)
{
   unsigned long iterations;
   unsigned long onex, twox, fourx, eightx;
 
   iterations = ppc64_caches.l1d.blocks_per_page / 8;
 
   /*
    * Some verisions of gcc use multiply instructions to
    * calculate the offsets so lets give it a hand to
    * do better.
    */
   onex = ppc64_caches.l1d.block_size;
   twox = onex << 1;
   fourx = onex << 2;
   eightx = onex << 3;
 
   asm volatile(
   "mtctr    %1    # clear_page\n\
   .balign    16\n\
1:    dcbz    0,%0\n\
   dcbz    %3,%0\n\
   dcbz    %4,%0\n\
   dcbz    %5,%0\n\
   dcbz    %6,%0\n\
   dcbz    %7,%0\n\
   dcbz    %8,%0\n\
   dcbz    %9,%0\n\
   add    %0,%0,%10\n\
   bdnz+    1b"
   : "=&r" (addr)
   : "r" (iterations), "0" (addr), "b" (onex), "b" (twox),
       "b" (twox+onex), "b" (fourx), "b" (fourx+onex),
       "b" (twox+fourx), "b" (eightx-onex), "r" (eightx)
   : "ctr", "memory");
}
 
extern void copy_page(void *to, void *from);
 
/* Log 2 of page table size */
extern u64 ppc64_pft_size;
 
#endif /* __ASSEMBLY__ */
 
#define VM_DATA_DEFAULT_FLAGS \
   (is_32bit_task() ? \
    VM_DATA_DEFAULT_FLAGS32 : VM_DATA_DEFAULT_FLAGS64)
 
/*
 * This is the default if a program doesn't have a PT_GNU_STACK
 * program header entry. The PPC64 ELF ABI has a non executable stack
 * stack by default, so in the absence of a PT_GNU_STACK program header
 * we turn execute permission off.
 */
#define VM_STACK_DEFAULT_FLAGS32    VM_DATA_FLAGS_EXEC
#define VM_STACK_DEFAULT_FLAGS64    VM_DATA_FLAGS_NON_EXEC
 
#define VM_STACK_DEFAULT_FLAGS \
   (is_32bit_task() ? \
    VM_STACK_DEFAULT_FLAGS32 : VM_STACK_DEFAULT_FLAGS64)
 
#include <asm-generic/getorder.h>
 
#endif /* _ASM_POWERPC_PAGE_64_H */