glib.h 15 KB

123456789101112131415161718192021222324252627282930313233343536373839404142434445464748495051525354555657585960616263646566676869707172737475767778798081828384858687888990919293949596979899100101102103104105106107108109110111112113114115116117118119120121122123124125126127128129130131132133134135136137138139140141142143144145146147148149150151152153154155156157158159160161162163164165166167168169170171172173174175176177178179180181182183184185186187188189190191192193194195196197198199200201202203204205206207208209210211212213214215216217218219220221222223224225226227228229230231232233234235236237238239240241242243244245246247248249250251252253254255256257258259260261262263264265266267268269270271272273274275276277278279280281282283284285286287288289290291292293294295296297298299300301302303304305306307308309310311312313314315316317318319320321322323324325326327328329330331332333334335336337338339340341342343344345346347348349350351352353354355356357358359360361362363364365366367368369370371372373374375376377378379380381382383384385386387388389390391392393394395396397398399400401402403404405406407408409410411412413414415416417418419420421422423424425426427428429430431432433434435436437438439440441442443444445446447448449450451452453454455456457458459460461462463464465466467468469470471472473474475476477478479480481482483484485486487488489490491492493494495496497498499500501502503504505506507508509510511512513514515516517518519520521522523524525526527528529530531532533534535536537538539540541542543544545546547548549550551552553554555556557558559560561562563564565566567568569570571572573574575576577578579580581582583584585
  1. //
  2. // 内核全局通用库
  3. // Created by longjin on 2022/1/22.
  4. //
  5. #pragma once
  6. //引入对bool类型的支持
  7. #include <stdbool.h>
  8. #include <stdint.h>
  9. #include <common/stddef.h>
  10. #include <arch/arch.h>
  11. #include <common/compiler.h>
  12. #define sti() __asm__ __volatile__("sti\n\t" :: \
  13. : "memory") //开启外部中断
  14. #define cli() __asm__ __volatile__("cli\n\t" :: \
  15. : "memory") //关闭外部中断
  16. #define nop() __asm__ __volatile__("nop\n\t")
  17. #define hlt() __asm__ __volatile__("hlt\n\t")
  18. #define pause() asm volatile("pause\n\t"); // 处理器等待一段时间
  19. //内存屏障
  20. #define io_mfence() __asm__ __volatile__("mfence\n\t" :: \
  21. : "memory") // 在mfence指令前的读写操作必须在mfence指令后的读写操作前完成。
  22. #define io_sfence() __asm__ __volatile__("sfence\n\t" :: \
  23. : "memory") // 在sfence指令前的写操作必须在sfence指令后的写操作前完成
  24. #define io_lfence() __asm__ __volatile__("lfence\n\t" :: \
  25. : "memory") // 在lfence指令前的读操作必须在lfence指令后的读操作前完成。
  26. #define rdtsc() ({ \
  27. uint64_t tmp1 = 0, tmp2 = 0; \
  28. asm volatile("rdtsc" \
  29. : "=d"(tmp1), "=a"(tmp2)::"memory"); \
  30. (tmp1 << 32 | tmp2); \
  31. })
  32. /**
  33. * @brief 根据结构体变量内某个成员变量member的基地址,计算出该结构体变量的基地址
  34. * @param ptr 指向结构体变量内的成员变量member的指针
  35. * @param type 成员变量所在的结构体
  36. * @param member 成员变量名
  37. *
  38. * 方法:使用ptr减去结构体内的偏移,得到结构体变量的基地址
  39. */
  40. #define container_of(ptr, type, member) \
  41. ({ \
  42. typeof(((type *)0)->member) *p = (ptr); \
  43. (type *)((unsigned long)p - (unsigned long)&(((type *)0)->member)); \
  44. })
  45. // 定义类型的缩写
  46. typedef unsigned char uchar;
  47. typedef unsigned short ushort;
  48. typedef unsigned int uint;
  49. typedef unsigned long ul;
  50. typedef unsigned long long int ull;
  51. typedef long long int ll;
  52. #define ABS(x) ((x) > 0 ? (x) : -(x)) // 绝对值
  53. // 最大最小值
  54. #define max(x, y) ((x > y) ? (x) : (y))
  55. #define min(x, y) ((x < y) ? (x) : (y))
  56. // 遮罩高32bit
  57. #define MASK_HIGH_32bit(x) (x & (0x00000000ffffffffUL))
  58. // 四舍五入成整数
  59. ul round(double x)
  60. {
  61. return (ul)(x + 0.5);
  62. }
  63. /**
  64. * @brief 地址按照align进行对齐
  65. *
  66. * @param addr
  67. * @param _align
  68. * @return ul 对齐后的地址
  69. */
  70. static __always_inline ul ALIGN(const ul addr, const ul _align)
  71. {
  72. return (ul)((addr + _align - 1) & (~(_align - 1)));
  73. }
  74. //链表数据结构
  75. struct List
  76. {
  77. struct List *prev, *next;
  78. };
  79. //初始化循环链表
  80. static inline void list_init(struct List *list)
  81. {
  82. list->next = list;
  83. io_mfence();
  84. list->prev = list;
  85. }
  86. /**
  87. * @brief
  88. * @param entry 给定的节点
  89. * @param node 待插入的节点
  90. **/
  91. static inline void list_add(struct List *entry, struct List *node)
  92. {
  93. node->next = entry->next;
  94. barrier();
  95. node->prev = entry;
  96. barrier();
  97. node->next->prev = node;
  98. barrier();
  99. entry->next = node;
  100. }
  101. /**
  102. * @brief 将node添加到给定的list的结尾(也就是当前节点的前面)
  103. * @param entry 列表的入口
  104. * @param node 待添加的节点
  105. */
  106. static inline void list_append(struct List *entry, struct List *node)
  107. {
  108. struct List *tail = entry->prev;
  109. list_add(tail, node);
  110. }
  111. /**
  112. * @brief 从列表中删除节点
  113. * @param entry 待删除的节点
  114. */
  115. static inline void list_del(struct List *entry)
  116. {
  117. entry->next->prev = entry->prev;
  118. entry->prev->next = entry->next;
  119. }
  120. /**
  121. * @brief 将新的链表结点替换掉旧的链表结点,并使得旧的结点的前后指针均为NULL
  122. *
  123. * @param old 要被替换的结点
  124. * @param new 新的要换上去的结点
  125. */
  126. static inline void list_replace(struct List* old, struct List * new)
  127. {
  128. if(old->prev!=NULL)
  129. old->prev->next=new;
  130. new->prev = old->prev;
  131. if(old->next!=NULL)
  132. old->next->prev = new;
  133. new->next = old->next;
  134. old->prev = NULL;
  135. old->next = NULL;
  136. }
  137. static inline bool list_empty(struct List *entry)
  138. {
  139. /**
  140. * @brief 判断循环链表是否为空
  141. * @param entry 入口
  142. */
  143. if (entry == entry->next && entry->prev == entry)
  144. return true;
  145. else
  146. return false;
  147. }
  148. /**
  149. * @brief 获取链表的上一个元素
  150. *
  151. * @param entry
  152. * @return 链表的上一个元素
  153. */
  154. static inline struct List *list_prev(struct List *entry)
  155. {
  156. if (entry->prev != NULL)
  157. return entry->prev;
  158. else
  159. return NULL;
  160. }
  161. /**
  162. * @brief 获取链表的下一个元素
  163. *
  164. * @param entry
  165. * @return 链表的下一个元素
  166. */
  167. static inline struct List *list_next(struct List *entry)
  168. {
  169. if (entry->next != NULL)
  170. return entry->next;
  171. else
  172. return NULL;
  173. }
  174. void *memset(void *dst, unsigned char C, ul size)
  175. {
  176. int d0, d1;
  177. unsigned long tmp = C * 0x0101010101010101UL;
  178. __asm__ __volatile__("cld \n\t"
  179. "rep \n\t"
  180. "stosq \n\t"
  181. "testb $4, %b3 \n\t"
  182. "je 1f \n\t"
  183. "stosl \n\t"
  184. "1:\ttestb $2, %b3 \n\t"
  185. "je 2f\n\t"
  186. "stosw \n\t"
  187. "2:\ttestb $1, %b3 \n\t"
  188. "je 3f \n\t"
  189. "stosb \n\t"
  190. "3: \n\t"
  191. : "=&c"(d0), "=&D"(d1)
  192. : "a"(tmp), "q"(size), "0"(size / 8), "1"(dst)
  193. : "memory");
  194. return dst;
  195. }
  196. void *memset_c(void *dst, uint8_t c, size_t count)
  197. {
  198. uint8_t *xs = (uint8_t *)dst;
  199. while (count--)
  200. *xs++ = c;
  201. return dst;
  202. }
  203. /**
  204. * @brief 内存拷贝函数
  205. *
  206. * @param dst 目标数组
  207. * @param src 源数组
  208. * @param Num 字节数
  209. * @return void*
  210. */
  211. static void *memcpy(void *dst, const void *src, long Num)
  212. {
  213. int d0 = 0, d1 = 0, d2 = 0;
  214. __asm__ __volatile__("cld \n\t"
  215. "rep \n\t"
  216. "movsq \n\t"
  217. "testb $4,%b4 \n\t"
  218. "je 1f \n\t"
  219. "movsl \n\t"
  220. "1:\ttestb $2,%b4 \n\t"
  221. "je 2f \n\t"
  222. "movsw \n\t"
  223. "2:\ttestb $1,%b4 \n\t"
  224. "je 3f \n\t"
  225. "movsb \n\t"
  226. "3: \n\t"
  227. : "=&c"(d0), "=&D"(d1), "=&S"(d2)
  228. : "0"(Num / 8), "q"(Num), "1"(dst), "2"(src)
  229. : "memory");
  230. return dst;
  231. }
  232. // 从io口读入8个bit
  233. unsigned char io_in8(unsigned short port)
  234. {
  235. unsigned char ret = 0;
  236. __asm__ __volatile__("inb %%dx, %0 \n\t"
  237. "mfence \n\t"
  238. : "=a"(ret)
  239. : "d"(port)
  240. : "memory");
  241. return ret;
  242. }
  243. // 从io口读入32个bit
  244. unsigned int io_in32(unsigned short port)
  245. {
  246. unsigned int ret = 0;
  247. __asm__ __volatile__("inl %%dx, %0 \n\t"
  248. "mfence \n\t"
  249. : "=a"(ret)
  250. : "d"(port)
  251. : "memory");
  252. return ret;
  253. }
  254. // 输出8个bit到输出端口
  255. void io_out8(unsigned short port, unsigned char value)
  256. {
  257. __asm__ __volatile__("outb %0, %%dx \n\t"
  258. "mfence \n\t"
  259. :
  260. : "a"(value), "d"(port)
  261. : "memory");
  262. }
  263. // 输出32个bit到输出端口
  264. void io_out32(unsigned short port, unsigned int value)
  265. {
  266. __asm__ __volatile__("outl %0, %%dx \n\t"
  267. "mfence \n\t"
  268. :
  269. : "a"(value), "d"(port)
  270. : "memory");
  271. }
  272. /**
  273. * @brief 从端口读入n个word到buffer
  274. *
  275. */
  276. #define io_insw(port, buffer, nr) \
  277. __asm__ __volatile__("cld;rep;insw;mfence;" ::"d"(port), "D"(buffer), "c"(nr) \
  278. : "memory")
  279. /**
  280. * @brief 从输出buffer中的n个word到端口
  281. *
  282. */
  283. #define io_outsw(port, buffer, nr) \
  284. __asm__ __volatile__("cld;rep;outsw;mfence;" ::"d"(port), "S"(buffer), "c"(nr) \
  285. : "memory")
  286. /**
  287. * @brief 读取rsp寄存器的值(存储了页目录的基地址)
  288. *
  289. * @return unsigned* rsp的值的指针
  290. */
  291. unsigned long *get_rsp()
  292. {
  293. ul *tmp;
  294. __asm__ __volatile__(
  295. "movq %%rsp, %0\n\t"
  296. : "=r"(tmp)::"memory");
  297. return tmp;
  298. }
  299. /**
  300. * @brief 读取rbp寄存器的值(存储了页目录的基地址)
  301. *
  302. * @return unsigned* rbp的值的指针
  303. */
  304. unsigned long *get_rbp()
  305. {
  306. ul *tmp;
  307. __asm__ __volatile__(
  308. "movq %%rbp, %0\n\t"
  309. : "=r"(tmp)::"memory");
  310. return tmp;
  311. }
  312. /**
  313. * @brief 读取ds寄存器的值(存储了页目录的基地址)
  314. *
  315. * @return unsigned* ds的值的指针
  316. */
  317. unsigned long *get_ds()
  318. {
  319. ul *tmp;
  320. __asm__ __volatile__(
  321. "movq %%ds, %0\n\t"
  322. : "=r"(tmp)::"memory");
  323. return tmp;
  324. }
  325. /**
  326. * @brief 读取rax寄存器的值(存储了页目录的基地址)
  327. *
  328. * @return unsigned* rax的值的指针
  329. */
  330. unsigned long *get_rax()
  331. {
  332. ul *tmp;
  333. __asm__ __volatile__(
  334. "movq %%rax, %0\n\t"
  335. : "=r"(tmp)::"memory");
  336. return tmp;
  337. }
  338. /**
  339. * @brief 读取rbx寄存器的值(存储了页目录的基地址)
  340. *
  341. * @return unsigned* rbx的值的指针
  342. */
  343. unsigned long *get_rbx()
  344. {
  345. ul *tmp;
  346. __asm__ __volatile__(
  347. "movq %%rbx, %0\n\t"
  348. : "=r"(tmp)::"memory");
  349. return tmp;
  350. }
  351. // ========= MSR寄存器组操作 =============
  352. /**
  353. * @brief 向msr寄存器组的address处的寄存器写入值value
  354. *
  355. * @param address 地址
  356. * @param value 要写入的值
  357. */
  358. void wrmsr(ul address, ul value)
  359. {
  360. __asm__ __volatile__("wrmsr \n\t" ::"d"(value >> 32), "a"(value & 0xffffffff), "c"(address)
  361. : "memory");
  362. }
  363. /**
  364. * @brief 从msr寄存器组的address地址处读取值
  365. * rdmsr返回高32bits在edx,低32bits在eax
  366. * @param address 地址
  367. * @return ul address处的寄存器的值
  368. */
  369. ul rdmsr(ul address)
  370. {
  371. unsigned int tmp0, tmp1;
  372. __asm__ __volatile__("rdmsr \n\t"
  373. : "=d"(tmp0), "=a"(tmp1)
  374. : "c"(address)
  375. : "memory");
  376. return ((ul)tmp0 << 32) | tmp1;
  377. }
  378. uint64_t get_rflags()
  379. {
  380. unsigned long tmp = 0;
  381. __asm__ __volatile__("pushfq \n\t"
  382. "movq (%%rsp), %0 \n\t"
  383. "popfq \n\t"
  384. : "=r"(tmp)::"memory");
  385. return tmp;
  386. }
  387. /**
  388. * @brief 验证地址空间是否为用户地址空间
  389. *
  390. * @param addr_start 地址起始值
  391. * @param length 地址长度
  392. * @return true
  393. * @return false
  394. */
  395. bool verify_area(uint64_t addr_start, uint64_t length)
  396. {
  397. if ((addr_start + length) <= 0x00007fffffffffffUL) // 用户程序可用的的地址空间应<= 0x00007fffffffffffUL
  398. return true;
  399. else
  400. return false;
  401. }
  402. /**
  403. * @brief 从用户空间搬运数据到内核空间
  404. *
  405. * @param dst 目的地址
  406. * @param src 源地址
  407. * @param size 搬运的大小
  408. * @return uint64_t
  409. */
  410. static inline uint64_t copy_from_user(void *dst, void *src, uint64_t size)
  411. {
  412. uint64_t tmp0, tmp1;
  413. if (!verify_area((uint64_t)src, size))
  414. return 0;
  415. /**
  416. * @brief 先每次搬运8 bytes,剩余就直接一个个byte搬运
  417. *
  418. */
  419. asm volatile("rep \n\t"
  420. "movsq \n\t"
  421. "movq %3, %0 \n\t"
  422. "rep \n\t"
  423. "movsb \n\t"
  424. : "=&c"(size), "=&D"(tmp0), "=&S"(tmp1)
  425. : "r"(size & 7), "0"(size >> 3), "1"(dst), "2"(src)
  426. : "memory");
  427. return size;
  428. }
  429. /**
  430. * @brief 从内核空间搬运数据到用户空间
  431. *
  432. * @param dst 目的地址
  433. * @param src 源地址
  434. * @param size 搬运的大小
  435. * @return uint64_t
  436. */
  437. static inline uint64_t copy_to_user(void *dst, void *src, uint64_t size)
  438. {
  439. uint64_t tmp0, tmp1;
  440. if (verify_area((uint64_t)src, size))
  441. return 0;
  442. /**
  443. * @brief 先每次搬运8 bytes,剩余就直接一个个byte搬运
  444. *
  445. */
  446. asm volatile("rep \n\t"
  447. "movsq \n\t"
  448. "movq %3, %0 \n\t"
  449. "rep \n\t"
  450. "movsb \n\t"
  451. : "=&c"(size), "=&D"(tmp0), "=&S"(tmp1)
  452. : "r"(size & 7), "0"(size >> 3), "1"(dst), "2"(src)
  453. : "memory");
  454. return size;
  455. }
  456. /**
  457. * @brief 这个函数让蜂鸣器发声,目前仅用于真机调试。未来将移除,请勿依赖此函数。
  458. *
  459. * @param times 发声循环多少遍
  460. */
  461. void __experimental_beep(uint64_t times);
  462. /**
  463. * @brief 往指定地址写入8字节
  464. * 防止由于编译器优化导致不支持的内存访问类型(尤其是在mmio的时候)
  465. *
  466. * @param vaddr 虚拟地址
  467. * @param value 要写入的值
  468. */
  469. static __always_inline void __write8b(uint64_t vaddr, uint64_t value)
  470. {
  471. asm volatile("movq %%rdx, 0(%%rax)" ::"a"(vaddr), "d"(value)
  472. : "memory");
  473. }
  474. /**
  475. * @brief 往指定地址写入4字节
  476. * 防止由于编译器优化导致不支持的内存访问类型(尤其是在mmio的时候)
  477. *
  478. * @param vaddr 虚拟地址
  479. * @param value 要写入的值
  480. */
  481. static __always_inline void __write4b(uint64_t vaddr, uint32_t value)
  482. {
  483. asm volatile("movl %%edx, 0(%%rax)" ::"a"(vaddr), "d"(value)
  484. : "memory");
  485. }
  486. /**
  487. * @brief 从指定地址读取8字节
  488. * 防止由于编译器优化导致不支持的内存访问类型(尤其是在mmio的时候)
  489. *
  490. * @param vaddr 虚拟地址
  491. * @return uint64_t 读取到的值
  492. */
  493. static __always_inline uint64_t __read8b(uint64_t vaddr)
  494. {
  495. uint64_t retval;
  496. asm volatile("movq 0(%%rax), %0"
  497. : "=r"(retval)
  498. : "a"(vaddr)
  499. : "memory");
  500. return retval;
  501. }
  502. /**
  503. * @brief 从指定地址读取4字节
  504. * 防止由于编译器优化导致不支持的内存访问类型(尤其是在mmio的时候)
  505. *
  506. * @param vaddr 虚拟地址
  507. * @return uint64_t 读取到的值
  508. */
  509. static __always_inline uint32_t __read4b(uint64_t vaddr)
  510. {
  511. uint32_t retval;
  512. asm volatile("movl 0(%%rax), %0"
  513. : "=d"(retval)
  514. : "a"(vaddr)
  515. : "memory");
  516. return retval;
  517. }
  518. /**
  519. * @brief 将数据从src搬运到dst,并能正确处理地址重叠的问题
  520. *
  521. * @param dst 目标地址指针
  522. * @param src 源地址指针
  523. * @param size 大小
  524. * @return void* 指向目标地址的指针
  525. */
  526. void *memmove(void *dst, const void *src, uint64_t size);