外设数据到昇腾310推理卡 之二dma_alloc_attrs

本文深入解析了Linux内核中`dma_alloc_attrs`API在ARM64架构下的工作原理，重点探讨了DMA缓存一致性的核心机制与设计选择。文章通过分析内存来源抉择、地址转换映射及缓存属性设定，揭示了如何为不同设备（如AI加速卡）配置高性能DMA缓冲区，并对比了流式映射与一致性维护的差异，为底层驱动开发和性能优化提供了实用指南。

linux dma

因为DMA受32位访问的限制，所以只能访问0x0000_0000到0xFFFF_FFFF地址空间的内存，再加上DMA需要访问连续的物理内存，故coherent pool，cma，buddy，swiotlb必须保证在0x0000_0000~0xFFFF_FFFF以内的连续物理空间。我们知道DMA映射有两种方式，一种是一致性映射 dma_alloc_coherent，一种是流式映射 dma_map_single （dma_map_sg可以映射多个dma buffer）。

系统 I/O 设备驱动程序通常调用其特定子系统的接口为 DMA 分配内存，但最终会调到 DMA 子系统的等接口。等接口通过 DMA IOMMU 的回调分配内存，并为经过 IOMMU 的 DMA 内存访问准备转换表。之后经过 IOMMU 的 DMA 内存访问所需的所有工作都已完成。音频子系统 ALSA 的驱动程序，通过等函数为 DMA 分配内存，这些函数定义 (位于和函数用于DMA 内存，两者的区别在于，前者为单个子流预分配，后者为某个 PCM 下的所有子流预分配。它们都通过函数为某个子流预分配内存。

linux 4.9 armv8 void *dma_alloc_coherent(struct device *dev, size_t size,dma_addr_t *dma_handle, gfp_t flag) 参数:dev device 结构体中有dma相关的控制比如dma_mask，dma_handle 作实参传递返回的pa，flag分配memory时的控制选项比如GFP_KER...

我们知道DMA通常需要访问连续的物理内存，除非设备支持iommu，当设备不支持iommu的话可以用以下方式：在内核启动时为设备保留内存将MMU内嵌到设备中，如GPU这里GPU MMU的方式...

上述使用ops->alloc来分配；

本文深入解析了昇腾310推理卡DMA内存分配的完整实战流程，重点探讨了如何利用dma_alloc_attrs接口高效分配设备可直接访问的内存缓冲区。文章详细分析了不同属性标志（如DMA_ATTR_WRITE_COMBINE）的应用场景、缓存一致性问题的处理策略，并结合昇腾310硬件特性，提供了从内存池选择到性能调优的完整解决方案，旨在帮助开发者构建稳定高效的外设数据传输通道。

本文深度解析了昇腾310推理卡开发中DMA内存分配的核心函数dma_alloc_attrs。文章从实战出发，详细剖析了硬件一致性内存、直接DMA分配和IOMMU映射三条内核分配路径，并重点解读了NO_KERNEL_MAPPING、WRITE_COMBINE等关键属性参数的适用场景与优化策略，旨在帮助开发者高效管理外设数据搬运，提升AI推理系统的整体性能与稳定性。

本文深入解析了在ARM64架构下，为昇腾310等AI推理卡进行DMA内存分配时，如何正确处理Cache一致性问题。文章详细探讨了`dma_alloc_attrs`函数的关键属性配置，对比了非缓存、写合并及系统缓存等不同策略的适用场景与潜在陷阱，并提供了驱动开发中的实战代码与性能优化指南，确保数据在CPU与专用加速器间高效、可靠传输。

但位置不同，kmalloc()分配的内存处于3GB～high_memory之间，而vmalloc()分配的内存在VMALLOC_START～4GB之间，也就是非连续内存区。由于 vmalloc() 没有保证申请到的是连续的物理内存，因此对申请的内存大小没有限制，如果需要申请较大的内存空间就需要用此函数了。kmalloc分配的内存，它的物理地址与虚拟地址只有一个PAGE_OFFSET偏移，不需要为地址段修改页表，而vmalloc分配内存时需要修改主内核页表.然后逐页分配内存来从物理上填充hole。

一般我们通过dma_alloc_coherent 和 dma_free_coherent 来申请和释放coherent memory。申请coherent memory的代价比较大，推荐只有在要申请的memory大于1个page是才推荐用，否则推荐用dma_pool 来申请. static inline void *dma_alloc_coherent(struct device *dev, s

我们在通过dma_alloc_coherent申请一致性dma内存 static inline void *dma_alloc_coherent(struct device *dev, size_t size,         dma_addr_t *dma_handle, gfp_t flag) {     return dma_alloc_attrs(dev, size, dma_ha

我们直到dma_alloc_coherent->dma_alloc_attrs static inline void *dma_alloc_attrs(struct device *dev, size_t size,                        dma_addr_t *dma_handle, gfp_t flag,                        unsign

一致性DMA:在驱动初始化时mapping，在驱动shutdown时unmapping**(意味着不是一次性的，是持续性的使用该DMA映射)**。硬件需要保证外设和CPU能并行访问同一块数据，并且保证在软件无显式flush操作的情况下，CPU和外设能同步看到对方对数据的更新。一致性(consistent)可以理解为同步(synchronous)。 api：dma_alloc_coherent 直接从dma区域申请内存。 流式DMA:一般是需要一次DMA transfer时map，传输结束后unm

1、从系统内存分配物理地址和虚拟地址 dma_alloc_coherent(dev, GFP_KERNEL | GFP_DMA) 可被中断 dma_alloc_coherent(dev, GFP_ATOMIC) = pci_alloc_consistent 从预留的cma_pool分配，不可被中断 上述直接调用方式只能从Iinux管理系统内存中动态分配 2、从mem_region区域分配内存 device_tree: aaa_pgtable_reserved { compatible....

returnvoid *cpu_addr =elsevoid *if (!return。

前言 前两个月去了祖国的三个城市旅游，分别是呼伦贝尔、重庆、三亚，感受下了下祖国的大好山河，舒服惬意。读万卷书，行万里路。有机会和还是要多出去看看外面的世界，长长见识，这些旅行阅历对个人的成长是非常有帮助的。这段时间的旅游，最大的收获就是感受大自然的美景，草原、山川、大海。也刷新了我的旅游空间范围，目前，去过的最东边是大阪（日本）、最西边是重庆、最北边是呼伦贝尔、最南边是三亚，后续有时间我也会写点“游记”分享下。 频繁的旅游，让我在专业学习上荒废了不少，看到之前定制的计划的月度计划没有完成，倍感罪孽深重。那

检查内核打印，给cma分配的地址是否在4G以上，dma_allocat_coherent() 要求地址低于掩码[(0x1 << 32)-1] = 0xFFFFFFFF。4M这个限制是本身应该是分的普通内存的限制， 例如把配置加一个CONFIG_FORCE_MAX_ZONEORDER=16把最大限制改成128M也能解决。使用这个接口最大只能申请到4M的内存，申请超过4M时，报。在dts中添加cma节点，可指定cma大小和空间。，dma分配默认会走cma，空间会大点。可配置大小，也可指定地址。