Implementação de DMABUF e contabilidade de memória de GPU no Android 12

Mantenha tudo organizado com as coleções Salve e categorize o conteúdo com base nas suas preferências.

Esta página descreve as várias melhorias de contabilidade de memória introduzidas no Android 12.

Estatísticas de DMA-BUF em sysfs

No Android 11 e 12, a debugfs não pode ser montados nos builds do usuário. As estatísticas DMA-BUF foram adicionadas a sysfs no diretório /sys/kernel/dmabuf/buffers no Android 12.

A API libdmabufinfo analisou as estatísticas sysfs do DMA-BUF para mostrar estatísticas por exportador e por buffer.

Os drivers do kernel que exportam DMA-BUFs precisam definir o campo exp_name de struct dma_buf_export_info corretamente para o nome do exportador antes de invocar a API dma_buf_export() para criar um DMA-BUF. Isso é necessário para que libdmabufinfo e a ferramenta dmabuf_dump extraiam estatísticas por exportador, que são expostas em bugreport.

O dmabuf_dump ferramenta foi modificada para gerar essas informações com um novo argumento, -b.

Estatísticas do framework de heaps DMA-BUF

O ION na GKI 2.0 está sendo descontinuado e substituído pelo framework de heaps DMA-BUF. que faz parte do kernel do Linux upstream.

As seguintes estatísticas globais de ION são rastreadas no Android 11:

• Tamanho total de DMA-BUFs exportados por cada heap ION
• Tamanho total da memória pré-alocada não utilizada armazenada por cada heap ION

Não há interface disponível para expor estatísticas de heap por ION no Android 11.

A tabela a seguir compara as interfaces de estatísticas ION com as respectivas para dispositivos que usam o framework de heap DMA-BUF no Android 12.

Melhorar a precisão do cálculo de RAM perdida

Anteriormente, o cálculo da RAM perdida era feito da seguinte maneira:

lostRAM longo final = memInfo.getTotalSizeKb() - (totalPss - totalSwapPss)

memInfo.getFreeSizeKb() – memInfo.getCachedSizeKb()

- kernelUsed – memInfo.getZramTotalSizeKb()

O componente totalPss incluiu o uso de memória da GPU (retornado pela interface getMemory() do HAL do Memtrack). O componente kernelUsed incluía o uso total de memória DMA-BUF. No entanto, para dispositivos Android, a memória da GPU vem do seguinte:

• Alocações diretas feitas pelo driver da GPU usando o alocador de página física
• DMA-BUFs mapeados no espaço de endereço da GPU

Portanto, os DMA-BUFs que foram mapeados na memória para o espaço de endereço da GPU foram subtraídos duas vezes quando a RAM perdida foi calculada. Android 12 implementa uma solução para calcular o tamanho dos DMA-BUFs mapeados na GPU o que significa que ele é contabilizado apenas uma vez na Cálculo de RAM.

Os detalhes da solução são os seguintes:

• A API Memtrack HAL getMemory() quando chamado com PID 0, precisa informar o total global de memória privada da GPU, por MemtrackType::GL e MemtrackRecord::FLAG_SMAPS_UNACCOUNTED.
• getMemory() quando chamado com PID 0 para um MemtrackType diferente de GL não pode falhar. Em vez disso, ele deve retornar 0.
• A solução de tracepoint/eBPF de memória de GPU adicionada no Android 12 representa a memória total da GPU. Subtrair a memória privada total da GPU da memória total da GPU fornece o tamanho dos DMA-BUFs mapeados no espaço de endereço da GPU. O valor pode ser usado para aumentar a precisão dos cálculos de RAM perdida, contabilizando corretamente o uso de memória da GPU.
• A memória privada da GPU é incluída em totalPss na maioria das implementações do HAL do Memtrack e, portanto, precisa ser desduplicada antes de ser removida de lostRAM.

A solução implementada é detalhada na próxima seção.

Remover a variabilidade do Memtrack da RAM perdida

Como as implementações de HAL do Memtrack podem variar entre parceiros, a memória da GPU incluídos em totalPSS pela HAL nem sempre são consistentes. Para remover a variabilidade de lostRAM, a memória contabilizada em MemtrackType::GRAPHICS e MemtrackType::GL é removida de totalPss durante o cálculo de lostRAM.

A memória MemtrackType::GRAPHICS foi removida de totalPss e substituída por a memória totalExportedDmabuf no cálculo lostRAM em ActivityManagerService.java conforme mostrado abaixo:

final long totalExportedDmabuf = Debug.getDmabufTotalExportedKb();

. . .

final long dmabufUnmapped = totalExportedDmabuf - dmabufMapped;

. . .

// Account unmapped dmabufs as part of the kernel memory allocations
kernelUsed += dmabufUnmapped;

// Replace Memtrack HAL reported Graphics category with mapped dmabufs
totalPss -= totalMemtrackGraphics;
totalPss += dmabufMapped;

A memória MemtrackType::GL é removida de totalPss e substituída pela memória privada de GPU (gpuPrivateUsage) no cálculo de lostRAM em ActivityManagerService.java conforme mostrado abaixo:

final long gpuUsage = Debug.getGpuTotalUsageKb();

. . .

final long gpuPrivateUsage = Debug.getGpuPrivateMemoryKb();

. . .

// Replace the Memtrack HAL-reported GL category with private GPU allocations.
// Count it as part of the kernel memory allocations.
totalPss -= totalMemtrackGl;
kernelUsed += gpuPrivateUsage;

Atualização do cálculo de RAM perdida

A memória total da GPU privada e a memória total do buffer da DMA exportada são contido em kernelUsed + totalPss, que foi removido de lostRAM. Isso elimina a contagem dupla e a variabilidade do Memtrack da RAM perdida cálculo.

final long lostRAM = memInfo.getTotalSizeKb() - (totalPss - totalSwapPss)
- memInfo.getFreeSizeKb() - memInfo.getCachedSizeKb()
- kernelUsed - memInfo.getZramTotalSizeKb();

Validação

Os testes do VTS aplicam a regra de que os dispositivos lançados no Android 12 com uma versão 5.4 ou mais recente do kernel do Linux oferecem suporte à API getGpuDeviceInfo().

Uma nova API Memtrack HAL getGpuDeviceInfo() precisa retornar informações sobre o dispositivo de GPU em uso.

Isso melhora a contabilidade da memória e a visibilidade do buffer de DMA e da GPU e uso de memória. Implementar a HAL memtrack AIDL para melhorar a perda de RAM e memória da contabilidade. Esse recurso não depende dos Serviços do Google.

Implementação

Esse recurso depende da HAL de Memtrack AIDL, e instruções para implementá-lo no Android 12 são incluídos no código como comentários.

Todas as HALs de HIDL serão convertidas em AIDL em versões futuras.

As seguintes APIs foram adicionadas a core/java/android/os/Debug.java:

   /**
     * Return total memory size in kilobytes for exported DMA-BUFs or -1 if
     * the DMA-BUF sysfs stats at /sys/kernel/dmabuf/buffers could not be read.
     *
     * @hide
     */
    public static native long getDmabufTotalExportedKb();

   /**
     * Return memory size in kilobytes allocated for DMA-BUF heap pools or -1 if
     * /sys/kernel/dma_heap/total_pools_kb could not be read.
     *
     * @hide
     */
    public static native long getDmabufHeapPoolsSizeKb();

Para garantir que sua versão funcione conforme o esperado, integre os tracepoints à GPU e implementar a API AIDL memtrack getMemory() da HAL para retornar corretamente a memória global privada da GPU total quando chamado com PID 0 para MemtrackType::GL e MemtrackRecord::FLAG_SMAPS_UNACCOUNTED.