Ocupação de memória no ambiente do banco de dados SAP HANA
A memória é um recurso fundamental do banco de dados SAP HANA. Entender como o banco de dados SAP HANA solicita, usa e gerencia esse recurso é crucial para entender o SAP HANA.
O SAP HANA fornece vários indicadores de utilização de memória que permitem monitoramento, rastreamento e alertas. Os indicadores mais importantes são memória utilizada e pico de memória utilizada. Uma vez que o SAP HANA contém seu próprio gerenciador de memória e pool de memória, indicadores externos, como o tamanho da memória residente no nível do host e o tamanho da memória virtual e residente no nível do processo, podem ser enganosos quando você está estimando os requisitos reais de memória de uma implementação do SAP HANA.
Você pode encontrar informações detalhadas sobre a ocupação da memória de componentes SAP HANA individuais e operações executadas na aplicação Monitor de performance SAP HANA - Memória.
Nota
Memória virtual, física e residente
Em um utilitário SAP HANA típico, a parte da memória residente do sistema operacional e de todos os outros programas em execução geralmente não excede 2 GB. Por isso, a memória restante é dedicada ao SAP HANA.
Quando a memória é necessária para o crescimento da tabela ou para cálculos temporários, o código do SAP HANA o obtém do pool de memória existente. Quando o pool não satisfizer a solicitação, o gerenciador de memória do SAP HANA solicitará e reservará mais memória do sistema operacional. Neste ponto, o tamanho da memória virtual dos processos SAP HANA cresce.
Quando um cálculo temporário é concluído ou uma tabela é descartada, a memória liberada é retornada ao gerenciador de memória, que a recicla para seu pool sem informar o sistema operacional. Portanto, do ponto de vista do SAP HANA, a quantidade de memória usada diminui, mas os tamanhos de memória virtual e residente do processo não são afetados. Isso cria uma situação em que o valor da memória utilizada pode diminuir para abaixo do tamanho da memória residente do SAP HANA. Isso é normal.
Nota
Ocupação de memória SAP HANA e o sistema operacional
Devido à forma como o SAP HANA gerencia a memória, a relação entre os indicadores de memória Linux e os indicadores de memória próprios do SAP HANA pode não estar correlacionada como esperado.
Do ponto de vista do sistema operacional Linux, o SAP HANA é uma coleção de processos separados. Os programas Linux reservam memória para seu uso a partir do sistema operacional Linux. Toda a base de memória reservada de um programa é referida como sua memória virtual. Cada processo Linux tem sua própria memória virtual, que cresce quando o processo solicita mais memória do sistema operacional, e encolhe quando o processo abre mão de memória não usada. Você pode pensar no tamanho da memória virtual como a quantidade de memória que o processo solicitou (ou alocou) do sistema operacional, incluindo reservas para seu código, pilha, dados e pools de memória sob controle de programa.

Nota
Memória ocupada SAP HANA
A quantidade total de memória utilizada por SAP HANA é referida como memória utilizada. Ele inclui código e pilha de programas, todas as tabelas de dados e de sistema e a memória necessária para cálculos temporários.
O SAP HANA consiste em vários processos executados no ambiente operacional Linux. No Linux, o sistema operacional é responsável por reservar memória para todos os processos. Quando o SAP HANA é iniciado, o sistema operacional reserva memória para o código do programa (às vezes chamado de texto), a pilha de programas e dados estáticos. Em seguida, ele reserva dinamicamente memória de dados adicional quando solicitado pelo gerenciador de memória SAP HANA. A memória alocada dinamicamente consiste em memória heap e memória compartilhada.

Como o tamanho do código e da pilha de programas é de cerca de 6 GB, quase toda a memória usada é usada para armazenamento de tabelas, cálculos e gerenciamento de banco de dados.
A memória é um recurso fundamental do banco de dados SAP HANA. Entender como o banco de dados SAP HANA solicita, usa e gerencia esse recurso é crucial para entender o SAP HANA.
O SAP HANA fornece vários indicadores de utilização de memória que permitem o monitoramento, o rastreamento e os alertas. Os indicadores mais importantes são aqueles para memória utilizada e pico de memória utilizada. O SAP HANA contém seu próprio gerenciador de memória e pool de memória. Determinados indicadores externos podem ser enganosos ao estimar os requisitos reais de memória de uma implementação do SAP HANA. Exemplos desses indicadores incluem o tamanho da memória residente no nível do host e o tamanho da memória virtual e residente no nível do processo.
Memória utilizada do serviço
Um sistema SAP HANA consiste em vários serviços que consomem memória, em particular o serviço de servidor de índice, o serviço de banco de dados principal. O index server mantém todas as tabelas de dados e resultados temporários e, portanto, domina a memória usada do SAP HANA.
Máximo de memória ocupada
Em última análise, é mais importante entender o comportamento da memória utilizada ao longo do tempo e sob cargas de pico. Para isso, o SAP HANA tem um indicador especial de memória utilizada chamado pico de memória utilizada. Como o valor da memória usada é uma medição atual, o pico de memória usada permite que você monitore o valor máximo da memória usada ao longo do tempo.
Você também pode reinicializar o pico de memória utilizada. Isso pode ser útil se você quiser estabelecer o impacto de uma determinada carga de trabalho na ocupação da memória. Assim, por exemplo, você pode reinicializar o pico de memória utilizada, executar a carga de trabalho e, em seguida, examinar o novo valor de pico de memória utilizada.
Ocupação de memória de tabelas
A parte dominante da memória usada no banco de dados SAP HANA é a área usada pelas tabelas de dados. Estão disponíveis medições separadas para tabelas de armazenamento em colunas e tabelas de armazenamento em linhas.
Nota
O banco de dados SAP HANA carrega tabelas de armazenamento em colunas na memória, coluna a coluna, somente após a utilização. Isso às vezes é chamado de "carregamento preguiçoso". Isso significa que as colunas que nunca são usadas não serão carregadas e o desperdício de memória é evitado.
Quando o banco de dados SAP HANA ficar sem memória alocável, ele tentará liberar memória descarregando dados não importantes (como caches) e até mesmo colunas de tabela que não foram usadas recentemente. Portanto, se for importante medir com precisão a quantidade de memória total ou de pior caso usada para uma determinada tabela, é importante garantir que a tabela seja primeiro totalmente carregada na memória. Você pode efetuar isso carregando a tabela para a memória.
Ocupação de memória de instruções demoradas
Cada consulta e instrução consome memória, para a avaliação do plano de instruções, administração de cache e, principalmente, o cálculo de resultados intermediários e finais. Embora muitas execuções de instrução usem apenas uma quantidade moderada de memória, algumas consultas, por exemplo, usando cross joins não filtradas, tributarão até mesmo sistemas muito grandes.
Instruções pesadas são instruções SQL individuais cujo tempo de execução excedeu um limite configurado. As instruções demoradas rastreiam informações sobre essas instruções para análise posterior. Se, além de ativar o rastreamento de instruções caro, você ativar o rastreamento de memória por instrução, o rastreamento de instruções caro também exibirá o tamanho de memória de pico utilizado para executar instruções demoradas.
É possível proteger ainda mais um sistema SAP HANA contra a ocupação excessiva da memória devido a consultas não controladas, limitando a quantidade de memória utilizada por execuções de instrução individuais por host.
Estatística do alocador de memória
Informações detalhadas sobre a ocupação da memória podem ser encontradas consultando as estatísticas do alocador.
As estatísticas do alocador rastreiam a ocupação da memória de componentes e operações individuais no SAP HANA e podem ajudar você a analisar problemas relacionados à ocupação da memória. As estatísticas são gravadas nas visões do sistema M_HEAP_MEMORY (memória alocada por componente) e M_CONTEXT_MEMORY (memória alocada que pode ser associada a uma conexão, uma instrução ou um usuário). As duas visões têm uma funcionalidade de reinicialização para que as estatísticas possam ser capturadas por um período de tempo específico. O serviço de estatística incorporado também inclui uma visão que rastreia a alocação de memória por host, HOST_HEAP_ALLOCATORS.
Nota
As estatísticas do alocador são salvas automaticamente para cada processador principal e em determinados cenários em que os sistemas têm um grande número de núcleos lógicos, as estatísticas podem consumir uma quantidade significativa de memória. Para gravar o registro em log de estatística de memória pode ser reduzido, para gravar estatísticas somente para cada nó ou somente para cada objeto de estatística. Um exemplo de uso do comando lscpu para recuperar detalhes da arquitetura física e lógica da CPU é fornecido na seção Controle do consumo da CPU.
Você pode configurar esse recurso definindo valores para os dois parâmetros de configuração seguintes no arquivo global.ini:
- O parâmetro pool_statistics_striping pode reduzir a memória ocupada pela estatística de alocador específica do componente (linhas em M_HEAP_MEMORY com a categoria PoolAllocator).
- O parâmetro composite_statistics_striping pode reduzir a memória ocupada pela estatística de alocador específica do extrato (linhas em M_CONTEXT_MEMORY).
Os parâmetros podem ser definidos para um dos seguintes valores (a configuração pode ser modificada online, mas a modificação só afetará objetos de estatística recém-criados):
| Valor | Efeito |
|---|---|
| automático (valor padrão) | Deixe que o sistema decida a estratégia de estatística. Por padrão, o SAP HANA tentará utilizar o máximo de memória possível para um desempenho máximo. |
| núcleo | O sistema aloca uma faixa por núcleo lógico. |
| numa | O sistema aloca somente uma faixa por nó NUMA. |
| nenhum | Neste caso, o sistema cria uma faixa individual por objeto de estatística. |
Pools de memória e limites de alocação alocados
O SAP HANA, em todos os seus diferentes processos, reserva um pool de memória antes do uso real. Esse pool de memória alocada é pré-alocado do sistema operacional ao longo do tempo, até um limite de alocação global predefinido e, em seguida, é usado de forma eficiente pelo SAP HANA, conforme necessário.
O SAP HANA pré-aloca e gerencia seu próprio pool de memória, usado para armazenar dados de tabela na memória, pilhas de threads, resultados temporários e outras estruturas de dados do sistema. Quando mais memória é necessária para o crescimento da tabela ou cálculos temporários, o gerenciador de memória do SAP HANA a obtém do pool. Quando o pool não consegue atender à solicitação, o gerenciador de memória aumenta o tamanho do pool solicitando mais memória do sistema operacional, até um limite de alocação predefinido.
O parâmetro global_allocation_limit
O parâmetro global_allocation_limit é utilizado para limitar a quantidade de memória que pode ser utilizada pelo banco de dados SAP HANA. A unidade para este parâmetro é MB.
O valor proposto é 0 e, nesse caso, o limite de alocação global é calculado da seguinte forma:
- Regra de memória 1: <= 10GB – memória física no host menos 1 GB
- Regra de memória 2: >10GB to <= 64GB – 90% de memória física no host
- Regra de memória 2: > 64GB – Regra de memória 2 + 97% de cada GB adicional
Como alternativa, você pode definir esse limite como uma porcentagem flexível do tamanho da memória principal disponível. Se você inserir um valor percentual, o valor exato do limite será calculado automaticamente pelo sistema. O valor percentual é muito útil ao executar o SAP HANA em um ambiente virtual. Se você modificar o tamanho do container VM onde o sistema executa o limite de alocação, o ajuste automático para a porcentagem correta do novo tamanho do container VM.
Nota

Normalmente, não existe motivo para modificar o valor deste parâmetro, embora, por exemplo, em sistemas de desenvolvimento com mais de um sistema SAP HANA instalado em um único host, você possa limitar o tamanho do pool de memória para evitar contenções de recursos ou conflitos.
Uma alteração também pode ser necessária para permanecer em conformidade com a permissão de memória de sua licença se você adquiriu uma licença por menos do que a quantidade total de memória física disponível. Isso é ilustrado nos seguintes exemplos:
Para modificar o limite de atribuição de memória global, você deve efetuar o seguinte:
- Certifique-se de que você tem a autorização do sistema INIFILE ADMIN.
- Modifique o valor do parâmetro global_allocation_limit na seção global.ini do arquivo de configuração→: memorymanager usando o cockpit do SAP HANA ou SQL.
Cuidado
Se você só inserir um valor para o sistema, ele será utilizado para todos os hosts. Por exemplo, se você tiver cinco hosts e definir o limite para 5 GB, o banco de dados pode usar até 5 GB em cada host (25 GB no total). Se você inserir um valor para um host específico, para esse host, é usado o valor específico e o valor do sistema só é usado para todos os outros hosts. Isto só é relevante para sistemas de host múltiplo (distribuídos).
Limite de alocação de serviços

Além do limite de alocação global, cada serviço em execução no host tem um limite de alocação: o limite de alocação de serviço. Uma vez que, coletivamente, todos os serviços não podem consumir mais memória do que o limite de alocação global, cada serviço tem o que é chamado de limite efetivo de alocação. O limite efetivo de alocação de um serviço indica a quantidade de memória física que um serviço pode consumir na realidade, considerando a ocupação da memória atual de outros serviços.

O que acontece quando o limite de alocação é atingido?
A memória é um recurso finito. Assim que o limite de alocação for atingido e o pool estiver esgotado, o gerenciador de memória não poderá mais alocar memória para operações internas sem primeiro desistir de outra coisa. Os buffers e caches são liberados e as tabelas de armazenamento em colunas são descarregadas, coluna a coluna, com base em uma ordem menos utilizada recentemente, até um limite inferior predefinido. Quando as tabelas são particionadas por vários hosts, isso é gerenciado em uma base host a host, ou seja, as partições de coluna são descarregadas somente em hosts com uma escassez aguda de memória.
O descarregamento da tabela (coluna ou partição) geralmente não é uma boa situação, uma vez que leva à degradação da performance mais tarde quando os dados devem ser recarregados para consultas que necessitam deles. Você pode identificar a esgotamento do pool examinando a visão do sistema M_CS_UNLOADS.
No entanto, ainda é possível que o gerenciador de memória precise de mais memória do que o disponível, levando a uma falha de memória insuficiente. Isso pode acontecer, por exemplo, quando muitas transações simultâneas usam toda a memória ou quando uma consulta particularmente complexa executa uma junção cruzada em tabelas muito grandes e cria um grande resultado intermediário que excede a memória disponível.
Informações de memória no monitor de performance

Você pode encontrar o Monitor de performance, com todos os indicadores de memória pré-selecionados, no cartão Ocupação de memória do cockpit SAP HANA.
O Monitor de performance fornece uma síntese da situação geral da memória, com estatísticas baseadas no tempo para os seguintes indicadores:
- Memória residente do banco de dados
- Memória residente total
- Tamanho da memória física
- Memória ocupada do banco de dados
- Limite de alocação do banco de dados
Para todos os serviços em execução, ele fornece os seguintes códigos respectivos:
- Memória utilizada
- Limite de atribuição de memória
Informações de memória de comandos SQL

Nota SAP: 1969700 - A coleção de instruções SQL para SAP HANA contém vários comandos úteis para analisar problemas relacionados à memória. Com base em suas necessidades, você pode configurar restrições e parâmetros nas seções marcadas /* Seção de modificação */.
As consultas de análise relacionadas à memória mais importantes estão listadas aqui. Observe que algumas consultas têm variações específicas de versão identificadas nos nomes dos arquivos:
HANA_Memory_Overview_1.00.vv
Fornece uma síntese das informações de memória atuais.
HANA_Memory_TopConsumers_1.00.vv
Exibe as áreas com os mais altos requisitos de memória atuais: armazenamento em colunas e tabelas de armazenamento em linhas, heap, código e pilha.
HANA_Memory_SharedMemory*
Mostra a memória compartilhada atualmente utilizada e alocada por host e serviço.
HANA_Memory_TopConsumers_History_1.00.vv (+_ESS)
Exibe as áreas com os mais altos requisitos de memória histórica: armazenamento em colunas e tabelas de armazenamento em linhas, heap, código e pilha. Opcionalmente, ele pode incluir resultados para o servidor de estatísticas incorporado.
Informações de memória de logs e rastreamentos

No caso de problemas de memória críticos, muitas vezes você pode encontrar informações mais detalhadas em logs e arquivos de rastreamento, da seguinte forma:
Identificar erros relacionados à memória nos files de rastreamento de alerta do sistema SAP HANA. Procure as strings memory, allocat ou OOM.
Nota
A pesquisa não diferencia maiúsculas de minúsculas.
Verifique se foi criado um trace file Out of Memory (OOM).

No cockpit do SAP HANA, o número de eventos Sem memória (OOM) é exibido no cartão Ocupação de memória. Utilize a aplicação Analisar histórico de memória para investigar a causa raiz do OOM. Você pode encontrar a aplicação Analisar histórico de memória selecionando o botão Mais no cartão Ocupação de memória.
Selecione a guia Eventos de falta de memória para exibir no gráfico inferior o número de eventos únicos de falta de memória que ocorreram no intervalo de tempo especificado no cabeçalho. O número de eventos exibidos depende do intervalo de tempo selecionado, não da barra de seleção vertical. A lista mostra as seguintes informações sobre os eventos OOM:
- Ocorrências: o número de vezes que um evento OOM específico foi acionado
- Última ocorrência: a hora e a data da ocorrência mais recente do evento OOM
- Último motivo: o parâmetro que acionou a ocorrência mais recente do evento OOM
- Instrução: a instrução SQL relacionada ao evento OOM
- Hash de instrução: o identificador único para o evento OOM. Para abrir o Workload Analyzer e investigar o evento, selecione o identificador OOM.
Dica
Nos gráficos Estatísticas de memória, você pode optar por exibir dados históricos para um intervalo de tempo entre 24 horas e seis semanas. Para exibir um intervalo de datas superior a seis semanas (42 dias), você pode usar SQL para atualizar o valor RETENTION_DAYS_CURRENT na tabela _SYS_STATISTICS"."STATISTICS_SCHEDULE.
Se você precisar da ajuda do suporte ao cliente da SAP para realizar uma análise aprofundada, adicione ao ticket as seguintes informações valiosas:
Informações de diagnóstico (dump completo de informações do sistema)
Rastreamento de performance, que fornece informações detalhadas sobre o comportamento do sistema, incluindo detalhes de execução da instrução
A saída de rastreamento é escrita no trace file perftrace.tpt, que deve ser enviado ao suporte ao cliente da SAP.
Se componentes específicos do sistema SAP HANA precisarem de uma investigação mais profunda, o Suporte ao cliente da SAP poderá solicitar que você aumente os níveis de rastreamento correspondentes para INFO ou DEBUG. Para isso, siga estas etapas:
Inicie o assistente de rastreamento de banco de dados.
Marque o campo de seleção Exibir todos os componentes.
Insira a cadeia de pesquisa.
Selecione o componente encontrado no arquivo indexserver.ini.
Modifique o nível de rastreamento do sistema para os valores apropriados.
Alguns componentes de rastreamento, por exemplo join_eval = DEBUG, podem criar muitos megabytes de informações de rastreamento. Eles requerem um aumento dos valores maxfiles e maxfilesize na seção de rastreamento do arquivo global.ini.