Redis Cluster

funcional

Redis Cluster, modo cluster do ElastiCache e MemoryDB: roteamento de slots, um mapa de nós para endereços de nós inacessíveis, encaminhamentos SSH por nó e topologia.

O SQLLY se conecta ao Redis Cluster, a clusters auto-hospedados, ao Amazon ElastiCache em modo cluster e ao Amazon MemoryDB - e roteia cada comando para o nó que tem o slot de hash da chave. Quando o cluster move um slot (um failover ou um resharding), o cliente segue o MOVED ou ASK responde, atualiza seu mapa de slots e informa quantos redirecionamentos um script viu. O navegador de chaves, o analisador de memória, as ações em massa, o Profiler e o visualizador Pub/Sub funcionam em todos os masters.

Conectando

Crie uma conexão Redis como de costume. Em Servidor você pode listar vários nós semente, separados por vírgula (10.0.0.1:7000, 10.0.0.2:7001); uma entrada sem porta utiliza a Porta campo. Colar um URL como redis://user:[email protected]:7000,10.0.0.2:7001 mantém todos os hosts. Sob Modo cluster escolher:

  • Detectar automaticamente (o padrão) - a primeira conexão pergunta ao servidor INFO cluster e lembra a resposta até você sair, então um único servidor custa uma verificação extra por sessão e nada mais muda.
  • Servidor único - nunca roteie por slot, mesmo que o servidor seja um nó do cluster.
  • Redis Cluster - sempre rotear por slot.

Um cluster tem um só banco de dados lógico, então deixe Banco de dados em branco ou defina como 0. Para ElastiCache, aponte a conexão para o endpoint de configuração do cluster; MemoryDB é sempre um cluster.

Mapa de nós: quando os nós anunciam endereços que você não consegue acessar

Os nós do cluster dizem aos clientes onde estão os outros nós, usando os endereços que foram configurados para anunciar. Por trás de NAT, um mapeamento de porta do Docker ou um bastião SSH, esses frequentemente são endereços privados que esta máquina não consegue alcançar. O Mapa de nós do cluster campo os reescreve: um advertised host:port => dial host:port por linha, por exemplo 10.0.0.5:7001 => 127.0.0.1:17001. O endereço divulgado continua nomeando o nó (no mapa de slots, em redirecionamentos e como nome do servidor TLS); somente o socket vai para o endereço de conexão.

Túneis SSH e proxies alcançam todos os nós. Em uma conexão com saltos SSH ou um proxy SOCKS/HTTP, o SQLLY abre um encaminhamento local separado para cada nó que o cluster nomeia, através dos mesmos saltos, para que um endereço de nó que apenas o bastião pode alcançar ainda funcione. O mapa de nós é aplicado primeiro, então ele também pode reescrever o que o bastião acessa. Um redirecionamento de porta do Kubernetes transporta uma porta de serviço, então ele só pode alcançar o nó semente, e conexões através de uma ponte de retransmissão ainda não suportam o modo cluster.

O que o editor recusa em um cluster

Cada comando é recusado antes de ser enviado, com uma mensagem que nomeia a regra:

  • Comandos multi-chave entre slots - MGET, MSET, DEL com várias chaves, SUNION, RENAME, EVAL com várias chaves e similares, execute apenas quando cada chave corresponder ao mesmo slot. Dê às chaves relacionadas uma hashtag comum: user:{42}:profile e user:{42}:cart compartilhar um slot.
  • SELECT de qualquer coisa diferente de 0 - um cluster tem um banco de dados lógico.
  • KEYS e SCAN - KEYS bloquearia todos os mestres, e um SCAN o cursor pertence a um nó. Use o navegador de chaves ou SQLLY.KEYS pattern [limit [cursor]], que percorre cada mestre em páginas e retorna um cursor que continua entre eles.
  • MULTI / EXEC - cada comando é roteado por conta própria, então uma transação não consegue ficar em um único nó vindo do editor.

Executando um comando nos nós escolhidos

Adicione um prefixo à linha com SQLLY.ON e um destino para enviá-la aos nós que você escolher, em vez do nó que possui sua chave. O destino é masters, replicas, all, de um nó host:port como a exibição da Topologia do Cluster lista, ou vários desses separados por vírgulas:

  • SQLLY.ON masters DBSIZE - uma linha por mestre com sua contagem de chaves.
  • SQLLY.ON masters FLUSHALL - esvazia cada mestre (as réplicas seguem).
  • SQLLY.ON 10.0.0.4:7003 INFO replication - a resposta de uma única réplica.
  • SQLLY.ON replicas DBSIZE - confira se cada réplica tem tantas chaves quanto o mestre dela.

A linha é executada em cada nó exatamente como digitada, do jeito redis-cli funciona sem -c: nenhum redirecionamento é seguido, então um nó que não possui uma chave responde MOVED, e os comandos recusados acima (KEYS, SCAN) são executados no nó escolhido. As réplicas são alternadas para READONLY primeiro, para que atendam leituras de chaves. Vários nós respondem em uma grade com nó e função colunas, e um nó que responde com um erro recebe sua própria linha; cada nó está conectado antes que o comando seja executado em qualquer lugar, então um nó inacessível interrompe a linha antes de qualquer nó executá-lo. O prefixo não altera nada sobre a segurança: uma conexão somente leitura ainda se recusa SQLLY.ON masters FLUSHALL, e comandos de escrita e destrutivos ainda pedem confirmação. Na visualização da Topologia do Cluster, selecione um nó e pressione Consulta no nó para abrir uma aba de consulta que começa na linha desse nó.

Quando o cliente seguiu redirecionamentos enquanto um script era executado, o painel de Mensagens indica quantos (por exemplo, após um failover). Isso é normal logo após o cluster mover slots; um fluxo constante de redirecionamentos indica que um resharding está em andamento.

Ferramentas para todo o cluster

  • Navegador de chaves - lista chaves de todos os mestres em rodízio, até o seu limite habitual; quando para antes, a linha de nota diz quantas chaves foram varridas em quantos mestres, e Varrer mais continua no nó onde parou.
  • Analisador de memória - a amostra é dividida entre os mestres em proporção à contagem de chaves de cada um, e o total é somado entre eles.
  • Exclusão em massa - as chaves correspondentes são agrupadas por slot de hash para que cada UNLINK lote permaneça dentro de um slot.
  • Profiler - executa MONITOR em todos os masters de uma vez e mescla os fluxos em uma tabela com um nó coluna.
  • Visualizador Pub/Sub - notificações de keyspace são assinadas em todos os mestres (elas são por nó), enquanto canais e padrões comuns ficam em um mestre (um cluster entrega PUBLISH em todos os lugares), e canais particionados - insira-os com um #, como #orders - no mestre que é dono de cada canal. As linhas trazem um nó coluna. Canais particionados também funcionam em um servidor Redis 7 standalone.

Topologia do Cluster

Clique com o botão direito em um banco de dados Redis e escolha Ferramentas › Topologia do Cluster…, execute Topologia do Cluster Redis… pela paleta de comandos, ou use o link no Painel do Servidor de uma conexão de cluster. O painel lista todos os nós de CLUSTER SHARDS (ou CLUSTER NODES em servidores anteriores à versão 7.0): seu id, função, o endereço que anuncia, o endereço que o SQLLY usa para conectar nele, o hostname anunciado e o nome do servidor TLS que o cliente envia, seus slots, estado de saúde, offset de replicação e estado do link. O rodapé conta masters e réplicas, verifica se todos os 16.384 slots estão cobertos e indica qualquer nó que não esteja saudável ou que seja acessado em um endereço diferente do que anuncia.

Rastreamento executa a mesma verificação passo a passo que Test Connection contra cada nó, pesquisa de nome, túnel ou proxy (com o mapa de nós), TCP, TLS (verificado contra o endereço que o nó anuncia), login, protocolo e ping, banco de dados, e CLUSTER INFO - uma linha por etapa, então a primeira linha que falha diz o que corrigir: uma entrada errada no mapa de nós, uma porta bloqueada, uma incompatibilidade de nome TLS, um problema de ACL ou um nó que não reporta um cluster saudável. Ambos os relatórios também estão disponíveis como SQLLY.TOPOLOGY e SQLLY.TRACE em uma aba de consulta; são somente leitura.