Pular para o conteúdo principal
Consulta dados de e para um servidor HTTP/HTTPS remoto. Este motor é semelhante ao motor File. Sintaxe: URL(URL [,Format] [,CompressionMethod])
  • O parâmetro URL deve estar em conformidade com a estrutura de um Uniform Resource Locator. A URL especificada deve apontar para um servidor que use HTTP ou HTTPS. Isso não requer cabeçalhos adicionais para obter uma resposta do servidor.
  • O Format deve ser um formato que o ClickHouse possa usar em consultas SELECT e, se necessário, em INSERT. Para a lista completa de formatos compatíveis, consulte Formats. Se esse argumento não for especificado, o ClickHouse detectará o formato automaticamente pelo sufixo do parâmetro URL. Se o sufixo do parâmetro URL não corresponder a nenhum dos formatos compatíveis, a criação da tabela falhará. Por exemplo, para a expressão de motor URL('http://localhost/test.json'), o formato JSON é aplicado.
  • CompressionMethod indica se o corpo HTTP deve ser comprimido. Se a compressão estiver habilitada, os pacotes HTTP enviados pelo motor URL conterão o cabeçalho ‘Content-Encoding’ para indicar qual método de compressão está sendo usado.
Para habilitar a compressão, primeiro certifique-se de que o endpoint HTTP remoto indicado pelo parâmetro URL oferece suporte ao algoritmo de compressão correspondente. O CompressionMethod compatível deve ser um dos seguintes:
  • gzip or gz
  • deflate
  • brotli or br
  • lzma or xz
  • zstd or zst
  • lz4
  • bz2
  • snappy
  • none
  • auto
Se CompressionMethod não for especificado, o padrão será auto. Isso significa que o ClickHouse detecta automaticamente o método de compressão pelo sufixo do parâmetro URL. Se o sufixo corresponder a qualquer um dos métodos de compressão listados acima, a compressão correspondente será aplicada; caso contrário, nenhuma compressão será habilitada. Por exemplo, para a expressão de motor URL('http://localhost/test.gzip'), o método de compressão gzip é aplicado, mas para URL('http://localhost/test.fr'), nenhuma compressão é habilitada porque o sufixo fr não corresponde a nenhum dos métodos de compressão acima.

Uso

As consultas INSERT e SELECT são transformadas em requisições POST e GET, respectivamente. Para processar requisições POST, o servidor remoto deve oferecer suporte a Chunked transfer encoding. Você pode limitar o número máximo de redirecionamentos HTTP GET usando a configuração max_http_get_redirects.

Exemplo

1. Crie uma tabela url_engine_table no servidor:
2. Crie um servidor HTTP básico usando as ferramentas padrão do Python 3 e inicie-o:
3. Solicitar dados:

Detalhes da implementação

  • Leituras e gravações podem ocorrer em paralelo
  • Não há suporte a:
    • Operações ALTER e SELECT...SAMPLE.
    • Índices.
    • Replicação.

Colunas virtuais

  • _path — Caminho da URL. Tipo: LowCardinality(String).
  • _file — Nome do recurso da URL. Tipo: LowCardinality(String).
  • _size — Tamanho do recurso em bytes. Tipo: Nullable(UInt64). Se o tamanho for desconhecido, o valor será NULL.
  • _time — Hora da última modificação do arquivo. Tipo: Nullable(DateTime). Se a hora for desconhecida, o valor será NULL.
  • _headers - Cabeçalhos da resposta HTTP. Tipo: Map(LowCardinality(String), LowCardinality(String)).

Resolução de URLs relativas

A configuração url_base permite usar uma URL relativa no motor URL. Quando url_base está definido, a URL passada para o motor é resolvida com base nele, de acordo com a RFC 3986. Para ver uma descrição completa das regras de resolução, consulte a documentação da função de tabela url. Exemplo

Configurações de armazenamento

  • engine_url_skip_empty_files - permite ignorar arquivos vazios durante a leitura. Desativado por padrão.
  • enable_url_encoding - permite ativar/desativar a decodificação/codificação do caminho na URI. Ativado por padrão.
  • url_base - URL base para a resolução de URLs relativas passadas ao motor.
Última modificação em 19 de junho de 2026