Observação
O acesso a essa página exige autorização. Você pode tentar entrar ou alterar diretórios.
O acesso a essa página exige autorização. Você pode tentar alterar os diretórios.
A seguir, descreve as melhorias e atualizações no DATAbricks SQL de janeiro a dezembro de 2023.
21 de dezembro de 2023
- O tipo de visualização do Contador Lakeview mostra cores ao comparar
BigIntvalores nos campos de Valor e Destino principais. - As descrições de ferramenta que aparecem ao ativar ou desativar a visibilidade da coluna em tabelas no Lakeview foram aprimoradas. Eles se comportam conforme o esperado e não persistem.
- Agora, os usuários podem usar o Assistente do Databricks para criar visualizações no Lakeview. Consulte Usar o Genie Code para criação de dashboard.
- Para novos gráficos, os gráficos do tipo mapa de calor respeitam a configuração reverseY.
- Corrigido um problema de desempenho de renderização para notebooks com um grande número de visualizações.
14 de dezembro de 2023
- Corrigido um bug em que os painéis do Lakeview não apareciam na página de listagem do Lakeview sem precisar fazer uma atualização manual da página.
- Use a chave de escape para cancelar a criação de um widget Lakeview ao colocá-la na tela.
- O Explorador de Catálogos agora exibe índices de Busca em Vetores na interface do usuário como parte da visualização pública da Busca em Vetores do Mosaic AI.
7 de dezembro de 2023
Atualizações da interface do usuário
- Os painéis do Lakeview podem ser adicionados aos favoritos para acesso rápido.
- Há suporte para copiar e colar atalhos de teclado durante a elaboração de um painel do Lakeview. Além disso, a chave de exclusão remove widgets selecionados.
- Títulos e descrições avançados do widget lakeview para impedir o recorte de texto durante a carga.
- Problema de formatação de visualização corrigido em que valores inteiros grandes eram exibidos erroneamente como flutuantes.
- Correção de um problema com painéis SQL do Databricks em que exibições expandidas do gráfico às vezes mostravam gráficos em branco.
- Gráficos de barras com campos quantitativos em eixos X e Y renderizam rótulos de dados mais legíveis.
- Correção de um problema no Editor de SQL para que as tabelas com a palavra
streamno título não entrem mais em conflito com a palavra-chave reservada. Essas tabelas agora aparecem conforme esperado no navegador de esquema e não são destacadas como erro. - A página de histórico de consultas agora dá suporte a redimensionamento de coluna e seleções de coluna.
- A página de histórico de consultas dá suporte a duas novas colunas: origem da consulta e o tipo de origem de consulta.
- As opções de BI, como Tableau e Power BI, são mais fáceis de encontrar no Gerenciador de Catálogos em páginas qualificadas.
30 de novembro de 2023
Atualizações da interface do usuário
Os recursos listados nesta seção são independentes das versões de computação do SQL Warehouse descritas acima.
- Os gráficos de pizza no Lakeview agora podem ter atribuições de cores personalizadas.
- As transformações de visualização no Lakeview agora são mantidas ao alternar entre tipos de campo compatíveis.
- Adicionadas configurações de título para canais de ângulo do gráfico de pizza do Lakeview.
- A lista suspensa de conjuntos de dados do Lakeview agora pode ser pesquisada para facilitar a navegação.
- O Lakeview dá suporte à exibição numérica completa para valores inferiores a 10.000, eliminando abreviações.
- Adicionada capacidade de codificar campos de data categóricos no Lakeview.
- Agora, os usuários do Lakeview podem realçar legendas de gráfico com o cursor para copiar e colar os valores.
- Os gráficos de pizza no Lakeview agora têm uma opção de alternância de rótulo.
- Padronizado uma cor azul padrão em todas as visualizações do Lakeview.
- Ícones de coluna Lakeview em transformações agora correspondem de forma consistente ao método de transformação usado.
- Os controles do painel de edição do Lakeview agora se ajustam automaticamente para melhorar a legibilidade.
- Lançou um editor de cores aprimorado para visualizações do Lakeview.
- O controle para condições de fonte de tabela no Lakeview agora é empacotado para melhorar a legibilidade.
- Compatibilidade com o modo escuro aprimorada para rótulos em novos gráficos.
- Os novos gráficos agora priorizam consistentemente a exibição de rótulo dentro das barras.
- Correção de um bug em que algumas ações de menu com o botão direito do mouse não estavam funcionando no Editor do SQL.
16 de novembro de 2023
Atualizações da interface do usuário
Os recursos listados nesta seção são independentes das versões de computação do SQL Warehouse descritas acima.
- As consultas, alertas e painéis do SQL do Databricks têm um novo agendador e uma nova interface de agendamento.
- Agora ficou mais fácil redimensionar widgets do Lakeview devido a uma zona de gatilho de redimensionamento maior.
- Os administradores do workspace agora podem alterar o proprietário de um painel do Lakeview. No modo de edição de um painel do Lakeview:
- Clique em Compartilhar
- Clique no
- Clique em Atribuir novo proprietário
- Os usuários podem ativar ou desativar rótulos no Lakeview.
Visualizações:
- Os novos rótulos de gráfico agora preferem preferencialmente estar dentro de uma barra, quando possível.
- Os novos rótulos de gráfico agora aparecem corretamente em barras empilhadas que são largas o suficiente para mostrar todo o rótulo.
- As cores do rótulo dentro dos gráficos de barras agora são mais consistentes.
9 de novembro de 2023
Alterações em 2023.50:
Destaques:
- Agora você pode usar invocação de parâmetro com nome em SQL e Python UDF.
Atualizações da linguagem SQL: As seguintes funções internas foram adicionadas:
-
from_xml: analisa um XMLSTRINGem umSTRUCT. -
schema_of_xml: deriva um esquema de um XMLSTRING. -
session_user: retorna o usuário conectado. -
try_reflect: retornaNULLem vez da exceção se um método Java falhar.
As seguintes funções internas foram aprimoradas:
-
invocação de função. Argumentos de tabela para funções dão suporte a particionamento e ordenação: agora você pode usar
PARTITION BYeORDER BYcláusulas para controlar como os argumentos de tabela são passados para uma função. -
mode: suporte para um parâmetro opcional forçando um resultado determinístico. -
to_char: novo suporte paraDATE,TIMESTAMPeBINARY. -
to_varchar: novo suporte paraDATE,TIMESTAMPeBINARY. -
array_insert()é baseado em 1 para índices negativos: aarray_insertfunção é baseada em 1 para índices positivos e negativos. Agora ela insere um novo elemento no final das matrizes de entrada para o índice -1.
Atualizações da interface do usuário
Os recursos listados nesta seção são independentes das versões de computação do SQL Warehouse descritas acima.
Visualizações:
- As descrições de ferramenta para novos gráficos mostram apenas os itens sobre os quais o cursor está para gráficos de alta cardinalidade.
- Novos gráficos alinham automaticamente os gráficos de eixo duplo em zero.
- Os gráficos alteraram a direção do ângulo do texto do rótulo e do eixo rotacionados de -90 para 90 graus.
- Os gráficos agora usam a largura do rótulo para decidir a rotação.
Painéis do Lakeview:
- Correção: As linhas de tabela nos dashboards Lakeview não adicionam mais preenchimento vertical quando são retornadas apenas algumas linhas.
- A clonagem de um novo widget de painel do Lakeview tenta primeiro tenta posicionar o clone à direita do original, desde que haja espaço suficiente na tela. Se o espaço insuficiente estiver disponível, o clone será colocado abaixo do original.
- Agora você pode reatribuir o proprietário de um painel do Lakeview por meio da caixa de diálogo Compartilhar.
Editor do SQL: O preenchimento automático agora é menos agressivo e é descartado automaticamente no final das instruções
2 de novembro de 2023
Aprimoramentos:
As seguintes são melhorias na linhagem do painel do Lakeview:
- Foram adicionados ícones distintos para tabelas, exibições e exibições materializadas.
- Adicionado suporte para rolagem vertical no caso de muitas fontes de dados upstream.
- Mensagem de erro aprimorada quando o visualizador não tem permissões no objeto upstream.
- Mensagens esclarecidas sobre tabelas de dados de exemplo e dados HMS.
- Etiquetas de chave-valor adicionadas às fontes de dados de origem.
Correção:
- Correção de um problema em novos gráficos que impedia a renderização após renomear uma série com valores booleanos.
26 de outubro de 2023
Alterações no Databricks SQL versão 2023.45
Destaques:
- A E/S preditiva para atualizações está agora em disponibilidade geral. Veja o que é Entrada/Saída preditiva?
- Os vetores de exclusão estão agora em disponibilidade geral. Veja o que são vetores de exclusão?
Otimizações de consulta:
- Foi removida a junção externa se todas elas forem funções de agregação distintas. SPARK-42583
- Otimizado a ordem dos predicados de filtragem. SPARK-40045
Atualizações da função SQL:
- Adicionado suporte para resolução implícita do alias da coluna lateral em
Aggregate. SPARK-41631 - Suporte para alias de coluna lateral implícito em consultas com Windows. SPARK-42217
- Suporte para Datasketches
HLLSketch. Consultehll_sketch_agga função de agregação. - Adicionada a função
try_aes_decrypt(). Veja atry_aes_decryptfunção. - Suporte para o modo CBC para
aes_encrypt()eaes_decrypt(). Veja aaes_decryptfunção. - Adicione aliases de função de 3 args DATE_ADD e DATE_DIFF.
- Adicionado suporte para aes_encrypt IVs e AAD. SPARK-43290
- Implementar funções de bitmap. SPARK-44154
- Adicionado o alias
to_varcharparato_char. Veja ato_varcharfunção. - Suporte
array_compactadicionado. Veja aarray_compactfunção. - Suporte para UDF
luhn_check. Veja aluhn_checkfunção. - Adicionado suporte de análise de argumentos nomeados para funções embutidas. SPARK-44059
- Suporte para a regra do analisador de argumentos
TABLEparaTableValuedFunction. SPARK-44200 -
array_insertagora falha com índice 0. SPARK-43011 - Adicionados os valores
NULLparaINSERTcom listas especificadas pelo usuário com menos colunas ao invés da tabela de destino. SPARK-42521 -
DECODEa função retorna resultados incorretos quando passada NULL. SPARK-41668
Atualizações da interface do usuário
Aprimoramentos:
- O editor de SQL do Lakeview agora dá suporte a atalhos de teclado para executar consultas.
- Os filtros em Lakeview agora listam seleções de intervalo de datas relativas rápidas para os últimos 7, 14, 28, 30, 60 e 90 dias.
- Períodos nos nomes dos campos de dados não resultam mais em gráficos em branco.
- O navegador de esquema herdado agora funciona com o Catálogo do Unity.
- Melhorias de desempenho implementadas para carregar apenas a guia ativa no Editor de SQL, diminuindo o tempo de carga inicial em até 20%.
- Os comentários de tabela gerados por IA no Gerenciador de Catálogos agora estão disponíveis em geral.
Correções:
- As barras nos gráficos de barras temporais agora estão centralizadas sobre a marca de escala de data.
- Os modelos de rótulo de dados com expressões de agregação agora usam os formatadores numéricos adequados.
- O zoom em novos gráficos agora funciona com uma escala configurada para categórica usando dados temporais.
Novo artigo:
- Lançou um novo artigo mostrando todas as visualizações do Lakeview, incluindo capturas de tela e anotações mostrando como recriar cada uma das visualizações em cada captura de tela. Consulte os tipos de visualização do painel de IA/BI.
19 de outubro de 2023
Aprimoramentos:
- A funcionalidade de arrastar e soltar no navegador de esquemas agora está disponível.
- O modal Selecionar Tabela nos painéis do Lakeview facilita a seleção de todas as tabelas em um catálogo ou esquema e agora usa previsões de pesquisa de preenchimento automático conforme você digita.
Correções:
- As instruções de dica de ferramenta de seleção de legenda especificam que usuários de Mac usem
cmde usuários do Windows usemctrl.
- Visibilidade avançada de mensagens truncadas nos painéis do Lakeview quando os dados renderizados excedem os limites.
- Gráficos com dados truncados exibem cores consistentes, como visto no editor.
12 de outubro de 2023
Aprimoramentos:
- Os valores de filtro de texto que contêm caracteres especiais agora são filtrados corretamente nos painéis do Lakeview.
- Novos gráficos suportam rótulos de dados
@@nameem gráficos de dispersão. - Formatos de porcentagem personalizados se aplicam às dicas de ferramenta de gráficos agrupados em novos gráficos.
- A interface do usuário da extensão de associação do espaço de trabalho está em disponibilidade geral.
Correções:
- Renderização de rótulos aprimorada em novos gráficos para evitar que os rótulos ultrapassem os limites do gráfico.
- Contraste das linhas de tique e grade nos novos gráficos aumentado para melhorar a visibilidade.
- Foi aumentado o espaçamento do rótulo do eixo para melhorar a legibilidade em novos gráficos.
5 de outubro de 2023
Aprimoramentos:
- Dicas de ferramenta precisas foram adicionadas para ações de modo de publicação e linhagem de data nos painéis do Lakeview.
- A formatação condicional e os modelos de link nas visualizações de tabela do Lakeview agora dão suporte a colunas ocultas.
- Posicionamento otimizado de rótulos para gráficos temporais de barras largas para melhorar a clareza em novos gráficos.
- A visualização do contador no Lakeview mantém suas transformações mesmo após a remoção de outros campos, garantindo a consistência.
- Ao passar o mouse sobre uma série em um gráfico, as séries ao redor são atenuadas na dica de ferramenta para melhorar a legibilidade nos novos gráficos.
- Novos gráficos que usam valores percentuais agora exibem dicas de ferramenta com valores absolutos.
- Suporte a preenchimento automático adicionado para a criação de volumes.
- Fechar uma guia não ativa não alterna mais as guias.
- A execução selecionada indica claramente ao realçar o texto.
Correções:
- Aprimoramento do texto da mensagem de erro em tabelas dinâmicas quando os dados são truncados.
- Corrigido um erro de renderização em Tabelas Dinâmicas onde as cores não eram mostradas quando se usavam tipos de dados BigInt.
- Ao baixar PNGs em novos gráficos com muitos itens de legenda, o símbolo de cor para entradas de legenda de estouro foi removido.
- As linhas em novos gráficos manterão uma espessura consistente mesmo no limite de exibição mais alto.
- No Lakeview, se nenhum conjunto de dados existir, o seletor de conjunto de dados na Tela estará vazio.
- Os Pipelines Declarativos do Spark no Lakeflow são detectados corretamente pelo Analisador de SQL e não são exibidos como tabelas inválidas no Schema Browser.
- As dicas de ferramenta foram adicionadas à barra lateral.
28 de setembro de 2023
Aprimoramentos:
- Os painéis publicados do Lakeview agora têm um botão de atualização.
- Mensagens de erro aprimoradas para usuários que não têm acesso a um painel do Lakeview.
- A configuração de filtro nos painéis do Lakeview agora lista campos válidos na parte superior da lista de seleção.
- Baixar um gráfico como um arquivo PNG de um painel do Lakeview agora preserva o título e a descrição.
- O aprimoramento do histórico de tabelas delta no Gerenciador de Catálogos inclui a adição de filtros para o intervalo de datas, o usuário e o tipo de operação, bem como colunas classificáveis e links embutidos para Trabalhos e Notebooks associados.
- Suporte ao modo escuro adicionado em legendas, dicas de ferramenta e visualização de tabela.
Correção:
- As seleções de filtro não são mais limpas ao atualizar um painel do Lakeview.
21 de setembro de 2023
Aprimoramentos:
- O desempenho de renderização da Tabela Dinâmica foi aprimorado.
- Novo padrão DuBois para exibições tabulares de linhagem na interface do usuário.
14 de setembro de 2023
Aperfeiçoamento:
- Os nomes de arquivo agora são preservados ao baixar PNGs em novas visualizações de gráfico. Consulte Visualizações nos notebooks do Databricks e no editor de SQL.
7 de setembro de 2023
Databricks SQL versão 2023.40 disponível
Cronograma de Implementação
- Lançamento da visualização para 2023.40: entre 5 de setembro de 2023 e 11 de setembro de 2023
- Distribuição atual para 2023.40: Entre 18 e 25 de setembro de 2023
Alterações em 2023.40:
- As tags agora estão disponíveis com o Catálogo do Unity.
- O Databricks Runtime retornará um erro se um arquivo for modificado entre o planejamento de consulta e a invocação.
- Suporte ao driver ODBC/JDBC do Azure Databricks.
- Habilitar a rotulagem de colunas de série temporal.
- Novas funções SQL de bitmap.
- Funções de criptografia aprimoradas.
- Suporte do Catálogo do Unity para
REFRESH FOREIGN. -
INSERT BY NAMEagora é suportado. - Compartilhe visões materializadas com o Delta Sharing.
Atualizações da interface do usuário
Aprimoramentos:
- Novos gráficos agora estão disponíveis, apresentando desempenho de renderização mais rápido, cores bonitas e interatividade aprimorada. Consulte Visualizações nos notebooks do Databricks e no editor de SQL.
- Na exibição de gráfico do Perfil de Consulta, agora você pode exibir o tipo de Junção em qualquer nó que contenha uma junção no plano de consulta.
- Data Explorer é renomeado para Gerenciador de Catálogos para reconhecer o fato de que você pode usá-lo para trabalhar com todos os objetos protegíveis no Catálogo do Unity, não apenas objetos de dados. Consulte O que é o Explorador de Catálogos?.
- A API de Execução de Instrução do SQL do Databricks agora está em GA com a Versão 2023.35 do SQL do Databricks e superior. A API permite enviar instruções SQL para execução em um databricks SQL Warehouse, verificar o status e buscar resultados ou cancelar uma execução de instrução SQL em execução. Consulte a API de Execução de Declaração.
31 de agosto de 2023
Novo recurso:
- A marcação do Catálogo do Unity está em Visualização Pública. Você pode usar tags para simplificar a pesquisa e a descoberta de seus ativos de dados. Veja Aplicar etiquetas a objetos securitizáveis do Unity Catalog.
24 de agosto de 2023
Aperfeiçoamento:
- O preenchimento automático para de sugerir recomendações depois de pressionar a barra de espaços.
- O Navegador de Esquemas não vê mais os Pipelines Declarativos
livedo Spark no Lakeflow como tabelas quebradas.
16 de agosto de 2023
Aperfeiçoamento:
- A lista suspensa Catálogo no editor SQL agora é fechada quando você alterna entre as guias. Anteriormente, ao alternar entre guias, a lista suspensa permanecia aberta.
10 de agosto de 2023
Aperfeiçoamento:
- O preenchimento automático agora suporta a nova sintaxe para definir tags do Catálogo do Unity. Para obter informações sobre comandos, consulte a referência de linguagem SQL.
3 de agosto de 2023
Aprimoramentos:
- O Editor de Mônaco subjacente agora usa a versão 37.1.
- Suporte ao preenchimento automático para comandos Delta
SHOW ARCHIVED FILES FOR.
27 de julho de 2023
Aprimoramentos:
- O editor do SQL agora é compatível com caracteres de quebra de linha do Windows, garantindo que a formatação da consulta funcione conforme o esperado em todos os casos.
- Você pode abrir a navegação do perfil da consulta a partir dos resultados do notebook. Para consultas, execute sua consulta com o SQL Warehouse.
20 de julho de 2023
Databricks SQL versão 2023.35 disponível
Cronograma de Implementação
- Lançamento da visualização para 2023.35: entre 18 de julho de 2023 e 24 de julho de 2023
- Distribuição atual para 2023.35: entre 31 de julho de 2023 e 8 de agosto de 2023
Alterações em 2023.35:
- Confiabilidade avançada para
VACUUMcom o clone superficial no Catálogo do Unity. - Suporte para Python UDFs no SQL.
- O Delta Lake UniForm para Apache Iceberg está em versão prévia pública.
- O clustering líquido do Delta Lake está em Visualização Pública.
- Suporte de arquivamento para Delta Lake.
- Suporte à cláusula IDENTIFIER.
- Suporte do Catálogo do Unity para Funções Definidas pelo Usuário (UDFs) em Python e Pandas.
Aperfeiçoamento:
- A popularidade da tabela no Explorador de Catálogos está disponível para todos os usuários do Catálogo do Unity.
13 de julho de 2023
Aperfeiçoamento:
- Os usuários do Catálogo do Unity agora podem exibir informações adicionais de tabela no Gerenciador de Catálogos, como tabelas ingressadas com frequência, usuários frequentes de uma determinada tabela e notebooks e dashboards usados com frequência.
22 de junho de 2023
Visualização pública:
- O Databricks SQL agora dá suporte a grandes modelos de linguagem (LLMs) hospedados em endpoints de serviço de modelo. Chame
ai_query()para acessar sua LLM. Essa função só está disponível na Visualização Pública no Databricks SQL Pro e Serverless. Para participar da Visualização Pública, envie o formulário de registro de Visualização Pública do AI Functions.
15 de junho de 2023
Novo recurso:
- Tarefas SQL em Jobs agora estão geralmente disponíveis. Você pode orquestrar Consultas, Painéis e Alertas na página Trabalhos. Consulte Tarefa SQL para trabalhos.
- Um novo navegador de esquema agora está em Prévia Pública, com uma experiência de usuário atualizada, uma guia Para Você e filtros aprimorados. O navegador de esquema está disponível no Databricks SQL, no Catalog Explorer ou nos notebooks. Consulte Procurar dados.
8 de junho de 2023
DBSQL versão 2023.30 disponível
Alterações em 2023.30
- Novas funções internas do SQL, como
array_prepend(array, elem),try_aes_decrypt(expr, key [, mode [, padding]])esql_keywords(). - Agora você pode usar a clonagem rasa para criar novas tabelas gerenciadas do Unity Catalog a partir de tabelas gerenciadas existentes do Unity Catalog. Veja Clone superficial para as tabelas do Catálogo do Unity.
- Agora você pode usar
CLONEeCONVERT TO DELTAcom tabelas Iceberg que têm partições definidas em colunas truncadas dos tiposint,longestring. Não há suporte para as colunas truncadas do tipodecimal. -
START VERSIONestá obsoleto em favor deALTER SHARE.
Atualizações da interface do usuário
Correção:
- A visualização do contador agora dá suporte à formatação ao usar Inteiros Grandes.
01 de junho de 2023
Aprimoramentos:
- Os dados binários agora serão renderizados como uma cadeia de caracteres hexadecimal ao usar o formato Arrow.
- Na API de Instrução SQL, o formato CSV agora tem suporte para a disposição
EXTERNAL_LINKS. Isso permite que os clientes extraam até 100 GiB de dados no formato CSV com URLs pré-assinadas, enquanto oINLINElimite para JSON é de 16 MiB.
- Azure Databricks SQL Pro está disponível em todas as regiões da China. O SQL Pro agora é o warehouse padrão na interface do usuário. O padrão da API ainda é Clássico.
29 de maio de 2023
Novo recurso:
- Agora você pode usar a interface de usuário para adicionar dados e carregar informações de um caminho de armazenamento de objetos na nuvem, definido como uma localização externa no Catálogo Unity. Para obter mais informações, consulte Carregar dados usando um local externo do Catálogo do Unity.
25 de maio de 2023
Aprimoramentos:
- Você pode alternar o painel de resultados de preenchimento automático.
- Desabilite a tecla enter para que ela não aceite mais sugestões de preenchimento automático. Em Configurações do Usuário do DBSQL, clique em Configurações do Editor e, em seguida, nas configurações do Novo Editor. Desligue a tecla Enter aceita sugestões de preenchimento automático.
Correções:
- Os cabeçalhos de tabela classificados agora têm cores.
- As linhas do gráfico agora são renderizadas corretamente.
18 de maio de 2023
Aperfeiçoamento:
- Na API de Instrução SQL, a configuração
EXTERNAL_LINKSagora suporta o formatoJSON_ARRAY. Você pode extrair até 100 GiB de dados no formato JSON com URLs pré-assinadas. OINLINElimite para JSON é de 16 MiB.
11 de maio de 2023
Novo recurso:
- Agora, o Navegador de Esquemas está disponível no Gerenciador de Catálogos.
Aprimoramentos:
- Mostrar o painel de detalhes da tabela ao focalizar está menos sensível.
- A tecla Esc agora fecha o painel de preenchimento automático.
- As definições de visualização agora têm realce de sintaxe na guia de detalhes do Explorador de Catálogos.
Correções:
- As tabelas dinâmicas agora são renderizadas corretamente em dispositivos Windows.
- As sugestões de conclusão agora seguem corretamente o caso da primeira palavra-chave.
4 de maio de 2023
Databricks SQL Versão 2023.26 Disponível
Cronograma de Implementação
- Versão prévia da distribuição do 2023.26: entre 19 de abril de 2023 e 25 de abril de 2023
- Distribuição atual do 2023.26: entre 3 de maio de 2023 e 10 de maio de 2023
Alterações em 2023.26
- O Photon retornará um erro se um arquivo for modificado entre o planejamento e a execução da consulta.
- Novos recursos e suporte estendido para recursos de E/S Preditiva. Consulte Databricks Runtime 13.0 (EoS).
- Use o conector do Azure Databricks para se conectar a outro workspace do Azure Databricks.
- Recurso
CREATE TABLE LIKEpara tabelas Delta. - Novos campos de coluna de metadados que denotam o início e o comprimento do bloco de arquivos.
- Novas funções geoespaciais H3. Confira Funções geoespaciais H3
- Novas funções internas do SQL. Consulte Databricks Runtime 13.0 (EoS).
Atualizações da interface do usuário
Aprimoramentos:
- Os administradores podem alterar os proprietários do warehouse usando a interface do usuário ou a API. Confira Gerenciar um SQL warehouse.
- O Explorador de Catálogos agora exibe os principais serviços de conta nas listas de usuários para ativos no Catálogo do Unity. Por exemplo, os principais serviços de conta ficam visíveis ao editar privilégios ou alterar proprietários no Explorador de Catálogos.
- Os rótulos de gráfico personalizado dão suporte à capacidade de referenciar qualquer coluna dentro do conjunto de dados.
- Os filtros de painel agora carregam nomes de coluna, mesmo ao usar consultas que não têm informações de catálogo ou esquema.
27 de abril de 2023
Aprimoramentos:
- O editor do SQL agora conta com o editor de Mônaco para uma experiência de edição mais confiável.
- A página da lista do Histórico SQL (Consultas) agora inclui o Sistema de Design Dubois.
20 de abril de 2023
Aprimoramentos:
- Apresenta novas tabelas dinâmicas que permitem agregar mais de 64 mil resultados.
- As tabelas e visualizações SQL do Databricks agora oferecem suporte a BigInt, decimais de 38 bits e caracteres não UTF-8. Para números, a configuração padrão agora é a precisão de dígito definida pelo usuário.
- O preenchimento automático agora sugere junções que foram frequentemente utilizadas no passado para tabelas do Unity Catalog, baseadas em dados de linhagem do Unity Catalog nas versões 12.0 e superiores do Databricks Runtime.
Novo recurso:
- Retornar texto gerado por um grande modelo de linguagem (LLM) selecionado, dada a solicitação com ai_generate_text. Essa função só está disponível como versão prévia pública no Databricks SQL Pro e no Serverless. Para participar da visualização pública, preencha e envie o formulário de registro de Visualização Pública do AI Functions.
13 de abril de 2023
Novo recurso:
- O
TIMESTAMP_NTZtipo representa valores que compõem os campos ano, mês, dia, hora, minuto e segundo. Todas as operações são executadas independentemente do fuso horário. Consulte o tipo deTIMESTAMP_NTZ.
Aprimoramentos:
- Agora, os usuários podem enviar resultados formatados em alertas usando a
QUERY_RESULT_TABLEmarca em uma mensagem de alertas personalizada. - Agora os usuários podem visualizar o tamanho dos dados do arquivo para tabelas do Unity Catalog no Explorador de Catálogos.
6 de abril de 2023
Databricks SQL Versão 2023.20 Disponível
Cronograma de Implementação
- Lançamento da visualização para 2023.20: entre 15 de março de 2023 e 23 de março de 2023
- Distribuição atual do 2023.20: entre 27 de março de 2023 e 3 de abril de 2023
Alterações em 2023.20
- A evolução do esquema delta lake dá suporte à especificação de colunas de origem em instruções de mesclagem.
- Remova todos os elementos NULL de uma matriz usando array_compact.
- Para acrescentar elementos a uma matriz, use array_append.
- Para anonimizar valores de cadeia de caracteres confidenciais, use a função mask.
- As condições de erro comuns agora retornam SQLSTATE.
- Invoque funções geradoras de valor de tabela na cláusula regular
FROMde uma consulta. - Use as funções
from_protobufeto_protobufpara trocar dados entre tipos binários e struct. Confira Ler e gravar buffers de protocolo. - Aprimoramento na consistência do comportamento de commit Delta para transações vazias associadas aos comandos
update,deleteemerge. - Alteração de comportamento
- O recurso de alias de coluna lateral introduz alterações de comportamento durante a resolução de nomes. Veja as alterações de comportamento.
Atualizações da interface do usuário
Aprimoramentos:
- O Gerenciador de Catálogos agora dá suporte à exclusão do metastore do Hive.
- A mensagem para o estado inicial do editor de visualização foi alterada de colunas necessárias ausentes para Sem Dados.
3 de abril de 2023
Novo recurso:
- A página Criar ou modificar a tabela da página de upload de arquivo agora dá suporte a uploads de arquivo JSON. Para obter mais informações, consulte Criar ou modificar uma tabela usando o upload de arquivo.
30 de março de 2023
Aprimoramentos:
- Na página de monitoramento do warehouse, agora você pode exibir o histórico de consultas para o intervalo de tempo selecionado, juntamente com seus gráficos de dimensionamento. Você também pode exibir consultas em execução e enfileiradas, sessões SQL ativas, o status do warehouse e a contagem de clusters atual. Veja Monitorar um armazém de dados SQL.
- O agrupamento de mapas agora está desativado por padrão em mapas com marcadores.
- Dicas de ferramenta para truncamento de visualização e limites de renderização foram adicionadas.
Correções:
- Os gráficos agora respeitam a ordem original quando a classificação é desabilitada para os valores do eixo e o gráfico tem o grupo por coluna.
23 de março de 2023
Aprimoramentos:
- As visualizações agora dão suporte à compartimentalização de tempo por semana.
- Agora,
Totalcalcula todos os dados além das células 100 X 100 até 64 mil resultados em tabelas dinâmicas de notebooks. - Os usuários também podem formatar valores de célula na nova tabela dinâmica de notebooks.
- A linhagem de arquivos, consultas e repositórios de recursos está disponível.
16 de março de 2023
Aperfeiçoamento:
- Suporte para a sintaxe
GROUP BY ALL.
9 de março de 2023
Novo recurso:
- A API de Execução da Instrução SQL do Databricks agora está disponível na Versão Prévia Pública. A Execução de Instrução fornece pontos de extremidade que estão executando instruções SQL em um warehouse SQL do Databricks. Ele também pode verificar o status, buscar resultados e cancelar uma instrução SQL em execução.
Aperfeiçoamento:
- O console de administração do SQL foi combinado com as configurações gerais de administrador para criar uma experiência unificada para usuários administradores. Todas as configurações de administrador do SQL agora são acessadas no console de administração.
- Os destinos de alerta agora são chamados de destinos de notificação.
Correções:
- As tabelas não exibem mais duas barras de rolagem.
- Os títulos de widget em branco não são mais substituídos em painéis.
02 de março de 2023
Correção:
- Agora você pode usar URLs relativas em tabelas para acessar dashboards.
23 de fevereiro de 2023
Aperfeiçoamento:
- Agora, há suporte para
TINYINTnas tabelas de resultados em notebooks.
Correção:
- Foi corrigido um bug em que a rolagem no modal de filtro de criação de painel resultava em um erro.
16 de fevereiro de 2023
Aprimoramentos:
- Os rótulos de dados em gráficos agora mostram mais caracteres para evitar o truncamento das descrições.
- O preenchimento automático agora reconhece funções
range()e Python UDFcreate. - O Preenchimento automático evita iniciar snippets em decimais e nos comentários do código.
Correções:
- Agora os usuários podem ampliar os mapas.
- Em blocos de anotações, as cores agora são atribuídas corretamente aos gráficos.
2 de fevereiro de 2023
Aprimoramentos:
- Suporte a
DESCRIBE DETAILSno editor. - Aprimorada a velocidade de carregamento do visualizador de esquemas.
- Agora você pode exibir uma lista de possíveis colunas no painel lateral de um
SELECT *.
26 de janeiro de 2023
Aperfeiçoamento:
- As mensagens de erro da consulta agora incluem links para o tópico de documentação relacionado que descreve o erro.
19 de janeiro de 2023
Aprimoramentos:
- Agora você pode encontrar um painel What's New que realça os principais aprimoramentos. Você pode abrir e fechar este painel clicando no ícone de presente.
- Os administradores agora podem alterar a propriedade dos sql warehouses.
- Agora você pode filtrar várias visualizações em um painel clicando em Adicionar>Filtro e selecionando a consulta e as colunas para filtragem.
12 de janeiro de 2023
Aprimoramentos:
- Os títulos do widget de visualização nos painéis agora são formatados como nome de visualização – nome da consulta por padrão.
- Funções geoespaciais H3 adicionadas à referência do painel embutido.
- Referências em linha para sintaxe SQL como
CREATE TABLEeOVERforam adicionadas.
Correções:
- Opções de ordenação e inversão agora estão disponíveis quando a escala do eixo X é definida como automática.
- Mapas de calor e tabelas dinâmicas agora são responsivos para determinados casos de borda.
- Os tiques do eixo Y Categórico agora são classificados por padrão.
- Os rascunhos de consulta não são mais perdidos depois de fazer uma atualização do navegador.