AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • Início
  • system&network
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • Início
  • system&network
    • Recentes
    • Highest score
    • tags
  • Ubuntu
    • Recentes
    • Highest score
    • tags
  • Unix
    • Recentes
    • tags
  • DBA
    • Recentes
    • tags
  • Computer
    • Recentes
    • tags
  • Coding
    • Recentes
    • tags
Início / dba / Perguntas / 95478
Accepted
VansFannel
VansFannel
Asked: 2015-03-18 08:09:59 +0800 CST2015-03-18 08:09:59 +0800 CST 2015-03-18 08:09:59 +0800 CST

Como posso melhorar esta atualização?

  • 772

Estou trabalhando com a edição SQL Server 2014 Express e quero carregar alguns dados do OpenStreetMaps.

Os dados são um XML de 172 Mb e carregam bem. O problema está neste script:

UPDATE ways
SET geog4326 = 'LINESTRING(' + STUFF((
SELECT ',' + CAST(CAST(n.Longitude AS decimal(18,9)) AS varchar(32)) + ' ' + CAST(CAST(n.Latitude AS decimal(18,9)) AS varchar(32)) AS [text()]
FROM
ways w JOIN waynodes wn ON w.wayid = wn.wayid
JOIN nodes n ON wn.nodeid = n.nodeid
WHERE wn.wayid = w.wayid
ORDER BY w.wayid, orderid
FOR XML PATH(''), TYPE
).value('/', 'NVARCHAR(MAX)'),1,1,'') +')'

Recebo uma estrutura .NET sem memória no SQL Server Management Studio e também o executo no SQLCMD. waystabela tem 101.393 linhas e waynodestem 1.018.575 linhas.

Você sabe como posso melhorar esse script?

By the way, eu recebo este script deste tutorial .

Não tenho índice e nem execução de plano. Estou apenas seguindo o tutorial e recebo um erro de falta de memória.

sql-server performance
  • 1 1 respostas
  • 127 Views

1 respostas

  • Voted
  1. Best Answer
    MickyT
    2015-03-19T10:09:40+08:002015-03-19T10:09:40+08:00

    Como Ypercube disse em seu comentário, você parece ter uma subconsulta não correlacionada. Isso significa que, para cada caminho, você está tentando criar uma linha contendo 1.000.000 de nós ímpares.

    Também seria melhor colocar um construtor Geography em torno do resultado da subconsulta.

    A instrução de atualização do tutorial que você mencionou tem uma subconsulta correlacionada, porque a WHEREcláusula é wn.wayid = ways.wayid Alterar sua consulta de atualização para isso deve corrigir o problema.

    UPDATE ways
    SET geog4326 = Geography::STGeomFromText('LINESTRING(' + STUFF((
        SELECT ',' + 
            CAST(CAST(n.Longitude AS decimal(18,9)) AS varchar(32)) + ' ' + 
            CAST(CAST(n.Latitude AS decimal(18,9)) AS varchar(32)) AS [text()]
        FROM ways w 
            JOIN waynodes wn ON w.wayid = wn.wayid
            JOIN nodes n ON wn.nodeid = n.nodeid
        WHERE wn.wayid = ways.wayid -- Changed to ways to correlate
        ORDER BY w.wayid, orderid
        FOR XML PATH(''), TYPE
        ).value('/', 'NVARCHAR(MAX)'),1,1,'') +')',4326)
    WHERE EXISTS (SELECT 1 FROM waynodes wg WHERE ways.wayid = wg.wayid GROUP BY wg.wayid HAVING COUNT(*) > 1)
    

    Pessoalmente, prefiro construir minhas declarações de atualização semelhantes às seguintes.

    UPDATE z
    SET geog4326 = Geography::STGeomFromText('LINESTRING(' + STUFF(CAST(x.linestring AS VARCHAR(MAX)),1,1,'') +')',4326)
    FROM ways z
        CROSS APPLY (
            SELECT ',' + 
                CAST(CAST(n.Longitude AS decimal(18,9)) AS varchar(32)) + ' ' + 
                CAST(CAST(n.Latitude AS decimal(18,9)) AS varchar(32)) AS [text()]
            FROM ways w 
                JOIN waynodes wn ON w.wayid = wn.wayid
                JOIN nodes n ON wn.nodeid = n.nodeid
            WHERE z.wayid = w.wayid 
            ORDER BY w.wayid, orderid
            FOR XML PATH('')
        ) x (linestring)
    WHERE EXISTS (SELECT 1 FROM waynodes wg WHERE z.wayid = wg.wayid GROUP BY wg.wayid HAVING COUNT(*) > 1)
    

    Eu testei uma versão SELECT da minha atualização em alguns dados inventados. SQLFiddleName

     WITH ways AS (
     SELECT *
     FROM (VALUES
        (1),(2),(3)
        ) W(wayid)
     ), 
     waynodes AS (
     SELECT *
     FROM (VALUES
        (1,1,1),
        (1,2,2),
        (1,3,3),
        (2,1,4),
        (2,2,5),
        (2,3,6),
        (3,1,7),
        (3,2,8)
        ) WN(wayid, orderid, nodeid)
     ), 
     nodes AS (
     SELECT *
     FROM (VALUES
        (1, 0, 0),
        (2, .1, 0),
        (3, .1, .1),
        (4, .1, .1),
        (5, .2, 0),
        (6, .3, 0),
        (7, 0, 0),
        (8, 0, .2)
        ) N(nodeid, longitude, latitude)
     )
    SELECT Geography::STGeomFromText('LINESTRING(' + STUFF(x.linestring,1,1,'') +')',4326)
    FROM ways z
        CROSS APPLY (
            SELECT ',' + CAST(CAST(n.Longitude AS decimal(18,9)) AS varchar(32)) + ' ' + CAST(CAST(n.Latitude AS decimal(18,9)) AS varchar(32)) AS [text()]
            FROM ways w 
                JOIN waynodes wn ON w.wayid = wn.wayid
                JOIN nodes n ON wn.nodeid = n.nodeid
            WHERE z.wayid = w.wayid 
            ORDER BY w.wayid, orderid
            FOR XML PATH('')
            ) x(linestring)
    
    • 3

relate perguntas

  • Quais são as principais causas de deadlocks e podem ser evitadas?

  • Como determinar se um Índice é necessário ou necessário

  • Onde posso encontrar o log lento do mysql?

  • Como posso otimizar um mysqldump de um banco de dados grande?

Sidebar

Stats

  • Perguntas 205573
  • respostas 270741
  • best respostas 135370
  • utilizador 68524
  • Highest score
  • respostas
  • Marko Smith

    conectar ao servidor PostgreSQL: FATAL: nenhuma entrada pg_hba.conf para o host

    • 12 respostas
  • Marko Smith

    Como fazer a saída do sqlplus aparecer em uma linha?

    • 3 respostas
  • Marko Smith

    Selecione qual tem data máxima ou data mais recente

    • 3 respostas
  • Marko Smith

    Como faço para listar todos os esquemas no PostgreSQL?

    • 4 respostas
  • Marko Smith

    Listar todas as colunas de uma tabela especificada

    • 5 respostas
  • Marko Smith

    Como usar o sqlplus para se conectar a um banco de dados Oracle localizado em outro host sem modificar meu próprio tnsnames.ora

    • 4 respostas
  • Marko Smith

    Como você mysqldump tabela (s) específica (s)?

    • 4 respostas
  • Marko Smith

    Listar os privilégios do banco de dados usando o psql

    • 10 respostas
  • Marko Smith

    Como inserir valores em uma tabela de uma consulta de seleção no PostgreSQL?

    • 4 respostas
  • Marko Smith

    Como faço para listar todos os bancos de dados e tabelas usando o psql?

    • 7 respostas
  • Martin Hope
    Jin conectar ao servidor PostgreSQL: FATAL: nenhuma entrada pg_hba.conf para o host 2014-12-02 02:54:58 +0800 CST
  • Martin Hope
    Stéphane Como faço para listar todos os esquemas no PostgreSQL? 2013-04-16 11:19:16 +0800 CST
  • Martin Hope
    Mike Walsh Por que o log de transações continua crescendo ou fica sem espaço? 2012-12-05 18:11:22 +0800 CST
  • Martin Hope
    Stephane Rolland Listar todas as colunas de uma tabela especificada 2012-08-14 04:44:44 +0800 CST
  • Martin Hope
    haxney O MySQL pode realizar consultas razoavelmente em bilhões de linhas? 2012-07-03 11:36:13 +0800 CST
  • Martin Hope
    qazwsx Como posso monitorar o andamento de uma importação de um arquivo .sql grande? 2012-05-03 08:54:41 +0800 CST
  • Martin Hope
    markdorison Como você mysqldump tabela (s) específica (s)? 2011-12-17 12:39:37 +0800 CST
  • Martin Hope
    Jonas Como posso cronometrar consultas SQL usando psql? 2011-06-04 02:22:54 +0800 CST
  • Martin Hope
    Jonas Como inserir valores em uma tabela de uma consulta de seleção no PostgreSQL? 2011-05-28 00:33:05 +0800 CST
  • Martin Hope
    Jonas Como faço para listar todos os bancos de dados e tabelas usando o psql? 2011-02-18 00:45:49 +0800 CST

Hot tag

sql-server mysql postgresql sql-server-2014 sql-server-2016 oracle sql-server-2008 database-design query-performance sql-server-2017

Explore

  • Início
  • Perguntas
    • Recentes
    • Highest score
  • tag
  • help

Footer

AskOverflow.Dev

About Us

  • About Us
  • Contact Us

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve