为 100 万行加速 postgres 中的简单更新语句

Question

我在 postgres 中有一个非常简单的 sql update 语句。

UPDATE p2sa.observation SET file_path = replace(file_path, 'path/sps', 'newpath/p2s')

观察表有 1513128 行。到目前为止，查询已经运行了大约 18 个小时，还看不到尽头。

file_path 列未编入索引，因此我猜它正在执行从上到下的扫描，但时间似乎有点过长。可能替换也是一个缓慢的操作。

是否有一些替代或更好的方法来进行这种影响所有行的一次性更新。它本质上是将旧文件路径更新到新位置。它只需要更新一次或将来可能再次更新。

谢谢。

Answer 1

在 SQL 中，您可以执行一个 while 循环来批量更新。

试试这个看看效果如何。

Declare @counter int 
Declare @RowsEffected int 
Declare @RowsCnt int 
Declare @CodeId int 
Declare @Err int
DECLARE @MaxNumber int = (select COUNT(*) from p2sa.observation)
SELECT @COUNTER = 1
SELECT @RowsEffected = 0


WHILE ( @RowsEffected < @MaxNumber)
BEGIN 
SET ROWCOUNT 10000


UPDATE p2sa.observation 
SET file_path = replace(file_path, 'path/sps', 'newpath/p2s')
where file_path != 'newpath/p2s'

SELECT @RowsCnt = @@ROWCOUNT ,@Err = @@error 
IF @Err <> 0 
BEGIN 
Print 'Problem Updating the records' 
BREAK
END 
ELSE 

SELECT @RowsEffected = @RowsEffected + @RowsCnt 
PRINT 'The total number of rows effected :'+convert(varchar,@RowsEffected) 

            /*delaying the Loop for 10 secs , so that Update is completed*/    

     WAITFOR DELAY '00:00:10'         
 END
 SET ROWCOUNT 0