处理大表 - 如何逐页选择记录？

我需要对表中的所有记录执行一个过程。该表可能非常大，所以我宁愿逐页处理记录。我需要记住已经处理过的记录，因此我的第二个SELECT结果中没有包含这些记录。像这样：对于第一次运行， [从MyTable中选择100条记录] 第二轮， [从MyTable中选择另外100条记录] 等等.. 我希望你能得到这张照片。我的问题是如何编写这样的select语句？我正在使用oracle btw，但如果我可以在任何其他数据库上运行也会很好。我也不想使用商店程序。非常感谢你！

已邀请:

2 个回复

芜任亮蜡

你提出的任何解决方案将桌子分成更小的块，最终会花费更多的时间而不是一次性处理所有内容。除非表是分区的，否则您可以一次只处理一个分区。如果全表扫描需要1分钟，则需要10分钟才能将表分成10个部分。如果表行按您可以使用的索引列的值进行物理排序，则由于聚簇因子，这将改变一点。但无论如何，它将花费更长的时间而不是一次性处理它。这一切都取决于从表中处理一行所需的时间。您可以选择通过处理数据块来减少服务器上的负载，但从性能角度来看，您无法完成全表扫描。

荤碗

您很可能希望利用Oracle的stopkey优化，因此当您不需要时，您最终不会得到完整的表扫描。有几种方法可以做到这一点。第一种方式是写一点时间，但让Oracle自动计算出涉及的行数：

select *
from
(
  select rownum rn, v1.*
  from (
    select *
    from table t
    where filter_columns = 'where clause'
    order by columns_to_order_by
  ) v1
  where rownum <= 200
)
where rn >= 101;

你也可以用FIRST_ROWS提示做同样的事情：

  select /*+ FIRST_ROWS(200) */ *
  from (
    select rownum rn, t.*
    from table t
    where filter_columns = 'where clause'
    order by columns_to_order_by
  ) v1
  where rn between 101 and 200;

我更喜欢rownum方法，因此您不必继续更改提示中的值（这需要表示结束值而不是实际返回到页面的行数是准确的）。您可以将开始和结束值设置为绑定变量，这样就可以避免硬解析。有关详细信息，请查看此帖子

要回复问题请先登录或注册

处理大表 - 如何逐页选择记录？

2 个回复

发起人

问题状态

处理大表 - 如何逐页选择记录？

与内容相关的链接

2 个回复

发起人

问题状态