代码之家  ›  专栏  ›  技术社区  ›  Jeff Swensen

SQL Server中的表分区方法

  •  3
  • Jeff Swensen  · 技术社区  · 17 年前

    我正在使用的数据库目前超过100 gib,并承诺在未来一年左右会增长得更大。我正在尝试设计一个分区方案,该方案将与我的数据集一起工作,但迄今为止失败得很惨。我的问题是,针对这个数据库的查询通常会测试这个大表中多个列的值,最终得到以不可预知的方式重叠的结果集。

    每个人(与我一起工作的DBA)都警告不要使用超过一定大小的表,我已经研究并评估了我遇到的解决方案,但它们似乎都依赖于允许逻辑表分区的数据特性。不幸的是,考虑到我的表的结构,我看不到实现这一点的方法。

    下面是我们两个主要表的结构,以透视这一点。

    Table: Case
    Columns:
    Year
    Type
    Status
    UniqueIdentifier
    PrimaryKey
    etc.
    
    Table: Case_Participant
    Columns:
    Case.PrimaryKey
    LastName
    FirstName
    SSN
    DLN
    OtherUniqueIdentifiers
    

    请注意,上面的任何列都可以用作查询参数。

    3 回复  |  直到 17 年前
        1
  •  5
  •   Remus Rusanu    17 年前

    与其猜测,不如衡量。收集使用统计信息( queries run )查看引擎自己的统计数据,如 sys.dm_db_index_usage_stats 然后您做出一个明智的决定:Best平衡数据大小并为最常运行的查询提供最佳相关性的分区将是一个很好的候选者。当然,你必须妥协。

    也别忘了 partitioning 是每个索引(其中'table'=其中一个索引),而不是每个表,所以问题不在于要分区什么,而在于要分区或不分区哪些索引,以及要使用什么分区函数。显然,这两个表上的聚集索引将是最有可能的候选索引(只对非聚集索引进行分区而不对聚集索引进行分区没有多大意义),因此,除非考虑重新设计聚集键,否则问题实际上是要为聚集索引选择什么分区函数。

    如果我冒昧地猜测一下,我会说,对于任何随时间累积的数据(如“案例”和“年”),最自然的分区是 sliding window .

        2
  •  0
  •   Alex Shnayder    17 年前

    如果没有其他选择,可以按键模块划分分区表的数量。 假设您希望划分到10个表。 您将定义表:
    CASE 00
    CASE 01
    …
    案例09

    并通过uniqueidentifier或primarykey模块10对您的数据进行分区,并将每个记录放在相应的表中(取决于您的唯一uniqueidentifier,您可能需要开始手动分配ID)。

    执行查询时,需要对所有表运行相同的查询,并使用UNION将结果集合并到单个查询结果中。

    它不如基于与预期查询相对应的逻辑分离对表进行分区,但最好是达到表的大小限制。

        3
  •  0
  •   Cade Roux    17 年前

    (在分区之前)要考虑的另一个可能的事情是您的模型。

    您是否在规范化数据库中?在标准化/取消/部分标准化中,是否有其他步骤可以通过不同的选择来提高性能?是否可以选择将数据转换为最适合报告/查询的Kimball风格的维度星型模型?

    如果您不打算删除表的分区(如前所述的滑动窗口),也不打算以不同的方式对待不同的分区(您说查询中可以使用任何列),那么我不确定您试图从分区中得到什么,而您还没有从索引策略中得到什么。

    我不知道行上有任何表限制。对于afaik,行数仅受可用存储空间的限制。