ナビタイムジャパンでインフラ環境の管理・構築・運用を担当しています。 DBを運用する上で、データの断片化について考えたことがありますか？ 大量のデータを更新する必要があるケースや、データの更新頻度が多いケースでは断片化の考慮は必須です。

Removes a partition scheme from the current database. Partition schemes are created by using CREATE PARTITION SCHEME and modified by using ALTER PARTITION SCHEME ...

confでspark.sql.sources.partitionOverwriteModeをdynamicにする spark.conf.set('spark.sql.sources.partitionOverwriteMode','dynamic') ( df.write .partitionBy(parts) .mode('ovewrite') .parquet(path) ) 目的 ...

Returns the partition number into which a set of partitioning column values would be mapped for any specified partition function. :::image type="icon" source ...

今回も以下のように、前回と同じSQLのチューニングを行います。 select l_orderkey, sum(l_extendedprice * (1 - l_discount)) as revenue, o_orderdate, o_shippriority from customer, orders, lineitem where c_mktsegment = 'BUILDING' and c ...

最終章は運用についてです。 運用でまず重要なのは、 バックアップとリストアです。データの死はサービスの死と言っても過言ではありません。PostgreSQLのバックアップとリストアを学んでいきましょう。本節では、 はじめにRDBMSのバックアップの種類と ...