メモリ内キャッシュからキャッシュされたすべてのテーブルを削除します。
構文
clearCache()
メモ
キャッシュされたデータはクラスター上のすべての Spark セッションで共有されるため、キャッシュをクリアするとすべてのセッションに影響します。
例示
_ = spark.sql("DROP TABLE IF EXISTS tbl1")
_ = spark.sql("CREATE TABLE tbl1 (name STRING, age INT) USING parquet")
spark.catalog.clearCache()
spark.catalog.isCached("tbl1")
# False
_ = spark.sql("DROP TABLE tbl1")