您可以使用jvm对象来实现这一点。

if spark._jsparkSession.catalog().tableExists('db_name', 'tableName'):
  print("exist")
else:
  print("Not Exist")

py4j套接字用于python功能。其他操作使用jvm SparkContext .
在spark scala中，您可以直接访问。

spark.catalog.tableExists("dbName.tableName")

在pyspark2.4.0中，可以使用以下两种方法之一检查表是否存在。请记住，spark课程( spark )已创建。

table_name = 'table_name'
db_name = None

从spark会话的上下文创建sql上下文

from pyspark.sql import SQLContext

sqlContext = SQLContext(spark.sparkContext)
table_names_in_db = sqlContext.tableNames(db_name)

table_exists = table_name in table_names_in_db

使用spark会话目录

tables_collection = spark.catalog.listTables(db_name)
table_names_in_db = [table.name for table in tables_collection]

table_exists = table_name in table_names_in_db

我会使用第一种方法，因为第二种方法似乎会触发Spark作业，所以速度较慢。
为了编写或附加表，可以使用以下方法

df.write.mode('append').saveAsTable(table_name)

我们在databricks中使用了以下方法来检查表是否存在，我想这应该可以。

tblList = sqlContext.tableNames(<your db name>)
for tbl in tblList:
  if tbl == <table_name>:
    print("Table exists")
  else:
    print("Table doesnot exist, create the table")

谢谢
尤瓦

结合两个答案中最好的一个：

tblList = sqlContext.tableNames("db_name")
if table_name in tblList:
    print("Table exists")
    # insert code to insert/append
else:
    print("Table does not Exist")
    # insert code to create

希望有帮助。
布伦特

另一个建议是避免创建类似列表的结构：

if (spark.sql("show tables in <DATABASE>")
         .filter(col("tableName") == "<TABLENAME>")
         .count() > 0):
    print('found')   
else:
    print('not found')

请尝试以下操作：

table_list=spark.sql("""show tables in your_db""")
table_name=table_list.filter(table_list.tableName=="your_table").collect()
if len(table_name)>0:
    print("table found")
else:
    print("table not found")