SparkSpark DataFrame – 获取过 20 行和列的完整值

前言

当我们使用 spark-sql 命令来执行任务，返回结果后，有些字段无法显示完全，并且只能最多显示20条数据。

示例

saprk-submit --master yarn

> spark.sql("show tables from nrdp_db").show()

Spark需要几个参数来获取超过20行并获取完整的列值，以下是DataFrame show（）的示例

spark.sql("show tables from nrdp_db").show() // Show 20 rows & 20 characters for columns
spark.sql("show tables from nrdp_db").show(100)  Show 100 rows
spark.sql("show tables from nrdp_db").show(100, false) // Show 100 rows & full column value

这篇好文章是转载于：学新通技术网