Spark Dataframe で列のコンテンツ全体を表示するにはどうすればいいですか? 質問する

Spark Dataframe で列のコンテンツ全体を表示するにはどうすればいいですか? 質問する

私は Spark-csv を使用してデータを DataFrame にロードしています。簡単なクエリを実行してコンテンツを表示したいと思います。

val df = sqlContext.read.format("com.databricks.spark.csv").option("header", "true").load("my.csv")
df.registerTempTable("tasks")
results = sqlContext.sql("select col from tasks");
results.show()

列が切り捨てられているようです:

scala> results.show();
+--------------------+
|                 col|
+--------------------+
|2015-11-16 07:15:...|
|2015-11-16 07:15:...|
|2015-11-16 07:15:...|
|2015-11-16 07:15:...|
|2015-11-16 07:15:...|
|2015-11-16 07:15:...|
|2015-11-16 07:15:...|
|2015-11-16 07:15:...|
|2015-11-16 07:15:...|
|2015-11-16 07:15:...|
|2015-11-16 07:15:...|
|2015-11-16 07:15:...|
|2015-11-16 07:15:...|
|2015-11-16 07:15:...|
|2015-11-16 07:15:...|
|2015-11-06 07:15:...|
|2015-11-16 07:15:...|
|2015-11-16 07:21:...|
|2015-11-16 07:21:...|
|2015-11-16 07:21:...|
+--------------------+

列の完全な内容を表示するにはどうすればいいですか?

ベストアンサー1

results.show(20, false)切り捨てられません。ソース

20show()引数なしで呼び出されたときに表示されるデフォルトの行数です。

おすすめ記事