Jak mogę wydrukować ramkę danych w Zeppelin/Spark/Scala?

Question

Używam Spark 2 i Scala 2.11 w notatniku Zeppelin 0.7. Mam dataframe że mogę wydrukować tak:

dfLemma.select("text", "lemma").show(20,false) 

a wyjście wygląda następująco:

+---------------------------------------------------------------------------------------------------------------------------+-----------------------------------------------------------------------------------------------------------------------------------------------------------------------+ 
|text                              |lemma                                         | 
+---------------------------------------------------------------------------------------------------------------------------+-----------------------------------------------------------------------------------------------------------------------------------------------------------------------+ 
|RT @Dope_Promo: When you and your crew beat your high scores on FUGLY FROG https://time.com/Sxp3Onz1w8     |[rt, @dope_promo, :, when, you, and, you, crew, beat, you, high, score, on, FUGLY, FROG, https://time.com/sxp3onz1w8]              | 
|RT @axolROSE: Did yall just call Kermit the frog a lizard? https://time.com/wDAEAEr1Ay          |[rt, @axolrose, :, do, yall, just, call, Kermit, the, frog, a, lizard, ?, https://time.com/wdaeaer1ay]                  | 

Próbuję zrobić wyjście ładniejszy w Zeppelin, przez:

val printcols= dfLemma.select("text", "lemma") 
println("%table " + printcols) 

, która daje tę wydajność:

printcols: org.apache.spark.sql.DataFrame = [text: string, lemma: array<string>] 

oraz nowy pusty Zeppelin ustęp czele

[text: string, lemma: array] 

Czy istnieje sposób uzyskiwania dataframe aby pokazać jak ładnie sformatowany tabeli? TIA!

Answer 1

W Zeppelin można użyć z.show(df), aby pokazać ładny stół. Oto przykład:

val df = Seq(
    (1,1,1), (2,2,2), (3,3,3) 
).toDF("first_column", "second_column", "third_column") 

z.show(df)