databricks上でのSQL実行について

Question

前提

1. databricksにてSQLのnotebookを作成し、SQLを実行しています。
2. databricksにてPythonのnotebookを作成し、マジックコマンド(%)でSQLを指定しSQLを実行しています。

質問

上記、１、２については、SparkSQLを用いて実行している理解で良いでしょうか？
もしくは、SparkSQLとは別のSQLを使用しているということでしょうか？

気になっていること

http://lab.astamuse.co.jp/entry/2017/03/01/114500

上記サイトを参照すると、spark.sql("SQL文")という形式でSQLを実行しておりました。
前提に記載した方法の場合、SQL文のみで実行できるのでSparkSQLではないSQLではと懸念しております。

val spark = SparkSession.builder()
      .master("yarn")
      .appName("Test")
      .getOrCreate()

// Spark SQL
spark.sql("select * from hoge").show()

情報不足しているようでしたらご指摘ください。

Comments

[Orlofsky]

Databricks, Spark 共にそんなに枯れたソフトウェアではありませんし、同じSQLでもデータベースやそのバージョンによって方言が大きいのが常ですから、火中の栗を拾うつもりでがんばってくだい。

[Tiroze]

ありがとうございます。SQLの方言については承知しているのですが、上記「前提」に記載した内容がSpark SQL に該当するかご存知でしたら教えて頂けますと幸いです。