как использовать оконную функцию в sqlContext в spark scala

Мне нужно использовать оконную функцию в spark scala.
Версия Spark — 1.5.1, а scala — 2.11.7.

Есть аналогичный вопрос (Использование оконных функций в Spark)

Но в моем случае улья нет. Я не могу импортировать org.apache.spark.sql.hive.HiveContext.

«По наследству HiveContext на самом деле является SQLContext», но в моем случае это не так.

scala> sqlContext
res2: org.apache.spark.sql.SQLContext = org.apache.spark.sql.SQLContext@1136122a

Есть ли способ использовать оконную функцию ?? Благодарю.


sql apache-spark hadoop scala window-functions
person kanghyuk    schedule 08.04.2016    source источник
comment
Как насчет этого: stackoverflow.com/questions/32407455/   -  person Justin Pihony    schedule 08.04.2016
comment
@JustinPihony прав! Вы можете попытаться имитировать оконные функции, если не хотите добавлять зависимость от куста. Тем не менее, я ответил на этот вопрос 3 или 4 раза (1 из них - приведенная ссылка). Вам действительно нужно внимательно прочитать эти ответы   -  person eliasah    schedule 08.04.2016
comment
Вот еще один stackoverflow.com/a/36398242/3415409   -  person eliasah    schedule 08.04.2016