大数据全系列 教程
1869个小节阅读:467.6k
目录
408考研
JAVA全系列 教程
面向对象的程序设计语言
Python全系列 教程
Python3.x版本,未来主流的版本
人工智能 教程
顺势而为,AI创新未来
大厂算法 教程
算法,程序员自我提升必经之路
C++ 教程
一门通用计算机编程语言
微服务 教程
目前业界流行的框架组合
web前端全系列 教程
通向WEB技术世界的钥匙
大数据全系列 教程
站在云端操控万千数据
AIGC全能工具班
A A
White Night
xxxxxxxxxx
val session = SparkSession.builder()
.appName(this.getClass.getSimpleName.stripSuffix("$"))
.master("local[*]")
.config("spark.serializer", "org.apache.spark.serializer.KryoSerializer")
.getOrCreate()
xxxxxxxxxx
val order: DataFrame = session.read
.format("com.itbaizhan.hbase")
.options(Map(
"zkHosts" -> "node2,node3,node4",
"zkPort" -> "2181",
"hbaseTable" -> "ORDER_INFO",
"family" -> "f1",
"selectFields" -> "id,create_time,pay_all,open_lng,open_lat,begin_address_code,charge_mileage,city_name,vehicle_license,driver_id ,driver_name,cancel,close_gps_time"
)).load()
xxxxxxxxxx
order.createOrReplaceTempView("order")
session.sqlContext.cacheTable("order")
xxxxxxxxxx
lazy val _totol_order =
"""
|select
|1 myid,
|count(1) as totalOrderNum
|from
|order
|""".stripMargin