spark SQL的语法和传统SQL区别？

那时-那年-那你 2016-01-12 02:45:20

spark 和hbase的关系，希望大神可以解决一下，网上资料太少，实在太伤了

...全文

1112 2 打赏收藏转发到动态举报

写回复

2 条回复

切换为时间正序

请发表友善的回复…

发表回复

数据社 2016-12-05

打赏
举报

回复

SparkSQL 支持大部分SQL语法，spqrk2.0后，应该可以兼容SQL了

cjl_2029 2016-01-13

打赏
举报

回复

我的理解是，spark是计算引擎，hbase 是数据源，供参考！

本文介绍了 Spark-SQL，它是用于结构化数据处理的模块，具有易整合、统一数据访问等特点。还阐述了 DataFrame、DataSet 的概念及与 RDD 的区别。详细讲解了 Spark-SQL 核心编程，包括创建 DataFrame、SQL 和 DSL 语法等。最后分析了 RDD、DataFrame、DataSet 三者的关系、共性与区别。

本文深入比较了Hive on Spark与Spark SQL在架构、性能、语法及应用场景上的差异。Hive on Spark作为Hive的执行引擎，适用于大规模离线数据处理；Spark SQL具备独立优化器，更适合实时分析与交互式查询，两者各有适用场景。

本文探讨了SparkSQL在不同版本中与标准SQL的差异，特别是在Spark2.x中遵循的SQL2003标准，以及与Oracle、MySQL和Hive等数据库的部分遵循情况。

本文深入探讨Spark SQL，介绍了Spark SQL的概念、特点、优缺点，并对比了Hive。文章详细阐述了DataFrame和DataSet的数据抽象，强调了它们在结构、优化和性能上的优势。同时，解释了RDD、DataFrame、DataSet的区别，帮助读者理解Spark SQL如何提升数据处理效率。

Hadoop生态社区

20,844

社区成员

4,695

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章