C++通过thrift访问hive

FlyGently 2017-05-11 03:50:03

我安装了大数据集群，Ubuntu下使用Qt开发客户端，实现了上传本地文件到HDFS，并将文件信息记录到HBase中，也可以通过命令将HBase中的数据与Hive整合，现在我想实现的功能是：使用C++通过thrift访问hive，一直找不到相关的资料，望各位前辈提供帮助，不胜感激！

...全文

1906 2 打赏收藏转发到动态举报

写回复

2 条回复

切换为时间正序

请发表友善的回复…

发表回复

FlyGently 2017-09-28

打赏
举报

回复

hive odbc jdbc都可以

FlyGently 2017-06-06

打赏
举报

回复

自问自答，hive没有C++接口，正在尝试使用C++调用python访问hive，目前，已掌握C++调用python的方法，直接使用python访问hiveserver2并执行SQL语句也成功，但是使用C++调用python访问hive时，在python中使用connect函数链接hiveserver2时报错，报错如下：Exception AttributeError: AttributeError("'TSaslClientTransport' object has no attribute 'trans'",) in <module 'threading' from '/usr/lib/python2.7/threading.pyc'> ignored

使用 Hadoop UserGroupInformation 通过 Thrift RPC 传递 Kerberos 凭据这是一个快速示例，它可以显示客户端缓存的 kerberos 凭据可以通过 Thrift RPC 传递到服务器，该服务器可以在服务器凭据之上代理该用户。 Hadoop 的 UserGroupInformation 用于确保与他们已经提供给我们的所有信息兼容。从 Apache Accumulo、Apache Hadoop 和 Apache Hive 借用的一些代码。 Thrift 客户端和服务器类基于。实际执行的 RPC 是 HDFS 上的ls （例如echo "/" | hdfs dfs -ls ）。这有助于我们验证我们在服务器端是否有有效的凭据来执行请求的操作（如果我们向它发送一些格式错误/不正确的东西，依赖于 HDFS 会失败）。建造一个简单的mvn p

1. Kerberos是一种计算机网络授权协议，用来在非安全网络中，对个人通信以安全的手段进行身份认证。具体请查阅官网 2. 需要安装的包（基于centos） yum install libsasl2-dev yum install gcc-c++ python-devel.x86_64 cyrus-sasl-devel.x86_64 yum install python-devel yum install krb5-devel yum install python-krbV pip install krbcontext==0.9 pip install thrift==0.9.3 pip

tcc-transaction分布式事务管理器。底层纯java+spring切面实现,tcc-transaction 不和底层使用的rpc框架耦合，也就是使用dubbo,thrift,web service,http等都可。

步骤一：启动为前台：bin/hiveserver2 步骤二：启动为后台：nohup bin/hiveserver2 1>/var/log/hiveserver.log 2>/var/log/hiveserver.err & 1：启动成功后，可以在别的节点上用beeline去连接　　方式一：　　　　hive/bin/beelin...

#include #include #include #include #include #include #include #include #include #include #include #include "ThriftHive.h" using namespace apache::thrift; u

7,388

社区成员

6,742

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章