hbase连接数据库

#coding=utf-8

from thrift.transport import TSocket
from hbase import Hbase
from hbase.ttypes import *
import pymysql

# 打开hbase数据库连接
transport = TSocket.TSocket('ip', 9090)
protocol = TBinaryProtocol.TBinaryProtocol(transport)
client = Hbase.Client(protocol)
transport.open()

#定义列族
cf1 = ColumnDescriptor(name='stuInfo')
cf2 = ColumnDescriptor(name='Grades')

#建立表结构
try:
    # 判断表是否存在

    tables_list = client.getTableNames()
    if "courseGrade" in tables_list:
        #如果表存在则删除重新建立
        client.disableTable('courseGrade')
        client.deleteTable('courseGrade')
        client.createTable('courseGrade', [cf1, cf2])
    else:
        # 如果不存在,则创建表
        client.createTable('courseGrade', [cf1, cf2])
except:
    print("创建表失败!")

# 打开mysql数据库连接
db = pymysql.connect("localhost", "root", "", "courseSel")
# 使用 cursor() 方法创建一个游标对象 cursor
cursor = db.cursor()
cursor1 = db.cursor()
# SQL 查询学生表信息
sqlStu = "SELECT * FROM studentInfo"
try:
    # 执行SQL语句
    cursor.execute(sqlStu)
    # 获取所有记录列表
    stuInfo = cursor.fetchall()
    for row in stuInfo:
        id = row[0]
        name = row[1]
        age = row[2]
        sex = row[3]
        #插入HBase courseGrade表的stuInfo列族
        mutations = [Mutation(column="stuInfo:name", value = name),
                     Mutation(column="stuInfo:age", value = str(age)),
                     Mutation(column="stuInfo:sex", value = str(sex))]
        client.mutateRow('courseGrade', str(id), mutations)

        #根据学号查询该学生所选课程的相关信息
        sqlCourse = "SELECT courseInfo.课程名,gradeInfo.成绩 " \
                    "FROM studentInfo,courseInfo,GradeInfo " \
                    "WHERE studentInfo.学号=GradeInfo.学号 " \
                    "and courseInfo.课程号=GradeInfo.课程号 and studentInfo.学号='%d'" %(id)
        cursor1.execute(sqlCourse)
        # 获取所有记录列表
        courses = cursor1.fetchall()
        for course in courses:
            courseName = course[0]
            score = course[1]
            # 插入HBase courseGrade表的Grades列族
            mutations = [Mutation(column="Grades:'%s'"%(courseName), value=str(score))]
            client.mutateRow('courseGrade', str(id), mutations)
        result = client.getRow('courseGrade', str(id))
        print(result)
except Exception as err:
    print(err)

# 关闭数据库连接
transport.close()
db.close()
  • 0
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值