星期一, 一月 18, 2021
Latest:
  • 【Kafka】Kafka的数据可靠性和一致性
  • Scala循环表达式
  • 【Java】使用jstack、jstat、jmap线上问题排查一例
  • 【Kafka】Leader丢失导致的Consumer挂起故障解决
  • 【Kafka】Kafka 1.0.1案例详解之Kafka Connect

Big data enthusiast

——lubinsu

  • Spark
  • Scala
  • Hadoop
  • Kafka
  • Flume-NG
  • Hive
  • Azkaban
  • 关于我

HBase

HBase Python Spark 

【Spark】使用外部数据源连接HBase数据库进行读写

2017-07-122017-07-12 lubinsu 0 Comments HBase, Python, Spark

本文主要介绍,Spark如何通过外部数据源连接HBase数据库进行读写。我们先贴上项目源码:https://github.com/hortonworks-spark/shc。可以直接通过源码编译出jar包使用,也可以使用项目组预先编译好的jar:http://repo.hortonworks.com/content/groups/public/

Read more
HBase Python 

【Python】通过Thrift连接HBase

2017-07-12 lubinsu 0 Comments HBase, Python

这次我们来通过Python连接hbase获取数据:Python连接HBase只能通过Thrift实现,happyhbase对这个功能进行了封装。使用起来还是挺方便的。

Read more
HBase 

【HBase】使用CopyTable备份表

2017-01-132017-05-06 lubinsu 0 Comments HBase

CopyTable是HBase中适用于在线备份的功能,但是在备份过程中的数据变化可能丢失。

Read more

标签云

Akka Azkaban BigData Bug CentOS Cloudera Manager CM code review Elasticsearch ELK FlumeNG Git Hadoop HBase Hive JSON Kafka Kibana Linux Logstash maven mysql Oracle Python REST Scala Spark Spray sqoop

分类

归档

  • 2019年七月 (2)
  • 2018年九月 (1)
  • 2018年八月 (1)
  • 2018年六月 (4)
  • 2018年五月 (7)
  • 2018年四月 (1)
  • 2017年七月 (4)
  • 2017年六月 (1)
  • 2017年五月 (1)
  • 2017年三月 (2)
  • 2017年一月 (4)
  • 2016年十月 (1)
  • 2016年九月 (2)
  • 2016年八月 (2)
  • 2016年七月 (2)
  • 2016年六月 (9)
  • 2016年五月 (2)
  • 2016年四月 (4)
  • 2016年三月 (6)

最近评论

  • lubinsu发表在《【Problems】Cloudera Manager错误集锦》
  • Joe发表在《【Problems】Cloudera Manager错误集锦》
  • education online courses发表在《【Scala】构建Scala风格的SSH工具类》
  • online school tips发表在《【Scala】构建Scala风格的SSH工具类》
  • ญี่ปุ่น xxx发表在《【HIVE】SHELL调用Hive查询》

功能

  • 注册
  • 登录
  • 文章RSS
  • 评论RSS
  • WordPress.org
Copyright © 2021 Big data enthusiast. All rights reserved.
Theme: ColorMag by ThemeGrill. Powered by WordPress.

闽ICP备16009353号-1