数码控科技猎奇Iphone动漫星座游戏电竞lolcosplay王者荣耀攻略allcnewsBLOGNEWSBLOGASKBLOGBLOGZSK全部技术问答问答技术问答it问答代码软件新闻开发博客电脑/网络手机/数码笔记本电脑互联网操作系统软件硬件编程开发360产品资源分享电脑知识文档中心IT全部全部分类全部分类技术牛文全部分类教程最新网页制作cms教程平面设计媒体动画操作系统网站运营网络安全服务器教程数据库工具网络安全软件教学vbscript正则表达式javascript批处理更多»编程更新教程更新游戏更新allitnewsJava新闻网络医疗信息化安全创业站长电商科技访谈域名会议专栏创业动态融资创投创业学院 / 产品经理创业公司人物访谈营销开发数据库服务器系统虚拟化云计算嵌入式移动开发作业作业1常见软件all电脑网络手机数码生活游戏体育运动明星影音休闲爱好文化艺术社会民生教育科学医疗健康金融管理情感社交地区其他电脑互联网软件硬件编程开发360相关产品手机平板其他电子产品摄影器材360硬件通讯智能设备购物时尚生活常识美容塑身服装服饰出行旅游交通汽车购房置业家居装修美食烹饪单机电脑游戏网页游戏电视游戏桌游棋牌游戏手机游戏小游戏掌机游戏客户端游戏集体游戏其他游戏体育赛事篮球足球其他运动球类运动赛车健身运动运动用品影视娱乐人物音乐动漫摄影摄像收藏宠物幽默搞笑起名花鸟鱼虫茶艺彩票星座占卜书画美术舞蹈小说图书器乐声乐小品相声戏剧戏曲手工艺品历史话题时事政治就业职场军事国防节日风俗法律法规宗教礼仪礼节自然灾害360维权社会人物升学入学人文社科外语资格考试公务员留学出国家庭教育学习方法语文物理生物工程学农业数学化学健康知识心理健康孕育早教内科外科妇产科儿科皮肤科五官科男科整形中医药品传染科其他疾病医院两性肿瘤科创业投资企业管理财务税务银行股票金融理财基金债券保险贸易商务文书国民经济爱情婚姻家庭烦恼北京上海重庆天津黑龙江吉林辽宁河北内蒙古山西陕西宁夏甘肃青海新疆西藏四川贵州云南河南湖北湖南山东江苏浙江安徽江西福建广东广西海南香港澳门台湾海外地区

和各位请教关于使用JavaAPI访问HBase很慢的问题-CSDN论坛

来源:互联网  责任编辑:小易  时间:2018/1/22 20:13:45
本网有用户碰到这样的问题:和各位请教关于使用JavaAPI访问HBase很慢的问题-CSDN论坛,具体问题如下:

本网根据需求用户需求,为用户寻得以下其他网友提供的解决方法,方法仅供参考,具体如下:

解决方案1:

补充HBase配置文件:
     “hbase-env.sh”
# export JAVA_HOME=/usr/java/jdk1.6.0/
export JAVA_HOME=/home/hadoop/jdk1.8.0_151

# Extra Java CLASSPATH elements.  Optional.
export HBASE_CLASSPATH=/home/hadoop/hadoop-2.7.4/etc/hadoop/

# Tell HBase whether it should manage it's own instance of Zookeeper or not.
export HBASE_MANAGES_ZK=false

“ hbase-site.sh”
<configuration>

        <property>
                <name>hbase.rootdir</name>
                <value>hdfs://master.hadoop:9000/hbase</value>
        </property>

        <property>
                <name>hbase.cluster.distributed</name>
                <value>true</value>
        </property>

<property>
                <name>hbase.zookeeper.quorum</name>
                <value>master:21810,slave1:21810,slave2:21810</value>
        </property>

        <property>
                <name>hbase.zookeeper.property.clientPort</name>
                <value>21810</value>
        </property>

</configuration>

解决方案2:

有没有试过单机的Hbase访问,用java访问

解决方案3:

你把hadoop的配置去掉,那个hadoop.home.dir的东西。
hbase java api访问hbase不需要其它任何东西,只需要那个jar和jdk就可以。
你先这样试下。

解决方案4:

引用 2 楼 vtopqx 的回复:
有没有试过单机的Hbase访问,用java访问


因为实际生产环境,本身就不用单机版的,所以就没打算测试单机版的。

实际上这个问题是:客户端访问程序 连接 远程HBase数据库的时间耗费过大。

最后,暂时通过 “将 客户端访问程序的平台 换为Linux“ ,连接速度就变得很快了。
HBase基于Hadoop平台,而Apache官网上编译好的Hadoop BIN包默认的支持  x86  32位 的Linux,所以直接搬到Windows平台下使用的话会出现很多兼容性问题;
因此若要在Windows平台下开发Hadoop程序,最好就是到Apache官网上下载Hadoop源码包,然后编译对应Windows平台的Hadoop,来开发Hadoop程序。

解决方案5:

引用 3 楼 Dante_003 的回复:
你把hadoop的配置去掉,那个hadoop.home.dir的东西。
hbase java api访问hbase不需要其它任何东西,只需要那个jar和jdk就可以。
你先这样试下。


试过了。连接速度慢和这个应该关系不大,这个Hadoop配置只是为了解决Windows下Hadoop工具的使用路径缺失ERROR。
起初运行访问HBase程序时,报了上述的Hadoop工具的使用路径缺失ERROR和一个Hadoop本地库不兼容的WARNING,但并不影响HBase的访问;
仍然是 20秒连接HBase 加 毫秒级或秒级的数据检索。

最后,暂时通过 “将 客户端访问程序的平台 换为Linux“ ,连接速度就变得很快了。
HBase基于Hadoop平台,而Apache官网上编译好的Hadoop BIN包默认的支持  x86  32位 的Linux,所以直接搬到Windows平台下使用的话会出现很多兼容性问题;
因此若要在Windows平台下开发Hadoop程序,最好就是到Apache官网上下载Hadoop源码包,然后编译对应Windows平台的Hadoop,来开发Hadoop程序。


  • 本文相关:
  • 站长必读,如何真正写好一篇原创文章
  • 互联网之路细嗅蔷薇 资深站长分享掘金之道
  • 企业站的站长的工作重心究竟有哪些
  • 浅析:行业门户网站的一些盈利模式
  • 3000IP的企业网站每天订单不到30个的苦恼
  • 网站想内外兼修?先学习提高网站可用性的6大原则
  • 浅谈网页设计中的简约之美
  • 网页改版实战:日本设计师如何彻底优化旅游网站?
  • 网页改版实战!日本设计师如何彻底优化招聘网站?
  • 2015年值得关注的21个网页设计趋势
  • 免责声明 - 关于我们 - 联系我们 - 广告联系 - 友情链接 - 帮助中心 - 频道导航
    Copyright © 2017 www.zgxue.com All Rights Reserved