尧图网站建设 尧图网络
  • 首页
  • 关于我们
  • 服务项目
  • 案例展示
  • 建站流程
  • 资讯中心
  • 联系我们
首页/资讯中心/详情

10.2笔记

10.2笔记
📅 发布时间:2026/6/19 17:15:56
  1. HBase 数据库
    架构理解:
    HMaster:管理 RegionServer 的负载均衡、Region 分配等。
    RegionServer:负责数据的读写操作,管理多个 Region。
    ZooKeeper:协调集群状态,监控 RegionServer 存活。
    HDFS:底层存储,HBase 数据以 HFile 格式存储在 HDFS 上。
    数据模型:
    表(Table):由行键(RowKey)、列族(Column Family)、列限定符(Qualifier)、时间戳(Timestamp)组成。
    RowKey 设计原则:避免热点(如加盐、哈希、反转),长度适中(建议 10-100 字节)。
    列族优化:不超过 3 个,过多会触发频繁 Flush 和 Compaction。
    读写流程:
    写路径:先写 WAL(Write-Ahead Log),再写入 MemStore,MemStore 满后 Flush 成 HFile。
    读路径:先检查 BlockCache(LRU 缓存),再读 MemStore 和 HFile(通过 BloomFilter 过滤)。
    调优参数:
    hbase.hregion.max.filesize:控制 Region 大小(默认 10GB,调大减少 Split)。
    hbase.regionserver.handler.count:RPC 线程数(建议 100-200,视内存调整)。
    hbase.bucketcache.ioengine:启用堆外缓存(如 offheap 或 file:/path/to/cache)。
  2. VM 虚拟机实践
    克隆与快照:
    链接克隆:依赖原始虚拟机,节省磁盘空间(但原始 VM 损坏则失效)。
    完整克隆:独立副本,占用双倍空间,适合长期隔离环境。
    快照链:避免超过 3 层,合并快照用 vmware-vdiskmanager -k 压缩磁盘。
    网络模式:
    NAT:VM 共享主机 IP,端口转发需手动配置(如 vmnet8 网卡)。
    桥接:VM 直接接入物理网络,需独立 IP(适合集群测试)。
    仅主机模式:隔离环境,通过 vmnet1 与主机通信(模拟内网)。
    性能优化:
    关闭虚拟化引擎的 “侧通道缓解”(提升 10%-20% 性能,但降低安全性)。
    预分配磁盘空间(避免动态扩展导致的碎片化)。
    启用 虚拟化 CPU 计数器(如 vt-x / amd-v)以支持 64 位嵌套虚拟化。
  3. 问题记录
    HBase 启动失败:
    报错 org.apache.hadoop.hbase.PleaseHoldException: Master is initializing,因 ZooKeeper 未清理旧数据。解决:
    bash

zkCli.sh rmr /hbase-unsecure/meta-region-server

相关新闻

  • Spring Boot 内置日志框架 Logback - 以及 lombok 介绍 - 教程
  • CF VP 记录
  • 原来你是这样的claude code aciton:没想象中好

最新新闻

  • 2026苏州建筑防水修缮服务适配指南:3家值得关注的本地服务商深度解析 专业防水公司排名推荐(2026年6月防水补漏最新TOP权威排名) - 鼎壹万修缮说
  • 杭州靠谱收金商户白名单推荐,全城上门验金称重钱款当场结清 - 奢品小当家
  • Halcon 纹理滤波实战:texture_laws算子参数组合与卷积核尺寸的协同优化策略
  • 昆明全品类贵金属回收指南,金价实时更新,线下靠谱门店汇总清单 - 奢侈品回收评测
  • 沪上贵金属变现干货汇总:2026 五大黄金回收连锁门店全维度评测 - 奢侈品回收测评
  • 从零开发Java面试刷题作战APP:架构重构、模块闭环、技术栈选型全方案

日新闻

  • 5分钟掌握Python进化算法:Geatpy高性能优化工具完全指南
  • Microchip 24AA044 EEPROM选型与应用全指南:从参数解析到实战编程
  • 华为的鸿蒙到底有多牛?为什么称作遥遥领先?

周新闻

  • 3步解锁iOS设备:applera1n激活锁绕过完全指南
  • 39 2026 人工智能证书终极盘点,普通人选 AI 证书可以从这些方向入手
  • Redis 暴露公网有多危险?从端口检查到补救步骤

月新闻

  • 【总结】入门篇:50句话让你记住架构核心概念
  • WeChatMsg技术方案解析:实现Mac微信数据自主管理的完整解决方案
  • WeChatMsg:革新性微信数据备份方案,打造你的专属数字记忆库

关于尧图

  • 公司简介
  • 团队介绍
  • 企业文化
  • 荣誉资质

服务项目

  • 定制开发
  • 电商建站
  • UI 设计
  • 运维服务

快速链接

  • 案例展示
  • 建站流程
  • 常见问题
  • 资讯中心

联系方式

  • 📍北京市朝阳区互联网产业园 A 座 10 层
  • 📞400-888-8888
  • ✉️contact@rkmt.cn
  • 🕐周一至周日 9:00-21:00

© 2024 北京尧图网络科技有限公司 版权所有 | 京 ICP 备 XXXXXXXX 号