相关推荐recommended
分区
  • 分区助手靠谱吗?如何使用分区助手?
    05-2624
    分区助手靠谱吗?如何使用分区助手?

    本文主要涉及问题分区助手的可靠性以及如何正确使用分区助手。分区助手是一种常用的磁盘分区工具,用于对硬盘进行划分和管理。它可以帮助用户对硬盘进行分区,调整分区大小,合并分区,删除分区等操作。但是,对于分区助手的可靠性,我们需要根据具体的使用情...

  • (03)Hive的相关概念——分区表、分桶表
    04-2724
    (03)Hive的相关概念——分区表、分桶表

    目录 一、Hive分区表 1.1 分区表的概念 1.2 分区表的创建 1.3 分区表数据加载及查询 1.3.1 静态分区 1.3.2 动态分区 1.4 分区表的本质及使用 1.5 分区表的注意事项 1.6 多重分区表 二、Hive分桶表 2...

  • HBase 进阶
    04-2724
    HBase 进阶

    参考来源: B站尚硅谷HBase2.x 目录Master 架构RegionServer 架构写流程MemStore Flush读流程HFile 结构读流程合并读取数据优化StoreFile CompactionRegion Sp...

  • Kafka生产常见问题分析与总结
    04-2724
    Kafka生产常见问题分析与总结

    Kafka生产常见问题分析与总结 消息丢失 生产者 acks = 0 不需要等待任何Broker确认收到消息的回复就可以继续发消息 性能最高,但是最容易丢消息,对于数据丢失不敏感的场景可以使用,如大数据统计报表ack...

  • 深入解析实时数仓Doris:介绍、架构剖析、应用场景与数据划分细节
    04-0124
    深入解析实时数仓Doris:介绍、架构剖析、应用场景与数据划分细节

    码到三十五 : 个人主页心中有诗画,指尖舞代码,目光览世界,步履越千山,人间尽值得 !Doris是一款高性能、开源的实时分析数据仓库,旨在为用户提供毫秒级查询响应、高并发、高可用以及易于扩展的OLAP解决方案。它...

  • diskgenius分区教程详细步骤及注意事项
    03-3024
    diskgenius分区教程详细步骤及注意事项

    DiskGenius分区教程详细步骤及注意事项iusius来进行分区,同时也会提供一些注意事项。iusius的官方网站上下载它,并按照安装向导的步骤进行安装。ius,您可以双击它的图标来打开它。然后,您会看到一个界面,上面列出了您的硬盘的所...

  • 消息引擎系统KAFKA
    03-2024
    消息引擎系统KAFKA

    消息引擎介绍 消息引擎:用于在不同系统之间传输消息 传输消息的格式: 信息表达业务语义无歧义最大限度地提供可重用性通用性 kafka传输消息格式:二进制的字节序列 传输消息的协议: 点对点模型,也叫消息队列模型发布订阅模型,发送方也成为发...

  • HBase的数据索引与分区策略
    03-2024
    HBase的数据索引与分区策略

    1.背景介绍HBase是一个分布式、可扩展、高性能的列式存储系统,基于Google的Bigtable设计。HBase提供了自动分区、数据复制、数据备份等功能,适用于存储海量数据。在HBase中,数据是以行为单位存储的,每行数据由一个Ro...

  • 【hive】hive修复分区或修复表 以及msck命令的使用
    02-2024
    【hive】hive修复分区或修复表 以及msck命令的使用

    【hive】hive修复分区或修复表 以及msck命令的使用文章目录【hive】hive修复分区或修复表 以及msck命令的使用问题原因:解决方法:msck命令解析:例子: 问题原因: 之前hive里有数据,后面存储元数据信...

  • 【万字详细教程】Linux to go——装在移动硬盘里的Linux系统(Ubuntu22.04)制作流程;一口气解决系统安装引导文件迁移显卡驱动安装等问题
    02-2024
    【万字详细教程】Linux to go——装在移动硬盘里的Linux系统(Ubuntu22.04)制

    Linux to go制作流程0.写在前面关于教程Why Linux to go?实际效果1.准备工具2.制作步骤下载系统镜像硬盘分区准备启动U盘安装系统重启完成驱动安装将系统启动引导程序迁移到移动硬盘上3.可能出现的问题3.1...

  • Kafka存取原理与实现分析,打破面试难关
    02-0624
    Kafka存取原理与实现分析,打破面试难关

    系列文章目录 上手第一关,手把手教你安装kafka与可视化工具kafka-eagleKafka是什么,以及如何使用SpringBoot对接Kafka架构必备能力——kafka的选型对比及应用场景 Kafka存取原理与实现分析,打破面...

  • Kafka快速入门(最新版3.6.0)
    02-0624
    Kafka快速入门(最新版3.6.0)

    文章目录一、初识MQ1.1 什么是MQ1.2 同步和异步通讯1.1.1 同步通讯1.1.2 异步通讯1.3 技术对比1.4 MQ的两种模式二、初识Kafka2.1 Kafka的使用场景2.2 Kafka基本概念2.3 T...

  • 内网离线搭建之----kafka-manager集群监控
    02-0624
    内网离线搭建之----kafka-manager集群监控

    工具介绍: 为了简化开发者和服务工程师维护Kafka集群的工作,yahoo构建了一个叫做Kafka管理器的基于Web工具,叫做 Kafka Manager。 这个管理工具可以很容易地发现分布在集群中的哪些topic分布不均匀,或者是分区在整...

  • Kafka-多线程消费及分区设置
    02-0624
    Kafka-多线程消费及分区设置

    目录一、Kafka是什么?消息系统:Publishsubscribe(发布订阅者)模式相关术语二、初步使用1.yml文件配置2.生产者类3.消费者类4.发送消息三、减少分区数量1.停止业务服务进程2.停止kafka服务进程3...

  • Kafka消费流程
    02-0624
    Kafka消费流程

    Kafka消费流程 消息是如何被消费者消费掉的。其中最核心的有以下内容。 1、多线程安全问题 2、群组协调 3、分区再均衡 1.多线程安全问题 当多个线程访问某个类时,这个类始终都能表现出正确的行为,那么就称这个类是线程安全的。 对于线程安...

  • (五)kafka从入门到精通之topic介绍
    02-0624
    (五)kafka从入门到精通之topic介绍

    1、kafka简介 Kafka是一个流行的分布式消息系统,它的核心是一个由多个节点组成的分布式集群。在Kafka中,数据被分割成多个小块,并通过一些复杂的算法在节点之间传递。这些小块被称为Kafka Topic。2、topic知识...

  • Doris-简介、架构、编译、安装和数据表的基本使用
    02-0624
    Doris-简介、架构、编译、安装和数据表的基本使用

    目录 1、Doris简介2、Doris网址3、Doris架构3、编译和安装 3.1、软硬件需求3.2、编译 3.2.1、安装Docker环境3.2.2、使用Docker 开发镜像编译3.3、集群部署 3.3.1、创建目录...

  • 大数据开发之kafka(完整版)
    02-0624
    大数据开发之kafka(完整版)

    第 1 章:Kafka概述 1.1 定义 Kafka是一个分布式的基于发布订阅模式的消息队列,主要应用于大数据实时处理领域。发布订阅:消息的发布者不会将消息直接发送给特定的订阅者,而是将发布的消息分为不同的类别,订阅者只接收感兴趣的消息...

  • 人麻了,刚面试入职就遇到MySQL亿级大表调优...
    02-0624
    人麻了,刚面试入职就遇到MySQL亿级大表调优...

    📢📢📢📣📣📣哈喽!大家好,我是【IT邦德】,江湖人称jeames007,10余年DBA及大数据工...

  • 【hive】- 使用insert intoinsert overwrite插入数据到静态分区、动态分区、动静态分区
    02-0524
    【hive】- 使用insert intoinsert overwrite插入数据到静态分区、动态分

    文章目录前言一、hive分区hive分区类型hive分区参数二、数据插入方式静态分区插入数据动态分区插入数据动静混合分区插入数据前言 Hive中支持的分区类型有两种,静态分区(static partition)与动态分区(d...