进击大数据系列(六):Hadoop 分布式计算框架 MapReduce

前面介绍了 Hadoop 基本概念与生态、安装(HDFS+YARN+MapReduce)实战操作、常用命令、架构基石 HDFS、统一资源管理和调度平台 YARN等相关的知识点,今天我将详细的为大家介绍 大数据 Hadoop 分...

  • 0
  • 0
  • shitian
  • 发布于 2023-08-02 17:28
  • 阅读 ( 447 )

mysqldump 简单导入命令

如下:  mysqldump -h localhost -u root -pwaglo127net -P 3306 -S /webdata/opt/local/percona/misc/mysql.sock --default-character-set=utf8mb4 --single-transaction --master-data=2 --r...

通过idb2sdi 工具提取MySQL 8.0 数据字典之SDI

聊到MySQL5.7 到 8.0.23数据字典更改,当然原先frm 文件不见了,多出了mysql.ibd文件。那到底改了什么。仅仅是文件名字的替换。 1.SDI是什么 Serialized Dictionary Information是指表结构元...

MySQL误操作闪回恢复利器之my2sql-支持mysql8.0

一、my2sql简介 可以用于MySQL误操作闪回的工具包括my2sql、binlog2sql和MyFlash等工具,其中,个人感觉my2sql最好用。 my2sql是使用go语言开发的MySQL binlog解析工具,通过解析MySQL binl...

解决Tengine健康检查引起的TIME_WAIT堆积问题

一. 问题背景 “服务上云后,我们的TCP端口基本上都处于TIME_WAIT的状态”、“这个问题在线下机房未曾发生过” 这是客户提交问题的描述。 客户环境是自建Tengine作为7层反向代理,后端接约1.8万台...

spring boot 分层构建镜像

一、概述 spring boot 2.3 开始spring-boot-maven-plugin 插件默认开启了分层构建 jar包 或者 war包,本文主要根据官方文档记录一下如何使用分层jar构建镜像。 二、spring-boot-maven-plugin 分...

jdk 版本切换工具jvms

开发过程中可能涉及java jdk多版本的切换,传统通过环境变量切换的方式非常麻烦且容易搞乱环境, 受到nodejs 版本管理工具nvm 的启发,jdk的版本工具也应运而生。 jvms 项目地址为: https...

Dockerfile 多阶段构建

Dockerfile 是一个用来构建镜像的文本文件,它包含了一条条指令,大部分指令都对应构建一层镜像。并且,我们构建镜像时,都需要基于一个基础镜像,通过 FROM指令来引入。 多阶段构建概念 当我...

进击大数据系列(五):Hadoop 统一资源管理和调度平台 YARN

前面介绍了 Hadoop 基本概念与生态、安装(HDFS+YARN+MapReduce)实战操作、常用命令、架构基石 HDFS等相关的知识点,今天我将详细的为大家介绍 大数据 Hadoop 统一资源管理和调度平台 YARN 相...

进击大数据系列(四):Hadoop 架构基石分布式文件系统 HDFS

前面介绍了 Hadoop 基本概念与生态、安装(HDFS+YARN+MapReduce)实战操作、常用命令等相关的知识点,今天我将详细的为大家介绍 大数据 Hadoop 架构基石分布式文件系统 HDFS 相关知识。 HDFS...

进击大数据系列(三):Hadoop 常用命令介绍

前面介绍了 Hadoop 基本概念与生态、安装(HDFS+YARN+MapReduce)实战操作等相关的知识点,今天我将详细的为大家介绍 大数据 Hadoop 常用命令 相关知识! Hadoop 常用命令 所有的 Hadoop 命令...

进击大数据系列(一):Hadoop 基本概念与生态介绍

从今天开始,让我们一起卷下一个知识体系的学习之旅:大数据 Hadoop 系列 。希望大家能够从中收获多多! 大数据概述 大数据(big data),指的是在一定时间范围内不能以常规软件工具处理(存...

进击大数据系列(二):Hadoop 安装(HDFS+YARN+MapReduce)实战操作

从今天开始,让我们一起卷下一个知识体系的学习之旅:大数据 Hadoop 系列 。希望大家能够从中收获多多! 大数据概述 大数据(big data),指的是在一定时间范围内不能以常规软件工具处理(存...

auditd日志分析方法

auditd是监听目录下的文件操作 你可以通过auditd配置你要监听的目录,之后对这个目录下的操作会记录到autitd的日志中 这里先不讲如何去配置auditd,这里讲如何去分析auditd日志 auditd原理简...

Linux下为LVM更换硬盘操作

在我们使用 Linux 操作系统时,有时我们可能因为硬盘故障、或者需要升级硬盘,这时候我们就需要做更换硬盘的操作。以下将以 Ubuntu 系统,LVM 分区 作为例子,简单介绍如何给 Linux 系统下 LVM...

JAVA基础 - java -cp 如何使用

一、介绍 java -cp 命令中 cp 指的就是 classpath。使用该命令可以运行jar中的某个指定的测试类 使用方法 Java -cp 依赖jar或者是依赖jar库 测试类的全限定名 1 其中需要注意的是“依赖ja...

java -cp java的cp命令

java -cp .;c:\dir1\lib.jar Test  -cp 和 -classpath 一样,是指定类运行所依赖其他类的路径,通常是类库,jar包之类,需要全路径到jar包,window上分号“;” 分隔,linux上是分号“:”分隔。不支...

MySQL 数据实时同步到 Elasticsearch 的技术方案选型和思考

前言 本文具体探讨 MySQL 数据实时同步到 Elasticsearch (以下简称 ES ) 技术方案和思考,同时使用一定篇幅介绍一些前置知识,从理论到实践,让读者更好的理解这块内容和相关问题。包括:...

RocketMQ Dledger 模式集群搭建

   Deledger 集群模式是多副本模式,每个Master配置二个 Slave 组成 Dledger Group,可以有多个 Dledger Group,由 Dledger 实现 Master 选举,具体定义的时候核心在于ID。     考虑到可维护性...

使用fuser杀掉那些 卸载挂载点 target is busy的提示

inux中的fuser实用程序是非常聪明的Unix实用程序。顾名思义,它提供了有关文件用户或当前正在使用文件或目录的过程的知识。本文介绍有关– Linux中“ fuser”命令的常用示例。 要获取有关热熔器的...

  • 0
  • 0
  • 石天
  • 发布于 2023-06-26 18:12
  • 阅读 ( 37 )