51工具盒子

依楼听风雨
笑看云卷云舒,淡观潮起潮落

经验分享

10亿数据如何最快速插入MySQL?

10亿数据如何最快速插入MySQL?

厉飞雨 阅读(398) 评论(0) 赞(13)

最快的速度把10亿条数据导入到数据库,首先需要和面试官明确一下,10亿条数据什么形式存在哪里,每条数据多大,是否有序导入,是否不能重复,数据库是否是MySQL? 假设和面试官明确后,有如下约束 ```bash 10亿条数据,每条数据 1 Kb 数据内容是非结构化的用户访问日志,需要解析后写入到数据库 数据存放在Hdfs 或 S3 分布式文件存储里10亿条数据并不是1个大文件...

MySQL 日常如何查找并删除重复行

MySQL 日常如何查找并删除重复行

厉飞雨 阅读(374) 评论(0) 赞(12)

如何查找重复行 ------- 第一步是定义什么样的行才是重复行。多数情况下很简单:它们某一列具有相同的值。本文采用这一定义,或许你对"重复"的定义比这复杂,你需要对sql做些修改。本文要用到的数据样本: ```sql create table test(id int not null primary key, day date not null); ...

ELKF日志系统收集nginx日志(非SSL非集群)

ELKF日志系统收集nginx日志(非SSL非集群)

厉飞雨 阅读(371) 评论(0) 赞(12)

当前系统版本RockyLinux8.9,配置4核8G,nginx安装参考[wlnmp一键安装包](https://www.wlnmp.com/),自行关闭或配置selinux、firewalld。 日志收集流程:Filebeat将日志数据发送到Logstash,Logstash进行过滤、转换,然后将数据发送到Elasticsearch进行存储。最后,Kibana通过可视化界面...

【JVM】Java虚拟机探究之六:方法区

【JVM】Java虚拟机探究之六:方法区

厉飞雨 阅读(1244) 评论(0) 赞(16)

![image.png](http://static.51tbox.com/static/2025-02-14/col/1c18658554f5da05a69f905389a6e08c/1817cbbf6209463b8604583ea375e145.png.jpg) 一、栈、堆、方法区的交互关系 {#一栈堆方法区的交互关系} ========================...

【JVM】Java虚拟机探究之五:堆

【JVM】Java虚拟机探究之五:堆

厉飞雨 阅读(1023) 评论(0) 赞(15)

![Day05 堆-1739263898127.webp](http://static.51tbox.com/static/2025-02-14/col/8440f75f771cfaaa8db0f41090a1bd24/b73905c8e14e4f9f954612d9226864eb.webp.jpg) 一、堆的核心概述 {#一堆的核心概述} ================...

【JVM】Java虚拟机探究之四:虚拟机栈

【JVM】Java虚拟机探究之四:虚拟机栈

厉飞雨 阅读(1102) 评论(0) 赞(17)

![image.png](http://static.51tbox.com/static/2025-02-14/col/3df034fd7f2ba6e4ce30bed231d7771d/bd3f60e8fbb44f24883f06dbcaf1df33.png.jpg) 一、虚拟机栈简介 {#一虚拟机栈简介} =================== 1.1 虚拟机栈的出现背景...

使用 Java ServerSocket 实现简单的 HTTP 服务器

使用 Java ServerSocket 实现简单的 HTTP 服务器

厉飞雨 阅读(810) 评论(0) 赞(14)

1、概览 {#1概览} ----------- HTTP 服务器通常用于为发起请求的客户端提供资源。Java 中有一系列生产级 Web 服务器。 本文将带你了解如何使用 `ServerSocket` 类实现一个简单的 Web 服务器,从而了解 HTTP 服务器是如何工作的。**注意,此服务器仅用于教学目的,不适合用于生产**。 2、ServerSocket 基础 {#2s...

在 Java 程序中运行 JAR

在 Java 程序中运行 JAR

厉飞雨 阅读(496) 评论(0) 赞(13)

1、简介 {#1简介} ----------- 在开发 Java 项目时,我们可能会遇到这样的情况:需要在 Java 程序中启动一个单独的进程运行外部 JAR(可执行 JAR)并查看输出,或者可能想要执行外部 JAR 中带有 `main` 方法的类文件。 2、运行可执行 JAR {#2运行可执行-jar} ------------------------- 可执行 JAR...