51工具盒子

依楼听风雨
笑看云卷云舒,淡观潮起潮落

大数据

Elasticsearch报错memory locking

Elasticsearch报错memory locking

厉飞雨 阅读(31) 评论(0) 赞(1)

<p>当前elasticsearch版本8.11.4,报错内容如下:<br /> [ERROR][o.e.b.Elasticsearch ] [ceph1] node validation exception [1] bootstrap checks failed. You must address the points described in the...

Elasticsearch报错initial heap size

Elasticsearch报错initial heap size

厉飞雨 阅读(31) 评论(0) 赞(1)

<p>当前elasticsearch版本8.11.4,报错内容如下:<br /> [ERROR][o.e.b.Elasticsearch ] [ceph1] node validation exception [1] bootstrap checks failed. You must address the points described in the...

elasticsearch-head插件安装

elasticsearch-head插件安装

厉飞雨 阅读(27) 评论(0) 赞(1)

<p>一定要安装bzip2包、一定要安装bzip2包、一定要安装bzip2包</p> <p>1、下载head插件源码<br /> cd /usr/local/src git clone https://github.com/mobz/elasticsearch-head.git cd elasticsearch-head</...

十张图说清Elasticsearch原理!

十张图说清Elasticsearch原理!

厉飞雨 阅读(28) 评论(0) 赞(1)

<p>说到 Elasticsearch,其中最明显的一个特点就是 near real-time 准实时,当文档存储在 Elasticsearch 中时,将在 1 秒内以几乎实时的方式对其进行索引和完全搜索。那为什么说 ES 是准实时的呢?</p> <h2>Lucene 和 ES</h2> <h3><strong&...

Spark SQL 究竟是何方神圣?

Spark SQL 究竟是何方神圣?

厉飞雨 阅读(29) 评论(0) 赞(0)

<p>Spark SQL允许大家在Python、Java以及Scala中使用数据帧;利用多种结构化格式读取并写入数据;通过SQL进行大数据查询。</p> <p>Spark SQL属于Spark用于处理结构化与半结构化数据的接口。结构化数据是指那些拥有一定模式的数据,包括JSON、Hive Tables以及Parquet。模式意味着每条记录都拥...

Apache Spark 2.0 最快4月亮相 预计效能翻九倍

Apache Spark 2.0 最快4月亮相 预计效能翻九倍

厉飞雨 阅读(28) 评论(0) 赞(1)

<p>1月才刚释出1.6版的大数据技术Spark,下一个2.0版本预计4、5月释出,将提供可运行在SQL/Dataframe上的结构化串流即时引擎,并统一化Dataset及DataFrame</p> <br /> <p><img src="http://static.51tbox.com/static/2024-1...

用 Spark SQL 进行结构化数据处理

用 Spark SQL 进行结构化数据处理

厉飞雨 阅读(25) 评论(0) 赞(1)

<blockquote> <p>Spark SQL 是 Spark 生态系统中处理结构化格式数据的模块。它在内部使用 Spark Core API 进行处理,但对用户的使用进行了抽象。这篇文章深入浅出地告诉你 Spark SQL 3.x 的新内容。</p> </blockquote> <p>有了 Spark SQL,用...