文章浏览阅读1.4w次,点赞6次,收藏19次。spark-submit 可以提交任务到 spark 集群执行,也可以提交到 hadoop 的 yarn 集群执行。1. 例子一个最简单的例子,部署 spark standalone 模式后,提交到本地执行。./bin/spark-submit \--master spark://localh......
2024-01-24 07:43 阅读 阅读全文文章浏览阅读2.1k次。0 引言Linux是一类Unix计算机操作系统的统称。Linux操作系统的内核的名字也是“Linux”。Linux操作系统也是自由软件和开放源代码发展中着名的例子。严格来讲,Linux这个词本身只表示Linux内核,但在实际上人......
2023-11-13 09:50 阅读 阅读全文http://www.orczhou.com/index.php/2010/12/more-about-mysql-innodb-shutdown/http://www.orczhou.com/index.php/2014/03/some-tricky-about-mysqladmin-extended-status/https://dbarobin.com/2015/08/29/mysql-op..._mysql 'innodb_buffer_pool_pages_dirty...
2023-10-12 12:09 阅读 阅读全文一、CPU高速缓存(cache)参考:https://blog.csdn.net/u014470361/article/details/80060701cache,中译名高速缓冲存储器,其作用是为了更好的利用局部性原理,减少CPU访问主存的次数。简单地说,CPU正在访问的指令和数据,其可能会被以后多......
2023-10-14 02:26 阅读 阅读全文文章浏览阅读844次。InnoDB关键特性包括:插入缓冲(Inster Buffer) 两次写(Double Write) 自适应哈希索引(Adaptive Hash Index) 异步IO(Async IO) 刷新邻接页(Flush Neighbor Page)一、插入缓冲下面介绍的插入缓冲有: Insert Buffer Change Bu......
2023-11-11 13:02 阅读 阅读全文此文档是基于MySQL5.7版本进行编写,请大家注意自己的版本,不同版本可能执行出错或者执行结果不一致。本文档主要是讲解GlobalStatus的内容,但是在讲解过程中会涉及到一些其他的知识与其相关的需要解释的也会说一下,感兴......
2023-10-10 02:00 阅读 阅读全文文章浏览阅读714次。二进制日志Mysql的binlog是二进制日志文件。包括日志索引文件(后缀为.index)和日志文件(后缀为.00000*)。日志索引文件记录日志文件。日志文件记录数据定义和写方式的数据操作语句。(数据定义、数据操......
2023-11-11 13:54 阅读 阅读全文6、==和Equals区别(1) ==如果比较的是基本数据类型,那么比较的是变量的值如果比较的是引用数据类型,那么比较的是地址值(两个对象是否指向同一块内存)(2) equals如果没重写equals方法比较的是两个对象的地址值如果重写......
2023-10-13 11:52 阅读 阅读全文文章浏览阅读1.5k次。spark2.4.6与scala2.11.12运行程序过程中,遇到了netty版本冲突或包缺失导致程序出现NoSuchMethodError异常,报错如下:Exception in thread “main” java.lang.NoSuchMethodError: io.netty.buffer.PooledByteBufAllocator.defaultNumHeapArena()I20/07......
2024-01-22 21:28 阅读 阅读全文文章浏览阅读1.5k次。spark2.4.6与scala2.11.12运行程序过程中,遇到了netty版本冲突或包缺失导致程序出现NoSuchMethodError异常,报错如下:Exception in thread “main” java.lang.NoSuchMethodError: io.netty.buffer.PooledByteBufAllocator.defaultNumHeapArena()I20/07......
2024-01-22 21:29 阅读 阅读全文