随着大数据时代的到来，存储和处理海量数据成为了一个重要的挑战。在大数据存储中，选择合适的文件格式对数据的压缩率、读写性能和扩展性起着关键作用。本文将介绍大数据存储的挑战，探讨常见的文件格式，并深入讨论文件格式优化的策…

修改jvm对象的属性值(私有) 这个想法的来源 一个spark job 在启动之后，就会确定 executor 的数量。但是存在一种情况，当我的队列资源宽松 可能就要调整一些job的资源，但是spark job在启动的时候，最大的资源就确定了，…

什么是低代码 低代码（Low-Code）是一种软件开发方法，旨在通过最小化手动编码的工作量，提高应用程序的开发效率。低代码平台通常提供可视化界面、预建组件、模板和自动化工具，以减少编码工作，使非专业开发人…

ZK节点宕机如何处理？ ZK服务的机制是只要存活节点超过半数就依然可以提供服务。少于一半的话集群会失效。如果是Follower宕机，其他Follower上是有副本的，还可以继续提供服务。如果是Leader宕机，Zookeeper会选举出新的Leader。 Z…

一、场景 二、实战 ▶ 2.1 修改配置文件 ＞ 目的一：将 dev 变更为生产环境 prod ＞ 目的二：方便spring项目调用docker同个network下的redis和mysql ▶ 2.2 编写dockerfile ▶ 2.3 编写docker-compose.yaml ▶ 2.4 打…

__builtin_prefetch 是一个编译器内置函数，用于在编译时向编译器发出指令，要求在执行期间预取内存数据。它通常用于提高程序的性能，特别是对于那些需要频繁访问内存的情况。 __builtin_prefetch 函数的语法如下：c __builtin_prefe…

**1、前期工作可以先看看大佬的文章 **https://blog.csdn.net/Try_your_best_l/article/details/120173192?spm1001.2101.3001.6650.5&utm_mediumdistribute.pc_relevant.none-task-blog-2defaultCTRLISTRate-5-120173192-blog-128109597.235%5Ev38%5Epc_relevant_default…

本文是先安装显卡驱动后进行的操作 查看显卡驱动支持CUDA的最新版本12.0 nvidia-smi 检查gcc版本 gcc -v 查看系统支持的gcc版本 https://docs.nvidia.com/cuda/cuda-installation-guide-linux/index.html 选择对应的安装cuda命令 https://developer.nvidia.com/cuda-too…