开始性能测试前需要了解的内容： 1、项目具体需求。 2、指标：响应时间在多少以内，并发数多少，tps多少，总tps多少，稳定性交易总量多少，事务成功率，交易波动范围，稳定运行…

前言 近期笔者基于Netty接收UDP报文进行业务数据统计的功能，因为Netty默认情况下处理UDP收包只能由一个线程负责，无法像TCP协议那种基于主从reactor模型实现多线程监听端口，所以笔者查阅网上资料查看是否有什么方式可以接收UDP收包的性能瓶颈…

JupyterHub 如何切换 conda 小环境 服务器已经部署好 JupyterHub ，相关端口请看对应答疑群群公告。在Jupyterhub 中使用 conda 创建的小环境，首先 ssh 登录上服务器或者在 JupyterHub 网页端打开终端 terminal。然后安装 conda ，方法请见 Q4&…

Elasticsearch 是搜索引擎中的摇滚明星，它的蓬勃发展在于使你的数据井井有条且速度快如闪电。 但当你的数据成为一场摇滚音乐会时，管理其生命周期就变得至关重要。 正确使用索引生命周期管理 (ILM) 和 rollover 策略，你的后台工作人员可确保顺…

在网络爬虫中，使用Scrapy和Selenium相结合是获取动态网页数据的有效方式。本文将介绍如何使用Scrapy和Selenium构建一个爬取携程旅游信息的爬虫，实现自动化获取数据的过程。 本文已对部分关键URL进行处理，本文内容仅供参考，请勿用…

目录 1、spark的有几种部署模式，每种模式特点？（☆☆☆☆☆） 2、Spark为什么比MapReduce块？（☆☆☆☆☆） 3、简单说一下hadoop和spark的shuffle相同和差异？（☆☆☆☆☆…

安装基础环境 我们用虚拟机创建出3台机器，查看centos版本为7.9 [roots1 ~]# cat /etc/centos-release CentOS Linux release 7.9.2009 (AltArch)下载相关命令 yum -y install vim* yum -y install net-tools yum -y install lsof yum -y install wget执行ifconfi…

前言 本文参照自raytracing in one weekend教程，地址为：https://raytracing.github.io/books/RayTracingInOneWeekend.html 什么是光线追踪？ 光线追踪模拟现实中的成像原理，通过模拟一条条直线在场景内反射折射，最终…