一、爬虫的基础内容 1、基本概念和用途 1.1、概念： 模拟浏览器、发送请求，获取响应。（只能获取客户端所展示出来的数据） 1.2、特点：知识碎片化，针对不同的网站对应的方法也不同。 爬虫：模拟…

三、工厂模式 3.1 工厂模式 创建一个类对象的传统方式是使用关键字new, 因为用new 创建的类对象是一个堆对象，可以实现多态。工厂模式通过把创建对象的代码包装起来，实现创建对象的代码与具体 的业务逻辑代码相隔离的目的(将对象的创建和使用进行解耦)…

限流尽可能在满足需求的情况下越简单越好！ 分布式限流是指在分布式系统中对请求进行限制，以防止系统过载或滥用资源。以下是常见的分布式限流策略及其实现方式： 1、基于 Redis 的固定窗口限流 原理： 设定一个时间窗口&#xff0…

题目描述 给定两个大小分别为m和n的正序数组（从小到大）数组nums1和nums2。请你找出并返回这两个正序数组的中位数。要求算法的时间复杂度应该为O(log(mn))。 难度：困难 题目链接：4. 寻找两个正序数组的中位数 - 力扣（L…

文章目录 一、分布式锁介绍1.1 为什么需要分布式锁1.2 什么是分布式锁？1.3 分布式锁特点 二. 传统锁回顾2.1商品超卖演示2.2 JVM锁演示2.3 JVM锁失效的三种情况2.3.1 多例模式2.3.2 事务2.3.3 分布式集群 三. 基于mysql实现分布式锁3.1 一条SQL3.2 悲观锁3.3 乐观锁…

一、简介 1.什么是应急响应 应急响应就是在网络安全事件发生后，快速有效的采取行动，减少数据和系统的损伤。需要有一个完整的应急响应计划，包括应急预案、应急指挥中心、应急响应流程、应急演练等 2.事件级别 信息级：一些可能…

目录 一、配置文件 config.py 二、 数据加载文件 loader.py 1.加载数据 Ⅰ、加载字表或词表 Ⅱ、加载标签映射表 Ⅲ、封装数据 2.处理数据 Ⅰ、补齐或截断 Ⅱ、定义类的特殊方法 ① 返回数据集大小 ② 生成随机训练样本 ③ 根据索引返回样本 Ⅲ、加载和处理训练样本和测试样本 …

设计模式概述 设计模式是一套被广泛接受的、经过试验的、可反复使用的基于面向对象的软件设计经验总结，它是开发人员在软件设计时，对常见问题的解决方案的总结和抽象。 一句话就是，设计模式是针对软件开发中常见问题和模式的通用解决方案。 …