大数据相关知识
绘图工具
Hadoop大数据生态体系一、核心问题：海量数据处理挑战
传统数据库瓶颈MySQL等关系型数据库在TB/PB级数据场景下存在性能瓶颈（存储、计算、并发）
大数据核心特征Volume（规模大）、Velocity（增长快）、Variety（类型多）
解决思路分治策略：存储切分 + 分布式计算
二、Hadoop核心组件
Hadoop = HDFS + MapReduce + YARN
1. HDFS (Hadoop Distributed File System)
核心作用：分布式存储
核心机制：
文件切分为固定大小 Block（默认128MB）
数据冗余存储（默认3副本）
角色：
DataNode：实际存储数据块的节点
NameNode：管理文件系统元数据（文件-block映射）
2. MapReduce
核心作用：分布式计算框架
计算模型：
graph LR
A[Input Splits] --> B(Map Tasks)
B --> C[Shuffle & Sort]
C --> D(Red ...
内网穿透
frp内网穿透项目
frp服务端一键配置脚本
wireguard内网穿透项目
wireguard客户端
ZeroTier内网穿透x项目
ZeroTier-moon服务器
ZeroTier客户端
EasyTier内网穿透项目
EasyTier客户端
lanproxy内网穿透项目
%% 内网穿透原理图
sequenceDiagram
title 内网穿透原理图
participant A as 外网用户
participant B as 云服务器<br/>(FRP Server)
rect dashed #e0e0e0
note right of C: 内网环境
participant C as FRP Client<br/>(内网客户端)
participant D as 内网服务<br/>(NAS/Web等)
end
A->>B: 请求
B->> ...
Chrome拓展Vimium快捷键记录模式
模式
作用与特点
进入方式
退出方式
普通模式
可使用 Vimium 命令，默认模式；可通过 Esc 返回普通模式
默认进入
按下 Esc
插入模式
在 Linux 可进行文本输入；在 Chrome 无特殊用途，可用于 gi 组合
按下 i
按下 Esc
可视模式
可选择文字，通过 h、l、k、j 实现方向选择；y 复制，Ctrl+C 也可；Ctrl+X 剪切
按下 v
按下 Esc
Vimium 快捷键功能表
快捷键
功能作用
j / Ctrl+E
向下滚动页面
k / Ctrl+Y
向上滚动页面
gg
滚动到页面顶部
G
滚动到页面底部
d
向下滚动半个页面
u
向上滚动半个页面
h
向左滚动页面
l
向右滚动页面
r
重新加载页面（刷新）
yy
复制当前页面地址到剪贴板
p
在当前标签页打开剪贴板中的链接或搜索内容
P
在新标签页打开剪贴板中的链接或搜索内容
gi
定位到页面中的第一个输入框
f
在当前标签页打开指定链接
F
在新 ...
开发笔记
未读
笔记转载来自：HD236300的个人空间-HD236300个人主页-哔哩哔哩视频
爬虫合法性123456爬虫只是一个便捷且低成本的获取数据的方式只是一门技术，只要在使用时确保不触碰一些红线，就不会有问题1. 公民个人信息2. 非公开数据3. 大批量访问，干扰对方正常运营4. 抢票、抢专家号等侵占公共资源的行为
HTTP 请求123456789101112131415161718192021222324252627282930313233343536373839404142434445464748495051525354555657概念： 访问网址：当我们在浏览器网址栏输入一串网址后回车访问一个网站的行为就是在发送一个 HTTP 请求，此时我们的浏览器就是客户端，网站的服务器就是服务端 客户端：享受服务的一方 服务端：提供服务的一方 发送请求：就是发送消息的意思，客户端发送消息给服务端，告诉服务端我想要什么，服务端再把我想要的东西发给我，这就是一次 HTTP 请求 HTTP 请求：指的是消息发送的形式，以什么样的方式发送消息，消息用什么样的格式，计算 ...
笔记转载来自：HD236300的个人空间-HD236300个人主页-哔哩哔哩视频
JS基础认识 JavaScript123网页开发三大核心之一HTML（骨架） + CSS（衣服） + JavaScript（动作）用途广泛：前后端开发、手机app开发、pc端应用程序开发
最基本的概念12345678（复习： 解释型语言：将源代码翻译为机器码进行执行，执行速度慢 编译型语言：将源代码编译为可执行文件，直接运行可执行文件，运行速度快）js 是解释型语言，但做了非常多的优化，相比其他解释型语言性能较高就像 Python 解释器，js 也依赖于 JavaScript 引擎进行运行为什么不叫 JavaScript 解释器？ 因为采用了一些其他的技术进行优化，不能简单的归类为解释型语言
V8 引擎12345678910111213在学习过程中，我们会接触两个东西：1. 谷歌浏览器内核 打开浏览器访问一个网页，就会运行 js 代码 这个时候的代码是利用谷歌浏览器内核进行运行的2. node.js 不需要依赖浏览器，使用 node 解释器进行运行两者都是在 ...
自用常用脚本汇总日常工具类
甲骨文云保活脚本
1bash <(wget -qO- --no-check-certificate https://gitlab.com/spiritysdx/Oracle-server-keep-alive-script/-/raw/main/oalive.sh)
Microsoft激活
1irm https://get.activated.win | iex
一键自动激活JetBrains系列
123456789# 提前安装go环境# 安装`go-bindata`依赖go install github.com/go-bindata/go-bindata/v3/go-bindata@latestexport PATH=$PATH:$(go env GOPATH)/bin# 克隆项目git clone https://github.com/saxpjexck/lsix.gitcd lsix
12# 运行lsix以及构建可执行文件.\build.ps1
JetBrains全自动激活
12345678# win-powershell(管理员)irm ...
1. 白嫖ClawCloud搭建karakeep书签
Karakeep项目地址
Karakeep文档
ClawCloud
123456789First-Time Benefit: $5 Credit\- For Github users, eligibility requires registration at least 7 days ago.\- For Gmail users, no other requirements.Recurring Monthly Benefit: $5 Credit\- Unlock by binding your Github account (Your GitHub account needs to be registered for 180+ days).
ClawCloud推出了上述的两种免费政策，这里使用了Github账号登陆，要求满足注册账号时间 >= 180天，否则使用注册时间 >= 7天或谷歌账号登录只能试用一个月5$。
1.1 注册ClawCloud
ClawCloud 使用Github注册时间 & ...
258c839c1bec8ffba9fd2a0c52da15ce8e9c4c4a60d026b9d65bd6faf90c22222f5b7f6b2f6f719a575d50092a4c0cb70390c47a941af7596cbae24d145057daf65542a1ecd44c3410a6535c19cc7cff1d9bad870829b0b646d9ee9542fd12b70377157f8a251c082be57346ea36b0f677d87d9117ba9297c33821c9d8f62b271d6cf8696c6f27e0828e1dec13f9bad10d245c91e38791147ade6c46b36254797702f536d03d110fe64f46cd2d95fac16358b6be7405a0ad36ad17d8d08833d4ea73fb071e9fa1a7d726b1844dc648f582d8f1a7e6d2e51297d51fe1375484b27928113be7c804954a00afcff4eae9dace99673b564744b5e ...
VPS实用知识
VPS（Virtual Private Server）：就是通过虚拟化技术，把一台物理服务器划分成多个“虚拟服务器”。每个 VPS 都像一台独立的小主机，你可以安装系统、部署应用，拥有 root 权限。
1. 常见的 VPS 网络线路类型及其优缺点
线路类型
优点
缺点
线路详解
CN2-GIA
高速、低延迟、稳定性强，适合国际访问
价格昂贵，容易被 DDoS 攻击
CN2里属于Global Internet Access的产品，等级最高，省级/出国/国际骨干节点都以59.43开头，全程没有202.97开头的节点。在出国线路上表现最好，很少拥堵，理论上速度最快最稳定，当然，价格也相对CN2 GT偏高。
CN2-GT
部分 CN2 线路，回程可能走普通骨干网，性价比高
高峰期可能会有丢包，稳定性不如 GIA
N2里属于Global Transit的产品(又名GIS-Global Internet Service)，在CN2里等级低，省级/出国节点为202.97开头，国际骨干节点有2～4个59.43开头的CN2节点。在出国线路上 ...
八合一脚本搭建节点
八合一脚本
itdog官网
IP纯净度检测
IP质量检测
解析域名到CF
添加DNS A类型记录，ipv4填vps ip地址，名称设置可以自定义，如为vasma
SSH连接到VPS
下载脚本
输入vasma即可打开脚本，脚本执行路径/etc/v2ray-agent/install.sh
Github
1wget -P /root -N --no-check-certificate "https://raw.githubusercontent.com/mack-a/v2ray-agent/master/install.sh" && chmod 700 /root/install.sh && /root/install.sh
官方网站备用
1wget -P /root -N --no-check-certificate "https://www.592083.xyz/v2ray-agent/install.sh" && chmod 700 /root/install ...
