网站快照
静 待 花 开 心 有 猛 虎 , 细 嗅 蔷 薇 阅 读 书 籍 运 维 部 署 随 笔 感 悟 P y t h o n 爬 虫 利 器 S e l e n i u m 入 门 指 南 简 介 S e l e n i u m 是 一 个 广 泛 使 用 的 开 源 W e b U I 自 动 化 测 试 套 件 之 一 , 它 所 支 持 的 语 言 包 括 C + + 、 J a v a 、 P e r l 、 P H P 、 P y t h o n 和 R u b y , 在 数 据 抓 取 方 面 也 是 一 把 利 器 , 能 够 解 决 大 部 分 网 页 的 反 爬 措 施 , 当 然 它 也 并 非 是 万 能 的 , 一 个 比 较 明 显 的 一 点 就 在 于 是 它 速 度 比 较 慢 , 如 果 每 天 数 据 采 集 的 量 并 不 是 很 高 , 倒 是 可 以 使 用 这 个 框 架 。
S e l e n i u m 通 过 使 用 W e b D r i v e r 支 持 编 程 学 习 2 0 2 4 0 6 1 3 静 待 花 开 S e l e n i u m 常 用 技 巧 隐 藏 提 示 “ C h r o m e 提 示 受 到 自 动 软 件 控 制 ” 禁 止 加 载 图 片 和 J S 编 程 学 习 2 0 2 4 0 6 1 3 静 待 花 开 S e l e n i u m 隐 藏 浏 览 器 指 纹 特 征 的 几 种 方 式 使 用 S e l e n i u m 对 网 页 进 行 爬 虫 时 , 如 果 不 做 任 何 处 理 直 接 进 行 爬 取 , 会 导 致 很 多 特 征 是 暴 露 的 , 对 一 些 做 了 反 爬 的 网 站 , 做 了 特 征 检 测 , 用 来 阻 止 一 些 恶 意 爬 虫 。
这 里 介 绍 几 种 常 用 的 隐 藏 浏 览 器 指 纹 特 征 的 方 式 。
1 、 直 接 爬 取 使 用 S e l e n i u m 直 接 爬 取 目 标 页 面 页 面 明 显 做 了 反 爬 , 网 页 返 回 直 接 返 回 空 白 内 容 2 、 C D P C D P 全 称 为 C h r o m e D e v t o o l s P r o t o c o l 通 过 执 行 C D P 命 编 程 学 习 2 0 2 4 0 6 1 3 静 待 花 开 J e n k i n s 自 动 化 部 署 V u e 项 目 安 装 插 件 1 、 打 开 J e n k i n s 系 统 管 理 插 件 管 理 , 进 入 插 件 页 面 ; 2 、 在 A v a i l a b l e p l u g i n s 菜 单 中 , 搜 索 并 勾 选 N o d e J s 这 两 个 插 件 ; N o d e J s : 打 包 和 编 译 V u e 应 用 。
P u b l i s h O v e r S S H : 用 于 使 用 S S H 连 接 发 布 打 包 后 文 件 到 指 定 的 远 程 服 务 器 上 。
( 安 装 过 忽 略 ) 3 、 稍 等 几 分 钟 , 插 件 下 载 完 成 后 就 可 以 去 配 置 一 下 编 译 环 境 了 。
编 译 工 具 配 置 运 维 部 署 2 0 2 4 0 4 1 9 静 待 花 开 J e n k i n s 自 动 部 署 S p r i n g B o o t 项 目 安 装 插 件 1 、 打 开 J e n k i n s 系 统 管 理 插 件 管 理 , 进 入 插 件 页 面 ; 2 、 在 A v a i l a b l e p l u g i n s 菜 单 中 , 搜 索 并 勾 选 M a v e n I n t e g r a t i o n / P u b l i s h O v e r S S H 这 两 个 插 件 ; M a v e n I n t e g r a t i o n : M a v e n 环 境 , 用 来 编 译 S p r i n g B o o t 项 目 。
P u b l i s h O v e r S S H : 用 于 使 用 S S H 连 接 发 布 j a r 包 文 件 到 运 维 部 署 2 0 2 4 0 4 1 9 静 待 花 开 D e b i a n 1 2 安 装 J e n k i n s 实 现 自 动 部 署 J e n k i n s 是 基 于 J a v a 开 发 的 一 种 持 续 集 成 工 具 , 用 于 监 控 持 续 重 复 的 工 作 , 可 用 于 自 动 化 各 种 任 务 , 如 构 建 , 测 试 和 部 署 软 件 。
J e n k i n s 可 以 通 过 a p t 和 y u m 安 装 、 D o c k e r 安 装 , 也 可 以 下 载 w a r 包 允 许 在 拥 有 J D K 环 境 的 任 何 机 器 。
安 装 J e n k i n s 注 意 , 安 装 J e n k i n s 需 要 J D K 环 境 , 如 果 没 有 安 装 可 以 访 问 文 章 《 D e b i a n 1 2 安 装 J a v a 环 境 》 先 把 对 应 的 J a v a 环 境 运 维 部 署 2 0 2 4 0 4 1 9 静 待 花 开 D e b i a n 1 2 安 装 J a v a 环 境 J a v a J D K 在 L i n u x 系 统 有 两 个 版 本 , 一 个 是 O r a c l e 官 方 版 本 J D K , 由 J a v a 的 开 发 者 O r a c l e 全 面 维 护 , 一 个 是 开 源 精 简 版 本 的 O p e n J D K , 增 加 了 社 区 贡 献 。
这 两 个 版 本 都 得 到 了 甲 骨 文 公 司 的 官 方 认 可 。
a p t 安 装 O p e n S D K 默 认 请 求 下 , D e b i a n 1 2 包 含 O p e n J D K 第 1 7 版 本 ( D e b i a n 1 1 包 含 O p e n J D K 第 1 1 版 本 ) , 它 是 J R E 和 J D K 的 一 个 开 源 变 体 , 与 O r a c l e J a v 运 维 部 署 2 0 2 4 0 4 1 9 静 待 花 开 K i n d l e 免 费 电 子 书 资 源 网 站 推 荐 K i n d l e 电 子 书 下 载 不 用 愁 , 一 页 精 品 解 您 忧 。
网 上 流 传 着 很 多 K i n d l e 电 子 书 资 源 网 站 汇 总 , 但 是 有 很 多 都 是 以 讹 传 讹 , 有 相 当 多 的 网 站 要 么 打 不 开 , 要 么 质 量 无 法 保 证 , 为 了 解 决 这 个 问 题 , 在 本 页 集 合 了 一 些 精 选 的 、 更 新 频 率 高 、 质 量 好 、 无 套 路 的 K i n d l e 电 子 书 网 址 资 源 , 提 供 包 含 如 a z w 3 、 e p u b 、 m o b i 等 各 种 格 式 的 K i n d l e 电 子 书 。
搜 索 站 鸠 摩 搜 索 鸠 摩 阅 读 书 籍 2 0 2 4 0 4 1 9 静 待 花 开 隐 私 政 策 站 点 声 明 : 本 站 部 分 内 容 转 载 自 网 络 , 作 品 版 权 归 原 作 者 及 来 源 网 站 所 有 , 任 何 内 容 转 载 、 商 业 用 途 等 均 须 联 系 原 作 者 并 注 明 来 源 。
相 关 侵 权 、 举 报 、 投 诉 及 建 议 等 , 请 发 邮 件 至 E m a i l : * * * * * * @ * * * * * * . * * * 友 情 链 接 : © C o p y r i g h t 静 待 花 开 版 权 所 有 苏 I C P 备 2 0 2 4 1 0 1 0 0 5 号 基 于 W o r d P r e s s | 语 幕 主 题 回 到 顶 部