ARTICLE · INTELLIGENCE

战地情报 · 详情页

来自尧图项目组的一线实战观察与深度解析

首页 › 新闻资讯 › 文章详情

PDI9.2实战指南：Kettle安装、转换逻辑与数据同步避坑

发布时间：2026/10/31 7:10:08 阅读：1,248 作者：尧图研究院
PDI9.2实战指南：Kettle安装、转换逻辑与数据同步避坑

简介：本资源是一份面向1–3年经验研发人员的Kettle（Pentaho Data Integration）入门级教学PPT，聚焦ETL核心流程与数据同步实践，帮助开发者快速掌握开源ETL工具的安装、核心概念及工程化落地要点。内容涵盖ETL原理、Kettle 9.2版本实操演示、目录结构解析、转换（Transformation）与作业（Job）机制、数据库连接配置、数据流控制（Hop/Step/Row）、常见调优策略及工具局限性分析，特别强调MySQL/Oracle等主流数据库的协同调试场景。资源为单个859KB的pptx文件，结构清晰、图文并茂，含26页精炼讲解，覆盖从环境部署到数据行元数据、并发模型、Kafka/Avro/Parquet等新特性扩展要点。目前已有1465人学习下载，适合具备数据库开发基础、希望系统构建ETL能力并应用于实际项目的数据工程师与后端研发人员。

1. ETL之kettle基础：26页PPT讲透PDI9.2的安装、转换逻辑与数据同步落地细节

你有没有遇到过这种场景：业务系统每天凌晨导出几十个CSV，DBA手动改SQL脚本塞进MySQL，跑完还得人工核对字段数量、空值比例、时间戳时区——一出错就得回滚重跑，凌晨三点还在查pan.log里那行“Error connecting to database”。这不是运维事故，是ETL设计没踩准地基。这份26页PPT不是泛泛而谈“什么是ETL”，它用PDI9.2真实界面截图+目录结构逐层拆解，把Kettle从绿色解压包启动那一刻起，到跑通第一个跨库同步作业的完整链路全摊开：spoon.sh怎么绕过JDK版本报错、pan.sh执行失败时该盯哪三行日志、为什么“CSV输入→过滤→MySQL输出”看似简单却总丢最后17行数据。它专为工作1–3年的研发人设计——不讲Hadoop生态演进史，只告诉你MySQL连不上时先改/data-integration/simple-jndi/jdbc.properties还是先删~/.kettle/kettle.pwd；不堆砌“高可用”“实时流”概念，但会标红写出Carte集群模式下/carte/config.xml里必须注释掉的SSL配置项。如果你正被定时任务卡在数据一致性上，或者刚接手遗留ETL脚本却看不懂.ktr文件里那个灰色小图标代表什么，这份PPT就是你的第一份可执行说明书。

2. PDI9.2环境搭建与核心目录解剖：从解压到Spoon界面启动的七步实操

2.1 下载验证与JDK兼容性确认：为什么PDI9.2必须用JDK11而非JDK17

PDI9.2官方明确要求JDK11（LTS），但很多开发者直接用系统默认JDK17启动spoon.sh，结果界面卡死在加载splash屏。这不是内存不足，而是SWT图形库与JDK17的模块化机制冲突。正确做法是：

# 先确认JDK11路径（以Linux为例） $ /usr/lib/jvm/java-11-openjdk-amd64/bin/java -version openjdk version "11.0.22" 2024-01-16 # 修改spoon.sh头部JAVA_HOME指向JDK11 $ sed -i 's/^# export JAVA_HOME=.*$/export JAVA_HOME=\/usr\/lib\/jvm\/java-11-openjdk-amd64/' spoon.sh # 启动时强制指定JVM参数（关键！避免OOM） $ ./spoon.sh -Xms1024m -Xmx2048m -XX:MaxMetaspaceSize=512m

提示：Windows用户需编辑spoon.bat，将set JAVA_HOME=后路径改为JDK11安装目录，并在%JAVA_HOME%\bin\java.exe前加-Dfile.encoding=UTF-8参数，否则中文字段名会显示为??。

2.2 目录结构功能映射表：每个文件夹对应什么生产问题

PDI解压后目录看似杂乱，实则每层都直指具体运维痛点。以下表格按故障发生频率排序，标注各目录在真实排错中的作用：

目录路径关键文件/子目录生产中典型用途修改风险提示
>-- 在Spoon的DB连接窗口中，URL栏填： jdbc:mysql://192.168.1.100:3306/testdb?useSSL=false&serverTimezone=Asia/Shanghai&allowPublicKeyRetrieval=true

Oracle连接更易踩坑：PDI9.2未内置ojdbc8.jar，需手动下载并放入>-- 正确格式（服务名模式） jdbc:oracle:thin:@192.168.1.101:1521/orclpdb1 -- 错误格式（SID模式，PDI9.2已废弃支持） jdbc:oracle:thin:@192.168.1.101:1521:orcl

注意：Oracle连接测试成功后，务必在Database connection窗口点击Get columns按钮，否则后续步骤中字段名无法自动补全。

3. 转换（Transformation）深度拆解：从CSV到MySQL的五步数据流与行集缓冲机制

3.1 转换核心四要素：步骤、跳、行集、元数据的协同关系

一个转换（.ktr文件）本质是并发数据流图，不是顺序执行脚本。理解这点才能避开80%的逻辑错误。以“CSV→清洗→MySQL”为例：

  • 步骤（Step）：CSV file input（读）、Filter rows（过滤）、MySQL output（写）三个独立线程；
  • 跳（Hop）：箭头连线，本质是内存队列（行集），默认大小50000行；
  • 行集（Rowset）：当Filter rows处理速度慢于CSV file input读取速度，行集满载后，CSV file input线程自动挂起，直到Filter rows消费掉部分数据——这是PDI低内存占用的关键；
  • 元数据（Metadata）：每个步骤输出字段的类型/长度/格式定义，MySQL output步骤必须与目标表字段类型严格匹配，否则报Data truncation。

3.2 CSV输入步骤的隐藏参数：如何解决日期解析失败与字段错位

CSV file input步骤表面简单，但实际项目中70%的失败源于参数配置错误：

# 常见错误场景：CSV含中文标题，但导入后字段名变成"field1","field2" # 正解：勾选"Header row present" + "No header row"取消勾选 # 并在"Content"标签页中设置"Delimiter"为逗号，"Enclosure"为双引号 # 日期字段解析失败（如"2023-05-20"识别为字符串） # 正解：在"Fields"标签页中，找到日期字段 → 点击"Edit" → # "Type"选"Date" → "Format"填"yyyy-MM-dd" → "Currency"留空

血泪经验：若CSV首行是标题但含特殊字符（如"user_id","order_time(UTC)"），必须勾选"Enclosure"并设为"，否则括号会被截断。

3.3 过滤步骤的两种模式：条件过滤 vs 正则过滤的性能边界

Filter rows步骤提供两种过滤逻辑，适用场景截然不同：

  • 条件过滤（Condition）：适合结构化判断，如status = 'active' AND amount > 100，执行快，CPU占用低；
  • 正则过滤（Regular expression）：适合模糊匹配，如email REGEXP '^[a-zA-Z0-9._%+-]+@[a-zA-Z0-9.-]+\.[a-zA-Z]{2,}$'，但单行处理耗时是条件过滤的3–5倍。

当数据量超10万行时，必须用条件过滤替代正则——PDI9.2的正则引擎未做向量化优化，会成为性能瓶颈。

3.4 MySQL输出步骤的批量提交调优：从1000行/秒到8000行/秒的实测对比

默认MySQL output每次插入1行，吞吐极低。通过三处配置可提升8倍：

# 在MySQL output步骤的"Database"标签页中： 1. "Commit size"：设为5000（每5000行提交一次事务） 2. "Use batch update for insert"：✅勾选（启用JDBC批处理） 3. "Specify database fields"：✅勾选 → 手动映射字段（避免PDI自动推断类型错误） # 在"Advanced"标签页中： 4. "Use field names in SQL"：✅勾选（生成INSERT INTO t(a,b) VALUES(?,?)而非INSERT INTO t VALUES(?,?)）

实测数据：10万行订单数据，未调优耗时128秒，调优后仅16秒。但注意——Commit size超过10000可能触发MySQLmax_allowed_packet限制，需同步调整MySQL服务端参数。

4. 作业（Job）与转换协同：用Job控制调度、错误分支与跨库依赖

4.1 Job与Transformation的本质区别：为什么不能用Transformation做定时任务

新手常误用Transformation实现“每天8点执行”，这是根本性错误：

  • Transformation：纯数据流处理，无时间控制、无失败重试、无依赖管理；
  • Job：工作流控制器，支持Start（定时触发）、Success on/Failure on（分支跳转）、Wait for file（文件就绪监听）等调度原语。

正确做法：用Job作为外壳，内嵌Transformation作为数据处理单元。例如：

Job结构： Start (定时：0 0 8 * * ?) ↓ Success Transformation A (同步用户表) ↓ Success Transformation B (同步订单表) ↓ Failure → Send email alert

4.2 数据库连接复用：如何在Job中避免重复创建连接消耗

每个Transformation独立建立数据库连接，10个转换=10个连接池，极易触发MySQLmax_connections上限。解决方案是JNDI连接池复用：

  1. 编辑># MySQL连接池配置 MySqlPool/type=javax.sql.DataSource MySqlPool/driver=com.mysql.cj.jdbc.Driver MySqlPool/url=jdbc:mysql://192.168.1.100:3306/testdb?useSSL=false MySqlPool/user=admin MySqlPool/password=encrypted:Vf9xK2!p
    1. 在所有Transformation的MySQL步骤中，“Connection type”选JNDI，“JNDI name”填MySqlPool。

    提示：密码需用encr.sh加密，命令为./encr.sh -kettle "Vf9xK2!p"，输出即为encrypted:Vf9xK2!p。

    4.3 错误分支实战：当MySQL插入失败时自动切换到备份库

    PDI9.2的Job支持Error handling，可构建容灾链路：

    Job流程： Start ↓ Success Transformation A (主库插入) ↓ Success → End ↓ Failure → Transformation B (备份库插入) ↓ Success → Send success notification ↓ Failure → Send critical alert

    关键配置：在Transformation A步骤属性中，勾选"Execute for every input row"并设置"When transformation fails"为"Jump to next job entry"，目标跳转到Transformation B。

    4.4 跨库同步的原子性保障：如何用Job实现“MySQL→Oracle”双写一致性

    真实业务要求“用户在MySQL创建，必须同步到Oracle”，但两库网络可能中断。PDI9.2不支持分布式事务，需用Job状态机模拟：

    1. 新建job_status表记录同步状态（id,source_id,target_id,status）；
    2. Job流程：
      • Step1：从MySQL读取未同步记录（WHERE status='pending'）；
      • Step2：调用Transformation写入Oracle；
      • Step3：仅当Step2成功，才执行SQL更新job_status.status='done'；
    3. 每日定时Job先查job_status中status='error'的记录，重新触发同步。

    这种“状态表+重试”模式是PDI跨库同步的工业级实践，比盲目开启Carte集群更可靠。

    5. Kettle数据同步避坑指南：五个血泪教训与对应解决方案

    5.1 现象：转换执行时CPU飙升至100%，日志无报错，但数据流停滞

    原因：Filter rows步骤中使用了REGEXP函数，且正则表达式存在回溯灾难（如.*.*.*@.*），导致单行匹配耗时数秒。
    解决：立即替换为条件过滤（如email LIKE '%@%'），或改用JavaScript步骤编写高效正则（预编译Pattern对象）。

    5.2 现象：MySQL输出步骤报Data truncation: Data too long for column 'name' at row 1，但字段长度明明足够

    原因：CSV输入步骤未设置"Length"参数，PDI自动推断name字段为String(50)，而MySQL表中该字段为VARCHAR(100)，但PDI在写入前会按推断长度截断。
    解决：在CSV file input的"Fields"标签页中，手动设置name字段的Length=100，并勾选"Set length"。

    5.3 现象：Spoon界面中步骤间跳线显示红色虚线，鼠标悬停提示"Hop disabled"

    原因：跳线被手动禁用（右键跳线→Disable hop），或上游步骤未配置输出字段（如Generate rows步骤未点击"Get Fields"按钮）。
    解决：右键跳线→Enable hop；若上游是Generate rows，先双击该步骤→"Get Fields"→OK。

    5.4 现象：pan.sh命令行执行转换失败，报"Unable to load database plugin"

    原因：pan.sh默认不加载simple-jndi配置，需显式指定配置路径。
    解决：执行命令时添加-config参数：

    ./pan.sh -file=/path/to/job.ktr -config=/path/to/data-integration/simple-jndi/

    5.5 现象：中文字段名在Spoon中显示正常，但导出的.ktr文件用文本编辑器打开全是????

    原因：.ktr文件本身是XML格式，但PDI9.2默认用系统编码保存（Windows为GBK），而Linux服务器用UTF-8读取。
    解决：统一用UTF-8编码保存——在Spoon中File → Save as，弹窗底部勾选"Save with UTF-8 encoding"。

    6. PDI9.2数据同步调优实战：从单机转换到集群作业的四层加速策略

    6.1 单转换内核调优：行集大小与线程数的黄金配比

    PDI9.2的并发模型基于行集（Rowset），其大小直接影响吞吐与内存：

    • 小数据量（<10万行）：Rowset size = 5000，Number of copies = 1（单线程）；
    • 中等数据量（10–100万行）：Rowset size = 10000，Number of copies = 2（双线程并行处理）；
    • 大数据量（>100万行）：Rowset size = 20000，但必须配合"Use batch update"，否则内存溢出。

    从那以后我每次新建转换，都强制在Transformation settings → Misc中检查这三项：Rowset size、Number of copies、"Execute for every input row"是否勾选。少一次确认，就多一次凌晨重启Spoon。

    6.2 多转换并行：用Kitchen命令链式触发的资源隔离技巧

    单个Job串行执行多个Transformation效率低，改用kitchen.sh并行触发：

    # 启动两个独立进程，避免内存争抢 nohup ./kitchen.sh -file=/path/to/user_sync.kjb -level=Basic > /var/log/kettle/user.log 2>&1 & nohup ./kitchen.sh -file=/path/to/order_sync.kjb -level=Basic > /var/log/kettle/order.log 2>&1 &

    关键点：-level=Basic（非Debug）减少日志IO，nohup防止终端关闭中断进程，&后台运行。

    6.3 Carte集群模式避坑：三节点集群的配置清单与心跳检测

    Carte是PDI9.2的轻量集群方案，但配置不当反而降低性能。三节点部署必须满足：

    配置项推荐值说明
    carte/config.xml中<max_threads>20单节点最大线程数，超20易触发Linuxulimit -n限制
    carte/config.xml中<heartbeat_interval>30000（30秒）心跳间隔，过短增加网络负载
    carte/config.xml中SSL配置全部注释掉PDI9.2的Carte SSL有证书链bug，生产环境禁用
    启动命令./carte.sh carte/config.xml 8080端口必须显式指定，否则随机端口导致Job无法发现节点

    6.4 同步延迟监控：用PDI日志+Shell脚本构建分钟级告警

    PDI9.2的kettle.log包含精确到毫秒的执行时间，可提取关键指标：

    # 实时监控最近10分钟同步延迟（假设转换名为user_sync） tail -n 1000 kettle.log | \ grep "user_sync.*Finished" | \ awk '{print $1,$2,$NF}' | \ while read date time status; do # 计算当前时间与日志时间差（单位：分钟） log_ts=$(date -d "$date $time" +%s 2>/dev/null) now_ts=$(date +%s) diff_min=$(( (now_ts - log_ts) / 60 )) if [ $diff_min -gt 5 ]; then echo "ALERT: user_sync delayed $diff_min minutes at $(date)" | mail -s "Kettle Delay" admin@company.com fi done

    希望帮到你。

    本文还有配套的精品资源，点击获取

    SEO优化 网站运营 关键词排名 推广干货
    RELATED READING

    延伸阅读

    更多一线实战笔记与深度复盘，助您持续精进

    50GBASE-ER物理层深度解析：PAM4、FEC与色散补偿协同机制

    50GBASE-ER物理层深度解析：PAM4、FEC与色散补偿协同机制

    简介&#xff1a;本资源为IEEE官方发布的《IEEE 802.3cn-2019》标准正式版PDF文档&#xff0c;是面向网络工程师、光通信研发人员及数据中心架构师的核心技术规范&#xff0c;聚焦单模光纤场景下50 Gb/s、200 Gb/s与400 Gb/s高速以太网的物理层实现与管理参数定义。标准明确支持…

    2026/10/31 7:10:08 阅读全文 →
    雪楮藏谜故事社区：初刊席需要区分作者经历与故事参选

    雪楮藏谜故事社区：初刊席需要区分作者经历与故事参选

    雪楮藏谜故事社区的首页“初刊席”只考虑从未被这个栏目介绍过的作者。一位作者以前的故事曾登上初刊席&#xff0c;现在写出的另一篇新故事&#xff0c;即使获得读者收藏&#xff0c;也不能再次参加该栏目选稿。作品仍可在普通目录中阅读和搜索。我倾向反对“初刊席”的当前资…

    2026/10/31 7:08:08 阅读全文 →
    “一人一方“的工程化难题：中医经验数据化的三条路径

    “一人一方“的工程化难题：中医经验数据化的三条路径

    过去两年&#xff0c;"AI 中医"的项目几乎每个月都有一个新版本出现。但只要上手用过就会知道&#xff0c;绝大多数产品的重心落在问诊侧&#xff1a;把舌象、面色、问诊条目做成结构化表单&#xff0c;再用知识图谱检索出对应的证型&#xff0c;最后给一段解释。这条…

    2026/10/31 7:08:08 阅读全文 →
    SAP审计不是填表：穿透式风险探针与七层纵深控制

    SAP审计不是填表：穿透式风险探针与七层纵深控制

    简介&#xff1a;本资源是一份专业、结构化的SAP系统审计程序文档&#xff0c;面向企业内审人员、IT审计师、SAP安全顾问及ERP合规管理人员&#xff0c;用于指导开展全面、标准化的SAP系统风险评估与控制测试。文档覆盖审计准备、系统架构梳理、安全策略核查、灾备与SLA验证、版…

    2026/10/31 11:15:06 阅读全文 →
    WinCC OPC服务器DCOM配置实战指南：解决拒绝访问与RPC错误

    WinCC OPC服务器DCOM配置实战指南：解决拒绝访问与RPC错误

    简介&#xff1a;本资源是一份面向工业自动化领域工程师与WinCC系统运维人员的OPC服务器配置技术文档&#xff0c;聚焦解决WinCC与第三方设备或软件通过OPC标准实现数据互通时常见的DCOM权限配置难题。文档详细梳理了在非管理员账户、跨机器跨账号等典型生产场景下&#xff0c;…

    2026/10/31 11:15:06 阅读全文 →
    Rational Rose 2003/2007安装、许可证配置与闪退排查指南

    Rational Rose 2003/2007安装、许可证配置与闪退排查指南

    简介&#xff1a;这是一份面向软件建模初学者、系统分析师及项目管理人员的文档教程&#xff0c;围绕IBM Rational Rose的安装与初始配置展开&#xff0c;帮助读者理清版本选择、许可协议、标准或自定义安装、路径设置以及首次启动等关键环节&#xff0c;并补充许可证密钥、试用…

    2026/10/31 11:15:06 阅读全文 →
    SAP FI-AA固定资产减值与增值：ABAW重估配置及月结落地路径

    SAP FI-AA固定资产减值与增值：ABAW重估配置及月结落地路径

    简介&#xff1a;面向SAP财务顾问、企业财务及固定资产管理岗位的专业操作手册&#xff0c;聚焦市场价值波动等场景下固定资产减值与增值的合规处理。内容围绕部分报废冲减原值、计划外折旧、固定资产重估三条实现路径&#xff0c;梳理相应账务处理逻辑&#xff0c;并展开重估功…

    2026/10/31 11:15:06 阅读全文 →
    AWC2406安装复盘：Deployment Center编排与部署脚本避坑

    AWC2406安装复盘：Deployment Center编排与部署脚本避坑

    简介&#xff1a;面向Teamcenter实施与运维人员的AWC2406安装配置文档&#xff0c;围绕使用Deployment Center完成部署这一典型场景展开&#xff0c;适合需要搭建测试环境、复现安装流程或查漏补缺的初中级工程师参考。压缩包内仅含1个docx文档&#xff0c;整体约4.67MB&#x…

    2026/10/31 11:15:06 阅读全文 →
    终端彩色渲染“大神”，一眼，即达——一方小图

    终端彩色渲染“大神”，一眼，即达——一方小图

    终端彩色渲染“大神”&#xff0c;一眼&#xff0c;即达。——一方小图小图&#xff1a; 图中内容是我对sgr体系的近五年“钻研”有幸得道——挣脱传统染缸着色文本的枷锁&#xff0c;走进『终端渲染状态机指令序列构造设定』体系的广袤疆域……样例tree.pypython #!/usr/bin/e…

    2026/10/31 11:13:06 阅读全文 →
    SAP审计不是填表：穿透式风险探针与七层纵深控制

    SAP审计不是填表：穿透式风险探针与七层纵深控制

    简介&#xff1a;本资源是一份专业、结构化的SAP系统审计程序文档&#xff0c;面向企业内审人员、IT审计师、SAP安全顾问及ERP合规管理人员&#xff0c;用于指导开展全面、标准化的SAP系统风险评估与控制测试。文档覆盖审计准备、系统架构梳理、安全策略核查、灾备与SLA验证、版…

    2026/10/31 11:15:06 阅读全文 →
    WinCC OPC服务器DCOM配置实战指南：解决拒绝访问与RPC错误

    WinCC OPC服务器DCOM配置实战指南：解决拒绝访问与RPC错误

    简介&#xff1a;本资源是一份面向工业自动化领域工程师与WinCC系统运维人员的OPC服务器配置技术文档&#xff0c;聚焦解决WinCC与第三方设备或软件通过OPC标准实现数据互通时常见的DCOM权限配置难题。文档详细梳理了在非管理员账户、跨机器跨账号等典型生产场景下&#xff0c;…

    2026/10/31 11:15:06 阅读全文 →
    Rational Rose 2003/2007安装、许可证配置与闪退排查指南

    Rational Rose 2003/2007安装、许可证配置与闪退排查指南

    简介&#xff1a;这是一份面向软件建模初学者、系统分析师及项目管理人员的文档教程&#xff0c;围绕IBM Rational Rose的安装与初始配置展开&#xff0c;帮助读者理清版本选择、许可协议、标准或自定义安装、路径设置以及首次启动等关键环节&#xff0c;并补充许可证密钥、试用…

    2026/10/31 11:15:06 阅读全文 →
    SAP FI-AA固定资产减值与增值：ABAW重估配置及月结落地路径

    SAP FI-AA固定资产减值与增值：ABAW重估配置及月结落地路径

    简介&#xff1a;面向SAP财务顾问、企业财务及固定资产管理岗位的专业操作手册&#xff0c;聚焦市场价值波动等场景下固定资产减值与增值的合规处理。内容围绕部分报废冲减原值、计划外折旧、固定资产重估三条实现路径&#xff0c;梳理相应账务处理逻辑&#xff0c;并展开重估功…

    2026/10/31 11:15:06 阅读全文 →
    AWC2406安装复盘：Deployment Center编排与部署脚本避坑

    AWC2406安装复盘：Deployment Center编排与部署脚本避坑

    简介&#xff1a;面向Teamcenter实施与运维人员的AWC2406安装配置文档&#xff0c;围绕使用Deployment Center完成部署这一典型场景展开&#xff0c;适合需要搭建测试环境、复现安装流程或查漏补缺的初中级工程师参考。压缩包内仅含1个docx文档&#xff0c;整体约4.67MB&#x…

    2026/10/31 11:15:06 阅读全文 →
    终端彩色渲染“大神”，一眼，即达——一方小图

    终端彩色渲染“大神”，一眼，即达——一方小图

    终端彩色渲染“大神”&#xff0c;一眼&#xff0c;即达。——一方小图小图&#xff1a; 图中内容是我对sgr体系的近五年“钻研”有幸得道——挣脱传统染缸着色文本的枷锁&#xff0c;走进『终端渲染状态机指令序列构造设定』体系的广袤疆域……样例tree.pypython #!/usr/bin/e…

    2026/10/31 11:13:06 阅读全文 →
    全国计算机二级C语言真题PDF高效刷题指南

    全国计算机二级C语言真题PDF高效刷题指南

    简介&#xff1a;这份PDF是全国计算机二级C语言考试的试题与答案解析&#xff0c;专为备考二级C语言的考生准备。内容涵盖C语言特点与设计理念、程序基本组成单位、main函数执行流程、函数嵌套调用规则、标识符命名规范、整型实型字符型数据类型、八进制十六进制数合法形式、运…

    2026/10/31 3:21:10 阅读全文 →
    requests+BeautifulSoup：爬虫抓取h1标题的入门实战指南

    requests+BeautifulSoup：爬虫抓取h1标题的入门实战指南

    简介&#xff1a;一份以实战为导向的Python爬虫入门资源&#xff0c;面向具备基本编程基础、希望快速掌握网络数据抓取的初学者&#xff0c;可解决从零编写简单爬虫的常见困惑。实例以requests库发送HTTP请求、BeautifulSoup解析HTML文档&#xff0c;完整演示从网页中提取 标题…

    2026/10/31 2:21:03 阅读全文 →
    OpenGL面试核心考点：渲染管线、矩阵变换与性能排查全解析

    OpenGL面试核心考点：渲染管线、矩阵变换与性能排查全解析

    简介&#xff1a;这是一份面向图形学求职者与3D开发者的OpenGL面试题资料&#xff0c;围绕计算机图形学核心考点整理&#xff0c;适合准备图形渲染、游戏引擎方向面试的中高级开发者查漏补缺。压缩包内共1个doc文档&#xff0c;约19KB&#xff0c;内容以问答形式覆盖渲染对象矩…

    2026/10/31 3:21:10 阅读全文 →
    全国计算机二级C语言真题PDF高效刷题指南

    全国计算机二级C语言真题PDF高效刷题指南

    简介&#xff1a;这份PDF是全国计算机二级C语言考试的试题与答案解析&#xff0c;专为备考二级C语言的考生准备。内容涵盖C语言特点与设计理念、程序基本组成单位、main函数执行流程、函数嵌套调用规则、标识符命名规范、整型实型字符型数据类型、八进制十六进制数合法形式、运…

    2026/10/31 3:21:10 阅读全文 →
    requests+BeautifulSoup：爬虫抓取h1标题的入门实战指南

    requests+BeautifulSoup：爬虫抓取h1标题的入门实战指南

    简介&#xff1a;一份以实战为导向的Python爬虫入门资源&#xff0c;面向具备基本编程基础、希望快速掌握网络数据抓取的初学者&#xff0c;可解决从零编写简单爬虫的常见困惑。实例以requests库发送HTTP请求、BeautifulSoup解析HTML文档&#xff0c;完整演示从网页中提取 标题…

    2026/10/31 2:21:03 阅读全文 →
    OpenGL面试核心考点：渲染管线、矩阵变换与性能排查全解析

    OpenGL面试核心考点：渲染管线、矩阵变换与性能排查全解析

    简介&#xff1a;这是一份面向图形学求职者与3D开发者的OpenGL面试题资料&#xff0c;围绕计算机图形学核心考点整理&#xff0c;适合准备图形渲染、游戏引擎方向面试的中高级开发者查漏补缺。压缩包内共1个doc文档&#xff0c;约19KB&#xff0c;内容以问答形式覆盖渲染对象矩…

    2026/10/31 3:21:10 阅读全文 →
    猫狗目标检测数据集：VOC/COCO/YOLO三格式一体化实战包

    猫狗目标检测数据集：VOC/COCO/YOLO三格式一体化实战包

    简介&#xff1a;本资源是一套面向计算机视觉初学者与YOLO目标检测实践者的猫狗图像数据集及配套开发工具包&#xff0c;专为快速上手目标检测模型训练而设计。资源包含1000张真实场景高清猫狗图片&#xff0c;标注质量高&#xff0c;同时提供VOC&#xff08;XML&#xff09;、…

    2026/10/31 0:00:09 阅读全文 →
    HDU2017多校标程复现：算法竞赛工程化真题沙盒

    HDU2017多校标程复现：算法竞赛工程化真题沙盒

    简介&#xff1a;本资源为2017年HDU多校联合训练第一场官方配套资料&#xff0c;面向ACM程序设计竞赛备赛学生、算法爱好者及高校编程集训队成员&#xff0c;旨在提供权威解题参考与完整测试验证环境。压缩包共40个文件&#xff0c;含15份C标程&#xff08;覆盖全部赛题&#x…

    2026/10/31 0:00:09 阅读全文 →
    Codex Sandbox 隔离环境拆解：AI Agent 的临时实验室如何运作

    Codex Sandbox 隔离环境拆解：AI Agent 的临时实验室如何运作

    /* MD / 富文本中的 .toc（含博客园搬家等嵌套结构）；.toc-box 在侧栏，不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p（:empty 仍占 20px），一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

    2026/10/31 0:00:09 阅读全文 →
    我发现了一个新思路：用 Remotion + Claude Code 像写代码一样自动化生成短视频

    我发现了一个新思路：用 Remotion + Claude Code 像写代码一样自动化生成短视频

    /* MD / 富文本中的 .toc（含博客园搬家等嵌套结构）；.toc-box 在侧栏，不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p（:empty 仍占 20px），一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

    2026/10/30 14:19:51 阅读全文 →
    Windows下 Codex 中 Chrome 和 Computer Use 插件不可用问题排查及解决参考方式：TaoToken 统一 Key 配置与验证

    Windows下 Codex 中 Chrome 和 Computer Use 插件不可用问题排查及解决参考方式：TaoToken 统一 Key 配置与验证

    /* MD / 富文本中的 .toc（含博客园搬家等嵌套结构）；.toc-box 在侧栏，不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p（:empty 仍占 20px），一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

    2026/10/30 18:20:19 阅读全文 →
    2026 大模型集体涨价：用 Python 做企业 Token 成本测算与选型避坑（附配置）

    2026 大模型集体涨价：用 Python 做企业 Token 成本测算与选型避坑（附配置）

    /* MD / 富文本中的 .toc（含博客园搬家等嵌套结构）；.toc-box 在侧栏，不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p（:empty 仍占 20px），一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

    2026/10/30 23:20:48 阅读全文 →