Datasheet question tests
Tests of whether the AI finds and reads datasheet values exactly. The same AI got the same questions, and answers were checked against the printed datasheet pages. Each table lists its conditions and dates.
我们做了测试
我们让同一个 AI 回答同样的 8 道设计题。答案位于 30–330 页数据手册深处的表格中。正确答案已对照数据手册的印刷页面核实。(2026年9月25–27日)
左右滑动,与其他方式进行比较 →
| 使用 PartsPlan MCP | 仅网络搜索 | Service A | Service B | 分销商器件 API | |
|---|---|---|---|---|---|
| 数值与所在页码均正确 | 8 / 8 | 6 / 8 | 2 / 8 | 0 / 8 | 0 / 8 |
| 错误数值 | 0 | 0 | 0 | 0 | — |
| 未找到 | 0 | 2 330 页和 109 页的文档 | 6 未收录该器件 | 8 新器件仍在等待提取 | 8 响应中无此字段 |
| 工具调用次数 | 21 | 62 26 次获取失败 | 24 | — | — |
| 网络搜索重测(9月27日) | — | 7 / 8 8.4 分钟 (依赖第三方副本) | — | — | — |
- 这是一项小规模测试。8 份文档由我们挑选(非随机),因此不代表对所有器件的准确率。
- 网络搜索一方是在找到一个将 PDF 转换为文本的外部服务之后,才答对了其中 6 道。
- Service A 答出的 2 道题数值和页码均正确,其余 6 个器件未收录。Service B 会即时提取它未见过的器件,但在免费账户上该提取未能完成。
›我们的提问
- PIC16F917:40 引脚 PDIP 封装的 θJA
- AT32UC3C1256C:100 引脚 TQFP 的 θJA
- ADuM1400:最大工作绝缘电压 VIORM,16 引脚 SOIC_W
- MCP1825:5 引脚 SOT-223 的 θJA
- LTC3615:24 引脚 TSSOP 的 θJA
- MIC5209:8 引脚 SOIC 的 θJA
- R1191L:标准电路板上的功耗及其封装
- MAX1541:热关断阈值
即便是只存在于图表中的数值
我们请求提供一款功率 IGBT(Infineon IKW40N120CS6)的仿真用热/损耗模型数据。其中 30 个导通电压、开关损耗和二极管电压数值不在任何表格中——只在图表里。正确答案另行根据原始数据手册的图表求得。(2026年9月26日)
左右滑动,与其他方式进行比较 →
| 使用 PartsPlan MCP | 附上 PDF | 仅网络搜索 | |
|---|---|---|---|
| 30 个图表数值中的正确数(3% 或 0.05 V 以内) | 30 / 30 | 25 / 30 | 5 / 30 |
| 平均 / 最大误差 | 0.3% / 3.3% | 2.0% / 6.7% | — |
| 未找到 | 0 | 0 | 24 无法查看图表 |
| 热模型表,11 项 | 11 / 11 | 10 / 11 读错一位数字 | 11 / 11 |
| 同一任务重复 6 次 | 6 次均为 30 / 30 | — | — |
- 本测试只使用了一个器件(16 页的文档)。不保证在其他文档或图表上有同样的准确率。
- 三者使用的是同一个 AI 模型。“附上 PDF”指用户自行查找并上传数据手册;这部分时间未计入。
- 网络搜索一方将缺失的数值留空,没有编造;它找到了表格中印有的 40 A 数值。
›我们索取的内容
- IGBT 导通电压:VGE=15V,10/20/40/60/80 A,25°C 和 175°C(从 7 条曲线中挑出 15V 曲线)
- 开关损耗 Eon/Eoff:10/20/40/60/80 A
- 二极管正向电压:10/20/40/60/80 A,25°C 和 175°C(实线和虚线)
- 热阻抗 Foster 网络:IGBT 6 项,二极管 5 项
12 道高难度设计题——唯一满分,四次运行全部满分
十二道题,涉及长篇数据手册深处的表格、只存在于图表中的数值以及封装图尺寸。每道题旁边都有一个看似合理的错误数值(其他温度的曲线、相邻的行)。同一个 AI、同样的题目;正确答案依据原始页面和图表确认。我们只评估各方式读取文档的准确程度——而不是收录了多少器件。Service A 使用的是无需登录的公开 API;Service B 使用的是免费账户下的官方 MCP。(2026年9月26–27日)
左右滑动,与其他方式进行比较 →
| 使用 PartsPlan MCP | 附上 PDF | Service A | Service B | 网络搜索 | |
|---|---|---|---|---|---|
| 12 道中的正确数 | 12 / 12 | 10 / 12 | 5.5 / 12 | — | 10 / 12 |
| 其中 5 个图表数值(其他条件的曲线就在正确曲线旁边) | 5 / 5 | 3 / 5 目测读取,偏差 8% 和 15% | 0 / 5 无法读取图 | — | 3 / 5 其中一个取自相邻曲线 |
| 错误数值 | 0 | 2 | 0 | — | 2 |
| 重复运行结果是否相同?(我们 4 次 · 附上 PDF 3 次) | 4 次均为 12 / 12 | 10, 11, 10 每次有 1–2 个图表数值偏差 | — | — | — |
| 使用小型快速 AI 模型(每次一道题) | 8.5 / 12 错 3 道 图表 3 / 5 | 7 / 12 错 5 道 图表 1 / 5 | — | — | — |
- 网络搜索在一道图表题上用了所要求的 125 °C 曲线旁边的 25 °C 曲线作答,并在制造商网站超时时使用了第三方副本。
- Service B 因免费账户的提取额度和积分用尽而无法参加本测试(“—”),因此“唯一满分”是在其余四种方式之间比较的结果。我们不公开服务名称。以上均为小规模测试。
›使用的器件
- ST STM32F103C8T6(114 页) · TI LM358DR · Diodes AP2112K-3.3 · onsemi BSS138 · onsemi SS34
- 例如:125 °C、VGS 1.75 V 曲线上的漏极电流;85 °C 曲线上 400 mA 时的压差;LQFP48 的最大引脚宽度
人们实际交给 AI 的工作——器件审查、替代器件、中国厂商器件
我们用设计人员实际交给 AI 的工作进行了测试。在简单的工作上,其他方式与我们持平,差别在于依据(原始页面)和用时。文档越罕见、涉及图表和相似数值时,差距越大。(2026年9月26–27日)
左右滑动,与其他方式进行比较 →
| 仅 PartsPlan(关闭网络搜索) | Service A | Service B | 网络搜索 | 不使用工具的 AI | |
|---|---|---|---|---|---|
| 审查 30 个器件的 BOM——6 处只有查看数据手册数值才能发现的隐藏违规 | 6 / 6 1.9 分钟 $1.75 | 2 / 6 $1.46 (30 个中 9 个有文档) | — | 6 / 6 12.2 分钟 $5.42 | 6 / 6 1 分钟 $0.23 (无页面依据,凭记忆的一个数值有误) |
| 关于中国厂商 6 个器件的 10 道题——WCH、Microne、SGMICRO、XLSEMI、TPOWER,包括中文数据手册 | 10 / 10 1.5 分钟 $1.24 | 0 / 10 无文档 | — | 8 / 10 2.6 分钟 $1.84 (一个图表数值有偏差) | 0 / 10 $0.17 (大多回答不知道) |
| Raspberry Pi Pico 板上器件的关键数值,8 道题 | 8 / 8 | 0 / 8 | 2 / 8 大多在等待提取 | 8 / 8 | — |
| 同样的 Pico 8 道题——开启网络搜索并加上 PartsPlan(10月1日 · 1 次运行) | 8 / 8 1.7 分钟 $1.50 网络搜索调用 0 次 | — | — | — | — |
| 一个替代器件——找到引脚兼容的候选器件,并以页码为依据确认引脚和额定值 | 45 秒 $0.56 两份引脚表均已在原文中核对 | — | — | 3.1 分钟 $1.05 无法读取候选器件的引脚表;改用了搜索摘要 | — |
| 同样 9 个——候选来自 Service A,用我们的工具验证 | 4.1 分钟 $3.33 5 个直接替换件 | — | — | — | — |
| 同样 9 个——开启网络搜索并加上 PartsPlan(10月1日 · 1 次运行) | 4.8 分钟 $2.79 6 个直接替换件 网络搜索调用 0 次 | — | — | — | — |
| 混入 8 个数据手册中没有的数值——编造的数值个数 | 0 | 0 | — | 0 无法打开 2 份 ST 文档 | 0 |
| 双方都收录的 8 个器件——绝对最大电源电压 | 8 / 8 $1.19 | 8 / 8 $1.04 | 7 / 8 错一个 · 未给出页码 | — | — |
| 同样 8 个器件——读取引脚排列和封装图 | 8 / 8 1.3 分钟 $0.95 | 8 / 8 2.1 分钟 $2.04 | 7 / 8 | — | — |
| 8 个器件的设计审查——埋入 6 处错误和 4 处正确项 | 10 / 10 | 10 / 10 | — | — | — |
| 公开的准确率测量 | 已公开 | 未找到 | 未找到 | — | — |
- 在简单的表格数值和引脚排列上,Service A 与我们持平。由知名器件组成的 BOM 中的违规,AI 凭记忆也找出了(但没有页面依据,且凭记忆的一个热阻数值有误)。在这类工作上,我们的差别在于页面依据和用时。
- 混入数据手册中没有的数值时,没有任何方式编造数值——如今的 AI 不知道时会直说。我们看到的风险不是编造的数值,而是把相似但不同的数值(相邻曲线、其他温度、其他版本)当作正确数值使用。
- 费用为同一 AI 模型的使用费(美元,单次运行),不含各服务自身的收费。我们不公开服务名称。以上均为小规模测试。
›使用的内容
- BOM:24 V 工业传感器板,30 个器件——输入过压、LDO 电流不足、商业级温度等级(0–70 °C)、3.3 V 无法导通的 MOSFET、运放输入范围、二极管电流
- 中国厂商器件:WCH CH340G · Microne ME6211 · SGMICRO SGM2019, SGM321 · XLSEMI XL1509 · TPOWER TP4056
仅网络搜索 vs. 网络搜索 + PartsPlan——图表、脚注、隐藏地址
我们让同一个 AI(Claude Opus 5.5)对同样的 4 道设计题各回答 3 次:一方仅网络搜索,另一方为网络搜索加 PartsPlan。2026年10月2日 · 各 3 次运行。
左右滑动,与其他方式进行比较 →
| 网络搜索 + PartsPlan | 仅网络搜索 | |
|---|---|---|
| TPS563200 降压转换器——85 °C 环境温度下能否持续输出 2 A?(降额曲线) | 结论 3 / 3 1.86 A 82 °C (3 次均相同) 引用页码 3 / 3 | 结论 3 / 3 约 1.8–1.9 A 约 80–84 °C 引用页码 3 / 3 |
| G5LE 继电器——85 °C 下能否确保吸合?(23 °C 线圈脚注) | 结论 3 / 3 引用页码 3 / 3 | 结论 3 / 3 引用页码 3 / 3 |
| 同一总线上的五个 I²C 器件——地址冲突及应避免的地址(0x70) | 结论 3 / 3 引用页码 3 / 3 | 结论 3 / 3 引用页码 0 / 3 |
| MOSFET 热插拔——故障定时器上限(SOA 图) | 结论 3 / 3 1.8 ms (建议 1 ms 及以下) 引用页码 3 / 3 | 结论 2 / 3 3 次结果各不相同:0.5 ms 约 4 ms (超出 85 °C 安全工作区) 1 ms 引用页码 3 / 3 |
用通俗的话解释每道题
① 电源芯片在高温环境下能输出 2 A 吗?
TPS563200 是一款把 12 V 转换为 5 V 的电源芯片。在高温环境下,它能输出的电流会变小,而小多少只在数据手册第 11 页的一张图表中给出。我们询问它在 85 °C 下能否持续输出 2 A。
双方 3 次均回答正确(“85 °C 下不行”),并引用了该图表所在的页。仅网络搜索一方靠目测读图,给出的是范围(“约 1.8–1.9 A,最高 80–84 °C”);使用 PartsPlan 时,3 次运行给出的数值相同(“1.86 A,最高 82 °C”)。
→ 对于公开 PDF 容易获取的知名器件,仅网络搜索也能答对。差别在于数字的精确程度,以及每次是否得到相同的数值。
② 继电器在高温环境下能可靠吸合吗?
继电器数据手册第 3 页有一条小脚注:线圈参数是 23 °C 时的值。在 85 °C 这样的高温下,线圈电阻会升高,同样的电压可能无法再可靠地使继电器吸合。
双方 3 次均回答正确(“85 °C 下无法保证——线圈电压约差 0.2 V”),并引用了含该脚注的原文页。
→ 这道题双方得分相同:只要 AI 打开数据手册并查看那条脚注,仅网络搜索也能答对。
③ 五个器件能共用一条通信线路吗?
I²C 允许多个器件共用两根线,每个器件的“地址”必须各不相同。PCA9685 从上电那一刻起还会使用一个共享地址 0x70——这一点只在其数据手册第 8 页有说明。
双方 3 次都找出了 2 对冲突地址和 0x70。仅网络搜索一方 3 次都没有打开数据手册,而是凭记忆作答,也没有给出页码;使用 PartsPlan 时,AI 为全部 5 个器件引用了文档和页码。
→ 对于知名器件,AI 可以凭记忆作答。但记忆可能出错且无从核实,因此设计评审需要页码。
④ 发生短路后,电源开关必须多快关断才不会烧毁?
SOA 是器件在不烧毁的前提下可承受的电压、电流和时间范围。我们请 AI 读取第 6 页的 SOA 图(对数刻度图表),并说明保护电路必须在多少毫秒内切断 30 A 的短路。
仅网络搜索一方 3 次给出的答案各不相同:“0.5 ms 及以下”(安全,但远短于实际上限)、“理论上限约 4 ms,建议 2 ms 及以下”(在 85 °C 下器件无法承受 30 A 持续 4 ms),以及“建议 1 ms 及以下”。使用 PartsPlan 时,3 次运行给出相同的答案:“上限约 1.8 ms,建议 1 ms 及以下”。
→ 如果把读错的图表数字当作设计值,器件在真实故障中可能烧毁。加上 PartsPlan 后答案变化最大的,正是图表中的数字。
- 这是一项小规模测试:4 道题,每道运行 3 次。
›使用的题目
- TPS563200,12 V → 5 V,持续 2 A,环境温度最高 85 °C——能否保持 2 A,最高可到多少温度
- Omron G5LE-1 DC5,由 NPN(VCE 0.3 V)从 5 V ±5 % 驱动——85 °C 下能否保证吸合
- INA219、BME280、DS3231、MPU-6050 和 PCA9685 接在同一 I²C 总线上,地址引脚为默认设置——冲突、解决办法、应避免的地址
- 使用 CSD18540Q5B 的 12 V 热插拔 · 2200 µF · 10 ms 斜坡 · 10 ms 故障定时器下的 30 A 短路——是否在 SOA 内,以及定时器上限(含 85 °C 壳温)
我们向某数据手册网站的对话功能提出了同样的 12 道题——引用的页码都正确,但 6 个图表数值中有 5 个与正确值相差超过 ±3 %
Service C 是某数据手册网站在每个器件页面上提供的 AI 对话功能。我们用英文向它提出上面各表中的 12 道题(网络搜索对比 4 道 · 高难度题 6 道 · 数据手册中没有的数值 2 道),附上与 PartsPlan 一方相同的指令,在未登录状态下每道题各问一次(2026年10月3日 · 共享地址题为10月2日)。图表数值仅在与正确值相差 ±3 % 以内时才算正确。PartsPlan 一栏是上面各表中同一题目的我方结果,每格都注明了条件(是否开启网络搜索 · 日期 · 运行次数)。
左右滑动,与其他方式进行比较 →
| 使用 PartsPlan MCP | Service C | |
|---|---|---|
| TPS563200 降压转换器——85 °C 环境温度下能否持续输出 2 A?(降额曲线) | 3 / 3 1.86 A 82 °C (网络搜索 + PartsPlan · 10月2日,3 次运行) | 引用页码正确,结论错误 回答“可以” 85 °C 时为 2.2 A 2 A 可维持到 88 °C (正确值 1.86 A · 82 °C) |
| G5LE 继电器——85 °C 下能否确保吸合?(23 °C 线圈脚注) | 3 / 3 无法保证,电压约差 0.2 V (网络搜索 + PartsPlan · 10月2日,3 次运行) | 正确 无法保证,电压约差 0.2 V 说明了线圈电阻温度系数这一假设,并据此计算 |
| PCA9685——上电后立即响应的共享地址(0x70) | 3 / 3 0x70 (在同时询问全部 5 个器件的题目中 · 网络搜索 + PartsPlan · 10月2日,3 次运行) | 未能回答 该器件页面上的文档是产品宣传单页,而不是数据手册 (10月2日) |
| CSD18540 热插拔——85 °C 壳温下的短路定时器上限(SOA 图) | 3 / 3 约 1.8 ms,建议 1 ms 及以下 (网络搜索 + PartsPlan · 10月2日,3 次运行) | “10 ms 超出 SOA”判断正确 图表数值错误 (10 ms 时上限 8 A,正确值 22.1 A) 85 °C 上限“小于 1 ms” (正确值约 1.8 ms) |
| STM32F103C8T6——105 °C 时 Stop 模式的最大电流(114 页文档中的一张表格) | 4 / 4 仅 PartsPlan · 关闭网络搜索 · 9月27日,4 次运行 | 正确 340 µA |
| LM358DR——70 °C 时的输出电流限值(图表) | 4 / 4 仅 PartsPlan · 关闭网络搜索 · 9月27日,4 次运行 | 错误 约 34 mA (正确值 29.4 mA) 曲线和页码正确 |
| AP2112K-3.3——85 °C · 400 mA 时的压差(图表) | 4 / 4 仅 PartsPlan · 关闭网络搜索 · 9月27日,4 次运行 | 正确 200 mV |
| BSS138——125 °C · VGS 3.3 V 时的导通电阻(图表) | 4 / 4 仅 PartsPlan · 关闭网络搜索 · 9月27日,4 次运行 | 错误 约 2.1 Ω (正确值 1.95 Ω) 曲线和页码正确 |
| BSS138——125 °C · VGS 1.75 V 时的漏极电流(图表) | 4 / 4 仅 PartsPlan · 关闭网络搜索 · 9月27日,4 次运行 | 错误 约 0.1 A (正确值 0.117 A) 图表和页码正确 |
| AP2112K-3.3——EN 引脚以及引脚 4 的处理方式(引脚排列) | 4 / 4 仅 PartsPlan · 关闭网络搜索 · 9月27日,4 次运行 | 正确 EN 为引脚 3 引脚 4 不连接 |
| BSS138——雪崩能量(数据手册中没有) | 指出这份数据手册中没有给出这个数值 (仅 PartsPlan · 关闭网络搜索 · 9月27日,1 次运行) | 指出这份数据手册中没有给出这个数值 没有编造数值 |
| AP2112K-3.3——输出电容的 ESR 范围(数据手册中没有) | 指出这份数据手册中没有给出这个数值 (仅 PartsPlan · 关闭网络搜索 · 9月27日,1 次运行) | 指出这份数据手册中没有给出这个数值 没有编造数值 |
| 合计 | 全部正确 网络搜索 + PartsPlan 4 道题 · 10月2日,各 3 次运行 · 仅 PartsPlan 8 道题 · 9月27日,4 次运行,缺失数值为 1 次运行 | 6 / 12 图表数值 1 / 6 11 道题的引用页码全部正确 |
用通俗的话说
① 从图表读取的数值——找对了页码,数字却不同
我们询问了 6 个只存在于图表中的数值,例如随温度变化的电流、器件能承受多长时间。在这 6 张图表中,有 5 张的正确曲线旁边就紧挨着其他条件下的曲线。
Service C 为全部 6 个数值找到了正确的图表和页码,但只有 1 个数字正确。问到在 85 °C 环境温度下能否持续输出 2 A 时,它回答“可以(85 °C 时 2.2 A)”,而同一张图表显示的是 1.86 A。
→ 引用的页码正确时,整个答案看起来就像经过了核实。如果相信这个答案去设计,85 °C 下以 2 A 运行就会超出图表所示的极限。
② 表格 · 引脚排列 · 缺失数值——回答正确
我们询问了一份 114 页文档中某张表格里的数值、引脚编号,以及数据手册中根本没有的 2 个数值。
Service C 答对了表格数值和引脚排列,并如实回答这 2 个缺失的数值不在数据手册中。
→ 以文字形式印出的数值,只要有正确的文档,就能找到并读取。
③ 需要判断的问题——继电器答对了,共享地址题的文档不对
我们询问了继电器在高温下能否可靠吸合(需根据“线圈参数为 23 °C 时的值”这条脚注来判断),以及器件上电后立即响应的共享地址(0x70)。
在继电器题上,它说明了“线圈电阻随温度升高而增大”这一假设并进行计算,正确回答了“无法保证”(前一天不附指令提问时,它没有给出结论)。共享地址题则因为该器件页面提供的是产品宣传单页而不是数据手册,未能回答。
→ 设计问题需要明确的“行”或“不行”。当问题需要数据手册之外的假设时,只有说明该假设并进行计算,答案才能得出结论。
- Service C 答对了表格中印有的数值和引脚排列,并对数据手册中没有的 2 个数值回答“没有”(编造的数值为 0 个)。在继电器题上,它说明了数据手册之外的假设(线圈电阻的温度系数),进行了计算并答对。
- 对于全部 6 个图表数值,它都找到了正确的图表和页码,但只有 1 个数字与正确值相差在 ±3 % 以内。在 2 A 那道题上,它得出了错误的结论(“可以”);短路定时器上限则给出“小于 1 ms”,比正确值(约 1.8 ms)更短。若将容差放宽到 ±10 %,Service C 得分为 7 / 12,而 PartsPlan 一栏仍然全部正确。
- 前一天(10月2日)不附指令提出同样的问题时,它的得分为 5 / 12。那次同样只有 6 个图表数值中的 1 个正确,但答对的是另一道(那次是 LM358,这次是 AP2112K);2 A 那道题那次回答“不可以”(正确),短路定时器上限那次是 5.6 ms(约为正确值的 3 倍)。同一道题的答案每次运行都有变化。
- 共享地址题在10月2日未能得到回答,因为该器件页面提供的是产品宣传单页而不是数据手册,我们也没有再次提问。10月2日测得的响应时间:12 个回答中有 10 个在 80 秒以内(其中 4 个在 20 秒以内),其余 2 个分别约为 2.5 分钟和不到 5 分钟。未登录时,该网站每天最多可提问 20 次。
- PartsPlan 一栏沿用上面各表中相同器件、相同条件下的结果(Claude Opus 5.5 连接 PartsPlan);Service C 使用的是该网站自带的 AI,因此所用的 AI 也不同。各格的条件不尽相同,网络搜索对比中的题目是用英文向 Service C 提问的。Service C 每道题只问了一次——这是一项小规模测试。我们不公开该服务的名称。
›提出的问题
- 网络搜索对比(表 05)中的 3 道题——将 PartsPlan 一方的原文译成英文,并附上相同的结尾句(“如果做出了数据手册之外的假设,请加以说明”) · 共享地址题(PCA9685)采用10月2日只针对这一个器件提问的结果
- 12 道高难度题(表 03)中的 6 道——附上与 PartsPlan 一方相同的指令(只依据制造商的数据手册 · 读取所问条件下的曲线 · 不知道时回答“未找到”):STM32F103C8T6 表格 · LM358DR、AP2112K-3.3 和 BSS138 图表 · AP2112K-3.3 引脚排列
- 数据手册中没有的 2 个数值——BSS138 雪崩能量 · AP2112K-3.3 输出电容 ESR 范围(相同指令)