评价方法论

JournoLight 采用八维双层判定框架对学术期刊进行第三方合规性评价, 输出 🟢合规 / 🟡预警 / 🔴高风险 三级判定。评价只看期刊合规性,不评价学术质量,不做学者评价。

一、八维框架说明

八个维度分为三层:评价层(D1–D4,期刊基础合规属性)、防御层(D5–D7,学术诚信防御能力)、时效层(D8,内容时效性)。 每个维度按三档计分:10 分(良好)/ 5 分(存疑)/ 0 分(违规); 数据不足时不给 0 分,标注“数据不足”并降低置信度(开发约束第 9 条)。

D1 合法登记评价层
ISSN/CN 可验证=10;主办单位存疑=5;不可验证=0
D2 数据库收录评价层
SCI/SSCI=10;Scopus=7;CNKI/万方=4;DOAJ=4;未收录=0
D3 审稿周期评价层
≥4周且流程公示=10;1–4周=5;<1周或秒审=0
D4 版面费透明度评价层
明确公示且金额合理=10;笼统说明=5;不透明或有投诉=0
D5 发文量异常防御层
无异常=10;1种异常=5;≥2种异常=0
D6 编委可验证性防御层
100%可验证=10;≥60%=5;<60%=0
D7 撤稿记录防御层
撤稿率<1%=10;1%–5%=5;>5%或学术不端=0
D8 指南时效性时效层
引用指南全部最新=10;1–2篇过期=5;≥3篇过期或废止=0

二、D5 发文量异常:五种模式检测

模式判定阈值(总指令 4.2)
总量异常年增长>100% 或 同行偏离度>3
特刊滥用特刊占比>30% 且审稿周期显著短于常规
论文类型操纵可引用论文占比下降>15个百分点
脉冲式异常季度波动系数>5
季节性异常Q4占比>60% 或 月度集中度>4
计分规则无异常 = 10 分;检出 1 种异常 = 5 分;检出 ≥2 种异常 = 0 分

三、综合判定规则

等级判定条件(满足其一即判定)
🔴 高风险≥3 个维度为 0 分;或 D1 = 0;或防御层(D5+D6+D7)总分低于 15 分;或在已知黑名单中
🟡 预警≥2 个维度为 0 分;或 ≥4 个维度 ≤5 分;或 D8 = 0
🟢 合规不满足高风险和预警条件

置信度(high / medium / low)由数据完整度决定:数据不足的维度不参与判定,但会拉低置信度并在详情页明确标注。

四、数据来源(按优先级)

  1. ISSN 国际中心(D1 合法登记)
  2. DOAJ(D2 数据库收录)
  3. PubMed(D3 审稿周期、D7 撤稿记录)
  4. OpenAlex(D5 发文量、引用数据)
  5. Crossref(D5 发文量)
  6. Retraction Watch(D7 撤稿记录)
  7. 期刊官网(D4 版面费、D6 编委核验、D8 指南时效性)

五、申诉机制

  • 期刊出版方可对 预警 判定、或黑名单中 非“D1=0”情形 的判定提交申诉, 申诉材料包括:维度对应数据源的更正证明、官网公示截图、编委名单验证材料等。
  • 申诉由运营人员在管理后台「评价复核」模块受理,进入 under_appeal(申诉复核中) 状态, 复核期间黑名单记录保持生效。
  • 复核通过后更新对应维度得分并重新计算综合判定;历史记录保留在得分历史表中,全程可追溯。
  • 不可申诉情形(开发约束第 10 条):D1 = 0 的期刊自动判定为高风险,不可申诉; 经人工确认列入黑名单且未完成整改复核的期刊不可申诉。
  • 黑名单期刊定期复审(见黑名单记录中的“上次复核日期”),整改复核通过后方可移除(status = removed)。
申诉联系:期刊出版方可通过运营邮箱提交申诉材料(详见期刊详情页判定卡片中的指引)。

六、评价边界声明

JournoLight 只做期刊合规性评价:V1.0 范围为首批 500 本 SCI Q1 核心医学期刊,逐步扩展至 5000 本。 本系统不做学者评价(由 ScholarLight 承担),不做投稿审稿流程(由 JournoLight Submit 承担)。 评价结果基于公开数据源自动计算 + 人工复核,供学者投稿决策参考。