评价方法论
JournoLight 采用八维双层判定框架对学术期刊进行第三方合规性评价, 输出 🟢合规 / 🟡预警 / 🔴高风险 三级判定。评价只看期刊合规性,不评价学术质量,不做学者评价。
一、八维框架说明
八个维度分为三层:评价层(D1–D4,期刊基础合规属性)、防御层(D5–D7,学术诚信防御能力)、时效层(D8,内容时效性)。 每个维度按三档计分:10 分(良好)/ 5 分(存疑)/ 0 分(违规); 数据不足时不给 0 分,标注“数据不足”并降低置信度(开发约束第 9 条)。
D1 合法登记评价层
ISSN/CN 可验证=10;主办单位存疑=5;不可验证=0
D2 数据库收录评价层
SCI/SSCI=10;Scopus=7;CNKI/万方=4;DOAJ=4;未收录=0
D3 审稿周期评价层
≥4周且流程公示=10;1–4周=5;<1周或秒审=0
D4 版面费透明度评价层
明确公示且金额合理=10;笼统说明=5;不透明或有投诉=0
D5 发文量异常防御层
无异常=10;1种异常=5;≥2种异常=0
D6 编委可验证性防御层
100%可验证=10;≥60%=5;<60%=0
D7 撤稿记录防御层
撤稿率<1%=10;1%–5%=5;>5%或学术不端=0
D8 指南时效性时效层
引用指南全部最新=10;1–2篇过期=5;≥3篇过期或废止=0
二、D5 发文量异常:五种模式检测
| 模式 | 判定阈值(总指令 4.2) |
|---|---|
| 总量异常 | 年增长>100% 或 同行偏离度>3 |
| 特刊滥用 | 特刊占比>30% 且审稿周期显著短于常规 |
| 论文类型操纵 | 可引用论文占比下降>15个百分点 |
| 脉冲式异常 | 季度波动系数>5 |
| 季节性异常 | Q4占比>60% 或 月度集中度>4 |
| 计分规则 | 无异常 = 10 分;检出 1 种异常 = 5 分;检出 ≥2 种异常 = 0 分 |
三、综合判定规则
| 等级 | 判定条件(满足其一即判定) |
|---|---|
| 🔴 高风险 | ≥3 个维度为 0 分;或 D1 = 0;或防御层(D5+D6+D7)总分低于 15 分;或在已知黑名单中 |
| 🟡 预警 | ≥2 个维度为 0 分;或 ≥4 个维度 ≤5 分;或 D8 = 0 |
| 🟢 合规 | 不满足高风险和预警条件 |
置信度(high / medium / low)由数据完整度决定:数据不足的维度不参与判定,但会拉低置信度并在详情页明确标注。
四、数据来源(按优先级)
- ISSN 国际中心(D1 合法登记)
- DOAJ(D2 数据库收录)
- PubMed(D3 审稿周期、D7 撤稿记录)
- OpenAlex(D5 发文量、引用数据)
- Crossref(D5 发文量)
- Retraction Watch(D7 撤稿记录)
- 期刊官网(D4 版面费、D6 编委核验、D8 指南时效性)
五、申诉机制
- 期刊出版方可对 预警 判定、或黑名单中 非“D1=0”情形 的判定提交申诉, 申诉材料包括:维度对应数据源的更正证明、官网公示截图、编委名单验证材料等。
- 申诉由运营人员在管理后台「评价复核」模块受理,进入 under_appeal(申诉复核中) 状态, 复核期间黑名单记录保持生效。
- 复核通过后更新对应维度得分并重新计算综合判定;历史记录保留在得分历史表中,全程可追溯。
- 不可申诉情形(开发约束第 10 条):D1 = 0 的期刊自动判定为高风险,不可申诉; 经人工确认列入黑名单且未完成整改复核的期刊不可申诉。
- 黑名单期刊定期复审(见黑名单记录中的“上次复核日期”),整改复核通过后方可移除(status = removed)。
申诉联系:期刊出版方可通过运营邮箱提交申诉材料(详见期刊详情页判定卡片中的指引)。
六、评价边界声明
JournoLight 只做期刊合规性评价:V1.0 范围为首批 500 本 SCI Q1 核心医学期刊,逐步扩展至 5000 本。 本系统不做学者评价(由 ScholarLight 承担),不做投稿审稿流程(由 JournoLight Submit 承担)。 评价结果基于公开数据源自动计算 + 人工复核,供学者投稿决策参考。