数据战略与生态合作 · 工作方案

让每个模型版本需要的数据按时到位,并拿到同行拿不到的部分

来源合规,成本可控。以下是我对需求和供给的理解、可以带来的资源,以及入职后三个月的安排。

Nicole · 2026 年 11 月

约 1,800 万篇论文许可允许商用,可直接取得。各家都能拿到,是基础。
约 1.2 亿篇论文闭源,需要洽谈授权。其中约七成分散在小出版方、学会和高校。
5,325 种国内科技期刊,几乎全部需要洽谈,由学会、高校和数据库公司持有。
第一步

理解需求

把算法团队的需求转成可执行的采购清单,并提前于模型版本布局。

  • 需求分三类:基模数据、垂类数据、前沿任务数据。我所在的模块以基模数据为主。
  • 论文在语料中占比不高,价值在质量。先问清最缺哪些学科、语种和年份。
  • 交付规格在签约前与数据处理的同事约定,写进合同。
第二步

看清市场

持续摸排供给格局:有多少、在谁手里、哪些能直接取得、哪些需要洽谈。

以期刊论文为例,全球约 1.87 亿篇。从采买用于训练的角度看:

据 OpenAlex 统计,2026 年 11 月查询。

数据资源地球仪可拖拽的三维地图:各地需洽谈采买的论文量、主要持有方,以及 260 多家版权方、数据库和数据服务商的位置。打开
第三步

排定优先级

按训练价值排序采购,不做无差别求全。

  • 第一档:补齐可直接取得的开放论文,立即推进。
  • 第二档:国内期刊和已有成交先例的国际出版社,按季度签约。
  • 第三档和第四档:其余国际大社、学位论文、地区平台、企业数据,随需求推进。
第四步

拿下资源

从找到合作方、建立联系,到谈判和合同落地,全程跟进。

  • 可直接联系的资源集中在开放出版社、国内期刊社与学会、高校学者。
  • 国内期刊有两条路:按期刊集群和学会整体洽谈,或由数据库公司牵头统一授权。
  • 每条资源的第一步都是对方容易答应的事:请教、引荐、提供目录和样本。
第五步

管理与沉淀

把流程、评估和交易经验固定下来,成为团队可复用的资料。

  • 采购从需求确认到结算分九步,每一步有负责人和产出。
  • 合作方分四层维护,联系记录进入团队共用表。
  • 权属、政策、交付、价格、需求变化、信息外泄六类风险各有应对。
计划

入职后三个月

第一个月摸清需求和现状并联系完现有资源,第一季度签下第一批闭源内容。

第 1 周取得各版本的数据需求和已有数据清单,熟悉采购与结算流程,与同事明确分工。交付:需求与已有数据对照表
第 2 到 3 周按名单逐个联系,结果录入团队共用表并去重。交付:候选合作方名单,含优先级
第 4 周汇报论文方向现状,两到三家进入样本评估和报价。交付:论文数据底图内部版
第 2 到 3 个月签下一到两家闭源内容,启动一个期刊集群、学会或数据库公司的整体洽谈,跑通一条企业数据线索渠道。交付:一到两份合同,采购流程文档

需要先确认的事项

  • 开放论文已采集的范围和许可类型。
  • 论文方向已在洽谈的出版方,避免重复联系。
  • 开放许可内容用于训练的合规口径和采集方式的边界,以法务意见为准。
  • 单笔采购的预算范围和审批权限。
  • 非英语语种的优先级,决定地区平台的投入顺序。

需求:三类数据

三类需求对量、质量和时效的要求不同,对应的供给方也不同。我所在的模块以基模数据为主。

类别用途典型内容质量要求时效要求主要供给方
基模数据预训练图书、期刊论文、古籍、各行业公开文本文本干净、无重复、版权清楚、格式统一新版本启动前到位;存量一次补齐,增量按期更新出版社、期刊社、学会、文献数据库、综合数商、开放来源
垂类数据行业和专业领域的深度企业经营文档、行业报告、专业数据库、标准和专利内容专业准确,不含未授权的个人信息和商业秘密随商业化方向确定后逐步加重行业企业、专业出版和数据库公司、行业协会
前沿任务数据后训练和评测专家出题和解题过程、代码任务、操作过程记录、评测集难度够、专家水平可验证、有明确验收标准定制周期通常 1 到 3 个月专家数据数商、高校团队、其他机构发布的数据集

论文在预训练语料中占比不高,价值在质量。每多采购一批,对模型的提升递减,因此按训练价值排序,而不是无差别求全。入职后向算法团队确认:

交付规格

与负责数据处理的同事约定后,写进每一份合同的交付条款。

规模参考:按每篇约 1 万词元粗略估算,全球期刊论文合计约 1.9 万亿词元,其中可直接取得的约 1,800 亿。这是量级估算,实际以交付数据为准。

寻源对象:九类

按数据在谁手里分类。前八类持有或代理数据,最后一类不持有数据,但知道谁有、谁愿意合作。

类别包括持有的内容对应需求合作方式对接角色
内容版权方出版社、期刊社、学会、媒体、图库和 3D 库论文、图书、新闻、图片等原创内容的版权基模训练授权版权授权或数字业务负责人
汇集方文献数据库、地区期刊平台、图书馆、档案馆汇集的内容,需核实是否有权转授基模授权或转授权商务合作负责人
数据服务商综合数商、专家数据数商、授权中介平台、数据交易所现成语料、定制数据、代理的授权三类均有采买、定制创始人、商务和交付负责人
数据交易平台云厂商的数据市场、出版方内容市场、授权撮合平台、数据交易所版权方和数据公司挂牌的标准化数据产品基模、垂类平台内采买,或据此找到版权方后直接洽谈平台的买方合作团队;挂牌的提供方
持有专有数据的企业行业企业、收缩或关停的企业、专业服务机构经营文档、行业报告、内部知识库垂类数据授权,先脱敏创始人、数据负责人、破产管理人
学术和科研机构高校实验室、科研院所、国家科学数据中心、高校图书馆学位论文、科研数据集、会议论文基模、前沿任务授权、共建实验室负责人、科研处、图书馆
个人学者、工程师、创作者专业判断和工作过程前沿任务按题付酬、征题、资助本人
同行和公共来源其他模型公司和研究机构、政府公共数据平台、开源社区已发布或在售的数据集、公共数据、开源代码三类均有采买、申请、采集对方的数据合作团队
线索和引荐方投资人、财务顾问、猎头、行业协会、产业园区、企业服务商不持有数据,掌握企业动态主要通向企业数据引荐本人

论文方向的重点对象

对象规模思路
国际出版社的订阅期刊前六家合计闭源约 3,400 万篇签训练授权,全文交付;对方的开放文章已可合法取得,只采购闭源文章和历史回溯内容;从已有授权先例的出版社开始
国内期刊5,325 种,63 个期刊集群以卓越行动计划入选名单和期刊集群为目标名单,按集群和学会整体洽谈;逐刊核实权利归属
国内期刊(经数据库公司)综合数据库收录大量中小期刊由数据库公司牵头逐刊取得训练授权,统一交付、统一结算并向期刊分成;先以一两百种期刊试点
地区平台与非英语期刊国际索引未收录的开放期刊约 2.8 万种按语种优先级逐个地区洽谈,是多语种数据的主要来源
长尾出版方、学会和高校约占全部闭源的七成逐家建立关系;对没有电子版的,由我方承担数字化,换取独家期

大型出版社同时向多家模型公司授权,一般不提供独家。独占性主要来自长尾期刊和尚未数字化的内容。

我的资源

资源联系方式对应的需求第一步
MDPI可直接联系管理层开放论文 176.6 万篇;旗下索引库 Scilit洽谈结构化全文的批量交付和书面确认
ASP可直接联系管理层开放论文同上,并请其介绍同类出版方
期刊研究会、学协会负责人可直接联系国内闭源期刊了解期刊社对授权训练的态度,请其引荐期刊社和集群
前任职期间的期刊社和学会客户可直接联系国内闭源期刊逐家了解合作意向
高校学者可直接联系学位论文、会议论文;专家担任编委的学者引荐到期刊社
文献数据库同行可直接联系文献;图书和古籍方向的转介绍请其转介绍
投资人、财务顾问、猎头可直接联系企业数据的线索了解收缩或关停企业的情况
数商、其他模型公司的同行可直接联系现成语料、专家数据、行情了解各家能提供什么
其他开放出版方、国际大型出版社经引荐或待建立开放论文、闭源论文从公开寻求合作的出版社开始

寻源手段:四步

一、找到

方法做法
名单法以公开名录为目标名单:卓越行动计划入选期刊、期刊集群、学会名录、破产信息公开平台
数据法用开放索引按数量、学科、许可筛选,排出优先级
反向法了解同行采购了谁、数商的客户是谁、已公开的授权交易有哪些
线索法定期与投资人、猎头、协会交流,掌握企业的变化
公开征集在行业会议和社交平台发布数据需求,线索核实来源后再推进

二、触达

三、促成

做法解决对方的顾虑
先取目录和样本,或做小额试单决策门槛高
代为数字化,换取独家期没有电子版,也缺少投入
付款方式可选:一次性、按年、按量现金流
合同限定用途,不对外转售担心内容外流
脱敏,只取指定类型的文档担心泄露客户和员工信息
署名、联合发表、联合项目学者和学会看重声誉与长期合作

四、管理

采购优先级

每一类数据按五项打分后排序:对训练的价值、取得的难度和周期、成本、能否形成独占、合规风险。算法团队的需求确认后,按实际缺口调整。

档位内容理由时间
第一档补齐许可允许商用的开放论文;与 MDPI 等开放出版社确认结构化全文的交付没有授权费,合规依据清楚,可立即推进第 1 个月
第二档国内期刊集群和学会期刊;已公开寻求合作的国际出版社国内期刊可形成独占,已有可直接联系的关系;后者有成交先例,洽谈路径明确第 1 到 3 个月启动,按季度签约
第三档其余国际大型出版社;学位论文和会议论文;按语种推进的地区平台体量大,但洽谈周期长或需先确定语种优先级第 2 季度起
第四档企业数据;面向学者的征题和资助项目单位成本高、合规审查重,先小规模验证渠道与垂类和后训练需求同步

同一档内的排序原则:先易后难,先增量后存量,先能交付结构化全文的,后需要自行解析的。

国际索引未收录的部分

以上数量来自国际索引,另有一部分内容不在其中,是否采买按语种和质量分别判断。

未收录的内容规模线索采买必要性
中文期刊国内科技期刊 5,325 种,国际索引登记约 1,509 种;2015 到 2024 年国内期刊发文约 1,200 万篇高。中文是核心语种,内容在国际来源中无法替代,已列入第二档
其他非英语语种的本地期刊全球约 6.27 万种开放期刊中,约 45% 未被国际索引收录取决于模型的语种目标,确定后按语种排序
小型本地英文期刊数量多,单刊体量小低。质量参差,与已有内容重复度高
学位论文、会议论文、技术报告不在期刊论文的统计内中。内容与期刊互补,列入第三档

合作方的触达与维护

分层管理

层级对象触达方式维护节奏维护内容
已签约已有合同的版权方和数据公司固定对接人,一对一每月交付与验收进度、结算、续约和增量需求
洽谈中已进入样本评估或报价的对象一对一,必要时当面拜访每两周推进卡点、条款往来、内部决策进展
重点培育有意向但时机未到的期刊社、学会、出版方引荐建立联系后保持一对一沟通每季度行业动态简报、会议和座谈邀请、对方关心的政策与案例
保持联系线索和引荐方、数商、同行行业社群、会议不定期信息交换、需求方向的更新

行业社群

在公司允许的前提下,建立一个面向数据供给方和需求方的行业交流群,作为触达和维护的公共层。

记录与复用

谈判方式

谈判前的准备

条款清单

条款要谈清的内容
授权范围写明用于模型训练;是否包含商用部署;授权地域和期限
独占性独家或非独家;独家的期限和范围
交付内容范围、格式、是否为结构化全文、交付批次和时间
价格与付款计价单位;一次性、按年或按量;付款节点与验收挂钩
增量新内容的更新频率和计价方式
权利保证对方保证有权授权;发生权属争议时的赔偿责任
保密双方对合作内容和我方需求的保密义务
终止合同终止后已交付数据和已训练模型的处理

推进顺序

先确认合作意愿和内容范围,再做样本评估,然后报价和比价,之后谈条款,法务审核后签约。价格僵持时调整其他变量:期限、独占范围、付款节奏、署名方式。

对不同对象的侧重点

对象对方最在意的侧重点
国际出版社价格、对其他授权的影响、作者关系对方多有标准合同;只谈闭源和历史回溯内容;用开放部分已取得作为议价依据
国内期刊社和学会主办单位的态度、行业声誉、内容是否外流先取得负责人的认可,再走主办单位流程;限定用途;可提供数字化作为对价
数据库公司与期刊的既有协议、自身的服务收入先确认其是否有权转授训练用途;采用三方结构,期刊自愿加入并获得分成;合同写明逐刊已取得授权的保证
企业泄露客户和员工信息、商业秘密指定文档类型,先脱敏,签保密协议后再看样本
科研和医疗机构成果归属、署名、合规审查从课题负责人切入;数据不出机构时,将模型带到对方环境中测试;先做一次小规模付酬合作
数据服务商订单规模和回款先试单;要求拆分报价;写明独占性和来源合法的保证

内部分工

我负责商务条款和全程推进;算法团队确定验收标准;法务确定授权和合规条款;财务确定付款和税务安排。

沉淀的资料

资料内容更新
数据地图各类数据的总量、分布、持有方和取得方式每季度
合作方名单按九类对象分类,记录对接人、内容、版权状态、层级和联系记录随时
价格基准各类数据的计价单位和成交或报价区间每次报价后
评估记录每家供应方按八个维度的评估结果和样本结论每次评估后
合同要点已签合同的关键条款和谈判中的让步与坚持每次签约后
采购流程从需求确认到结算的固定步骤和各环节负责人第一季度成稿,之后按需修订
市场动态其他模型公司的采购与出售、新出现的数据公司、政策变化每月

成本与衡量指标

成本怎么算

计价方式适用要点
一次性买断历史回溯内容折算成每篇或每千词的单价,才能在不同来源之间比较
按年授权持续更新的期刊和数据库写明每年新增内容是否包含在内
按量计价分批交付、规模不确定的内容设总价上限
以服务换授权没有电子版的期刊社和小出版社我方承担数字化成本,对方授权并给予独家期

除授权费外,还要计入下载与解析、去重、许可核验、法务审核的成本。开放内容没有授权费,但处理成本是真实的。

公开的价格参照很少。已披露的是出版方的年度授权收入规模,没有按篇的公开单价,因此价格基准需要在询价和比价中逐步建立。

衡量指标

指标含义用途
覆盖率已取得的数量占目标范围的比例,分学科、语种、年份判断还缺什么
到位及时率在模型版本需要的时间点之前交付的比例判断是否提前布局
单位成本每篇或每千词的综合成本,含处理成本比较来源,控制预算
验收通过率交付数据通过质量检查的比例评价供应方
独占内容占比已取得内容中同行无法取得的部分衡量差异化
合规完整率有完整授权依据的内容占比目标为全部

采购流程

从需求到结算分九步,每一步有明确的负责人和产出。入职后先按团队现有做法执行,第一季度内整理成文。

步骤做什么负责产出
1 需求确认明确数据类型、规模、质量标准、时间和预算算法团队提出,我整理需求单
2 寻源列出候选来源,先查团队共用表,避免重复联系我候选名单
3 初步接触确认合作意愿、内容范围和权利归属我接触记录
4 样本评估取目录和样本,检查质量与格式数据处理同事评估结论
5 报价与比价同类内容比较两到三家,对照价格基准我比价表
6 条款与法务授权范围、独占性、权利保证、保密我与法务合同稿
7 审批与签约按金额走内部审批我发起合同
8 交付与验收分批交付,按约定标准验收数据处理同事验收,我跟进验收单
9 结算与复盘按验收结果付款,记录价格和经验我与财务付款记录,更新价格基准和评估记录

风险与应对

风险表现应对
权属不清对方无权授权训练用途,或授权链条不完整签约前核实权属文件;合同写明权利保证和赔偿责任;来源不明的内容不采购
政策变化训练数据的版权规则尚未明确;海外数据公司对华合作可能受限逐篇留存授权依据;海外与国内来源并行,不依赖单一渠道
交付不达标批量交付的质量低于样本,或延期分批交付、分批验收、分批付款;关键内容保留备选来源
价格被抬高多家模型公司同时采购,卖方提价建立价格基准;优先洽谈同行尚未覆盖的长尾内容;以服务换授权
需求变化模型版本调整,已采购内容用不上按训练价值排序,先买确定需要的;大额合同分期
信息外泄洽谈中暴露我方的模型方向先签保密协议;对外只说明需要的内容类型,不说明用途细节

供应方评估

维度要弄清的问题验证方式
能力有什么内容、多大量、覆盖哪些学科或行业、年份范围索取目录和统计表
质量文本是否完整、有无结构化全文、错误率抽样评估,由处理数据的同事确认可用
时效多久能交付、增量多久更新一次写进合同,分批交付
成本报价由哪几部分构成、按什么单位计价同类内容比较两到三家,形成价格基准
合规对方是否有权授权用于训练,授权链条是否完整索取权属文件;合同写明授权范围、权利保证和赔偿责任;法务审核
独占性同一批数据是否已经或将要提供给其他模型公司合同写明独家或非独家及期限
持续供给能否长期合作、对方经营是否稳定了解主办单位、股东和主要客户
保密对方是否会从需求中推断并外传我方的模型方向先签保密协议再谈需求细节

海外数据与跨境采买

事项需要确认的内容确认方
签约主体由境内主体还是境外主体签约法务、财务
授权范围授权地域是否覆盖模型训练和部署所在地;适用法律和争议解决地法务
付款与税务对外付汇流程、代扣税款由哪一方承担财务
数据传输交付方式和存放地点;对方所在国对数据向境外提供的限制;内容中是否含个人信息法务、信息安全

寻源方式:直接联系出版方的授权业务团队;通过代版权方集中授权的中介平台了解可售内容和价格;向数据公司了解已取得授权的现成语料。前期以邮件沟通为主,关键节点安排电话会议。