一、什么是古籍数字化
古籍数字化,是指综合运用数字摄影、扫描成像、图像处理、光学字符识别(OCR)、数据库、网络与存储等技术,将古籍原件或其复制件的版式、文字、图像与结构信息,转化为以二进制数据表达的数字对象,并以规范方式组织、描述、存储、检索、传播和长期保存的过程。它既是一项技术作业,也是一项文献资源建设与文化传承活动。
古籍数字化不是简单地把纸页变成电子图片。它涉及文献整理、版本鉴定、文字处理、信息组织、版权管理与服务保障,与古籍保护修复、数字人文研究、知识服务共同构成古籍资源现代化建设的整体。
三个层次
- 对象层次:不仅包括成册古籍,还包括零散文献、舆图、拓片、书札等;内容既包括版面影像,也包括逐字全文、篇章结构、批注题跋等深层信息;
- 技术层次:涉及采集、加工、组织、服务、保存五个环节,采集决定影像质量,加工决定识别与标引精度,组织决定检索效率,保存决定长期可用;
- 价值层次:最终目的不是生产影像本身,而是让古籍蕴含的知识可被便捷获取、深度利用与长期传承。
成果的四个数据层次
- 影像层:保存古籍版面原貌,包括页面、插图、印鉴题跋影像;
- 文本层:由文字识别与人工校对产生,是检索与计算的直接对象;
- 结构层:描述书名、卷次、篇目、附注等篇章组织;
- 知识层:进行专名标引与知识关联,把人物、地名、书名、引文连接成知识网络。
加工分级:一级仅生产版面影像;二级建立目录与卷次索引;三级全文识别与校对;四级标引专名、整理结构、建立知识关联。珍贵典籍宜达较高层级,一般文献以影像与目录为主,实现投入与价值的平衡。
价值维度
文献、学术、文化、教育、经济价值共同释放
文献价值
真实保存古籍的版本、文字与文物信息,使原件内容得以复制留存。
学术价值
支持版本校勘、文本考释与专题研究,提高研究效率与深度。
文化价值
促进珍贵典籍传播普及,增强文化认同与历史认知。
教育价值
服务课堂教学、人文素养培育与终身学习,让公众走近典籍。
此外,数字化资源还可转化为出版物、数据库产品与文创产品,形成可持续的经济价值与投入回报机制。
二、古籍的类型、载体与装帧
古籍按文献形态可分为刻本、抄本、稿本、校本、拓本、舆图、文书等;载体以纸为主,另有帛书、竹简、木牍、金石等;装帧形态则有卷轴装、经折装、蝴蝶装、包背装、线装等。装帧方式直接影响扫描时页面的摊平程度与拍摄角度,是采集方案设计的首要依据。
不同装帧形态的承载与固定要点
| 装帧形态 | 承载方式 | 固定要点 | 特别注意 |
|---|---|---|---|
| 线装 | V 型书托 | 不强行压平、夹角处垫无酸纸 | 翻页动作轻缓、保护书脊订线 |
| 经折装 | 水平台面、逐折展开 | 无酸纸压条固定折边 | 保留折痕、散折先整理 |
| 卷轴装 | 卷轴架或分段台面 | 分段展开、段间留重叠 | 不一次全展、控制牵拉张力 |
| 蝴蝶装、包背装 | 平面或浅角度书托 | 适度平放、避免重压书背 | 注意页序与书口方向 |
| 册页装 | 水平台面 | 轻压边缘、保护裱褙层 | 挺括但裱层脆弱者仍需谨慎 |
古籍以繁体字为主,异体字、俗字、避讳字、通假字大量存在,部分还含篆、隶、草等字体及少数民族文字。这些文字特征是古籍数字化区别于现代文献数字化的核心难点之一。
三、版本鉴定与目录著录
版本信息是古籍数字化的“身份证”。数字化前应完成版本核查,数字化过程中不得通过处理改变或掩盖版本特征(如牌记、避讳、版心、藏印)。版本鉴定的辅助手段包括书影比对、书目互证、高清放大、多光谱成像、版式字体数据库与异文比勘。
- 书影比对:选取特征页,判断同版、翻刻、后印;
- 书目互证:通过著录源流勾勒版本关系,注意卷数篇目分合;
- 高清放大:观察刀法纸墨细节,保留原始分辨率;
- 多光谱成像:揭示涂挖痕迹与隐墨,配合文献判断使用;
- 异文比勘:建立在准确录文基础上的版本关系判定。
版本记录要与数字化元数据衔接:时代、刻印方式、地点、刊刻者、版式行款等信息应完整著录,既作为检索字段,也为版本研究与数字人文提供可溯源的数据基础。
四、标准规范
古籍数字化应执行统一的著录、元数据、影像采集与字符描述标准,保证不同批次、不同机构成果的互操作与可比性。项目应在开工前形成“执行标准清单”,并把标准条款细化为本项目参数表与质检规则。
| 标准名称 | 标准层级 | 规范重点 | 在数字化中的作用 |
|---|---|---|---|
| 古籍著录规则 | 国家标准 | 古籍书目著录项目、格式与标识 | 确定古籍书目描述的基本框架 |
| 古籍元数据规范 | 文化行业标准 | 数字对象核心元数据元素集 | 统一数字资源的描述与交换 |
| 汉文古籍集外字描述规范 | 文化行业标准 | 罕见字形、缺字的描述与替代 | 规范生僻字在文本中的表达 |
| 汉文古籍版式描述规范 | 文化行业标准 | 版框、界行、版心等版式要素 | 支持版面级数据组织与还原 |
* 标准会随技术发展更新,项目应以现行有效版本为准,重要标准查阅权威发布渠道的现行文本。
五、标准工作流程
质量前置、单点交接、母本不动
资源清查
确定范围
版本核查
原件准备
编目核对
残损登记
影像采集
非接触拍摄
试拍校样
图像处理
纠偏去污
色彩还原
识别著录
OCR 校对
元数据著录
质检入库
抽检挂接
备份归档
各环节关键控制点
| 流程环节 | 主要工作 | 关键控制点 |
|---|---|---|
| 资源清查选目 | 确定范围与优先级、版本核查、编目核对 | 选目标准、账物相符 |
| 原件准备 | 残损登记、必要的保护性处理、先修后采 | 破损先修后采、不强行摊平 |
| 影像采集 | 参数设定、试拍校样、逐页拍摄、逐页勾记 | 原件安全、分辨率、曝光与色彩 |
| 图像处理 | 几何校正、去污、色彩还原、边界控制 | 还原为准、不掩盖文献信息 |
| 识别著录 | 竖排繁体 OCR、人工校对、元数据著录 | 识别准确率、著录规范 |
| 质检入库 | 抽检、图文挂接、命名备份、数据校验 | 完整性、一致性、可回溯 |
* 采集影像的分辨率与均匀度决定识别上限,标引著录决定数据组织水平;质量控制应前移至源头与交接环节,建立逐级检验与责任追溯。
六、采集与设备选型
古籍以非接触式扫描仪与专业翻拍设备为主,避免压平式扫描对装帧的损伤。馈纸式扫描仪会拉扯弯折纸页,古籍原件禁用;平板式扫描的压合也可能损伤脆化与拱曲装帧,须谨慎使用。
设备类型与适用范围
| 设备类型 | 接触方式 | 典型适用对象 | 主要局限 |
|---|---|---|---|
| 平板式扫描仪 | 玻璃平台接触、盖板压合 | 平整散页、复制件、后期平装 | 压合损伤,不适合脆化与拱曲装帧 |
| 馈纸式扫描仪 | 滚轮走纸接触 | 单页散叶、批量现代文献 | 拉扯弯折,古籍原件禁用 |
| 非接触式古籍扫描仪 | 非接触、V 型书托承载 | 线装、经折、册页等成册古籍 | 设备投入较高、超大幅面受限 |
| 翻拍台 | 非接触、相机加受控光源 | 善本、拓片、舆图、立体载体 | 通量较低、对作业人员要求高 |
| 大幅面专用设备 | 轨道式相机或绘图仪式扫描 | 巨幅舆图、长卷、整幅拓片 | 设备庞大、需专门场地 |
采集参数设定
| 参数项 | 常规建议 | 提高规格的情形 | 设定原则 |
|---|---|---|---|
| 光学分辨率 | 300~400 dpi | 善本、小字、批注、钤印取 600 dpi 以上 | 按文献价值分级,不盲目求高 |
| 色彩模式 | 彩色、24 位为主 | 拓片、批校、插图取高位深彩色 | 保留纸色墨色,母版不留遗憾 |
| 曝光 | 高光暗部均不裁切 | 高反差原件用分层曝光 | 以直方图为准,不人为洗白 |
| 白平衡 | 标准色卡校准 | 批次更换光源后重新校准 | 同批一致、色调真实 |
| 光源角度 | 双侧 45° 漫射 | 反光重时加偏振 | 均匀无影、避免镜面反射 |
制作级别与影像规格
| 制作级别 | 主要用途 | 分辨率与像素 | 色彩与位深 | 典型格式 |
|---|---|---|---|---|
| 长期保存级 | 永久留存、替代原件 | 不低于 600 dpi,大幅面相应提高 | 彩色、较高位深,用色彩配置文件 | 无压缩或无损原始格式 |
| 复制加工级 | 校对、识别、印刷复制 | 300~400 dpi 量级 | 彩色或灰度 | 无损压缩格式 |
| 发布服务级 | 网络浏览、在线阅读 | 适配屏幕的较低分辨率 | 彩色压缩,控制体积 | 有损压缩网页格式 |
* 原始影像、加工影像与发布影像分层保存,既满足当前服务,也为未来深化加工留有余地。
七、图像处理与修复
图像处理以“还原为准”,目标是提升可读性,而非美化或改变文献信息。原始影像与加工影像应分层保存,任何处理都不得掩盖病害、批校与版本特征。
- 几何校正与页面规整:纠偏、裁边、去书脊阴影,保持版面完整;
- 去污与缺陷处理:去除扫描噪点与污渍,保留有价值的文献痕迹;
- 影调与色彩还原:以标准色卡校准,还原纸色墨色与印章色彩;
- 锐化、降噪与细节增强:适度处理,避免过度锐化产生光晕;
- 批量自动处理与参数模板:同批一致性优先,逐册微调。
影像修复的边界与伦理:遵循“修旧如旧”,只还原、不美化;原始影像与加工影像严格区分并分别标注,修复图不得冒充原貌图,不掩盖虫蛀、霉斑、缺笔等版本与病害信息。
八、OCR 与古籍生僻字识别
古籍多为竖排繁体、无标点,并夹杂异体字、俗字、避讳字与生僻字,普通 OCR 引擎识别率低。古籍识别需要专业字符集、竖排版面分析与人工校对共同支撑,生僻字按《汉文古籍集外字描述规范》表达。
识别的主要难点
| 难点类型 | 典型表现 | 对识别的主要影响 |
|---|---|---|
| 繁体字形 | 与简化字结构差异大 | 通用模型系统性误识 |
| 异体俗字 | 一字多形、俗写繁多 | 误判为他字或集外字 |
| 避讳缺笔 | 字形不完整、缺末笔 | 形近混淆、难对应标准字 |
| 字体多样 | 写刻、软体、坊刻风格不一 | 跨版本准确率波动 |
| 原件劣化 | 虫蛀、霉烂、透印、对比低 | 字符残缺、边界模糊 |
识别质量指标
| 质量指标 | 含义 | 检验要点 |
|---|---|---|
| 识别准确率 | 文本与原件文字的一致程度 | 抽样对照原件逐字核对 |
| 要素完整 | 版面各类文字要素按规则收录 | 对照版面逐类核查夹注、眉批、题跋 |
| 版面对应 | 文本与影像及版面结构对应 | 图文对照逐页核对,防串行跳页 |
* 低质量原件常采用“影像为主、文本辅助”的策略;识别结果须人工校对,重要版本双人复核,不迷信单一准确率指标。
九、元数据与标引
元数据是古籍数字化的骨架,决定资源能否被准确描述、跨库交换与长期维护。著录应依据《古籍著录规则》,并与版本鉴定结果相互印证。
主要著录项目
| 著录项目 | 核心内容 | 著录要点 |
|---|---|---|
| 书名 | 正题名、并列题名、丛书名 | 以卷端题名为据,反映异名 |
| 著者 | 朝代、姓名、著作方式 | 区分撰、注、编、辑、校等责任 |
| 版本 | 时代、刻者、版本类型、特征 | 依据版本鉴定,审慎表述 |
| 卷册 | 卷数、册数、存佚情况 | 残本著录实存与原帙关系 |
| 版式 | 尺寸、行款、版口、字体 | 行款为版本比对重要依据 |
| 批校题跋 | 作者、内容、位置 | 反映学术史与流传史 |
| 藏印 | 印文、位置 | 反映递藏源流 |
分类标引可采用经、史、子、集四部分类,并结合主题标引与专名标引(人名、地名、书名、职官、年代)。元数据须与影像、文本精确挂接,做到命名规范、一一对应、结构清晰。
十、数据库建设与知识服务
古籍数字化的成果最终要通过数据库与平台服务用户。常见的数据库形态包括书目库、影像库、全文库、图文对照库与专题库,图文对照库是当前古籍数据库的主流形态。
| 数据库类型 | 核心数据 | 主要功能 | 适用场景 |
|---|---|---|---|
| 书目库 | 著录与版本信息 | 检索、浏览、定位馆藏 | 目录查询、资源普查 |
| 影像库 | 版面扫描影像 | 高分辨率浏览、放大 | 版本研究、原貌阅读 |
| 全文库 | 识别校对后的文本 | 全文检索、文本阅读 | 内容检索、文本分析 |
| 图文对照库 | 影像与对应文本 | 逐页对照、双向跳转 | 日常阅读、校勘参考 |
| 专题库 | 围绕主题聚合的多源数据 | 专题浏览、关联展示 | 专题研究、文化传播 |
在全文检索之上,可进一步开展知识组织:建立专名词表、做篇章结构标引、构建知识图谱与关联数据,支持繁简、异体与通假字的检索处理。面向公众,可提供数字展览、科普内容、教学资源与研学活动等服务形式。
数字人文价值:高质量、结构化的古籍数据可支撑文本挖掘、版本校勘与异文比对、历史地理时空分析、社会网络分析、可视化与虚拟展示,是数字人文研究的重要基础设施。
十一、保护与长期保存
古籍数字化是“再生性保护”的重要形式:以数字副本替代利用,降低原件出库频率;在原件遭遇灾害时,数字副本仍可承担内容传承;高分辨率影像还可辅助病害诊断与修复方案制定。
- 先修后采:破损严重且价值高的古籍,先修复再数字化;暂不具备修复条件的,采用非接触设备先行留存影像;
- 驻场加工:文物级、禁止出库的藏品,在库房内用专业设备现场采集,原件不出库;
- 冷光源与低热:无紫外、低热照明,控制单次照射时间;
- 不强行摊平:脆化、糟朽、粘连古籍用书托、无酸纸垫辅助,避免二次损伤。
长期保存的格式取向
| 数据类型 | 保存格式取向 | 不宜仅存的格式 |
|---|---|---|
| 原始影像 | 无损、开放、高分辨率格式 | 仅有损压缩的浏览图 |
| 全文文本 | 纯文本或通用标记文本 | 仅数据库内部字段 |
| 元数据 | 通用元数据格式导出 | 仅系统内部配置 |
| 结构与标引 | 通用结构化数据格式 | 仅自定义私有结构 |
* 落实多副本备份、异地容灾与定期校验;数据格式选择开放标准,兼顾技术演进与格式迁移,让数字成果传之久远。
十二、发展趋势与新技术
技术提效,但文献敬畏不可替代
AI 识别与校对
提效减负、扩大覆盖,但结果须人工复核,不迷信准确率。
大语言模型
辅助问答与整理初稿,防虚构、须溯源、护资源。
知识图谱与语义出版
组织知识、关联服务,专名须核定、争议须保留。
数字孪生与 VR
沉浸展示与文化传播,展示性与学术性并重。
引入新技术须守住底线:AI 生成内容必须人工审校并可溯源;机器学习辅助的“修复图”与原貌图严格区分;区块链只固化已确证信息,不替代鉴定;云计算与大数据要保障数据安全、可迁移、防锁定。