oss

从压制植物标本到 GBIF:一条开源数据之路

9 条来源 5 条一手来源 已翻译 2026年10月22号

正在加载阅读与收藏统计…
正文

一株压制保存的植物静置在标本柜中,它的信息却能传到世界各地。照片连同采集者姓名、日期和地点一起流转,这些细节经过整理、填入相应字段,其他研究者才能检索。植物馆藏周围的开源工具,将这项工作分给馆藏门户、数据发布应用和全球索引。要理解 Symbiota、Darwin Core 和 GBIF 的 Integrated Publishing Toolkit(集成发布工具包)如何配合,可以先问一个具体的问题:有人更正记录时,应该先改哪一份?

在史密森尼国家植物标本馆,这个问题背后是一套实实在在的作业流程。传送带将一张张干燥植物标本送到相机下方,工作人员再根据图像转录标签。馆方报告称,大规模数字化项目于 2022 年 5 月完成,380 万张标本由此上线。[1] 照片留存了纸面上的原貌,可检索的字段则让其中的信息有了新的用途。

固定在白纸上的压制植物标本沿数字化传送带移动,后方是戴着手套的工作人员。
史密森尼数字化传送带上的植物标本:馆藏记录能够被检索,背后是这些处理实物的工作。摄影:Ingrid Lin,史密森尼学会。[1]

随着更大规模的馆藏上线,区分这些工作仍然有用。Davide Castelvecchi 于 2026 年为《自然》撰写、后由《科学美国人》转载的报道介绍,英国邱园新近完成数字化的标本,既可从邱园自己的网站访问,也可从全球生物多样性信息机构(Global Biodiversity Information Facility,GBIF)访问。[2] 在我看来,这种安排说明了两项需求:馆藏需要一个便于使用的记录管理平台,也需要让远方的人找到这些记录。两项工作可以共享数据,各自使用合适的应用。

更正应从哪里开始

Symbiota 是用于管理和发布生物多样性数据的开源软件。它的门户配有记录编辑、地理参照、检索和馆藏数据维护工具。[3] 植物标本馆可以把门户用作日常工作的数据库,也可以用它展示一份由其他系统管理的数据副本。

文档将这两种馆藏管理方式称为 live(实时管理)和 snapshot(快照)。采用实时管理时,获授权的用户通过浏览器在门户中录入、编辑记录。采用快照方式时,日常维护的数据保存在另一个系统中,例如 Specify 或 Arctos,Symbiota 则导入一份副本。保存导入配置后,后续更新可以沿用这些设置,前提是源数据的唯一标识符保持一致;这个标识符在 Symbiota 中称为 dbpk。[4]

设想一位馆藏管理员发现采集日期被误读,需要更正。实时管理的馆藏可以直接在门户中修改。采用快照方式时,更正应先进入上游的馆藏数据库,再随下一次导出传递出去。这是两种管理方式在实际操作中的区别:公开网页负责展示记录,维护记录的责任则要看数据由哪个系统管理。

对于只有一名兼职数据管理员的小型植物标本馆,加入现有门户可以是比自行运维另一个应用更切合实际的选择。规模较大、已有成熟馆藏数据库的机构,则有时会更倾向于快照方式。无论采用哪种安排,都要有人明确哪份记录是权威版本,并能说明更正如何传到各个公开副本。

让字段表达共同的含义

Darwin Core 是一套词汇表,与数据库产品分属不同类别。它用一组术语,让不同系统表达可以相互对照的信息:recordedBy 表示采集者,eventDate 表示采集事件的日期,scientificName 表示鉴定所得的学名。对于保存下来的标本,可以将 basisOfRecord 的值设为 PreservedSpecimen。[5]

其中一些尤其有用的字段,记录着已知信息的限度。verbatimLocality 保留原始地点描述。坐标可以附带 coordinateUncertaintyInMeters,用半径说明覆盖实际地点所需的范围;零是无效值。[5] 历史标签若只写了一处山谷,转换数据时就应保留这样的精度限度,避免悄然把它表述成精确到米的植物位置。

标识符同样需要谨慎处理。occurrenceID 标识的是一次生物出现事实,数字记录则是对这次出现的记载。[5] 因此,修正拼写或采集日期时,应更新已有生物出现记录的描述。若每次导出都分配新的标识符,追踪这段修订历史就会更加困难。

把记录打包交给另一个系统

Darwin Core Archive(Darwin Core 数据归档包)通常简称 DwC-A,用于将表格数据打包交换。发布标本数据时,常见做法是用 Occurrence 核心文件保存主要记录行。扩展文件可以为一条核心记录附加多条相关内容,例如多幅图像。扩展文件的每一行都指向一条核心记录。[6]

归档包中的 meta.xml 描述文件、列映射及其关联。数据集层面的元数据补充作者、方法和内容说明等背景,通常采用 Ecological Metadata Language(生态元数据语言)编写。这些文件放在同一个压缩包中传递。[6]

有了这样的设计,即使另一套系统使用不同的本地列名,软件也能解读表格。导出内容的用途也由此明确:它是为共享而整理的数据表达。团队若要用它替代馆藏数据库,应先查明其中实际保留了哪些本地关联和历史信息。

通向同一检索系统的两条路

GBIF 的 Integrated Publishing Toolkit,简称 IPT,是用于发布生物多样性数据集的开源网页应用。它将已发布资源接入 GBIF 注册系统,也可以配置为通过 DataCite 为数据集分配 DOI。机构可以自行部署,也可以使用可信托管中心的服务。[7]

IPT 负责发布这一阶段的工作。团队若已在其他地方维护数据,需要一个准备和管理共享内容的平台,就可以使用它。用户手册建议从托管服务入手,这是最简便的起点;自行部署还需要持续更新软件。[7]

Symbiota 馆藏也可以直接发布到 GBIF。完成配置的 Symbiota 门户能够生成 Darwin Core Archive,并将数据直接发布到 GBIF,省去 IPT 这一中间环节。文档为快照馆藏使用这条通路列出了两个条件:这批数据尚未经其他通路发布,且导入记录必须携带各自的 occurrenceID。重新发布记录时,先前分配的标识符必须一并保留。[8]

按职责来比较,这些选择就更容易分清:

体系中的组成部分 主要职责 馆藏方仍需决定
Symbiota 实时管理馆藏 维护并公开日常使用的记录 谁可以编辑记录、审核更正
Symbiota 快照馆藏 公开由其他系统维护的记录 更新如何回到数据源,又如何从数据源传来
Darwin Core Archive 在系统之间传递结构化记录 发布哪些字段和关联
IPT 或 Symbiota 的发布工具 将数据集发布给聚合平台 由哪条通路负责发布这个数据集
GBIF 让使用者能够跨数据集检索记录 处理后的数据是否适合所做的研究

这张表梳理的是可供选择的工具和职责;史密森尼或邱园究竟采用了哪些组件,仍须以各自的实际部署为准。关于重复发布的提醒尤其贴近实际:同一馆藏经两条通路送出,会有被呈现为两个数据集的风险。发布端点增加,证据质量仍要另行判断。[8]

从 GBIF 下载回来的是什么

数据发布后,还会继续经过转换。GBIF 的 Darwin Core Archive 下载包区分了两个文件:occurrence.txt 保存经 GBIF 解读处理后的生物出现数据,verbatim.txt 保存解读处理前的数据。文档对后者也加了一层限定:这部分数据仍有经过 Unicode 转换或空白字符调整的情况。多媒体信息另有专用文件。[9]

这样的区分让差异有迹可查。如果某个名称或地点出乎预期,研究者可以对照发布方提交的值和索引中解读处理后的结果。下载成功说明信息已经传递到位;采集地点和鉴定结果是否准确,仍须逐项核实。

对于馆藏团队,我建议在扩大发布范围前,先选一条普通记录,再选一条难以处理的历史标签,做一次完整检查。沿选定的通路追踪两者,将公开字段与源数据对照,然后更正一个值,核验下一次发布的版本。这一轮操作能同时检验维护责任、标识符、字段映射和数据更新。

这些工作的回报,是柜中那张标本能够更长久地被利用。远方的人可以找到它、审视证据,并提出更好的问题。当记录保有稳定的标识符,也能追溯到有能力更正它的人,开源软件便能帮助它走得更远。

来源

  1. Jack Tamisiea,《2022 in Review: The National Herbarium Goes Digital》,Smithsonian Voices,2022 年 12 月 20 日——数字化工作流程,以及 Ingrid Lin 拍摄的传送带照片。
  2. Davide Castelvecchi 与《自然》杂志,《London botanic gardens digitizes 7 million specimens》,《科学美国人》,2026 年 6 月 30 日——关于从邱园网站和 GBIF 访问标本的独立报道。
  3. Symbiota Support Hub,《Welcome to Symbiota Docs!》——开源属性、门户功能与用户角色。
  4. Symbiota Support Hub,《Management Types》,文档版本 3.4——实时管理与快照馆藏、源系统,以及导入时保持稳定的标识符。
  5. Biodiversity Information Standards(TDWG),《Darwin Core Quick Reference Guide》——记录类型、采集信息、地点不确定性和生物出现标识的定义。
  6. GBIF 秘书处,《Darwin Core Archives — How-to Guide》,版本 2.2——核心文件与扩展文件、标识符、描述文件及数据集元数据。
  7. GBIF,《Integrated Publishing Toolkit User Manual》——发布范围、注册系统集成、DOI 配置、托管服务与维护。
  8. Symbiota Support Hub,《Publishing Data to GBIF》,文档版本 3.4——直接发布、快照要求、重复发布通路及生物出现标识符的保留。
  9. GBIF,《Occurrence download formats》——解读处理后的记录、原始数据、多媒体文件及有关编码的限定。
Previous 将家谱迁入 Gramps,也要迁入证据 Next Siril:从一夜曝光到一张天文照片

Recommended In oss

Matched by subject and format