Skip to main content
CenXiv.org
此网站处于试运行阶段,支持我们!
我们衷心感谢所有贡献者的支持。
贡献
赞助
cenxiv logo > physics > arXiv:1911.06013

帮助 | 高级搜索

物理学 > 仪器与探测器

arXiv:1911.06013 (physics)
[提交于 2019年11月14日 (v1) ,最后修订 2020年9月28日 (此版本, v2)]

标题: ReCoDe:高通量时间分辨电子显微镜的数据缩减和压缩描述

标题: ReCoDe: A Data Reduction and Compression Description for High Throughput Time-Resolved Electron Microscopy

Authors:Abhik Datta, Kian Fong Ng, Deepan Balakrishnan, Melissa Ding, Yvonne Ban, See Wee Chee, Jian Shi, N. Duane Loh
摘要: 高速直接电子探测器显著提高了电子显微镜电影的时空分辨率。 然而,在长时间观测中保持空间和时间分辨率需要存储大量数据。 在这里,我们描述了一种高效且灵活的数据缩减和压缩方案(ReCoDe),通过保留单个电子事件来保持空间和时间分辨率。 在工作站上运行ReCoDe,我们展示了对从探测器流出的原始数据进行实时缩减和压缩,速度达到3 GB/s,持续数小时不间断的数据采集。 输出数据比原始数据小100倍,并通过10 GbE连接直接保存到网络附加存储驱动器上。 我们讨论了支持电子检测和计数的校准技术(例如,估计电子背散射率、误报率和数据可压缩性),以及由ReCoDe启用的新数据分析方法(例如,数据采集后的重新校准,以及对重叠损失的准确估计)。
摘要: Fast, direct electron detectors have significantly improved the spatio-temporal resolution of electron microscopy movies. Preserving both spatial and temporal resolution in extended observations, however, requires storing prohibitively large amounts of data. Here, we describe an efficient and flexible data reduction and compression scheme (ReCoDe) that retains both spatial and temporal resolution by preserving individual electron events. Running ReCoDe on a workstation we demonstrate on-the-fly reduction and compression of raw data streaming off a detector at 3 GB/s, for hours of uninterrupted data collection. The output was 100-fold smaller than the raw data and saved directly onto network-attached storage drives over a 10 GbE connection. We discuss calibration techniques that support electron detection and counting (e.g. estimate electron backscattering rates, false positive rates, and data compressibility), and novel data analysis methods enabled by ReCoDe (e.g. recalibration of data post acquisition, and accurate estimation of coincidence loss).
评论: 53页,20图
主题: 仪器与探测器 (physics.ins-det) ; 计算物理 (physics.comp-ph); 数据分析、统计与概率 (physics.data-an)
引用方式: arXiv:1911.06013 [physics.ins-det]
  (或者 arXiv:1911.06013v2 [physics.ins-det] 对于此版本)
  https://doi.org/10.48550/arXiv.1911.06013
通过 DataCite 发表的 arXiv DOI

提交历史

来自: Duane Loh [查看电子邮件]
[v1] 星期四, 2019 年 11 月 14 日 09:56:52 UTC (2,215 KB)
[v2] 星期一, 2020 年 9 月 28 日 03:06:57 UTC (8,862 KB)
全文链接:

获取论文:

    查看标题为《》的 PDF
  • 查看中文 PDF
  • 查看 PDF
查看许可
当前浏览上下文:
physics.ins-det
< 上一篇   |   下一篇 >
新的 | 最近的 | 2019-11
切换浏览方式为:
physics
physics.comp-ph
physics.data-an

参考文献与引用

  • NASA ADS
  • 谷歌学术搜索
  • 语义学者
a 导出 BibTeX 引用 加载中...

BibTeX 格式的引用

×
数据由提供:

收藏

BibSonomy logo Reddit logo

文献和引用工具

文献资源探索 (什么是资源探索?)
连接的论文 (什么是连接的论文?)
Litmaps (什么是 Litmaps?)
scite 智能引用 (什么是智能引用?)

与本文相关的代码,数据和媒体

alphaXiv (什么是 alphaXiv?)
CatalyzeX 代码查找器 (什么是 CatalyzeX?)
DagsHub (什么是 DagsHub?)
Gotit.pub (什么是 GotitPub?)
Hugging Face (什么是 Huggingface?)
带有代码的论文 (什么是带有代码的论文?)
ScienceCast (什么是 ScienceCast?)

演示

复制 (什么是复制?)
Hugging Face Spaces (什么是 Spaces?)
TXYZ.AI (什么是 TXYZ.AI?)

推荐器和搜索工具

影响之花 (什么是影响之花?)
核心推荐器 (什么是核心?)
IArxiv 推荐器 (什么是 IArxiv?)
  • 作者
  • 地点
  • 机构
  • 主题

arXivLabs:与社区合作伙伴的实验项目

arXivLabs 是一个框架,允许合作伙伴直接在我们的网站上开发和分享新的 arXiv 特性。

与 arXivLabs 合作的个人和组织都接受了我们的价值观,即开放、社区、卓越和用户数据隐私。arXiv 承诺这些价值观,并且只与遵守这些价值观的合作伙伴合作。

有一个为 arXiv 社区增加价值的项目想法吗? 了解更多关于 arXivLabs 的信息.

这篇论文的哪些作者是支持者? | 禁用 MathJax (什么是 MathJax?)
  • 关于
  • 帮助
  • contact arXivClick here to contact arXiv 联系
  • 订阅 arXiv 邮件列表点击这里订阅 订阅
  • 版权
  • 隐私政策
  • 网络无障碍帮助
  • arXiv 运营状态
    通过...获取状态通知 email 或者 slack

京ICP备2025123034号