OpenStack和Ceph在Genomic Era的应用

2023-11-25 16:40

本文主要是介绍OpenStack和Ceph在Genomic Era的应用,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

FishOS支持基因组研究,为埃伯哈德·卡尔斯大学的云计算提供动力,通过蒂宾根的大学计算中心为生物信息学家提供云环境。

生命科学和信息技术的发展对生物信息学的跨学科性质产生了深远的影响;生物信息学正在经历从内部计算基础设施到云计算的新飞跃,以处理高通量实验技术产生的大量生物数据。高通量技术的可用性以及基因组学和药物基因组学在大群体研究中的应用正在产生越来越多的实验和临床数据,以及分布在互联网上的专门数据库。

德国生物信息学基础设施网络(简称“de.NBI”)是一个国家研究基础设施,为生命科学研究、生物医学和相关领域的用户提供生物信息学服务。

云技术如何支撑临床基因组研究?

德国人类基因组计划推动的技术和资源正在开始对生物医学研究产生深远影响,并有望在更广泛的生物学研究和临床医学领域掀起革命。越来越详细的基因组图谱帮助研究人员寻找与数十种遗传条件相关的基因。

这一新领域出现的实际后果是显而易见的。对人类孟德尔病相关基因的鉴定曾经是一项艰巨的任务,需要大型研究团队、多年的艰苦工作和不确定的结果,现在可以由一名研究科学家在几周内完成,该科学家可以获得DNA样本和相关表型,轻松连接到私人基因组数据库、热循环仪和DNA测序机。

de.NBI为德国人类基因组计划提供数据。由于系统处理人类基因组数据的性质,对可靠性和弹性的要求是对整个云系统的真正考验。

通过云联盟概念,所有五个de.NBI站点,比勒费尔德大学、弗莱堡大学、图宾根大学、海德堡大学和吉森大学,都集成到一个单一的云平台中。存储量的增长、实验数据的预处理和分析正成为分析管道的主要瓶颈。

因此,用户将通过中央de.NBI云门户被引导到所设想的服务和合适的云。

Sardina FishOS形成了de.NBI云的主干,以促进欧洲的先进科学发现。基于OpenStack和Ceph的高度可靠的平台能够实现数据的综合分析和高效使用,以实现科学突破。

突破性云技术解决科学问题

de.NBI的多系统结合了FishOS OpenStack和Ceph,为传统研究和下一代应用提供了超可靠的平台,并提供了数据安全和保护。为实现de.NBI的目的,Ceph存储的关键要求包括:多个站点上的地理冗余、静态加密、异步镜像,以及选择单向或双向镜像。这些系统支持针对镜像的快照和日志模式以及设置为在计划时间获取它们的快照的多个存储和单池配置。

为了加速计算,云平台采用先进的Nvidia GPU加速。

由于多个基于OpenStack和基于Ceph的云跨越多个位置和地区,系统的日常操作变得简单而灵活,云平台的预集成操作工具、智能预测分析和智能资源管理。

来自FishOS

Sardina基于FishOS的运维架构实施了一项解决方案设计,允许de.NBI通过全自动、灵活、可靠和可扩展的运维以及市场独有的零停机升级来管理多个系统。如今,de.NBI使用基于OpenStack、Kubernetes和Ceph的FishOS解决方案运行四个系统。Sardina还从Ubuntu OpenStack迁移了其中一个系统。

为图宾根的de.NBI计算中心提供云环境,FishOS首先实施的项目包括基础设施、构建管道的各种工作流解决方案,以及特别关注高通量数据分析(基因组学、蛋白质组学、代谢组学等)的工具。

其次,位于图宾根的de.NBI云站点的一个主要目标是提供涵盖不同科学研究领域的软件,如质谱分析、NGS分析管道,以及通过集成到Galaxy工作流中的Ball进行分子对接。由于其针对云平台的预集成操作工具,FishOS简化了de.NBI系统的日常操作,使其变得简单灵活。系统用户受益于智能预测分析和智能资源管理。

现在,FishOS运行云基础设施,以研究海量数据,进行科学发现,并帮助向不同地区的人们提供高水平的医疗服务,可以说,像FishOS这样的IT技术对人类基因组研究发展产生了影响。

原文链接:

https://superuser.openstack.org/articles/cloud-technologies-maintain-the-genomic-era/

fcc80f0ff5828969af5b9f68fe5dc334.png

eb38085d21a606f9639beac186e77ce7.png

这篇关于OpenStack和Ceph在Genomic Era的应用的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/424158

相关文章

分布式锁在Spring Boot应用中的实现过程

《分布式锁在SpringBoot应用中的实现过程》文章介绍在SpringBoot中通过自定义Lock注解、LockAspect切面和RedisLockUtils工具类实现分布式锁,确保多实例并发操作... 目录Lock注解LockASPect切面RedisLockUtils工具类总结在现代微服务架构中,分布

Python标准库之数据压缩和存档的应用详解

《Python标准库之数据压缩和存档的应用详解》在数据处理与存储领域,压缩和存档是提升效率的关键技术,Python标准库提供了一套完整的工具链,下面小编就来和大家简单介绍一下吧... 目录一、核心模块架构与设计哲学二、关键模块深度解析1.tarfile:专业级归档工具2.zipfile:跨平台归档首选3.

使用IDEA部署Docker应用指南分享

《使用IDEA部署Docker应用指南分享》本文介绍了使用IDEA部署Docker应用的四步流程:创建Dockerfile、配置IDEADocker连接、设置运行调试环境、构建运行镜像,并强调需准备本... 目录一、创建 dockerfile 配置文件二、配置 IDEA 的 Docker 连接三、配置 Do

深入浅出SpringBoot WebSocket构建实时应用全面指南

《深入浅出SpringBootWebSocket构建实时应用全面指南》WebSocket是一种在单个TCP连接上进行全双工通信的协议,这篇文章主要为大家详细介绍了SpringBoot如何集成WebS... 目录前言为什么需要 WebSocketWebSocket 是什么Spring Boot 如何简化 We

Java Stream流之GroupBy的用法及应用场景

《JavaStream流之GroupBy的用法及应用场景》本教程将详细介绍如何在Java中使用Stream流的groupby方法,包括基本用法和一些常见的实际应用场景,感兴趣的朋友一起看看吧... 目录Java Stream流之GroupBy的用法1. 前言2. 基础概念什么是 GroupBy?Stream

python中列表应用和扩展性实用详解

《python中列表应用和扩展性实用详解》文章介绍了Python列表的核心特性:有序数据集合,用[]定义,元素类型可不同,支持迭代、循环、切片,可执行增删改查、排序、推导式及嵌套操作,是常用的数据处理... 目录1、列表定义2、格式3、列表是可迭代对象4、列表的常见操作总结1、列表定义是处理一组有序项目的

C#中的Converter的具体应用

《C#中的Converter的具体应用》C#中的Converter提供了一种灵活的类型转换机制,本文详细介绍了Converter的基本概念、使用场景,具有一定的参考价值,感兴趣的可以了解一下... 目录Converter的基本概念1. Converter委托2. 使用场景布尔型转换示例示例1:简单的字符串到

Spring Boot Actuator应用监控与管理的详细步骤

《SpringBootActuator应用监控与管理的详细步骤》SpringBootActuator是SpringBoot的监控工具,提供健康检查、性能指标、日志管理等核心功能,支持自定义和扩展端... 目录一、 Spring Boot Actuator 概述二、 集成 Spring Boot Actuat

PyTorch中的词嵌入层(nn.Embedding)详解与实战应用示例

《PyTorch中的词嵌入层(nn.Embedding)详解与实战应用示例》词嵌入解决NLP维度灾难,捕捉语义关系,PyTorch的nn.Embedding模块提供灵活实现,支持参数配置、预训练及变长... 目录一、词嵌入(Word Embedding)简介为什么需要词嵌入?二、PyTorch中的nn.Em

Spring Boot3.0新特性全面解析与应用实战

《SpringBoot3.0新特性全面解析与应用实战》SpringBoot3.0作为Spring生态系统的一个重要里程碑,带来了众多令人兴奋的新特性和改进,本文将深入解析SpringBoot3.0的... 目录核心变化概览Java版本要求提升迁移至Jakarta EE重要新特性详解1. Native Ima