学习笔记Day17:转录组上游分析-1

2024-03-27 02:36

本文主要是介绍学习笔记Day17:转录组上游分析-1,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

转录组上游分析-1

作业:
  • 取出fastq文件中的所有序列ID(第一行)

    less SRR1039510_1.fastq.gz | awk '{if(NR%4==1){print $0}}'less SRR1039510_1.fastq.gz | paste - - - - | cut -f 1 
    
  • 取出fastq文件中的所有序列(第二行)同上

  • 对序列出现次数进行统计

     less SRR1039510_1.fastq.gz | paste - - - - | cut -f 2 | sort | uniq -c | sort -nk 1
    

    如果某一序列出现次数非常高,考虑可能是核糖体RNA?或实验过程中的异常情况,可以比对序列来查看该序列来源

数据质控

数据质量评估
  • FastQC软件:可以对fastq格式的原始数据进行质量统计。

    • 官方网站—帮助文档

    • 常用参数:

      在这里插入图片描述

    • 任务运行

      1. 在当前窗口直接运行
      2. 将命令后台运行nohup ... &
      3. 将命令写入sh脚本,使用nohup ... &运行脚本
    • 绝对路径运行脚本

      multiqc=/home/t_rna/miniconda3/envs/rna/bin/multiqc
      fastqc=/home/t_rna/miniconda3/envs/rna/bin/fastqc
      fq_dir=$HOME/project/Human-16-Asthma-Trans/data/rawdata
      outdir=$HOME/project/Human-16-Asthma-Trans/data/rawdata# 使用绝对路径运行
      $fastqc -t 6 -o $outdir ${fq_dir}/SRR*.fastq.gz >${fq_dir}/qc.log
      
    • 确定后台任务结束

      1. 看结果目录有无正常结果生成
      2. htop中是否有命令正在运行
      3. ps fx看本人的进程
      4. 读输出的运行日志
    • 质控后生成的html文件即质控报告

      在这里插入图片描述
      在这里插入图片描述

      数据量统计方式:生物学中碱基数量VS计算机中的存储字节(需要加以区分)

      • per base sequence quality

        按位置展示碱基质量的箱线图

      • per sequence quality scores

        横坐标:一条序列碱基的平均Q值(一条序列中N越多,质量值越低)

        纵坐标:每个质量值对应的read数

        较好结果:

        在这里插入图片描述

      • per base sequence content

        每个碱基位置上:ATGC含量的分布图

        理论上G/C、A/T的含量在测序循环上应分别相等,且稳定呈水平线。

        差数据:出现分离。

      • per sequence GC content

        GC含量分布图,蓝色和红色线分别为理论值和实际值,越接近越好;一般呈单峰分布。

      • Atapt

        公司提供数据

    • 整合FastQC结果

      multiQC *zip

数据过滤

原始序列质量控制标准:

  1. 去除含接头的reads;
  2. 过滤去除低质量值数据,确保数据质量;
  3. 去除含有N(无法确定碱基信息)的比例大于5%(可以自定义)的reads。
过滤接头
  • trim_galore

    在这里插入图片描述

    • 单个样本的运行

      trim_galore -q 20 --length 20 --max_n 3 --stringency 3 --fastqc --paired -o ./ ../../rawdata/SRR1039510_1.fastq.gz ../../rawdata/SRR1039510_2.fastq.gz
      
    • 多个样本的运行

      • 先获得样本名组成的文件ID

      • while循环

        # 多个样本 vim trim_galore.sh,以下为sh的内容
        rawdata=$HOME/project/Human-16-Asthma-Trans/data/rawdata
        cleandata=$HOME/project/Human-16-Asthma-Trans/data/cleandata/trim_galore
        cat ID | while read id
        dotrim_galore -q 20 --length 20 --max_n 3 --stringency 3 --fastqc --paired -o ${cleandata} ${rawdata}/${id}_1.fastq.gz ${rawdata}/${id}_2.fastq.gz
        done
        
  • Tips:

    后台任务转前台:jobs列出任务;fg %1(任务序号)

    前台任务转后台:Ctrl+Z暂停,jobs列出任务,bg %1(任务序号)

这篇关于学习笔记Day17:转录组上游分析-1的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/850673

相关文章

python panda库从基础到高级操作分析

《pythonpanda库从基础到高级操作分析》本文介绍了Pandas库的核心功能,包括处理结构化数据的Series和DataFrame数据结构,数据读取、清洗、分组聚合、合并、时间序列分析及大数据... 目录1. Pandas 概述2. 基本操作:数据读取与查看3. 索引操作:精准定位数据4. Group

MySQL中EXISTS与IN用法使用与对比分析

《MySQL中EXISTS与IN用法使用与对比分析》在MySQL中,EXISTS和IN都用于子查询中根据另一个查询的结果来过滤主查询的记录,本文将基于工作原理、效率和应用场景进行全面对比... 目录一、基本用法详解1. IN 运算符2. EXISTS 运算符二、EXISTS 与 IN 的选择策略三、性能对比

MySQL 内存使用率常用分析语句

《MySQL内存使用率常用分析语句》用户整理了MySQL内存占用过高的分析方法,涵盖操作系统层确认及数据库层bufferpool、内存模块差值、线程状态、performance_schema性能数据... 目录一、 OS层二、 DB层1. 全局情况2. 内存占js用详情最近连续遇到mysql内存占用过高导致

深度解析Nginx日志分析与499状态码问题解决

《深度解析Nginx日志分析与499状态码问题解决》在Web服务器运维和性能优化过程中,Nginx日志是排查问题的重要依据,本文将围绕Nginx日志分析、499状态码的成因、排查方法及解决方案展开讨论... 目录前言1. Nginx日志基础1.1 Nginx日志存放位置1.2 Nginx日志格式2. 499

Olingo分析和实践之EDM 辅助序列化器详解(最佳实践)

《Olingo分析和实践之EDM辅助序列化器详解(最佳实践)》EDM辅助序列化器是ApacheOlingoOData框架中无需完整EDM模型的智能序列化工具,通过运行时类型推断实现灵活数据转换,适用... 目录概念与定义什么是 EDM 辅助序列化器?核心概念设计目标核心特点1. EDM 信息可选2. 智能类

Olingo分析和实践之OData框架核心组件初始化(关键步骤)

《Olingo分析和实践之OData框架核心组件初始化(关键步骤)》ODataSpringBootService通过初始化OData实例和服务元数据,构建框架核心能力与数据模型结构,实现序列化、URI... 目录概述第一步:OData实例创建1.1 OData.newInstance() 详细分析1.1.1

Olingo分析和实践之ODataImpl详细分析(重要方法详解)

《Olingo分析和实践之ODataImpl详细分析(重要方法详解)》ODataImpl.java是ApacheOlingoOData框架的核心工厂类,负责创建序列化器、反序列化器和处理器等组件,... 目录概述主要职责类结构与继承关系核心功能分析1. 序列化器管理2. 反序列化器管理3. 处理器管理重要方

SpringBoot中六种批量更新Mysql的方式效率对比分析

《SpringBoot中六种批量更新Mysql的方式效率对比分析》文章比较了MySQL大数据量批量更新的多种方法,指出REPLACEINTO和ONDUPLICATEKEY效率最高但存在数据风险,MyB... 目录效率比较测试结构数据库初始化测试数据批量修改方案第一种 for第二种 case when第三种

解决1093 - You can‘t specify target table报错问题及原因分析

《解决1093-Youcan‘tspecifytargettable报错问题及原因分析》MySQL1093错误因UPDATE/DELETE语句的FROM子句直接引用目标表或嵌套子查询导致,... 目录报js错原因分析具体原因解决办法方法一:使用临时表方法二:使用JOIN方法三:使用EXISTS示例总结报错原

MySQL中的LENGTH()函数用法详解与实例分析

《MySQL中的LENGTH()函数用法详解与实例分析》MySQLLENGTH()函数用于计算字符串的字节长度,区别于CHAR_LENGTH()的字符长度,适用于多字节字符集(如UTF-8)的数据验证... 目录1. LENGTH()函数的基本语法2. LENGTH()函数的返回值2.1 示例1:计算字符串