利用python中的pysam模块做一些简单的数据统计(BAM文件)

说点闲话

起因是因为有个朋友问我能不能处理BAM文件,我找了一下python的确有处理BAM文件的模块,在没有搞清楚能不能做的情况下,我说可以没问题,这B可装上了天。
然后,这B是哭着也要装下去了。
首先了解一下pysam和BAM是干啥的:
python读写处理模块pysam是在开发基因组相关流程或工具时,经常需要读取、处理和创建bam、vcf、bcf文件。它打包了htslib-1.3、samtools-1.3 和 bcftools-1.3的核心功能,能在编程时非常灵活的处理bam和bcf文件。
简单来说就是一个存取数据库一样的东西,利用pysam功能可以实现提取文本,OK。

一、安装环境部署

打开cmd然后

pip install pysam
C:\Users\hasee>pip install pysam
Collecting pysam
  Using cached https://files.pythonhosted.org/packages/73/59/c319f1bde3019bbce4583cecb12b9e3e52ffcfbe2c96d8b1fb131c0d4fb7/pysam-0.15.1.tar.gz
    Complete output from command python setup.py egg_info:
    '.' 不是内部或外部命令,也不是可运行的程序
    或批处理文件。
    '.' 不是内部或外部命令,也不是可运行的程序
    或批处理文件。
    # pysam: no cython available - using pre-compiled C
    # pysam: htslib mode is shared
    # pysam: HTSLIB_CONFIGURE_OPTIONS=None
    # pysam: htslib configure options: None
    Traceback (most recent call last):
      File "<string>", line 1, in <module>
      File "C:\Users\hasee\AppData\Local\Temp\pip-install-pgf7vjf2\pysam\setup.py", line 223, in <module>
        htslib_make_options = run_make_print_config()
      File "C:\Users\hasee\AppData\Local\Temp\pip-install-pgf7vjf2\pysam\setup.py", line 69, in run_make_print_config
        stdout = subprocess.check_output(["make", "-s", "print-config"])
      File "c:\python37\lib\subprocess.py", line 376, in check_output
        **kwargs).stdout
      File "c:\python37\lib\subprocess.py", line 453, in run
        with Popen(*popenargs, **kwargs) as process:
      File "c:\python37\lib\subprocess.py", line 756, in __init__
        restore_signals, start_new_session)
      File "c:\python37\lib\subprocess.py", line 1155, in _execute_child
        startupinfo)
    FileNotFoundError: [WinError 2] 系统找不到指定的文件。

    ----------------------------------------
Command "python setup.py egg_info" failed with error code 1 in C:\Users\hasee\AppData\Local\Temp\pip-install-pgf7vjf2\pysam\
You are using pip version 18.0, however version 18.1 is available.
You should consider upgrading via the 'python -m pip install --upgrade pip' command.

报错,细读错误,WinError 2找不到指定文件,一番周折,上pip官网发现了问题所在
111.png

pysam只支持linux系统下运行,在WIN下缺少DLL文件启动。没办法,只好安装虚拟机和Linux(我用的是ubuntu)在虚拟环境下工作
在准备开发环境前,先试试能不能安装pysam
打开terminal

pip install pysam
Installing collected packages: pysam
Successfully installed pysam-0.15.1

安装成功,OK,终于开始紧锣密鼓的部署开发环境。这里不得不提又来一个坑ubuntu自带pip和python,在我安装好pycharm之后,pycharm无法识别我已经安装好的pysam,我们必须用pip3 install pysam不然他会在原生的python2里面安装。至此,部署环境结束。

任务需求

对BAM文件进行分析,提取所有目标序列,并计算仪器检测上下限GC含量的最大值,最少值。

程序

我直接上最后的程序吧

import pysam
import re

def GC_squence(path_in):
    samfile = pysam.AlignmentFile(path_in, "rb")
    number = 0
    total_GC_MAX = 0 #GC含量最大值計數
    total_GC_MIN = 1 #GC含量最小值計數
    number_lose= []  #提取失敗序列統計
    for line in samfile:
        number += 1
        if number < 100:
            squence = (re.findall("[AGCT][AGCT][AGCT].*[AGCT][AGCT][AGCT]",str(line))) #提取目標序列
            print(squence)
            str_squence = " ".join(squence)
            total_squence =len(str_squence) #統計序列長度
            if total_squence < 400:
                print("序列長度:",total_squence)
                find_G = re.findall("G",str_squence)
                total_fin_G =len(find_G) #統計G數量
                print("C數量",total_fin_G)
                find_C = re.findall("C",str_squence)
                total_fin_C = len(find_C)  # 統計C數量
                print("G數量",total_fin_C)
                total_GC = (int(total_fin_G )+ int(total_fin_C))/int(total_squence) #計算GC含量
                print(number,total_GC)
            else:
                number_lose.append(number)
        if total_GC > total_GC_MAX:
            total_GC_MAX = total_GC
            number_MAX =number
        if total_GC_MIN > total_GC:
            total_GC_MIN = total_GC
            number_MIN = number
    print("統計總條數%s,最大GC含量%s,編號%s,最小GC含量%s,編號%s,"%(number,total_GC_MAX,number_MAX,total_GC_MIN,number_MIN))
    print("提取失敗序列合計%s條,編號爲%s:"%(len(number_lose),number_lose))

if __name__ == '__main__':
        path_in = "/home/charmflystar/桌面/LibPrep70_rawlib.bam"#導入BAM文件地址
        GC_squence(path_in)

试了一下pysam的内置函数,所有内置函数得到结果均为空,但能正常读取序列,最后决定放弃该功能,直接使用正则提取序列。
但是正则提取序列偶尔会出现错误的读长,研究一天依然原因未明。因损失数据为极少量,最后采取跳过策略。

结果

99999 0.6652173913043479 
統計總條數1853129,最大GC含量0.8928571428571429,編號85128,最小GC含量0.25,編號63095,
提取失敗序列合計108條,編號爲[1897, 2496, 4247, 4357, 4358, 6860, 11949, 12256, 14237, 15802, 16103, 16112, 16114, 17869, 20134, 23055, 23075, 23102, 23127, 23130, 23135, 23145, 23147, 23152, 23153, 23158, 23161, 23162, 23168, 23169, 23173, 23177, 23179, 23180, 23193, 23198, 23206, 23207, 23210, 23220, 23223, 23231, 23232, 23234, 23239, 23244, 23245, 23247, 23248, 23249, 24120, 30210, 30897, 32018, 36447, 39740, 41929, 45007, 45860, 48468, 48502, 48506, 48518, 48525, 48526, 48579, 48582, 49108, 49330, 52864, 53812, 55594, 55626, 55634, 55653, 55664, 55674, 62145, 62949, 62975, 64321, 64856, 64994, 68642, 69522, 71159, 72266, 73190, 75649, 76752, 80220, 82459, 88235, 88255, 88323, 88638, 90107, 90302, 91539, 91576, 91592, 91594, 95568, 95570, 97141, 98528, 99253, 99274]:
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 160,277评论 4 364
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 67,777评论 1 298
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 109,946评论 0 245
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 44,271评论 0 213
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 52,636评论 3 288
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 40,767评论 1 221
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 31,989评论 2 315
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 30,733评论 0 204
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 34,457评论 1 246
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 30,674评论 2 249
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 32,155评论 1 261
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 28,518评论 3 258
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 33,160评论 3 238
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 26,114评论 0 8
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 26,898评论 0 198
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 35,822评论 2 280
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 35,705评论 2 273

推荐阅读更多精彩内容