科学家介绍数据处理新工具

来自哈佛大学，Broad研究院的研究人员发表了题为“Detecting novel associations in large data sets Science”的文章，介绍了一种强大的在庞大数据集中发现潜在重要关系的统计方法，这种方法能快速通过给不同类型关联进行评估，从而发现广泛范围的关系类型，这将有助于生物学，及其它学科的研究，相关成果公布在Science杂志上。文章的第一作者是哈佛大学，麻省理工健康科学与技术组的David N. Reshef，以及Yakir A. Reshef，前者表示，“标准的方法只能通过一种模式观察一种信号，而把其它作为了背景”，“但是关系数据集中存在许多不同类型的关联，我们的这种方法令人激动之处在于它能寻找任何类型数据清楚结构，并尝试发现它们。” 现代社会充斥着各种各样的信息，生命科学领域尤其是在测序技术飞速发展以来，获得了大量的DNA基因组信息，比如国内的华大基因，据称其167台DNA组序器每天制造着相当于2000人的基因组，如此多的基因组使测序机构常常很难通过互联网或其他通讯线路将这些结果传送给客户或是合作伙伴，因为这需要几周时间，因此出现了通过快递邮寄包含了这些数据的电脑磁盘的现象。而且如果需要从这些庞大的数据集里找到其中的关联，更加是令人感到头疼，在这篇文章中，研究人员提出了一种在庞大的数据集中发现潜在重要关系的强有力的统计方法。利用这种方法——被称为MINE，研究人员无需事前对其寻找的关系类型有所了解，就检测由多种因素驱动的复杂模式。MINE基于最大信息系数（MIC），其依据的理念是，如果2个变量之间存在着一种关系，那么就应该有一种方法在那些变量的散点图上画一个网格，使得大多数的数据点集中在该网格的几个单元格中。通过搜寻这种“最适合”的网格，计算机可以计算MIC及一族可用来发现并描绘关系的相关的统计数据。研究人员将MINE方法与其它的方法进行了比较，结果发现MINE更适合于作快速的数据探索。他们利用这一方法，揭示了4例真正的数据集中的熟悉的和先前未知的关系：世界卫生数据、棒球统计数据、酵母菌基因表达数据及一组人类肠道中细菌丰度的数据。同期Science观点栏目也对这一研究进行了讨论，并回顾了相关系数的历史，该历史以1888年由查尔斯-达尔文的半表亲Francis Galton所发明的相关系数开始。近期值得关注的还有，由中国科学家主导的研究完成了50个水稻基因组重测序及遗传变异数据库构建等，这首次对栽培稻和野生稻基因组进行了大规模的遗传变异分析，为科学家深入挖掘水稻重要农艺性状基因及促进水稻分子育种改良等研究提供了宝贵的基因资源。（来源：生物通万纹）