网站开发禁止下载功能,wordpress获取当前栏目文章列表,国内做网站的顶尖公司,做网站网络来源#xff1a;ScienceAI编辑#xff1a;陈萍、杜伟如今#xff0c;在蛋白质结构预测领域#xff0c;各大厂也出现了「百家争鸣#xff0c;百家齐放」。今年#xff0c;DeepMind 公布了大约 2.2 亿种蛋白质的预测结构#xff0c;它几乎涵盖了 DNA 数据库中已知生物体的…来源ScienceAI编辑陈萍、杜伟如今在蛋白质结构预测领域各大厂也出现了「百家争鸣百家齐放」。今年DeepMind 公布了大约 2.2 亿种蛋白质的预测结构它几乎涵盖了 DNA 数据库中已知生物体的所有蛋白质。现在另一家科技巨头 Meta 正在填补另一空白微生物领域。简单来说Meta 使用 AI 技术预测了约 6 亿种蛋白质结构这些蛋白质来自细菌、病毒和其他尚未被表征的微生物。团队负责人 Alexander Rives 表示「这些蛋白质是我们所知最少的结构它们是非常神秘的蛋白质。我认为这些发现为深入了解生物学提供了潜力。」通常语言模型是在大量文本上进行训练的。Meta 为了将语言模型应用于蛋白质Rives 的研究小组将已知的蛋白质序列作为输入这些蛋白质由 20 种氨基酸组成并用不同的字母表示。然后该网络在遮蔽一定比例氨基酸的情况下学会了自动补全蛋白质。Meta 将这个网络命名为 ESMFold。虽然 ESMFold 预测准确性不如 AlphaFold但在预测结构方面它比 AlphaFold 快约 60 倍。这一速度意味着可以将蛋白质结构预测扩展到更大的数据库。论文地址https://www.biorxiv.org/content/10.1101/2022.07.20.500902v2项目地址https://github.com/facebookresearch/esm如今作为测试Meta 决定将他们的模型应用于宏基因组 DNA 数据库这些 DNA 全部来自环境包括土壤、海水、人类肠道、皮肤和其他微生物栖息地。Meta AI 宣布推出包含 6 亿多个蛋白质的 ESM 宏基因组图谱ESM Metagenomic Atlas它是首个蛋白质宇宙「暗物质」的综合视图。这还是最大的高分辨率预测结构数据库比任何现有的蛋白质结构数据库都要大 3 倍并且是第一个全面、大规模地涵盖宏基因组蛋白质的数据库。Meta 团队总共预测了超过 6.17 亿个蛋白质结构只花了两周的时间。Rives 说预测是免费的任何人都可以使用就像模型的底层代码一样。交互版本地址https://esmatlas.com/explore?at1%2C1%2C21.999999344348925举例而言下图为 ESMFold 对 PET 酶的预测。引言众所周知蛋白质作为复杂且动态的分子其由基因编码主要负责生命基本过程。蛋白质在生物学中有着惊人作用。比如人类眼睛中的视杆和视锥细胞可以感知光线因而我们能看到外面的世界构成听觉和触觉基础的分子传感器植物中把光能转化为化学能的复杂分子驱动微生物和人类肌肉运动的「马达」分解塑料的酶保护我们免受疾病的抗体等等这些都是蛋白质。1998 年来自威斯康辛大学植物病理学部门的 Jo Handelsman 首次提出宏基因组学Metagenomics这一概念它是源于将来自环境中基因集可以在某种程度上当成单个基因组研究分析的想法。宏基因组学揭示了数十亿个对科学来说是新的蛋白质序列并首次编入由 NCBI、欧洲生物信息学研究所 (European Bioinformatics Institute) 和联合基因组研究所 (Joint Genome Institute) 等公共项目编制的大型数据库中。Meta AI 开发的新的蛋白质折叠方法该方法利用大型语言模型在宏基因组数据库中具有数亿蛋白质创建了首个全面的蛋白质结构视图。Meta 发现相对于现有的 SOTA 蛋白质结构预测方法语言模型可以将预测蛋白质原子级三维结构的速度提高 60 倍。这一进展将有助于加速蛋白质结构理解的新时代这是首次人类有可能了解基因测序技术正在编目的数十亿蛋白质的结构。解锁隐藏的自然世界宏基因组结构空间的首个综合视图我们知道基因测序的进步使得对数十亿个宏基因组蛋白序列进行编目成为可能。但是通过实验确定数以亿计蛋白质的 3D 结构远远超出了时间密集型实验室技术的范围例如 X 射线晶体学它可能需要数周乃至数年的时间来检测单个蛋白质。计算方式可以让我们深入了解使用实验技术无法实现的宏基因组学蛋白质。ESM 宏基因组图谱将使科学家能够在数亿蛋白质的尺度上搜索和分析宏基因组蛋白质的结构。这可以帮助识别以前未被表征的结构寻找遥远的进化关系并发现可用于医学和其他应用的新蛋白质。如下为一张包含数以万计高置信度预测的图谱展示了与目前已知结构的蛋白质的相似性。并且该图像首次显示了完全未知的蛋白质结构空间的更大区域。学习阅读生物学语言如下图所示ESM-2 语言模型经过训练可以预测进化过程中被序列掩盖的氨基酸。Meta AI 发现作为训练的结果蛋白质结构的信息出现在该模型的内部状态中。这实在令人惊讶因为该模型仅在序列上进行了训练。就像论文或信件的文本一样蛋白质可以写成字符序列。其中每个字符对应 20 种标准化学元素氨基酸中的一种每种又具有不同的特性它们是蛋白质的构建块。这些构建块能够以天文数字的不同方式组合在一起例如对于由 200 个氨基酸组成的蛋白质存在 20^200 个可能的序列这要比可见宇宙中的原子数量还要多。每个序列都折叠成 3D 形状但并非所有序列都会折叠成连贯的结构许多序列折叠成无序形式正是这种形状在很大程度上决定了蛋白质的生物学功能。学习阅读这种生物学语言带来了很大挑战。虽然蛋白质序列和文本段落都可以写成字符但它们之间存在着深刻而根本性的差异。蛋白质序列描述了一个分子的化学结构该分子根据物理定律折叠成复杂的 3D 形状。蛋白质序列包含了传递蛋白质折叠结构信息的统计模式。举例而言如果一个蛋白质中的两个位置共同进化或者换言之如果其中一个位置出现某种氨基酸通常与另一个位置的某种氨基酸配对这可能意味着这两个位置在折叠结构中相互作用。这类似于拼图游戏中的两块拼图进化必须选择在折叠结构中拼合在一起的氨基酸。这又意味着我们通常可以通过观察蛋白质序列中的模式来推断蛋白质的结构。ESM 使用 AI 来学习阅读这些模式。2019 年Meta AI 提供证据证明语言模型学习了蛋白质的特性例如它们的结构和功能。通过一种被称为掩码语言建模的自我监督学习形式Meta AI 在数百万个天然蛋白质的序列上训练了一个语言模型。使用这种方法模型必须正确填写文本段落中的空白例如「To _ or not to , that is the _____」。之后Meta AI 训练了一个语言模型来填补蛋白质序列中的空白。他们发现蛋白质结构和功能的信息在这一训练中浮现了出来。2020 年Meta 发布了一个 SOTA 蛋白质语言模型 ESM1b用于各种应用包括帮助科学家预测 COVID-19 的演变以及发现疾病的遗传原因。现在Meta AI 扩展了这种方法用来创建下一代蛋白质语言模型 ESM-2它的参数为 150 亿是迄今为止最大的蛋白质语言模型。他们发现当模型参数从 800 万放大到 150 亿时内部表示中会出现信息从而能够以原子分辨率进行 3D 结构预测。将蛋白质折叠实现数量级加速在下图中随着模型的扩大高分辨率的蛋白质结构出现。同时随着模型的缩放蛋白质结构的原子分辨率图像中会出现新的细节。使用当前 SOTA 计算工具在实际时间范围内预测数亿蛋白质序列结构可能花费数年时间即便用上主要研究机构的资源也是如此。因此想要在宏基因组尺度上进行预测预测速度的突破至关重要。Meta AI 发现使用蛋白质序列的语言模型大大加快了结构预测的速度最高提升 60 倍。这足以在短短几周内对整个宏基因组数据库做出预测并且可以扩展到比我们当前发布的数据库大得多的数据库。事实上这种新的结构预测能力能够在短短两周内在大约 2000 个 GPU 组成的集群上预测超过 6 亿多个宏基因组蛋白的序列。此外当前 SOTA 结构预测方法需要搜索大型蛋白质数据库以识别相关序列。这些方法实际上需要一整组进化相关的序列作为输入以便它们可以提取与结构相关的模式。Meta AI 的 ESM-2 语言模型在其对蛋白质序列的训练过程中学习这些进化模式进而能够直接从蛋白质序列中对 3D 结构进行高分辨率预测。下图展示了使用 ESM-2 语言模型进行蛋白质折叠。箭头从左到右显示了网络中从语言模型到折叠 trunk 再到结构模块的信息流最后输出 3D 坐标和置信度。更多详细内容请参阅原文。博客链接https://ai.facebook.com/blog/protein-folding-esmfold-metagenomics/未来智能实验室的主要工作包括建立AI智能系统智商评测体系开展世界人工智能智商评测开展互联网城市大脑研究计划构建互联网城市大脑技术和企业图谱为提升企业行业与城市的智能水平服务。每日推荐范围未来科技发展趋势的学习型文章。目前线上平台已收藏上千篇精华前沿科技文章和报告。 如果您对实验室的研究感兴趣欢迎加入未来智能实验室线上平台。扫描以下二维码或点击本文左下角“阅读原文”
