Google应用Mesh-TensorFlow框架，让CNN也能处理超高分辨率图像
ccwgpt 2025-07-28 15:47 2 浏览 0 评论
为了要处理超高分辨率医疗图像数据，Google开发了一种空间数据分区（Spatial Partition）技术，在不牺牲图像分辨率的条件下，分析超高分辨率图像。Google使用Mesh-TensorFlow框架，大幅度推进极大量数据与模型平行化的处理能力。
Google提到，虽然大型卷积神经网络（CNN）模型现在可以在数分钟内，使用数百万个图像数据进行训练，但是要在卷积神经网络上，处理3D断层扫描这类超高分辨率图像，仍然充满困难。使用现有技术，内存需要托管至少32GB的中介数据，但是单个GPU或是TPU通常只有12到32GB的内存，而典型的处理方式，是分开处理图像的补丁，不过这种方式却会因为部分信息缺失，使得性能不佳且实例复杂。
Google与Mayo Clinic合作发展的最新技术，能够突破这些限制，研究人员实例了Halo Exchange算法来跨空间分区处理卷积运算，以保留相邻分区的关系。Google以Mesh-TensorFlow作为基础，实例了高性能数据和模型平行运算。Mesh-TensorFlow是一个专门用于分布式深度学习的语言，可以根据用户定义的图像布局（Layout），分割张量到设备网状网络中。
Google举例，当用户以256个处理器创建16乘16的计算网状网络，每个处理器内置两个核心，用户可以定义布局，将图像对应到计算网状网络（下图），图像空间维度X对应到处理器列（Row）上，而将图像的空间维度Y对应至处理器行（Column），批处理的维度也就是要同时处理的图像分割（Segment）数，则对应到核心上。不过，Google表示，由于分区和训练批次的分布，是在张量层级实例，因此实际上用户不需要担心这些实例细节。
在图像执行卷积运算，通常会使用超出影格边缘的过滤器，虽然在只处理单个图像的时候，有需多方法可以解决这个问题，但是标准方法并没有考虑，超出影格边缘的分割图像信息，仍然是有用的信息，Google提到，为了获得准确的结果，对经空间分区且于处理器间重新分散的图像，进行卷积运算，必须考虑每个图像分割的邻居。
Google的解决方案是实例称为Halo Exchange的算法，来处理图像分割邻居间的数据交换；在每次卷积运算之前，每个空间分区都会与邻居交换边距，以便有效地在边缘扩展图像分割。接下来，卷积运算会局部地应用到每个设备上，确保整个图像的卷积网络结果，无论有没有空间分区都是相同的。
借由这个技术，研究人员现在能以256向的模型平行化（Model Parallelism），使用每个维度超过512像素的3D图像，来训练3D U-Net，研究人员也已将这个框架用在肝肿瘤断层扫描上，证明其可行性。同时Google也发布基于Mesh-TensorFlow的框架，供研究社群使用。
相关推荐
- VUE3前端开发入门系列教程二:使用iView框架辅助开发
-
1、安装iView新框架，支持VUE3npminstallview-ui-plus2、编辑src/main.js，添加以下内容，导入js和css到项目importViewUIPlusfrom...
- 万能前端框架uni app初探03:底部导航开发
-
前言本节我们使用uniapp的底部导航功能，点击不同tab会显示不同页面，这个功能在实际项目开发中几乎是必备的。一、基础知识1.tabBar如果应用是一个多tab应用，可以通过tabBar配...
- Rust Web 开发框架，前端你可以选择哪个?
-
Rust构建一切。在如今流行的语言中，Rust可谓是将构建和高效作为自己优美的身姿在大众视野中脱颖而出。它是一门赋予每个人构建可靠且高效软件能力的语言。它有什么特性呢？高性能。Rust速度惊人且内...
- 连载:前端开发中纠结的Javascript框架(上)
-
如今，前端开发有着许许多多的框架和库。其中一些好用，一些却不尽人意。通常我们会习惯性运用某一概念，模块或句法。事实上，并没有什么万能工具。这篇文章是关于未来框架的发展趋势——那就是没有框架！我从以下几...
- 前端开发框架的演进架构:提升用户体验和开发效率
-
前端开发框架是现代Web应用开发的重要工具，它不仅可以帮助开发者构建复杂的用户界面，还能够提升用户体验和开发效率。随着Web技术的不断发展，前端开发框架也在不断演进，为开发者提供了更丰富、更高效的工具...
- Google应用Mesh-TensorFlow框架，让CNN也能处理超高分辨率图像
-
为了要处理超高分辨率医疗图像数据，Google开发了一种空间数据分区（SpatialPartition）技术，在不牺牲图像分辨率的条件下，分析超高分辨率图像。Google使用Mesh-TensorF...
- 大模型安全挑战加剧:框架层漏洞成新靶心
-
近日，360数字安全集团发布了一份关于大模型安全漏洞的报告，揭示了当前大模型及围绕其构建的框架和应用中存在的严重安全问题。报告显示，360近期研究发现了近40个大模型相关的安全漏洞，其中既包括二进制内...
- Keras 3.0正式发布:可用于TensorFlow、JAX和PyTorch
-
机器之心报道编辑：陈萍经过5个月的更新迭代，Keras3.0终于来了。「大新闻：我们刚刚发布了Keras3.0版本！」Keras之父FrancoisChollet在X上激动的...
- TensorFlow和Keras入门必读教程（tensorflow与keras版本对应）
-
导读：本文对TensorFlow的框架和基本示例进行简要介绍。作者：本杰明·普朗什（BenjaminPlanche）艾略特·安德烈斯（EliotAndres）来源：华章科技01TensorFlo...
- 谷歌官方回应“TensorFlow遭弃”:还在投资开发，将与JAX并肩作战
-
鱼羊发自凹非寺量子位|公众号QbitAI终于，谷歌出面回应“TensorFlow遭弃”传闻：我们将继续致力于将TensorFlow打造为一流机器学习平台，与JAX并肩推动机器学习研究。这段时...
- 2025 年的PHP :现代 Web 开发的强大引擎
-
程序员还在吐槽PHP过时？2025年的PHP8.4直接封神了。看看最近更新的属性钩子、强类型系统，加上Laravel这些框架，老语言早就脱胎换骨。十年前说PHP弱类型容易崩代码的，现在脸疼不？联合类...
- 前端内卷终结者?htmx如何让开发者告别200行JS只做一个按钮
-
当你用React写一个点赞按钮需要引入3个状态管理库、编写80行JSX和120行钩子函数时，htmx只需要一行HTML：<buttonhx-post="/like"hx-sw...
- NativePHP桌面版V1.0正式发布（元气桌面电脑版下载）
-
导读：各位小伙伴，使用PHP构建桌面级系统的利器，NativePHP来了。概述NativePHP是一个用于使用PHP构建桌面应用的框架。它允许PHP开发人员使用熟悉的工具和技术创建跨平台的原生应用...
- PHP Laravel框架底层机制（php基本框架）
-
当然可以，Laravel是最受欢迎的PHP框架之一，以优雅的语法和丰富的生态而闻名。尽管开发体验非常“高端”，它的底层其实是由一系列结构清晰、职责分明的组件构成的。下面我从整体架构、核心流程、...
- PHP框架之Laravel框架教程:2. 控制器、路由、视图简单介绍
-
2.控制器、路由、视图简单介绍我们先建立控制器，目录是：app/Http/Controllers，新建控制器Ding.php，代码如下：Ding.php:<?phpnamespaceA...
欢迎 你 发表评论:
- 一周热门
- 最近发表
-
- VUE3前端开发入门系列教程二:使用iView框架辅助开发
- 万能前端框架uni app初探03:底部导航开发
- Rust Web 开发框架，前端你可以选择哪个?
- 连载:前端开发中纠结的Javascript框架(上)
- 前端开发框架的演进架构:提升用户体验和开发效率
- Google应用Mesh-TensorFlow框架，让CNN也能处理超高分辨率图像
- 大模型安全挑战加剧:框架层漏洞成新靶心
- Keras 3.0正式发布:可用于TensorFlow、JAX和PyTorch
- TensorFlow和Keras入门必读教程（tensorflow与keras版本对应）
- 谷歌官方回应“TensorFlow遭弃”:还在投资开发，将与JAX并肩作战
- 标签列表
-
- 框架图 (58)
- flask框架 (53)
- quartz框架 (51)
- abp框架 (47)
- jpa框架 (47)
- springmvc框架 (49)
- 分布式事务框架 (65)
- scrapy框架 (56)
- shiro框架 (61)
- 定时任务框架 (56)
- java日志框架 (61)
- JAVA集合框架 (47)
- mfc框架 (52)
- abb框架断路器 (48)
- beego框架 (52)
- java框架spring (58)
- grpc框架 (65)
- tornado框架 (48)
- 前端框架bootstrap (54)
- orm框架有哪些 (51)
- ppt框架 (48)
- 内联框架 (52)
- cad怎么画框架 (58)
- ssm框架实现登录注册 (49)
- oracle字符串长度 (48)