使用clesperanto进行仿射变换#

这个notebook演示了如何对3D图像应用仿射变换。

import pyclesperanto_prototype as cle

cle.select_device('TX')
<NVIDIA GeForce GTX 1650 with Max-Q Design on Platform: NVIDIA CUDA (1 refs)>
import numpy as np
import matplotlib
import matplotlib.pyplot as plt
from skimage.io import imread
# 加载示例数据
np_array = imread('../../data/Haase_MRT_tfl3d1.tif')
np_array.shape
(192, 256, 256)
# 将其推送到GPU内存
input_image = cle.push_zyx(np_array)

cle.imshow(input_image)
../_images/281e43ff45adbeef88ee10bfd05ebeb81f145c67d81c4a8e48939ea501006835.png

旋转#

要旋转图像,你需要提供对应于轴的角度。

rotated = cle.rotate(input_image, angle_around_z_in_degrees=45)
cle.imshow(rotated)
../_images/119e50d78e215eda2bc974f4a5a42d203ae3e21e1ed683d75f9678659d029c17.png

默认情况下,图像围绕其中心旋转。你可以通过提供额外的参数来改变这一点。然后图像将围绕原点旋转。

rotated = cle.rotate(input_image, angle_around_z_in_degrees=15, rotate_around_center=False)
cle.imshow(rotated)
../_images/3791ad32a5b98b994cde602e851ce872b1d3b109313a83c8b314b24d1f41ae56.png

平移#

通过提供沿轴的平移距离可以平移图像:

translated = cle.translate(input_image, translate_x=50, translate_y=-50)
cle.imshow(translated)
../_images/78833893e8baf0bdd071981d85eaefa4453bfe02a3c630a0538db90e5b8d28ff.png

缩放#

你可以通过提供缩放因子来缩放图像。

scaled = cle.scale(input_image, factor_x=0.5, factor_y=2)
cle.imshow(scaled)
../_images/c79d880c574fbf1179e783693fc82fcfc3b9591fe4702c3dc7dacacb83e9913e.png

在这种情况下,auto_size参数可能会很有用:

scaled_auto_size = cle.scale(input_image, factor_x=0.5, factor_y=2, auto_size=True)
cle.imshow(scaled_auto_size)
../_images/a598f11f91d0c966c5afe2ca9ba429969964148876319206692b60db6fc33973.png

刚体变换#

刚体变换允许一次性进行平移和旋转

rigid_transformed = cle.rigid_transform(input_image, translate_x=50, angle_around_z_in_degrees=45)
cle.imshow(rigid_transformed)
../_images/32cb5d2696f9ba0ce95cc0e669330529cf2f1faf97bbe0c37583a2ac57911ea1.png

仿射变换#

要一次性进行平移、旋转、缩放和剪切,请使用仿射变换。

要设置仿射变换,你可以使用4x4变换矩阵:

transform_matrix = np.asarray([
    [1, 0, 0, 50],
    [0, 2, 0, 0],
    [0, 0, 0.5, 0],
    [0, 0, 0, 1]
])
transformed_image = cle.affine_transform(input_image, transform=transform_matrix)
cle.imshow(transformed_image)
../_images/e1b51b7631cf6154c54ca8f5e6f8390b44a694f4798c67a7765194fdd11ff93e.png

或者,你可以配置一个变换对象并传递它:

transform = cle.AffineTransform3D()
transform.translate(50)
transform.scale(1, 2, 0.5)

transformed_image = cle.affine_transform(input_image, transform=transform)
cle.imshow(transformed_image)
../_images/e1b51b7631cf6154c54ca8f5e6f8390b44a694f4798c67a7765194fdd11ff93e.png

剪切#

提供剪切角度将在所需平面上剪切图像

剪切是使用以下公式通过剪切角度计算的:

1.0/ tan(shear_angle_in_degrees * pi / 180)

#例如,要在YZ平面上沿Y轴剪切图像,使用30度的剪切角度

shear_angle = 30.0

transform = cle.AffineTransform3D()
shear_transform= transform.shear_in_z_plane(angle_y_in_degrees=shear_angle)

transformed_image = cle.affine_transform(input_image, transform=shear_transform)

##在每个平面上显示图像
print("yz")
cle.imshow(cle.maximum_x_projection(transformed_image))
print("xz")
cle.imshow(cle.maximum_y_projection(transformed_image))
print("xy")
cle.imshow(cle.maximum_z_projection(transformed_image))
yz
../_images/4523d6990ba754f2d5ca5a32de06d4d13e711df4a453cc210d2ce93bdfe71f7d.png
xz
../_images/00653f97f42feb8ebadff81de25ef94fb184e8285280c07ceb5a525d777a524b.png
xy
../_images/403ea6862c2336bbc1e3f1f296c051748ee6a028973b21dfe8e1b06fa877dcff.png

线性插值与最近邻插值#

让我们裁剪鼻子并使用不同的插值模式对其进行变换。

crop = input_image[50,125:150,45:70]

cle.imshow(crop)
../_images/3b4231a7c79b129f5c0ba17b61b4f264c8da1d448f01d1feb2e4b68e82a11aeb.png

最近邻插值#

# 创建一个更大的图像
rescaled = cle.create(np.asarray(crop.shape) * 10)

# 用图像的缩放版本填充它;
cle.scale(crop, rescaled, factor_x=10, factor_y=10, factor_z=10, linear_interpolation=False)
cle.imshow(rescaled)
../_images/20fb59a4995d29c6a0ebe6e2f230b94fe52c18e90a1b0eaf9ecd9782498a37d9.png

线性插值#

# 用图像的缩放版本填充它;
cle.scale(crop, rescaled, factor_x=10, factor_y=10, factor_z=10, linear_interpolation=True)
cle.imshow(rescaled)
../_images/5e39ac2af19022da0e0039f54d9a76e05a51b15c317bddde82001dc4cf1f86c0.png