快捷方式

LazyStackedTensorSpec

class torchrl.data.LazyStackedTensorSpec(*args, **kwargs)[source]

torchrl.data.Stacked 的已棄用版本。

assert_is_in(value: Tensor) None

斷言張量是否在其範圍內,如果不屬於則丟擲異常。

引數:

value (torch.Tensor) – 待檢查的值。

cardinality(*args, **kwargs) Any

規格的基數。

這指的是規格中可能結果的數量。複合規格的基數假定為所有可能結果的笛卡爾積。

clear_device_()

清除複合物件的裝置。

clone() T

建立 TensorSpec 的副本。

contains(item: torch.Tensor | TensorDictBase) bool

如果值 val 可以由 TensorSpec 生成,則返回 True,否則返回 False

更多資訊請參閱 is_in()

cpu()

將 TensorSpec 轉換為 'cpu' 裝置。

cuda(device=None)

將 TensorSpec 轉換為 'cuda' 裝置。

property device: Union[device, str, int]

規格的裝置。

只有 Composite 規格可以擁有 None 裝置。所有葉節點必須擁有非空裝置。

encode(val: Union[ndarray, Tensor], *, ignore_device=False) Tensor

根據指定的規格編碼值,並返回相應的張量。

此方法用於那些返回可以輕鬆對映到 TorchRL 所需域的值(例如 numpy 陣列)的環境。如果值已是張量,則規格不會改變其值,並原樣返回。

引數:

val (np.ndarray or torch.Tensor) – 待編碼為張量的值。

關鍵字引數:

ignore_device (bool, optional) – 如果為 True,則忽略規格裝置。這用於將張量轉換分組到 TensorDict(..., device="cuda") 呼叫中,這樣更快。

返回值:

與所需張量規格匹配的 torch.Tensor。

enumerate() torch.Tensor | TensorDictBase

返回可以從 TensorSpec 中獲取的所有樣本。

樣本將沿第一維堆疊。

此方法僅針對離散規格實現。

expand(*shape)

返回具有擴充套件形狀的新規格。

引數:

*shape (tuple or iterable of int) – 規格的新形狀。必須與當前形狀可廣播:其長度必須至少與當前形狀長度相同,並且其最後一個值也必須相容;也就是說,它們只能在當前維度是單例時與當前形狀不同。

flatten(start_dim: int, end_dim: int) T

展平 TensorSpec

有關此方法的更多資訊,請查閱 flatten()

classmethod implements_for_spec(torch_function: Callable) Callable

為 TensorSpec 註冊一個 torch 函式重寫。

index(index: INDEX_TYPING, tensor_to_index: torch.Tensor | TensorDictBase) torch.Tensor | TensorDictBase

對輸入張量進行索引。

此方法用於編碼一個或多個分類變數(例如 OneHotCategorical)的規格,以便在不關心索引的實際表示的情況下對具有樣本的張量進行索引。

引數:
  • index (int, torch.Tensor, slice or list) – 張量的索引

  • tensor_to_index – 待索引的張量

返回值:

索引後的張量

示例
>>> from torchrl.data import OneHot
>>> import torch
>>>
>>> one_hot = OneHot(n=100)
>>> categ = one_hot.to_categorical_spec()
>>> idx_one_hot = torch.zeros((100,), dtype=torch.bool)
>>> idx_one_hot[50] = 1
>>> print(one_hot.index(idx_one_hot, torch.arange(100)))
tensor(50)
>>> idx_categ = one_hot.to_categorical(idx_one_hot)
>>> print(categ.index(idx_categ, torch.arange(100)))
tensor(50)
is_in(value) bool

如果值 val 可以由 TensorSpec 生成,則返回 True,否則返回 False

更精確地說,is_in 方法檢查值 val 是否在 space 屬性定義的限制(範圍 box)內,以及 dtypedeviceshape 和其他可能的元資料是否與規格的匹配。如果其中任何一項檢查失敗,is_in 方法將返回 False

引數:

val (torch.Tensor) – 待檢查的值。

返回值:

指示值是否屬於 TensorSpec 範圍(box)的布林值。

make_neg_dim(dim: int)

將特定維度轉換為 -1

property ndim

規格形狀的維度數量。

len(spec.shape) 的快捷方式。

ndimension()

規格形狀的維度數量。

len(spec.shape) 的快捷方式。

one(shape: Optional[Size] = None) TensorDictBase

在範圍內(box)返回一個全為 1 的張量。

注意

儘管不能保證 1 屬於規格域,但在違反此條件時,此方法不會引發異常。one 方法的主要用例是生成空資料緩衝區,而不是有意義的資料。

引數:

shape (torch.Size) – 全為 1 張量的形狀

返回值:

在 TensorSpec 範圍內(box)抽樣的全為 1 的張量。

ones(shape: torch.Size = None) torch.Tensor | TensorDictBase

one() 的代理。

project(val: torch.Tensor | TensorDictBase) torch.Tensor | TensorDictBase

如果輸入張量不在 TensorSpec 範圍內(box)內,則根據一些定義的啟發式方法將其映射回範圍內。

引數:

val (torch.Tensor) – 待對映到範圍(box)的張量。

返回值:

屬於 TensorSpec 範圍(box)的 torch.Tensor。

rand(shape: Optional[Size] = None) TensorDictBase

在規格定義的空間中返回一個隨機張量。

除非範圍(box)無界,此時將抽取正態分佈的值,否則將在空間上均勻取樣。

引數:

shape (torch.Size) – 隨機張量的形狀

返回值:

在 TensorSpec 範圍(box)中抽樣的隨機張量。

reshape(*shape) T

重塑 TensorSpec

有關此方法的更多資訊,請查閱 reshape()

sample(shape: torch.Size = None) torch.Tensor | TensorDictBase

在規格定義的空間中返回一個隨機張量。

詳情請參閱 rand()

squeeze(dim: Optional[int] = None)

返回一個移除所有大小為 1 的維度的新規格。

當指定 dim 時,僅在該維度上執行 squeeze 操作。

引數:

dim (int or None) – 應用 squeeze 操作的維度

to(dest: Union[dtype, device, str, int]) T

將 TensorSpec 轉換為裝置或 dtype。

如果沒有進行更改,則返回相同的規格。

to_numpy(val: Tensor, safe: Optional[bool] = None) dict

返回輸入張量對應的 np.ndarray

這旨在作為 encode() 的逆操作。

引數:
  • val (torch.Tensor) – 待轉換為 numpy 的張量。

  • safe (布林值) – 布林值,指示是否應針對 spec 的域對值執行檢查。預設使用 CHECK_SPEC_ENCODE 環境變數的值。

返回值:

一個 np.ndarray。

type_check(value: torch.Tensor, key: NestedKey | None = None) None

檢查輸入值的 dtype 是否與 TensorSpecdtype 匹配,如果不匹配則引發異常。

引數:
  • value (torch.Tensor) – 需要檢查 dtype 的張量。

  • key (str, 可選) – 如果 TensorSpec 包含鍵,則將根據指定鍵指向的 spec 檢查值的 dtype。

unflatten(dim: int, sizes: Tuple[int]) T

解除展平一個 TensorSpec

有關此方法的更多資訊,請查閱 unflatten()

unsqueeze(dim: int)

返回一個新的 Spec,其中增加一個單例維度(位於由 dim 指示的位置)。

引數:

dim (intNone) – 要應用 unsqueeze 操作的維度。

view(*shape) T

重塑 TensorSpec

有關此方法的更多資訊,請查閱 reshape()

zero(shape: Optional[Size] = None) TensorDictBase

返回一個填充零的張量。

注意

即使不能保證 0 屬於 spec 域,當違反此條件時,此方法也不會引發異常。zero 的主要用例是生成空資料緩衝區,而不是有意義的資料。

引數:

shape (torch.Size) – 填充零的張量的形狀

返回值:

一個填充零的張量。

zeros(shape: torch.Size = None) torch.Tensor | TensorDictBase

zero() 的代理。

文件

訪問 PyTorch 的完整開發者文件

檢視文件

教程

獲取面向初學者和高階開發者的深度教程

檢視教程

資源

查詢開發資源並獲得問題解答

檢視資源