LazyStackedTensorSpec¶
- class torchrl.data.LazyStackedTensorSpec(*args, **kwargs)[source]¶
torchrl.data.Stacked的已棄用版本。- assert_is_in(value: Tensor) None¶
斷言張量是否在其範圍內,如果不屬於則丟擲異常。
- 引數:
value (torch.Tensor) – 待檢查的值。
- cardinality(*args, **kwargs) Any¶
規格的基數。
這指的是規格中可能結果的數量。複合規格的基數假定為所有可能結果的笛卡爾積。
- clear_device_()¶
清除複合物件的裝置。
- clone() T¶
建立 TensorSpec 的副本。
- contains(item: torch.Tensor | TensorDictBase) bool¶
如果值
val可以由TensorSpec生成,則返回True,否則返回False。更多資訊請參閱
is_in()。
- cpu()¶
將 TensorSpec 轉換為 'cpu' 裝置。
- cuda(device=None)¶
將 TensorSpec 轉換為 'cuda' 裝置。
- encode(val: Union[ndarray, Tensor], *, ignore_device=False) Tensor¶
根據指定的規格編碼值,並返回相應的張量。
此方法用於那些返回可以輕鬆對映到 TorchRL 所需域的值(例如 numpy 陣列)的環境。如果值已是張量,則規格不會改變其值,並原樣返回。
- 引數:
val (np.ndarray or torch.Tensor) – 待編碼為張量的值。
- 關鍵字引數:
ignore_device (bool, optional) – 如果為
True,則忽略規格裝置。這用於將張量轉換分組到TensorDict(..., device="cuda")呼叫中,這樣更快。- 返回值:
與所需張量規格匹配的 torch.Tensor。
- enumerate() torch.Tensor | TensorDictBase¶
返回可以從 TensorSpec 中獲取的所有樣本。
樣本將沿第一維堆疊。
此方法僅針對離散規格實現。
- expand(*shape)¶
返回具有擴充套件形狀的新規格。
- 引數:
*shape (tuple or iterable of int) – 規格的新形狀。必須與當前形狀可廣播:其長度必須至少與當前形狀長度相同,並且其最後一個值也必須相容;也就是說,它們只能在當前維度是單例時與當前形狀不同。
- classmethod implements_for_spec(torch_function: Callable) Callable¶
為 TensorSpec 註冊一個 torch 函式重寫。
- index(index: INDEX_TYPING, tensor_to_index: torch.Tensor | TensorDictBase) torch.Tensor | TensorDictBase¶
對輸入張量進行索引。
此方法用於編碼一個或多個分類變數(例如
OneHot或Categorical)的規格,以便在不關心索引的實際表示的情況下對具有樣本的張量進行索引。- 引數:
index (int, torch.Tensor, slice or list) – 張量的索引
tensor_to_index – 待索引的張量
- 返回值:
索引後的張量
- 示例
>>> from torchrl.data import OneHot >>> import torch >>> >>> one_hot = OneHot(n=100) >>> categ = one_hot.to_categorical_spec() >>> idx_one_hot = torch.zeros((100,), dtype=torch.bool) >>> idx_one_hot[50] = 1 >>> print(one_hot.index(idx_one_hot, torch.arange(100))) tensor(50) >>> idx_categ = one_hot.to_categorical(idx_one_hot) >>> print(categ.index(idx_categ, torch.arange(100))) tensor(50)
- is_in(value) bool¶
如果值
val可以由TensorSpec生成,則返回True,否則返回False。更精確地說,
is_in方法檢查值val是否在space屬性定義的限制(範圍 box)內,以及dtype、device、shape和其他可能的元資料是否與規格的匹配。如果其中任何一項檢查失敗,is_in方法將返回False。- 引數:
val (torch.Tensor) – 待檢查的值。
- 返回值:
指示值是否屬於 TensorSpec 範圍(box)的布林值。
- make_neg_dim(dim: int)¶
將特定維度轉換為
-1。
- property ndim¶
規格形狀的維度數量。
len(spec.shape) 的快捷方式。
- ndimension()¶
規格形狀的維度數量。
len(spec.shape) 的快捷方式。
- one(shape: Optional[Size] = None) TensorDictBase¶
在範圍內(box)返回一個全為 1 的張量。
注意
儘管不能保證
1屬於規格域,但在違反此條件時,此方法不會引發異常。one方法的主要用例是生成空資料緩衝區,而不是有意義的資料。- 引數:
shape (torch.Size) – 全為 1 張量的形狀
- 返回值:
在 TensorSpec 範圍內(box)抽樣的全為 1 的張量。
- ones(shape: torch.Size = None) torch.Tensor | TensorDictBase¶
one()的代理。
- project(val: torch.Tensor | TensorDictBase) torch.Tensor | TensorDictBase¶
如果輸入張量不在 TensorSpec 範圍內(box)內,則根據一些定義的啟發式方法將其映射回範圍內。
- 引數:
val (torch.Tensor) – 待對映到範圍(box)的張量。
- 返回值:
屬於 TensorSpec 範圍(box)的 torch.Tensor。
- rand(shape: Optional[Size] = None) TensorDictBase¶
在規格定義的空間中返回一個隨機張量。
除非範圍(box)無界,此時將抽取正態分佈的值,否則將在空間上均勻取樣。
- 引數:
shape (torch.Size) – 隨機張量的形狀
- 返回值:
在 TensorSpec 範圍(box)中抽樣的隨機張量。
- sample(shape: torch.Size = None) torch.Tensor | TensorDictBase¶
在規格定義的空間中返回一個隨機張量。
詳情請參閱
rand()。
- squeeze(dim: Optional[int] = None)¶
返回一個移除所有大小為
1的維度的新規格。當指定
dim時,僅在該維度上執行 squeeze 操作。- 引數:
dim (int or None) – 應用 squeeze 操作的維度
- to_numpy(val: Tensor, safe: Optional[bool] = None) dict¶
返回輸入張量對應的
np.ndarray。這旨在作為
encode()的逆操作。- 引數:
val (torch.Tensor) – 待轉換為 numpy 的張量。
safe (布林值) – 布林值,指示是否應針對 spec 的域對值執行檢查。預設使用
CHECK_SPEC_ENCODE環境變數的值。
- 返回值:
一個 np.ndarray。
- type_check(value: torch.Tensor, key: NestedKey | None = None) None¶
檢查輸入值的
dtype是否與TensorSpec的dtype匹配,如果不匹配則引發異常。- 引數:
value (torch.Tensor) – 需要檢查 dtype 的張量。
key (str, 可選) – 如果 TensorSpec 包含鍵,則將根據指定鍵指向的 spec 檢查值的 dtype。
- unflatten(dim: int, sizes: Tuple[int]) T¶
解除展平一個
TensorSpec。有關此方法的更多資訊,請查閱
unflatten()。
- unsqueeze(dim: int)¶
返回一個新的 Spec,其中增加一個單例維度(位於由
dim指示的位置)。- 引數:
dim (int 或 None) – 要應用 unsqueeze 操作的維度。
- zero(shape: Optional[Size] = None) TensorDictBase¶
返回一個填充零的張量。
注意
即使不能保證
0屬於 spec 域,當違反此條件時,此方法也不會引發異常。zero的主要用例是生成空資料緩衝區,而不是有意義的資料。- 引數:
shape (torch.Size) – 填充零的張量的形狀
- 返回值:
一個填充零的張量。
- zeros(shape: torch.Size = None) torch.Tensor | TensorDictBase¶
zero()的代理。