dòng chảy căng:: ôi:: Đã sửa lỗiUnigramCandidateSampler:: Attr
#include <candidate_sampling_ops.h>Trình thiết lập thuộc tính tùy chọn cho FixUnigramCandidateSampler .
Bản tóm tắt
Thuộc tính công khai | |
|---|---|
distortion_ = 1.0f | float |
num_reserved_ids_ = 0 | int64 |
num_shards_ = 1 | int64 |
seed2_ = 0 | int64 |
seed_ = 0 | int64 |
shard_ = 0 | int64 |
unigrams_ = {} | gtl::ArraySlice< float > |
vocab_file_ = "" | StringPiece |
Chức năng công cộng | |
|---|---|
Distortion (float x) | TF_MUST_USE_RESULT Attrs Sự biến dạng được sử dụng để làm lệch phân bố xác suất unigram. |
NumReservedIds (int64 x) | TF_MUST_USE_RESULT Attrs Người dùng có thể tùy chọn thêm một số ID dành riêng trong phạm vi [0, ..., num_reserved_ids). |
NumShards (int64 x) | TF_MUST_USE_RESULT Attrs Một bộ lấy mẫu có thể được sử dụng để lấy mẫu từ một tập hợp con của phạm vi ban đầu nhằm tăng tốc toàn bộ quá trình tính toán thông qua tính song song. |
Seed (int64 x) | TF_MUST_USE_RESULT Attrs Nếu hạt giống hoặc hạt giống2 được đặt khác 0, thì bộ tạo số ngẫu nhiên sẽ được gieo hạt giống đã cho. |
Seed2 (int64 x) | TF_MUST_USE_RESULT Attrs Hạt giống thứ hai để tránh va chạm hạt giống. |
Shard (int64 x) | TF_MUST_USE_RESULT Attrs Một bộ lấy mẫu có thể được sử dụng để lấy mẫu từ một tập hợp con của phạm vi ban đầu nhằm tăng tốc toàn bộ quá trình tính toán thông qua tính song song. |
Unigrams (const gtl::ArraySlice< float > & x) | TF_MUST_USE_RESULT Attrs Danh sách số lượng hoặc xác suất unigram, mỗi số một ID theo thứ tự tuần tự. |
VocabFile (StringPiece x) | TF_MUST_USE_RESULT Attrs Mỗi dòng hợp lệ trong tệp này (phải có định dạng giống CSV) tương ứng với một ID từ hợp lệ. |
Thuộc tính công khai
méo mó_
float tensorflow::ops::FixedUnigramCandidateSampler::Attrs::distortion_ = 1.0f
num_reserved_ids_
int64 tensorflow::ops::FixedUnigramCandidateSampler::Attrs::num_reserved_ids_ = 0
num_shard_
int64 tensorflow::ops::FixedUnigramCandidateSampler::Attrs::num_shards_ = 1
hạt giống2_
int64 tensorflow::ops::FixedUnigramCandidateSampler::Attrs::seed2_ = 0
hạt giống_
int64 tensorflow::ops::FixedUnigramCandidateSampler::Attrs::seed_ = 0
mảnh_
int64 tensorflow::ops::FixedUnigramCandidateSampler::Attrs::shard_ = 0
unigram_
gtl::ArraySlice< float > tensorflow::ops::FixedUnigramCandidateSampler::Attrs::unigrams_ = {} vocab_file_
StringPiece tensorflow::ops::FixedUnigramCandidateSampler::Attrs::vocab_file_ = ""
Chức năng công cộng
Méo mó
TF_MUST_USE_RESULT Attrs tensorflow::ops::FixedUnigramCandidateSampler::Attrs::Distortion( float x )
Sự biến dạng được sử dụng để làm lệch phân bố xác suất unigram.
Mỗi trọng số trước tiên được nâng lên tới mức độ biến dạng trước khi thêm vào phân phối unigram bên trong. Kết quả là, độ méo = 1,0 cho phép lấy mẫu unigram thông thường (như được xác định bởi tệp từ vựng) và độ méo = 0,0 mang lại sự phân bố đồng đều.
Mặc định là 1
SốId dành riêng
TF_MUST_USE_RESULT Attrs tensorflow::ops::FixedUnigramCandidateSampler::Attrs::NumReservedIds( int64 x )
Người dùng có thể tùy chọn thêm một số ID dành riêng trong phạm vi [0, ..., num_reserved_ids).
Một trường hợp sử dụng là mã thông báo từ đặc biệt không xác định được sử dụng làm ID 0. Những ID này sẽ có xác suất lấy mẫu là 0.
Mặc định là 0
số mảnh vỡ
TF_MUST_USE_RESULT Attrs tensorflow::ops::FixedUnigramCandidateSampler::Attrs::NumShards( int64 x )
Một bộ lấy mẫu có thể được sử dụng để lấy mẫu từ một tập hợp con của phạm vi ban đầu nhằm tăng tốc toàn bộ quá trình tính toán thông qua tính song song.
Tham số này (cùng với 'phân đoạn') cho biết số lượng phân vùng đang được sử dụng trong quá trình tính toán tổng thể.
Mặc định là 1
Hạt giống
TF_MUST_USE_RESULT Attrs tensorflow::ops::FixedUnigramCandidateSampler::Attrs::Seed( int64 x )
Nếu hạt giống hoặc hạt giống2 được đặt khác 0, thì bộ tạo số ngẫu nhiên sẽ được gieo hạt giống đã cho.
Nếu không, nó sẽ được gieo bởi một hạt giống ngẫu nhiên.
Mặc định là 0
Hạt giống2
TF_MUST_USE_RESULT Attrs tensorflow::ops::FixedUnigramCandidateSampler::Attrs::Seed2( int64 x )
Hạt giống thứ hai để tránh va chạm hạt giống.
Mặc định là 0
Mảnh vỡ
TF_MUST_USE_RESULT Attrs tensorflow::ops::FixedUnigramCandidateSampler::Attrs::Shard( int64 x )
Một bộ lấy mẫu có thể được sử dụng để lấy mẫu từ một tập hợp con của phạm vi ban đầu nhằm tăng tốc toàn bộ quá trình tính toán thông qua tính song song.
Tham số này (cùng với 'num_shards') cho biết số phân vùng cụ thể của hoạt động lấy mẫu khi phân vùng đang được sử dụng.
Mặc định là 0
Unigram
TF_MUST_USE_RESULT Attrs tensorflow::ops::FixedUnigramCandidateSampler::Attrs::Unigrams( const gtl::ArraySlice< float > & x )
Danh sách số lượng hoặc xác suất unigram, mỗi số một ID theo thứ tự tuần tự.
Chính xác một trong số vocab_file và unigram sẽ được chuyển cho op này.
Mặc định là []
Tập tin từ vựng
TF_MUST_USE_RESULT Attrs tensorflow::ops::FixedUnigramCandidateSampler::Attrs::VocabFile( StringPiece x )
Mỗi dòng hợp lệ trong tệp này (phải có định dạng giống CSV) tương ứng với một ID từ hợp lệ.
ID được sắp xếp theo thứ tự, bắt đầu từ num_reserved_ids. Mục cuối cùng trong mỗi dòng dự kiến sẽ là một giá trị tương ứng với số lượng hoặc xác suất tương đối. Chính xác một trong số vocab_file và unigram cần được chuyển tới op này.
Mặc định là ""