FixedUnigramCandidateSampler.Options

lớp tĩnh công khai FixUnigramCandidateSampler.Options

Thuộc tính tùy chọn cho FixedUnigramCandidateSampler

Phương pháp công khai

Đã sửa lỗiUnigramCandidateSampler.Options	biến dạng (biến dạng nổi)
Đã sửa lỗiUnigramCandidateSampler.Options	numReservedIds (numReservedIds dài)
Đã sửa lỗiUnigramCandidateSampler.Options	numShards (numShards dài)
Đã sửa lỗiUnigramCandidateSampler.Options	hạt giống (Hạt dài)
Đã sửa lỗiUnigramCandidateSampler.Options	hạt giống2 (Hạt dài2)
Đã sửa lỗiUnigramCandidateSampler.Options	mảnh vỡ (Mảnh dài)
Đã sửa lỗiUnigramCandidateSampler.Options	unigram (Danh sách<Float> unigram)
Đã sửa lỗiUnigramCandidateSampler.Options	vocabFile (Chuỗi vocabFile)

Phương pháp kế thừa

Từ lớp java.lang.Object

boolean	bằng (Đối tượng arg0)
Lớp cuối cùng<?>	getClass ()
int	Mã Băm ()
khoảng trống cuối cùng	thông báo ()
khoảng trống cuối cùng	thông báoTất cả ()
Sợi dây	toString ()
khoảng trống cuối cùng	chờ đã (arg0 dài, int arg1)
khoảng trống cuối cùng	chờ đã (arg0 dài)
khoảng trống cuối cùng	Chờ đợi ()

Phương pháp công khai

biến dạng công khai FixUnigramCandidateSampler.Options (Biến dạng nổi)

Thông số

méo mó	Sự biến dạng được sử dụng để làm lệch phân bố xác suất unigram. Mỗi trọng số trước tiên được nâng lên tới mức độ biến dạng trước khi thêm vào phân phối unigram bên trong. Kết quả là, độ méo = 1,0 cho phép lấy mẫu unigram thông thường (như được xác định bởi tệp từ vựng) và độ méo = 0,0 mang lại sự phân bố đồng đều.

công khai FixUnigramCandidateSampler.Options numReservedIds (numReservedIds dài)

Thông số

numReservedId	Người dùng có thể tùy chọn thêm một số ID dành riêng trong phạm vi [0, ..., num_reserved_ids). Một trường hợp sử dụng là mã thông báo từ đặc biệt không xác định được sử dụng làm ID 0. Các ID này sẽ có xác suất lấy mẫu là 0.

công khai FixUnigramCandidateSampler.Options numShards (numShards dài)

Thông số

số mảnh vỡ	Một bộ lấy mẫu có thể được sử dụng để lấy mẫu từ một tập hợp con của phạm vi ban đầu nhằm tăng tốc toàn bộ quá trình tính toán thông qua tính song song. Tham số này (cùng với 'phân đoạn') cho biết số lượng phân vùng đang được sử dụng trong quá trình tính toán tổng thể.

hạt giống công khai FixUnigramCandidateSampler.Options (Hạt giống dài)

Thông số

hạt giống	Nếu hạt giống hoặc hạt giống2 được đặt khác 0, thì bộ tạo số ngẫu nhiên sẽ được gieo hạt giống đã cho. Nếu không, nó sẽ được gieo bởi một hạt giống ngẫu nhiên.

công khai FixUnigramCandidateSampler.Options Seed2 (Hạt giống dài2)

Thông số

hạt giống2	Hạt giống thứ hai để tránh va chạm hạt giống.

phân đoạn công khai FixUnigramCandidateSampler.Options (Phân đoạn dài)

Thông số

mảnh vỡ	Một bộ lấy mẫu có thể được sử dụng để lấy mẫu từ một tập hợp con của phạm vi ban đầu nhằm tăng tốc toàn bộ quá trình tính toán thông qua tính song song. Tham số này (cùng với 'num_shards') cho biết số phân vùng cụ thể của hoạt động lấy mẫu khi phân vùng đang được sử dụng.

unigram công khai FixUnigramCandidateSampler.Options ( Danh sách<Float> unigram)

Thông số

unigram	Danh sách số lượng hoặc xác suất unigram, mỗi số một ID theo thứ tự tuần tự. Chính xác một trong số vocab_file và unigram sẽ được chuyển cho op này.

public FixUnigramCandidateSampler.Options vocabFile (Chuỗi vocabFile)

Thông số

tập tin từ vựng	Mỗi dòng hợp lệ trong tệp này (phải có định dạng giống CSV) tương ứng với một ID từ hợp lệ. ID được sắp xếp theo thứ tự, bắt đầu từ num_reserved_ids. Mục cuối cùng trong mỗi dòng dự kiến ​​​​sẽ là một giá trị tương ứng với số lượng hoặc xác suất tương đối. Chính xác một trong số vocab_file và unigram cần được chuyển tới op này.