BlockLSTMGradV2 คลาสสุดท้ายสาธารณะ
คำนวณการแพร่กระจายเซลล์ LSTM ย้อนหลังสำหรับลำดับเวลาทั้งหมด
การใช้งานนี้จะใช้ร่วมกับ BlockLSTMV2
วิธีการสาธารณะ
| เอาท์พุต <T> | บีกราด () การไล่ระดับสีสำหรับ w ที่จะหนุนหลัง |
| คงที่ <T ขยายจำนวน> BlockLSTMGradV2 <T> | สร้าง ( ขอบเขต ขอบเขต ตัวดำเนินการ <ยาว> seqLenMax, ตัว ดำเนินการ <T> x, ตัวดำเนินการ <T> csPrev, ตัวดำเนินการ <T> hPrev, ตัวดำเนินการ <T> w, ตัวดำเนินการ <T> wci, ตัวดำเนินการ <T> wcf, ตัวดำเนินการ <T > wco, ตัวดำเนินการ <T> b, ตัวถูกดำเนินการ <T> i, ตัวถูกดำเนินการ <T> cs, ตัว ถูกดำเนินการ <T> f, ตัวถูกดำเนินการ <T> o, ตัวดำเนินการ <T> ci, ตัว ถูกดำเนินการ <T> co, ตัว ถูกดำเนินการ <T> h , ตัวดำเนินการ <T> csGrad, ตัวดำเนินการ <T> hGrad, ใช้บูลีนช่องมองภาพ) วิธีการจากโรงงานเพื่อสร้างคลาสที่รวมการดำเนินการ BlockLSTMGradV2 ใหม่ |
| เอาท์พุต <T> | csPrevGrad () การไล่ระดับสีของ cs_prev ที่จะหนุนหลัง |
| เอาท์พุต <T> | hPrevGrad () การไล่ระดับสีของ h_prev ที่จะหนุนหลัง |
| เอาท์พุต <T> | wGrad () การไล่ระดับสีสำหรับ w ที่จะหนุนหลัง |
| เอาท์พุต <T> | wcfGrad () การไล่ระดับสีสำหรับ wcf ที่จะหนุนหลัง |
| เอาท์พุต <T> | wciGrad () การไล่ระดับสีสำหรับ wci ที่จะหนุนหลัง |
| เอาท์พุต <T> | wcoGrad () การไล่ระดับสีสำหรับ wco ที่จะหนุนหลัง |
| เอาท์พุต <T> | xGrad () เกรเดียนต์ของ x ที่จะหนุนหลัง |
วิธีการสืบทอด
วิธีการสาธารณะ
BlockLSTMGradV2 สาธารณะคงที่ <T> สร้าง (ขอบเขต ขอบเขต , ตัวดำเนินการ <Long> seqLenMax, ตัวดำเนินการ <T> x, ตัวดำเนินการ <T> csPrev, ตัวดำเนินการ <T> hPrev, ตัวดำเนินการ <T> w, ตัวดำเนินการ <T> wci, ตัวดำเนินการ <T > wcf, ตัวดำเนินการ <T> wco, ตัวถูกดำเนินการ <T> b, ตัวถูกดำเนิน การ <T> i, ตัวถูกดำเนินการ <T> cs, ตัวถูกดำเนินการ <T> f, ตัวดำเนินการ <T> o, ตัว ถูกดำเนินการ <T> ci, ตัวถูกดำเนินการ <T> co , ตัวดำเนินการ <T> h, ตัวดำเนินการ <T> csGrad, ตัวดำเนินการ <T> hGrad, ใช้บูลีนช่องมองภาพ)
วิธีการจากโรงงานเพื่อสร้างคลาสที่รวมการดำเนินการ BlockLSTMGradV2 ใหม่
พารามิเตอร์
| ขอบเขต | ขอบเขตปัจจุบัน |
|---|---|
| seqLenMax | ระยะเวลาสูงสุดที่ใช้จริงโดยอินพุตนี้ เอาต์พุตจะถูกเสริมด้วยศูนย์ที่เกินความยาวนี้ |
| x | ลำดับอินพุตไปยัง LSTM รูปร่าง (timelen, bat_size, num_inputs) |
| csก่อนหน้า | ค่าของสถานะเซลล์เริ่มต้น |
| hก่อนหน้า | เอาต์พุตเริ่มต้นของเซลล์ (เพื่อใช้สำหรับช่องมอง) |
| ว | เมทริกซ์น้ำหนัก |
| WCI | เมทริกซ์น้ำหนักสำหรับการเชื่อมต่อช่องมองอินพุตของเกต |
| ห้องสุขา | เมทริกซ์น้ำหนักสำหรับการเชื่อมต่อช่องมองลืมเกต |
| ส้วม | เมทริกซ์น้ำหนักสำหรับการเชื่อมต่อช่องตาแมวเอาท์พุต |
| ข | เวกเตอร์อคติ |
| ฉัน | ประตูอินพุตตลอดลำดับเวลาทั้งหมด |
| ซีเอส | สถานะของเซลล์ก่อน tanh ตลอดลำดับเวลาทั้งหมด |
| ฉ | ประตูลืมตลอดลำดับเวลาทั้งหมด |
| โอ | ประตูเอาต์พุตตลอดลำดับเวลาทั้งหมด |
| ci | อินพุตของเซลล์ตลอดลำดับเวลาทั้งหมด |
| ร่วม | เซลล์หลัง tanh ตลอดลำดับเวลาทั้งหมด |
| ชม. | เวกเตอร์เอาต์พุต h ตลอดลำดับเวลาทั้งหมด |
| csGrad | เกรเดียนต์ปัจจุบันของ cs |
| hGrad | เกรเดียนต์ของเวกเตอร์ h |
| ใช้ช่องมอง | ไม่ว่าจะใช้ตุ้มน้ำหนักตาแมว |
การส่งคืน
- อินสแตนซ์ใหม่ของ BlockLSTMGradV2