๐Ÿ‘จ‍๐Ÿซ

[PLM] IndexError: Target X is out of bounds.

geum 2022. 11. 16. 10:40

PyTorch+KoELECTRA ๋ถ„๋ฅ˜ ๋ชจ๋ธ ์‚ฌ์šฉ ์ค‘์— ๋œฌ ์—๋Ÿฌ ๋ฌธ๊ตฌ์ด๋‹ค.

 

1. ๋ชจ๋ธ์„ ๋ถˆ๋Ÿฌ์˜จ ๋ฐฉ์‹(์—๋Ÿฌ ๋ฐœ์ƒ)

๋ถ„๋ฅ˜๋ฅผ ์œ„ํ•œ KoELECTRA ๋ชจ๋ธ์„ ์‚ฌ์šฉํ–ˆ๋Š”๋ฐ ์ฒ˜์Œ์—๋Š” ํ•„์š”ํ•œ ๋ ˆ์ด๋ธ” ์ˆ˜๋ฅผ ์ง€์ •ํ•ด์ฃผ์ง€ ์•Š์•˜๋‹ค.

 

2. ์ˆ˜์ •

๋ถ„๋ฅ˜ํ•ด์•ผ ํ•˜๋Š” ๋ ˆ์ด๋ธ” ์ˆ˜๋งŒํผ num_labels ์ธ์ž๋กœ ์ถ”๊ฐ€ํ•ด์ฃผ์—ˆ๋‹ค. kcBERT ๊นƒํ—ˆ๋ธŒ์—์„œ ๋˜‘๊ฐ™์€ ์งˆ๋ฌธ์„ ๋ฐœ๊ฒฌํ–ˆ๋Š”๋ฐ ๊ฐœ๋ฐœ์ž ๋ถ„๊ป˜์„œ ~ForSequenceClassification ๋ชจ๋ธ์€ ๊ธฐ๋ณธ์ด ์ด์ง„ ๋ถ„๋ฅ˜๋ผ๊ณ  ๋‹ต๋ณ€ํ•ด์ฃผ์‹  ๋‚ด์šฉ์„ ์ฐธ๊ณ ํ–ˆ๋‹ค. KoELECTRA ๋ชจ๋ธ๋„ BERT ๊ธฐ๋ฐ˜์ด๋‹ˆ๊นŒ ์ € ๋ฐฉ๋ฒ•์ด ๋ ์ˆ˜๋„ ์žˆ๊ฒ ๋‹ค ์‹ถ์—ˆ๊ณ  ์ ์šฉํ•˜๋‹ˆ๊นŒ ์—๋Ÿฌ ํ•ด๊ฒฐ ๐Ÿ™‚

 

์ฐธ๊ณ  ์‚ฌ์ดํŠธ

https://github.com/Beomi/KcBERT/issues/3