章節末尾測驗

讓我們測試一下您在本章中學到的內容！

1. 何時應該訓練新的分詞器？

2. 與使用文字列表的列表相比，使用文字列表的生成器在使用 `train_new_from_iterator()` 時有什麼優勢？

3. 使用“快速”分詞器有什麼優勢？

4. 標記分類管道如何處理跨越多個標記的實體？

5. 問答管道如何處理長上下文？

6. 什麼是規範化？

7. 對於子詞分詞器，什麼是預分詞？

8. 選擇適用於 BPE 分詞模型的句子。

9. 選擇適用於 WordPiece 分詞模型的句子。

10. 選擇適用於 Unigram 分詞模型的句子。

< > 在 GitHub 上更新