加入 Hugging Face 社群
並獲得增強文件體驗
開始使用
章節末尾測驗
1. 語言建模管道的順序是什麼？
2. 基礎 Transformer 模型輸出的張量有多少維度，它們是什麼？
3. 以下哪一項是子詞分詞的例子？
4. 什麼是模型頭？
5. 什麼是 AutoModel？
6. 當將不同長度的序列一起批處理時，需要注意哪些技術？
7. 將 SoftMax 函式應用於序列分類模型輸出的 logits 的目的是什麼？
8. 分詞器 API 大部分圍繞著哪個方法？
9. 在這個程式碼示例中，result 變數包含什麼？
from transformers import AutoTokenizer
tokenizer = AutoTokenizer.from_pretrained("bert-base-cased")
result = tokenizer.tokenize("Hello!")10. 以下程式碼有什麼問題嗎？
from transformers import AutoTokenizer, AutoModel
tokenizer = AutoTokenizer.from_pretrained("bert-base-cased")
model = AutoModel.from_pretrained("gpt2")
encoded = tokenizer("Hey!", return_tensors="pt")
result = model(**encoded)