Update app.py
Browse files
app.py
CHANGED
|
@@ -281,7 +281,8 @@ for epoch in range(num_epochs):
|
|
| 281 |
# 保存模型(可选)
|
| 282 |
torch.save(model.state_dict(), 'model.pth')
|
| 283 |
'''
|
| 284 |
-
|
|
|
|
| 285 |
from datasets import load_dataset
|
| 286 |
|
| 287 |
# 加载数据集
|
|
@@ -289,3 +290,16 @@ dataset = load_dataset('glue', 'sst2') # 这里的'sst2'是GLUE数据集下的
|
|
| 289 |
|
| 290 |
# 查看数据集内容
|
| 291 |
print(dataset['train'][:2]) # 查看训练集的前两个样本
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
| 281 |
# 保存模型(可选)
|
| 282 |
torch.save(model.state_dict(), 'model.pth')
|
| 283 |
'''
|
| 284 |
+
####################################
|
| 285 |
+
'''
|
| 286 |
from datasets import load_dataset
|
| 287 |
|
| 288 |
# 加载数据集
|
|
|
|
| 290 |
|
| 291 |
# 查看数据集内容
|
| 292 |
print(dataset['train'][:2]) # 查看训练集的前两个样本
|
| 293 |
+
'''
|
| 294 |
+
|
| 295 |
+
from datasets import load_dataset
|
| 296 |
+
# 加载数据集
|
| 297 |
+
dataset = load_dataset('fka/awesome-chatgpt-prompts')
|
| 298 |
+
# 查看数据集的子集
|
| 299 |
+
print(dataset.keys()) # 这将输出数据集中所有可用的子集名称,例如:dict_keys(['train', 'validation', 'test'])
|
| 300 |
+
# 访问特定子集的数据
|
| 301 |
+
train_dataset = dataset['train']
|
| 302 |
+
print(train_dataset[:2]) # 查看训练集的前两个样本
|
| 303 |
+
# 如果你知道确切的子集名称,也可以直接加载它
|
| 304 |
+
# train_dataset = load_dataset('fka/awesome-chatgpt-prompts', split='train')
|
| 305 |
+
|