# Summarization

- Source: https://github.com/binhvq/news-corpus
- Language: Vietnamese
- Labeling: text-davinci-003
- Num examples:
  - 65,361 (train)
  - 10,000 (test)
 
```python
from datasets import load_dataset

load_dataset("tdtunlp/news_summarization_vi")
```

- Format for Summarization task

```python
def preprocess(
    sample,
    sep_key="<|endofprompt|>",
    end_key="<|endoftext|>",
):
    article = sample['content']
    completion = sample['summary']
    return {'text': """{article}
TL;DR: 
{sep_key}
{completion}
{end_key}""".format(
    article=article,
    sep_key=sep_key,
    completion=completion,
    end_key=end_key,
)}

"""
Suốt bao năm, để dòng tranh này không bị rơi vào quên lãng, mỗi ngày người ta đều thấy ông Đạt cặm cụi làm nên những bức tranh từ mũi dao, cán đục. Ông bảo, tranh sơn khắc ở nước ta ra đời sớm nhất và còn đẹp hơn cả tranh sơn khắc của Nhật. Quý giá như vậy nên ông chẳng thể để nghề mai một trong sự chông chênh của thời cuộc.
Một trong những sản phẩm sơn khắc của ông Đạt được trả 25 triệu.
Theo ông Đạt, thời điểm năm 1945 đến 1995 là lúc tranh sơn khắc ở nước ta phát triển mạnh nhất. Thời điểm đó, các sản phẩm của Hạ Thái chiếm tới 70% hàng xuất khẩu, giải quyết được công ăn việc làm cho người dân trong làng và cả các địa phương khác, đem lại cuộc sống khấm khá cho nhiều hộ gia đình.
Say mê hội họa từ nhỏ, nên chuyện ông Đạt đến với tranh sơn khắc như một mối duyên tiền định. Khi mới tiếp xúc với những bức tranh này, ông Đạt như bị lôi cuốn chẳng thể nào dứt ra được. Học hết cấp 3, tôi thi vào Đại học sư phạm nhưng sức khỏe không đảm bảo nên xin vào làm thợ vẽ trong xưởng của hợp tác xã.
Năm 1979, tôi được hợp tác xã cử đi học thêm ở trường Mỹ Nghệ. Khi về lại xưởng, nhờ năng khiếu hội họa nên tôi được chuyển sang khâu đoạn khảm trai rồi sang tranh khắc. Tôi làm tranh khắc từ đó đến giờ  ông Đạt chia sẻ.
Theo lời ông Đạt, học sơn khắc khó bởi cách vẽ của dòng tranh này khác hẳn với sơn mài. Nếu như sơn mài người ta có thể vẽ bằng chổi hay bút lông, cũng có khi là chất liệu mềm rồi mới quét sơn lên vóc thì sơn khắc khâu đoạn lại làm khác hẳn. Sơn khắc là nghệ thuật của đồ họa, sự hoàn thiện của bức tranh phụ thuộc vào những nét chạm khắc và những mảng hình tinh tế, giàu cảm xúc. Cuối cùng mới là việc tô màu nhằm tạo sự khắc họa mạnh.
Như một lẽ xoay vần tự nhiên, sự phát triển của làng nghề Hạ Thái dần chùng xuống. Làng nghề bước vào thời kỳ suy thoái, đặc biệt là trong giai đoạn khủng hoảng kinh tế Đông Âu từ 1984 đến 1990 đã làm hợp tác xã tan rã. Ông Đạt khi đó cũng như bao người thợ khác đều phải quay về làm ruộng.
Ông Đạt giải thích, tranh sơn khắc xuất phát từ gốc tranh sơn mài. Nếu như ở tranh sơn mài thông thường, để có một tấm vóc vẽ người ta phủ sơn ta, vải lên tấm gỗ và mài phẳng thì tranh sơn khắc độc đáo ở chỗ, phải sử dụng kỹ thuật thủ công để khắc lên tấm vóc sơn mài.
Tranh sơn khắc từ phôi thai, phác thảo đến lúc hoàn thành có khi kéo dài cả năm trời. Chẳng hạn, riêng công khắc ở bức tranh khổ nhỏ thường tôi làm cả ngày lẫn đêm thì mất 2 ngày, phối màu mất 3 ngày. Để người trẻ học được nghề cũng sẽ mất khoảng 6 tháng đến 1 năm - ông Trần Thành Đạt chia sẻ.
Tranh sơn khắc đòi hỏi rất kỹ về phác thảo, bố cục, cũng như mảng màu sáng tối mà màu đen của vóc là chủ đạo. Dù trên diện tích bức tranh khổ lớn bao nhiêu nó vẫn rất cần kỹ càng và chính xác đến từng xen-ti-met. Nếu sai, bức tranh sẽ gần như bị hỏng, các đường nét phải khắc họa lại từ đầu.
Kỳ công là vậy nên giá thành mỗi sản phẩm sơn khắc thường khá cao, trung bình từ 4 đến 25 triệu đồng/bức tranh. Giá thành cao lại yêu cầu khắt khe về mặt kỹ thuật, mỹ thuật nên theo Nghệ nhân Trần Thành Đạt, nhiều người trong làng đã từ bỏ, không làm dòng tranh này nữa.
Tranh sơn khắc làm mất nhiều thời gian và công sức nhưng khó bán. Họ đều tập trung làm tranh sơn mài, với chất liệu ngoại nhập cho rẻ và ít tốn công sức. Hầu như cả làng đã quay lưng, bỏ rơi dòng tranh sơn khắc vào lãng quên  ông Đạt buồn bã kể.
Được biết, hiện xưởng sản xuất tranh của ông Đạt chủ yếu là các thành viên trong gia đình. Ông khoe, hai con trai và con gái đều tốt nghiệp Trường Đại học Mĩ thuật, con rể và các con dâu cũng là họa sĩ của trường. Tất cả các thành viên trong gia đình ông đều chung niềm say mê với sơn khắc.
Đinh Luyện.

TL;DR: 
<|endofprompt|>
Ông Đạt Trần Thành là một trong những nghệ nhân sơn khắc của làng nghề Hạ Thái, Hà Nội. Từ năm 1945 đến 1995, ông Đạt đã nỗ lực bảo vệ dòng tranh sơn khắc của nước ta không bị rơi vào quên lãng. Ông Đạt cũng là người đã giới thiệu tranh sơn khắc của nước ta đến với nhiều quốc gia khác. Tuy nhiên, trong giai đoạn khủng hoảng kinh tế Đông Âu từ 1984 đến 1990, làng nghề Hạ Thái đã bước vào thời kỳ suy thoái. Ông Đạt và nhiều người thợ khác đã phải quay về làm ruộng. Tuy nhiên, ông Đạt vẫn nỗ lực bảo vệ dòng tranh sơn khắc của nước ta. Hiện nay, ông Đạt đã truyền cảm hứng và kỹ năng sơn khắc cho các thành viên trong gia đình.
<|endoftext|>
"""
```
task_categories:summarization size_categories:10K<n<100K language:vi LM region:us
{"language": ["vi"], "size_categories": ["10K<n<100K"], "task_categories": ["summarization"], "dataset_info": {"features": [{"name": "content", "dtype": "string"}, {"name": "summary", "dtype": "string"}], "splits": [{"name": "train", "num_bytes": 213621060.91992286, "num_examples": 65361}, {"name": "test", "num_bytes": 3268326.0800771536, "num_examples": 1000}], "download_size": 117151304, "dataset_size": 216889387}, "tags": ["LM"]}
TAGS
#task_categories-summarization #size_categories-10K<n<100K #language-Vietnamese #LM #region-us 

# Summarization

- Source: URL
- Language: Vietnamese
- Labeling: text-davinci-003
- Num examples:
  - 65,361 (train)
  - 10,000 (test)
 


- Format for Summarization task


# Summarization

- Source: URL
- Language: Vietnamese
- Labeling: text-davinci-003
- Num examples:
  - 65,361 (train)
  - 10,000 (test)
 


- Format for Summarization task
TAGS
#task_categories-summarization #size_categories-10K<n<100K #language-Vietnamese #LM #region-us 
 # Summarization

- Source: URL
- Language: Vietnamese
- Labeling: text-davinci-003
- Num examples:
  - 65,361 (train)
  - 10,000 (test)
 


- Format for Summarization task
passage: TAGS
#task_categories-summarization #size_categories-10K<n<100K #language-Vietnamese #LM #region-us 
# Summarization

- Source: URL
- Language: Vietnamese
- Labeling: text-davinci-003
- Num examples:
  - 65,361 (train)
  - 10,000 (test)
 


- Format for Summarization task