
# Hungarian Reading Comprehension with finetuned huBERT model

For further details, see [our demo site](https://juniper.nytud.hu/demo/nlp).

## Results

| Model | Exact Match | F1 |
| ------------- | ------------- | ------------- |
| huBERT | 64.50 | 69.03  |
| mT5 | 69.51 | 76.26 |

## Usage with pipeline

```python
from transformers import pipeline

context = "A kedd hajnalban elhunyt Somló Tamásra emlékezett zenésztársa, Presser Gábor. Somló Tamás nagyszerű egyénisége, énekhangja és éneklési stílusa egészen egyedülálló volt' – fogalmazott. '1968 lehetett, amikor először találkoztunk, gyakorlatilag váltottuk egymást az Omega együttesben. Tamás akkor indult el az artista pályán, miközben zenélt is. Az Omegában csak néhányszor játszottunk együtt, miután én beléptem, ő éveket töltött külföldön artistaként, aztán összefutottunk az LGT-ben, ennek már 43 éve' - idézte fel Presser Gábor. Somló Tamás színpadi jelenléte nagy húzóerőt jelentett a zenekar számára és zenészi képességeit mutatta az is, hogy amikor Frenreisz Károly helyett belépett az LGT-be, néhány hét alatt megtanult basszusgitározni."
question = "'Nem ismerek olyan embert, aki Tamásra haragudott volna. Életét úgy fejezte be, ahogyan élt: utolsó fellépésére, amely talán egy hónappal ezelőtt lehetett, már nagyon nehezen tudott csak elmenni, de nem mondta le, mert Pécsett egy jótékonysági koncerten játszott beteg gyerekeknek' - mondta [MASK]."

qa = pipeline(task="question-answering", model="NYTK/reading-comprehension-hurc-hubert-hungarian")

print(qa({"question": question, "context": context})["answer"])
```

## Citation
If you use this model, please cite the following paper:

```
@article {yang-ligeti-rc,
    title = {Building machine reading comprehension model from scratch},
	journal = {Annales Mathematicae et Informaticae},
	year = {2023},
	author = {Yang, Zijian Győző and Ligeti-Nagy, Noémi},
	pages = {accetped}
}

```
{"language": ["hu"], "license": "apache-2.0", "tags": ["question-answering", "reading-comprehension"], "datasets": ["NYTK/HuRC"], "widget": [{"text": "'Nem ismerek olyan embert, aki [MASK] haragudott volna. \u00c9let\u00e9t \u00fagy fejezte be, ahogyan \u00e9lt: utols\u00f3 fell\u00e9p\u00e9s\u00e9re, amely tal\u00e1n egy h\u00f3nappal ezel\u0151tt lehetett, m\u00e1r nagyon nehezen tudott csak elmenni, de nem mondta le, mert P\u00e9csett egy j\u00f3t\u00e9konys\u00e1gi koncerten j\u00e1tszott beteg gyerekeknek' - mondta Presser G\u00e1bor.", "context": "A kedd hajnalban elhunyt Soml\u00f3 Tam\u00e1sra eml\u00e9kezett zen\u00e9szt\u00e1rsa, Presser G\u00e1bor. Soml\u00f3 Tam\u00e1s nagyszer\u0171 egy\u00e9nis\u00e9ge, \u00e9nekhangja \u00e9s \u00e9nekl\u00e9si st\u00edlusa eg\u00e9szen egyed\u00fcl\u00e1ll\u00f3 volt' \u2013 fogalmazott. '1968 lehetett, amikor el\u0151sz\u00f6r tal\u00e1lkoztunk, gyakorlatilag v\u00e1ltottuk egym\u00e1st az Omega egy\u00fcttesben. Tam\u00e1s akkor indult el az artista p\u00e1ly\u00e1n, mik\u00f6zben zen\u00e9lt is. Az Omeg\u00e1ban csak n\u00e9h\u00e1nyszor j\u00e1tszottunk egy\u00fctt, miut\u00e1n \u00e9n bel\u00e9ptem, \u0151 \u00e9veket t\u00f6lt\u00f6tt k\u00fclf\u00f6ld\u00f6n artistak\u00e9nt, azt\u00e1n \u00f6sszefutottunk az LGT-ben, ennek m\u00e1r 43 \u00e9ve' - id\u00e9zte fel Presser G\u00e1bor. Soml\u00f3 Tam\u00e1s sz\u00ednpadi jelenl\u00e9te nagy h\u00faz\u00f3er\u0151t jelentett a zenekar sz\u00e1m\u00e1ra \u00e9s zen\u00e9szi k\u00e9pess\u00e9geit mutatta az is, hogy amikor Frenreisz K\u00e1roly helyett bel\u00e9pett az LGT-be, n\u00e9h\u00e1ny h\u00e9t alatt megtanult basszusgit\u00e1rozni.", "example_title": "Soml\u00f3 Tam\u00e1s"}, {"text": "'Nem ismerek olyan embert, aki Tam\u00e1sra haragudott volna. \u00c9let\u00e9t \u00fagy fejezte be, ahogyan \u00e9lt: utols\u00f3 fell\u00e9p\u00e9s\u00e9re, amely tal\u00e1n egy h\u00f3nappal ezel\u0151tt lehetett, m\u00e1r nagyon nehezen tudott csak elmenni, de nem mondta le, mert P\u00e9csett egy j\u00f3t\u00e9konys\u00e1gi koncerten j\u00e1tszott beteg gyerekeknek' - mondta [MASK].", "context": "A kedd hajnalban elhunyt Soml\u00f3 Tam\u00e1sra eml\u00e9kezett zen\u00e9szt\u00e1rsa, Presser G\u00e1bor. Soml\u00f3 Tam\u00e1s nagyszer\u0171 egy\u00e9nis\u00e9ge, \u00e9nekhangja \u00e9s \u00e9nekl\u00e9si st\u00edlusa eg\u00e9szen egyed\u00fcl\u00e1ll\u00f3 volt' \u2013 fogalmazott. '1968 lehetett, amikor el\u0151sz\u00f6r tal\u00e1lkoztunk, gyakorlatilag v\u00e1ltottuk egym\u00e1st az Omega egy\u00fcttesben. Tam\u00e1s akkor indult el az artista p\u00e1ly\u00e1n, mik\u00f6zben zen\u00e9lt is. Az Omeg\u00e1ban csak n\u00e9h\u00e1nyszor j\u00e1tszottunk egy\u00fctt, miut\u00e1n \u00e9n bel\u00e9ptem, \u0151 \u00e9veket t\u00f6lt\u00f6tt k\u00fclf\u00f6ld\u00f6n artistak\u00e9nt, azt\u00e1n \u00f6sszefutottunk az LGT-ben, ennek m\u00e1r 43 \u00e9ve' - id\u00e9zte fel Presser G\u00e1bor. Soml\u00f3 Tam\u00e1s sz\u00ednpadi jelenl\u00e9te nagy h\u00faz\u00f3er\u0151t jelentett a zenekar sz\u00e1m\u00e1ra \u00e9s zen\u00e9szi k\u00e9pess\u00e9geit mutatta az is, hogy amikor Frenreisz K\u00e1roly helyett bel\u00e9pett az LGT-be, n\u00e9h\u00e1ny h\u00e9t alatt megtanult basszusgit\u00e1rozni.", "example_title": "Presser G\u00e1bor"}]}
transformers pytorch bert question-answering reading-comprehension hu dataset:NYTK/HuRC license:apache-2.0 endpoints_compatible region:us
TAGS
#transformers #pytorch #bert #question-answering #reading-comprehension #hu #dataset-NYTK/HuRC #license-apache-2.0 #endpoints_compatible #region-us 

Hungarian Reading Comprehension with finetuned huBERT model
===========================================================


For further details, see our demo site.


Results
-------


Model: huBERT, Exact Match: 64.50, F1: 69.03
Model: mT5, Exact Match: 69.51, F1: 76.26


Usage with pipeline
-------------------


If you use this model, please cite the following paper:



TAGS
#transformers #pytorch #bert #question-answering #reading-comprehension #hu #dataset-NYTK/HuRC #license-apache-2.0 #endpoints_compatible #region-us 

TAGS
#transformers #pytorch #bert #question-answering #reading-comprehension #hu #dataset-NYTK/HuRC #license-apache-2.0 #endpoints_compatible #region-us 
