tzmtwtr's picture
Update README.md
10537f0
|
raw
history blame
666 Bytes
metadata
license: mit

注:動作未検証

日本語のSentence Embedding用albert

以下のモデルから転移学習を実施。
https://huggingface.co/ken11/albert-base-japanese-v1-with-japanese-tokenizer

学習はllm-book/bert-base-japanese-v3-unsup-simcse-jawiki記載のColabノートブックを使用した

モチベーション

ベクトル検索のために小規模言語モデルが必要になった。 AWS Lambdaで動かせるようにしたい。