CLOVER🍀

That was when it all began.

LLMを探す(日本語対応モデル含む)

LLMに関することをいろいろ試そうとすると、使うモデルが必要になります。

このモデルの探し方がどうしたらいいのかわからないのですが、Awesomeなどを見つけたのでメモしておこうかなと。

Awesome LLM

Awesome LLM。

GitHub - Hannibal046/Awesome-LLM: Awesome-LLM: a curated list of Large Language Model

コード生成まわりだとこちら。

GitHub - huybery/Awesome-Code-LLM: 👨‍💻 An awesome and curated list of best code-LLM for research.

GitHub - wsxiaoys/awesome-ai-coding: Awesome AI Coding

日本語LLM

日本語向けのLLMだとこちら。

GitHub - llm-jp/awesome-japanese-llm: 日本語LLMまとめ - Overview of Japanese LLMs

コード生成のモデルもこの中に含まれています。

A Survey of Large Language Models

arXivで公開されているA Survey of Large Language Modelsもよいかもしれません。

[2303.18223] A Survey of Large Language Models

コード生成。

[2311.10372] A Survey of Large Language Models for Code: Evolution, Benchmarking, and Future Trends

[2311.07989] Unifying the Perspectives of NLP and Software Engineering: A Survey on Language Models for Code

検索でsite:https://arxiv.org a survey of large language modelsみたいにして調べると、いろんなサーベイが見つかります。

テキスト埋め込み

テキスト埋め込みのモデルについては、MTEB(Massive Text Embedding Benchmark)を見るのがよいでしょう。

MTEB Leaderboard - a Hugging Face Space by mteb