CLOVER🍀

That was when it all began.

LLMを探す(日本語対応モデル含む)

LLMに関することをいろいろ試そうとすると、使うモデルが必要になります。

このモデルの探し方がどうしたらいいのかわからないのですが、Awesomeなどを見つけたのでメモしておこうかなと。

ランキング

Aider LLM Leaderboards。

Aider LLM Leaderboards | aider

OpenRouter。

LLM Rankings | OpenRouter

マルチモーダル。

LM Arena Leaderboard。

Overview Leaderboard | LMArena

Awesome LLM

Awesome LLM。

GitHub - Hannibal046/Awesome-LLM: Awesome-LLM: a curated list of Large Language Model

コード生成まわりだとこちら。

GitHub - huybery/Awesome-Code-LLM: 👨‍💻 An awesome and curated list of best code-LLM for research.

GitHub - wsxiaoys/awesome-ai-coding: Awesome AI Coding

日本語LLM

日本語向けのLLMだとこちら。LLM-jpが公開しています。

GitHub - llm-jp/awesome-japanese-llm: 日本語LLMまとめ - Overview of Japanese LLMs

コード生成のモデルもこの中に含まれています。

LLM-jpは、同じく日本語LLMのランキングも公開しています。

Open Japanese LLM Leaderboard - a Hugging Face Space by llm-jp

A Survey of Large Language Models

arXivで公開されているA Survey of Large Language Modelsもよいかもしれません。

[2303.18223] A Survey of Large Language Models

コード生成。

[2311.10372] A Survey of Large Language Models for Code: Evolution, Benchmarking, and Future Trends

[2311.07989] Unifying the Perspectives of NLP and Software Engineering: A Survey on Language Models for Code

検索でsite:https://arxiv.org a survey of large language modelsみたいにして調べると、いろんなサーベイが見つかります。

テキスト埋め込み

テキスト埋め込みのモデルについては、MTEB(Massive Text Embedding Benchmark)を見るのがよいでしょう。

MTEB Leaderboard - a Hugging Face Space by mteb

日本語テキスト埋め込みベンチマークJMTEB(Japanese Massive Text Embedding Benchmark) - CLOVER🍀

日本語テキスト埋め込みベンチマークJMTEB(Japanese Massive Text Embedding Benchmark) - CLOVER🍀