#機械学習
TaichiとPyTorchの違い【一目比較GPT事例】
TaichiとはTaichiは、GPU並列処理をPythonで記述できるライブラリです。コンピューターグラフィックスでの利用が想定されています。
公式サイト
ドキュメント
ディープラーニング関連では、RWKVやNeRFなどの事例があります。
RWKV
RNNとTransformerのいいとこ取りを試みたモデル
GitHub
https://github.com/ailzhang/bl
RAG における埋め込みモデルの比較
LLM を使った RAG を行う際に埋め込みモデルが必要となりますが、どの程度差がでるのか 4 種類ほどの埋め込みモデルを使って検証してみたいと思います。
今回試す埋め込みモデル:
intfloat/multilingual-e5-large
cl-nagoya/sup-simcse-ja-large
pkshatech/GLuCoSE-base-ja
openai/text-embed