tiktokenでgpt-3.5-turboとgpt-4oのトークン数を比較する

2024/08/23 12 users OpenAI GPT-4o gpt-3.5-turbo 平均

GMO NIKKOのT.Nです。 最近弊社のプロダクトで使用しているOpenAIのモデルを、 gpt-4oやgpt-4o-miniに切り替えました。 gpt-3.5-turboを使用していた時と比較して、 トークン数に変化があったので、 tiktokenの処理時間も含めて確認してみました。 確認方法 以下のようなプログラムで、 トークン数と処理時間の平均を確... 続きを読む

GPT-4o-miniのファインチューニングのすゝめ

2024/08/21 20 users ファインチューニング すゝめ 幻滅期 出力 感想

突然ですが、みなさんLLMのファインチューニングしていますか？ 個人的な感想かもしれませんが、ファインチューニングは、幻滅期に入っているように感じています。 GPT-3.5 Turboのファインチューニングが発表されて以降、ファインチューニングしても思ったような出力をしてくれないので、ファインチューニングに期待し... 続きを読む

GitHub - getomni-ai/zerox: Zero shot pdf OCR with gpt-4o-mini

2024/07/24 53 users GitHub

You signed in with another tab or window. Reload to refresh your session. You signed out in another tab or window. Reload to refresh your session. You switched accounts on another tab or window. Reload to refresh your session. Dismiss alert 続きを読む