なんJLLM部 避難所 ★9
レス数が950を超えています。1000を超えると書き込みができなくなります。
メモリの値段が笑うしかないな。
夏に64x2を4万ちょいで買ったが、もう1セット買っておくんだった。 DeepSeek-R1、Qwen3 235B、gpt-oss-120b、GLMとかの高評価モデルを日本語ファインチューニングするところがないのは
技術的な問題なのか、それとも金がかかりすぎるからなのか 正直よくわからん会社の小規模モデルに金出してもな PFNとかたった5Tトークンで事前学習しましたとか公開してて悲しくなったよ
qwenは30Tトークンだし 10Tトークンで学習したモデルはfew shotで性能出る超高効率学習が可能になったと技術的に宣伝するような世界で5Tトークンはあまり厳しい
まずは日本語データセットの拡充を優先すべきやろ 中国語と英語の話者が日本語の数十倍なんだからかなり無理してでも日本語データ増やさないと日本文化消えるし、日本に不利なバイアスがかかるぞ
たった数年でLLMはインフラになりつつあるのに日本はほんまなにやってるだよ 今日も新興のベンチャーが80億調達したってのがニュースになってたけどやっぱり一桁足りないよなあ 東大の卒業生の志の低さは異常😅
リコーのも富士通のもNECのもそうだろ >>922
Qwen2.5 32Bとかも日本語追加学習モデルが出てきたのはだいぶ遅れてだったから、あと半年くらいしたらそのへん出るんじゃないかと思ってる
ただベースモデルの開発速度に追いついてないんだよなあ これからAI使ってゲノム解析とか新薬解析とか急激に人類の科学技術は進歩するのに、日本企業がこのザマだと頭痛い 新興のベンチャーとかいう詐欺に金出すのほんと無駄
大学の研究環境改善しないことには何も始まらんよね日本は
米中は大学の研究が凄くてその人材が民間企業に流れてるから強いわけで りんなは昔はフルスクラッチでやってたんだろ、なんでllamaベースにしたんだよ、心折れるなよ 同じllamaベースでもkarakuriのfinetuneは抜きん出ていた
今でもたまに使ってるわ AIエンジニアならしょっぱいベンチャーやるよりGAFAMに飛んだほうが儲かるわな >>905
gem使ったらすぐ脱獄できることがわかった ありがとう
ただ…今までCaveDuckっていうSillyTavernのオンラインサービス版みたいなサイトでエロ文章書かせてたんだけど、それと結構文体の毛色が違う感じがするわね こういう文章書いて！って行ったら遊びなしでそこまで一直線に書いちゃう
あといくらgemで検閲ガバガバにしても直接的な表現にはすぐ反応してくる >>936
gemでどうやって脱獄するの？
背中を押されていま有料プランに入った >>937
添付ファイルにエロ指示ぶちこんだら、ほぼほぼ無脱獄でぜんぶ通ってしまうよ
いっぽう、ジェムのカスタム指示に色々書き込むと悪さするおそれがある >>937
行動はえーな！
Gemini エロ小説 でググッたら出てくるふたばのログサイトに脱獄方法が書いてたからそれ参考にした
いい感じに出力させる方法見つけたら教えてくれよな！ >>939
ありがとう
なかなか思うようには行かないけれど
試行錯誤してみているところ
まずは感謝 >>940
コパイロットはエロ出来ないけれど、
無料で使えるGPT-5.1(ベース)としてかなり優秀になったと思う
変なAIアグリゲーター使うより安心だし 日常用に便利 カギ括弧とか「……」とかを多用するな！って書いて添付ファイルとしてgemに送ってもガン無視してきやがる
婉曲表現多すぎてエロくないし 困ったもんだ なろう系のごとくめちゃくちゃ改行するから、そんなに改行しないで🥹ってお願いすると、まったく改行の無い文章お出ししてくるからな >>893
Civitaiでお気に入りの画像見つけてそのプロンプト見てこい
プロンプトが恐らく普段使ってるLLMとはまったく異なる文法のはずだよ(Fluxを除く) >>944
……全ての、……文節に、……こうやって、……三点リーダーと、……読点を、……置いてきて、……キレそう。 30-70BくらいのパラメータのMoEモデル探してるんだけど今のところaquif-3.5-Max-42B-A3Bしか知らない
Kimi-Linear-48B-A3B-Instructっていうのもあったけどgguf対応してないっぽいから自分の環境では動かせないと思う aquifはなんかthink中みたいな解答してきて小説にならないんだけど
みんな使えてるのか？ Kimiモデルって日本語ができなくはないけどってレベル
DeepSeekみたいな万能さはないよ？ aquifは文章はなかなかいい感じだけど、最初のリクエストを延々と保持し続けるのか場面の転換ができない感じがする 微妙なサイズの量子化GGUFモデルは日本語をまるっと忘れてたりするので
前段後段に翻訳パイプラインを入れて英語か中国語で投げてやると精度が上がったりする
日英や日中の翻訳に特化したLLMが別途ローカルで動けば良いが
そもそも日本語のデータセット自体がショボすぎて学習するにも……状態らしい 日本がAIのためにやるべき事は質の高いデータセットを作ってオープンにすることだったり
海外企業も良いデータセットあれば勝手に使うし日本語性能が伸びる 25G nic買ってRoCEでpc同士でクラスター構築とかどうなんだろ？面白そうだけど。 >>957
久しぶりにRoCEの語を見たなあ
面白いよ
接続先の別PCのメモリをRAMDISKにして
そこから自PCをブートしたりしてた >>958
実際面白いのか、やってみようかなぁ。
なんかRoCEで自宅AIクラスター構築って本を見て面白そうだなと思って。
構築してllama とかでモデルを動かせるのか全く未知数だけど、、チャッピーはできるとか言ってた。 Hereticっていう検閲除去ツールが来たな
誰か使い物になるか試してみてくれ そこまでやったときはllamaの出る幕では無いかもね nictあたりでコーパス作りゃいいのよ
GENIACなんかやってもどうせしょぼいパラメータ数のしかできないんだから そういうもんなんか？docker でllama うごかしてオープンチャットだっけ、でllm構築したくらいの経験しかないからよくわからん…いろいろ調べてみるか。 >>957
RoCEに対応できるSwitchが高いんだよなあ >>964
そうなんか。まぁ2pcなら直結でいけるっぽいし、まずそれでやろかなと。 >>960
軽くソースを読んだけど、オリジナルのモデルデータがVRAMに乗らないと高速処理できないっぽい
ハイスペックの有志が検閲除去してくれるのを期待するしかなさそう レス数が950を超えています。1000を超えると書き込みができなくなります。
