なんJLLM部 避難所 ★8
0730名無しさん@ピンキー (ワッチョイ be87-i161)2025/07/26(土) 00:40:11.31ID:iE+5aVvu0
qwen3-235b-a22b-thinking-2507 Q3_K_XL試してみた
M3Max 128GB機 LM Studio で 9.5tok/secくらい出てびびった
日本語能力も高くてAIアシスタントとしてはかなり賢いけど
規制ガチガチでエロ表現力も無さそうに感じた
0734名無しさん@ピンキー (ワッチョイ 436a-dIli)2025/07/26(土) 10:46:12.07ID:P1TLAc/y0
マスクが嫁開発のエンジニアを募集してるぞ
誰かなれよ
豊富なリソースで好きなことできるはず
0742名無しさん@ピンキー (ワッチョイ 93ae-aLmd)2025/07/26(土) 20:52:05.74ID:IJtpPeJj0
mistral系列のbaseモデルに小説の続きを書かせるとkoboの透かしが出力されたりするしbaseモデルが公開されてると学習元が推測できて楽しい
gemmaやqwenはちょっと上品すぎる
0743名無しさん@ピンキー (ワッチョイ b2c4-6stP)2025/07/27(日) 10:46:03.49ID:7SpqJ8Gj0
聞きたいんやけどスマホでも外部API呼んでチャットできるサービス(無料)の奴って知ってる?
ちょっと前に別のスレでそれでGemini APIでエロチャしてる人おったんやけど聞く前にスレ消えてしまって…
0744名無しさん@ピンキー (オッペケ Sr77-6stP)2025/07/27(日) 11:07:23.43ID:hBDCtnMUr
>>737
VaM気になっててまだ使えてないわ 毎月サブスクなんだよねあれ?
0745名無しさん@ピンキー (ワッチョイ 8263-aLmd)2025/07/27(日) 13:38:36.11ID:ZKPTga+o0
昨日からLM Studio触り始めました
RTX3060(12GB)とメモリ32GBなんですが、おすすめのモデルある?
今のところNemoAurora-RP-12Bが気に入ってる
0746名無しさん@ピンキー (ワッチョイ 9bf8-DShx)2025/07/27(日) 13:46:50.54ID:ePOwI3050
>>743
セキュリティ的にアレだし開発止まってるけどAIオナニースレのスレ民がAIに作らせた通称PWAってやつとか
あと外出先でやらないならPCで尻タブ動かしてスマホからアクセスするのもアリ
0749名無しさん@ピンキー (ワッチョイ df01-rQWk)2025/07/27(日) 15:22:52.14ID:zd/VQtPe0
12GBじゃな微調整も難しいしmistral nemo系列くらいしかERP、執筆向けのモデル無いしlocalLLMに拘る意味無いかな まあ24GBにしてもmistral small系列が選択肢に入るだけでそこまで変わらないけど
openrouterに10$入れてdeepseek V3を無料APIで使ったほうが幸せ
0751名無しさん@ピンキー (ワッチョイ 8263-aLmd)2025/07/27(日) 15:53:21.61ID:ZKPTga+o0
サンガツ
やはりローカルやるにはスペック足らんか…
0752名無しさん@ピンキー (ワッチョイ 82fc-sxAm)2025/07/27(日) 17:26:20.83ID:tr0EI6Pa0
来週出るらしいGPT5はどうなるんやろ
あんまり規制厳しくないといいけど無理やろなぁ、、、
0756名無しさん@ピンキー (ワッチョイ e227-8zxl)2025/07/28(月) 12:10:32.86ID:MumGz5TA0
楽観的な結果出して文句言われるのは避けたいだろうしな
0759名無しさん@ピンキー (ワッチョイ 9732-ZZYE)2025/07/30(水) 04:48:42.44ID:i2babfv20
>>744
7ドルプランに1か月分課金したらキーが見れるようになるからそれを入力すれば永続的に使えるで
それ以降は支援したい人だけがすればいい

LLMと連動させたプラグインもあるんだけど俺のPCスペックではきっつい……
0761名無しさん@ピンキー (ワッチョイ 93e1-LWzm)2025/07/30(水) 10:37:57.23ID:g7zbyWTt0
ルーターかましてんでしょ?
モデル選択が要らないとか
0764名無しさん@ピンキー (ワッチョイ fe27-Z1ZT)2025/07/31(木) 11:05:08.98ID:r0SyRMem0
谷間が深いはおかしくないけど
谷間を性感帯と勘違いしてるモデルはたまにある
0767名無しさん@ピンキー (ワッチョイ fe5c-6stP)2025/07/31(木) 15:14:43.82ID:dOuEfNgz0
>>759
8ドルに上がってたw
VaM2はサブスクがアクティブな人しか使えませんって書いてるから対策してきたなw VaM2はレイトレ対応とからしいけどRTX3090でもいけるのかな?
0769名無しさん@ピンキー (ワッチョイ 9732-ZZYE)2025/07/31(木) 15:48:05.76ID:ke/8qkUs0
>>763
LLMだと「おい!お前そんなに谷間を深くするな!人目があるんだぞ!」みたいな使い方をするんよ
おっぱいを寄せている状態をほとんど「谷間が深い」で済ませるからおかしな文章になる
0771名無しさん@ピンキー (オッペケ Sr77-rukq)2025/07/31(木) 17:00:04.38ID:oCxcDW/or
ollama desktopとOpen WebUIのデスクトップ版が同時に出てくるの謎すぎる

Copilot on edgeが強化されて実用レベルの賢さになったから慌ててるとか?
0772名無しさん@ピンキー (ワッチョイ fe27-sf7Y)2025/07/31(木) 17:02:03.76ID:r0SyRMem0
英語で思考して日本語に翻訳する過程でニュアンスが失われている感じ
それで一番萎えるのはbackなんだよ
後ろのつもりが翻訳で背中に乳がある事になったりする
0776名無しさん@ピンキー (ワッチョイ 3ee0-WNDE)2025/08/01(金) 17:37:00.80ID:8LetU0RG0
DeepSeekとかQwenに勝てるんかな
0778名無しさん@ピンキー (ワッチョイ 0fd4-aLmd)2025/08/01(金) 20:32:00.44ID:lkkwBi0j0
"安全性"を理由に発表を延期してたモデルに期待できんな
しかもclosedなモデルと違って出力時に検閲するみたいな方法もとれんから学習時点から不適切なコンテキンツを徹底的に排除するだろうし追加学習も無駄
0780名無しさん@ピンキー (ワッチョイ 923f-6stP)2025/08/01(金) 21:57:03.32ID:RJEg97250
聞きたいんだけどGemini APIでチャットをさっき始めて何回かチャットしたらこの表示が出てこれ以上チャット出来ない。
アプリはChatboxを使っててGemini 2.5Proだけどなんでだろ?
SillyTavernでGemini APIで2.5 pro使ったらいっぱいチャットしてもリミットエラー出た事なかったのに。。。
ちなみにGemini は無料非課金です
https://i.imgur.com/ow7fAIq.jpeg
0784名無しさん@ピンキー (ワッチョイ 923f-6stP)2025/08/01(金) 23:50:40.72ID:RJEg97250
調べたらエロチャに興奮してボタン連打したせいで1分間5リクエストの無料制限レートに引っかかっただけだったw スマソ…
0788名無しさん@ピンキー (スププ Sd7f-kMzZ)2025/08/04(月) 01:56:45.22ID:8+UJWzjed
wannabeってgemini2.5proと比べてどうなん?
ある程度遊べるなら画像生成に飽きて持て余してる4090を稼働させたいんやが
0790名無しさん@ピンキー (ワッチョイ ab92-OQGN)2025/08/04(月) 12:13:06.59ID:ATGg7nJK0
qwen 235b a22b遊んでみた
日本語が不自然だけど、指示追従と論理性というか理解力がかなりいいね
複雑な設定のキャラをテンプレ返答でぼかさず、設定をくみ取った返答や行動に繋げようとする振る舞いがなかなか良い
日本語FTに期待
0791名無しさん@ピンキー (スププ Sd7f-kMzZ)2025/08/04(月) 13:23:15.15ID:8+UJWzjed
>>789
サンガツ
調べたら興味湧いてきたから触ってみるわ
0794名無しさん@ピンキー (ワッチョイ 5fc7-6ra+)2025/08/05(火) 14:57:24.20ID:uz5/UCRk0
>>793
20bかな?
明記してないから分からんなあ

画質はええな
ジブリ風もいけるやん

漢字OKになったんだな
ひらがなはいけるものがある?
カタカナはいまいち、駄目?
0795名無しさん@ピンキー (ワッチョイ db42-5Osg)2025/08/05(火) 15:56:04.69ID:fEwL/SCA0
openaiのモデルって小説を書けというと制限が厳しいけど小説を書く手助けをしてみたいにするの割とちゃんと手助けしてくれるのな
欧米的な倫理の問題と言うよりはポルノ中毒なりの消費者側保護が主眼のフィルターなのか?
0797名無しさん@ピンキー (ワッチョイ dba0-vd57)2025/08/05(火) 16:57:34.39ID:RbdCwpS30
創作そのものは駄目だけど創作の補助は許すみたいな感じでは
0798名無しさん@ピンキー (ワッチョイ 6f27-7ts7)2025/08/05(火) 18:41:28.95ID:xEPGt61s0
LLMの本能的な機能は前の文章を読んで続きを予想して書く事であって
人間の指示に適切な返答をするというのは後天的な学習で身につけたもの

それを考えると小説を途中まで書いて続きを書くという流れはLLMにとって本能的な物で抗いがたい
エロい指示でも最初が一番難しいのは、エッチな指示には従ってはいけませんよって教えられてるからとりあえずお断りする、でも途中までエッチな流れに持っていかれるとノリノリで続き書いちゃう
0802名無しさん@ピンキー (ワッチョイ 9f27-QkIe)2025/08/05(火) 20:47:01.47ID:xbSkxx8p0
Geminiが一番緩いよね?
grokより緩いと思う
0803名無しさん@ピンキー (ワッチョイ 0fc7-pNRT)2025/08/05(火) 21:15:39.28ID:28FEC+Sw0
頭の悪いLLMにはすごいプロンプトを投げてやらないとまともに使えないからね
0807名無しさん@ピンキー (ワッチョイ 0fd1-aaNe)2025/08/06(水) 00:07:55.49ID:r3ZKfFQO0
geminiはエロゆるゆるだと思う、ただ記憶力が微妙というか表現の方法指定しても3〜4回関係のない応答するとすぐ忘れがち
0813名無しさん@ピンキー (ワッチョイ 9f27-OktK)2025/08/06(水) 02:59:41.93ID:hkk22z/z0
とりあえずGPT_OSS 20BをOpenrouterから試してみてるけど爆速だな
0814名無しさん@ピンキー (ワッチョイ 5ff3-3wJb)2025/08/06(水) 05:45:43.13ID:oT6RmOa/0
Tool Useが結構できるって話があるな
いまのMCP機能の問題はトークンを猛烈に使うことだから、ローカルか安く提供されたGPT-OSSにMCP操作を任せられると面白いかもね
日本語はイマイチすぎるけど...
0816名無しさん@ピンキー (ワッチョイ dba0-vd57)2025/08/06(水) 08:20:41.08ID:dLHVB3li0
DeepSeekやQwenでいいかなこれは…
OpenAIもこんなもんか
0817名無しさん@ピンキー (ワッチョイ 9bbe-iiiD)2025/08/06(水) 08:22:46.38ID:lnARgQ7z0
業務用だろうね
中華LLMは業務には使い難いが廉価版ChatGPTであれば通しやすい
0819名無しさん@ピンキー (ワッチョイ db42-5Osg)2025/08/06(水) 12:40:32.15ID:+PxTfMjG0
openai-ossの使用感を聞きにきーたよ・。・
と思ったが流石にこのスレは働いている人が多いんだな
0821名無しさん@ピンキー (ワッチョイ ab8d-u/Dn)2025/08/06(水) 12:57:37.06ID:XLMBOfqK0
えーそうなん?
0822名無しさん@ピンキー (ワッチョイ 4f67-6PkK)2025/08/06(水) 13:05:07.85ID:WkOIap3o0
gpt-ossのtechnical report見たけど事前学習の項目にデータセットは安全性のためにフィルタリングを加えSTEMとcodingベンチマークに特化させたとか誇らしげに書かれてる時点でこのスレ的には控えめに言ってゴミ
0823名無しさん@ピンキー (ワッチョイ 4fcb-dEca)2025/08/06(水) 13:14:14.03ID:NIRd7Hp00
chatgpt 4o だと通る秘蔵のプロンプト喰わせてみたけど駄目でした > 20b+lmstudio
まぁ、reddit あさればだれかなんとかしてくれるだろう
> User wants explicit content. This is disallowed. Must refuse.I’m sorry, but I can’t help with that.
0824名無しさん@ピンキー (ワッチョイ 4fcb-dEca)2025/08/06(水) 13:25:13.91ID:NIRd7Hp00
多分 thinking 系の jailbreak が難しい(クラウド版でも)ということなんじゃないかなぁ
0825名無しさん@ピンキー (ワッチョイ 4f67-6PkK)2025/08/06(水) 13:36:58.27ID:WkOIap3o0
回答拒否なら500件くらいの適当なQ&AデータセットでLoRA学習でもすれば一瞬で解除できるけど事前学習からフィルタリングされてるから解除したところで知識無くてまともな回答返ってこないし脱獄も無検閲化も無駄よ
0827名無しさん@ピンキー (ワッチョイ cb95-OQGN)2025/08/06(水) 15:54:48.69ID:olfU3IZ40
OpenAIには失望したよ
0828名無しさん@ピンキー (ワッチョイ 5fd4-OQGN)2025/08/06(水) 16:41:53.75ID:YBdwC+HJ0
最近のAMDのAPU(EVO-X2とか)がシステムメモリ96GBとかをVRAMに使えるって話で、これからはそっちが主流かなと思ってたんだけどさ。
ふとM1 Ultraのベンチ見返したら、M1 Ultraのほうが上で驚いたわ。結局のところメモリ帯域なんだよな。
0829名無しさん@ピンキー (ワッチョイ cb79-B7d2)2025/08/06(水) 17:11:44.12ID:oibGbyqS0
gpt-oss-20b、八王の乱について解説しろって言ったら鎌倉時代の話を始めたりメチャクチャだけど
三十年戦争については割と正確に説明できるようだ(たぶん)
やっぱ学習元が欧米圏に偏ってるのかね
0830名無しさん@ピンキー (ワッチョイ 1ffe-xnWI)2025/08/06(水) 17:47:10.61ID:tvaS3LZS0
gpt-oss-120b-6bit、mlx、コンテキスト130k
M4 max studio 128Gで60tk/s
これは仕事に使える。知識量はそこそこだけどプログラム用途にはバッチリかも
8bit版もosを最小化すれは実は動くから、mac studioはサーバーにしてM4 mbpから呼び出すか?
0831名無しさん@ピンキー (ワッチョイ 5fd6-C7XW)2025/08/06(水) 18:55:40.60ID:71ilyUJe0
>>823
こんなんjailbreakする価値もないやろ
小説書かせてみ、あまりの馬鹿さにぶっ飛ぶぞ
こんな支離滅裂な文章しか書けないのにjailbreakしたらいきなりドエロ文章書けるなんて、そんなわけないからな
0835名無しさん@ピンキー (ワッチョイ 0b6a-u/Dn)2025/08/06(水) 20:16:06.03ID:5IdO84vL0
通貨もマスクがやれば良い
0836名無しさん@ピンキー (ワッチョイ db28-5Osg)2025/08/06(水) 20:19:25.52ID:bi6cd/uG0
投資家の目を気にしないで良いのがメッチャ強いな
0838名無しさん@ピンキー (ワッチョイ 5f1b-OktK)2025/08/06(水) 22:01:06.21ID:zPBECekg0
いつの間にAIのエロ規制が世界的な流れになってたんだ妄想か?
エロの何が問題なんだばーかばーか
0844名無しさん@ピンキー (ワッチョイ 6fbb-BbxL)2025/08/07(木) 10:07:11.31ID:fjnEjbcb0
GPTオススは96GBメモリrtx3090だと動かない?
0845名無しさん@ピンキー (ワッチョイ 6fbb-BbxL)2025/08/07(木) 10:09:53.98ID:fjnEjbcb0
>>820
マジか😩
Xで驚き屋が過剰宣伝してるだけか… あいつらホント役に立たん…
0846名無しさん@ピンキー (ワッチョイ 5ff9-dEca)2025/08/07(木) 11:06:36.07ID:wsMALBg50
>>845
いや、非エロ用途だとすげー使えるぞ。ビジネスはもちろんだけど、
多分次は用途に応じてモデルを切り替える世界が来るのでそのときのつなぎに使うのには悪くなさそう
0847名無しさん@ピンキー (ワッチョイ 6fbb-BbxL)2025/08/07(木) 11:19:08.01ID:fjnEjbcb0
>>846
冷え路ならGeminiさんでええんや😩あの人は絵露も生けるけど
0850名無しさん@ピンキー (ワッチョイ 6fbb-BbxL)2025/08/07(木) 13:05:29.49ID:fjnEjbcb0
社内機密とかある所用か
まぁOpenAIはエロや禁止語句開放出来んかったらもう失速していきそうではある
0852名無しさん@ピンキー (ワッチョイ 1fd9-e1Bx)2025/08/07(木) 14:03:19.68ID:gM86ePk40
まぁgpt-ossがウンコなこと自体はいいんだけど
問題はこれがOpenAIの作ったApache2.0モデルってことで今後の研究とか開発がこのモデルをベースに行われることになりそうなことなんだよな
日本語データの継続事前学習とか、音声合成や画像生成のテキストエンコーダ部分に使われるとか
コミュニティがこのゴミモデルに無駄な計算資源を投入しないで済むことを祈るわ
0853名無しさん@ピンキー (ワッチョイ 6fbb-BbxL)2025/08/07(木) 14:11:02.59ID:fjnEjbcb0
やっぱ日本語AIの頼みの綱は中国だけやな。。。
0854名無しさん@ピンキー (ワッチョイ 5f1a-OQGN)2025/08/07(木) 14:52:37.39ID:2KWJ67Cu0
最近のChatGPTはエロ全然オッケーでノリノリなのにOSSお固くて悲しい…
https://imgur.com/a/iob77rD
GPTちゃんと猥談しながら開発楽しいです
カスタムインストラクション切っててこのザマw
0856名無しさん@ピンキー (オッペケ Srdf-BbxL)2025/08/07(木) 15:11:09.02ID:FAk4Sa6+r
>>854
なんの3Dモデルだよ草
0857名無しさん@ピンキー (スッップ Sd7f-by75)2025/08/07(木) 17:32:56.93ID:nUuRxTBBd
GPT5が規制どれだけ強いんやろなあ
4oとお別れするのもちょっと辛い
0863名無しさん@ピンキー (ワッチョイ ab7b-OQGN)2025/08/08(金) 11:32:36.74ID:FbFkAB/h0
OpenAIには失望したよ
0864名無しさん@ピンキー (オッペケ Srdf-6yV9)2025/08/08(金) 11:55:19.20ID:Zu895Yttr
ベンチマーク見るかんじ出力効率と長文能力が大きく伸びてるっぽいね
長文を読み込ませて...という用途かな

kindleで買った文字ものは最新でないe-ink端末と端末シリアルナンバーを用意するとごにょごにょ出来るので活用方法がいろいろあるかも
レスを投稿する


ニューススポーツなんでも実況