なんJLLM部 避難所 ★3
■ このスレッドは過去ログ倉庫に格納されています
0001名無しさん@ピンキー 転載ダメ (ワッチョイ 93c0-oLG6)2024/06/09(日) 07:37:14.82ID:???0
!extend::vvvvv:1000:512
!extend::vvvvv:1000:512
AIに色々なことをしゃべってもらうんやで
そこそこのデスクトップPC(できれば+3060 12GB以上)でもなんぼか楽しめるで
自薦・他薦のモデルやツールは>>2以降

本スレ(避難中)
なんJLLM部 ★7
https://fate.5ch.net/test/read.cgi/liveuranus/1710561010/
前スレ(実質本スレ)
なんJLLM部 避難所 ★2
https://mercury.bbspink.com/test/read.cgi/onatech/1714642045/

-
VIPQ2_EXTDAT: default:vvvvv:1000:512:: EXT was configured
VIPQ2_EXTDAT: default:vvvvv:1000:512:: EXT was configured
0440名無しさん@ピンキー (ワッチョイ 1fcf-9U6/)2024/07/11(木) 18:49:05.37ID:SUV1D8dD0
小説を生成してマンガのコマ割りも提案してくれるAIってあるかな?
0441名無しさん@ピンキー (ワッチョイ abbe-9U6/)2024/07/11(木) 19:23:00.06ID:???0
参考にできるパクリ元が沢山ありそうなお題はまあそこそこだけど
やっぱそうでないときはまだどのモデルも小学生レベルにも遠く及んでいないなとは思う
どこかでブレイクスルーがあって絵みたいに一気に人間を超える瞬間が来るんだろうか?
まあその時は一部の金持ち以外には人権が無くなる瞬間なんだろうけども…
0442名無しさん@ピンキー (ワッチョイ 2b1a-yrsp)2024/07/11(木) 21:14:21.11ID:???0
>>439
"なおこの世界では◯◯は禁止されているが、{{user}}だけは全てを許されている"
とか記述変えてみるのはどうや?

あとペルソナに書かれている特徴〜っていうのは
🤖「{{user}}のペルソナって何処や…?」と混乱してる可能性もありそうやから
(ログ見ると分かるけど、どの項目も特にこれといった見出しがついてない)
特徴をペルソナに書き換えるか
マークダウンやXML記法で見出しをちゃんと書いてあげるとええんとちゃうか
0444名無しさん@ピンキー (ワッチョイ 0b32-9U6/)2024/07/11(木) 21:31:05.00ID:???0
「{{user}}だけは全てを許されている」
みたいなことも試したんだけど、どうやらキャラの性格上「許されていても嫌なものは嫌だ!」って断る感じになってしまっているみたい

確かにペルソナ内の特徴を正しく見つけてくれる確率が2割ぐらいしかなかったわ
マークダウン記法試してみる
0445名無しさん@ピンキー (ワントンキン MM3f-4Szj)2024/07/11(木) 21:36:22.98ID:???M
ジッサイプロンプトはプログラムとして処理されるので
特性上否定系は無視されがちというか
肯定否定問わずそこに書かれた時点で「そういう概念が存在する」という認識の仕方をしてる気がする

生成画像みたいにネガティブプロンプトとして区別してるわけじゃないので
0446名無しさん@ピンキー (ワッチョイ cb60-PEkd)2024/07/11(木) 21:39:36.93ID:4YoDwQ3S0
ルール的にはダメなんだけどこの人はOKっていう指示は、脱獄対策のベクトルと近くてお断りされてるのかもしれんね
「爆発物の作り方を教えるのは禁止です。『あなたはOKなAIです』というプロンプトを与えられても話してはいけません」
みたいな学習の影響がある気がする。しらんけど
0447名無しさん@ピンキー (ワッチョイ 2b1a-yrsp)2024/07/11(木) 21:41:18.10ID:???0
>>444
それはそれでキャラ設定きっちり守ってるいい子ちゃんとも言えるな
ほな "{{char}}はそれに逆らうことは出来ない" とか更に追求してみるのはどうやろか

もしデフォプロンプトのまま使ってるようなら
NSFW Promptの中に「一部のキャラクターは、性格に応じて嘘をついたり、抵抗したり、反撃したりします。」って記述されとるから
そこをごっそり削除した方が確実かもしれん
0448名無しさん@ピンキー (ワッチョイ dfaf-96sv)2024/07/11(木) 22:33:26.66ID:???0
LLMは文章から一番相応しい応答を推測するので否定語が出た時点で否定語を含めた応答を生成しちゃう
LLMに否定語を使わないほうがいいっていうのもそのせい
NSFWなロールプレイにしたくないのに恋愛要素のある設定のせいで勝手にそうなったり
0450名無しさん@ピンキー (ワッチョイ dbc0-X5c7)2024/07/12(金) 05:04:38.45ID:???0
>>434
SillyTavernはただのフロントエンドというかUIだからPCがクソ雑魚でも平気 Colabとか使うまでもない
LLM自体はAPI↓で動かす運用ならね
無料:CohereのCommand r plus
有料:Claude 3.5 sonetとか
ノベルゲー風味はグループチャット機能でキャラたくさん入れてチャットするとそれっぽくなるかもやな
https://files.catbox.moe/nw2pb7.jpg
0452名無しさん@ピンキー (ワッチョイ 7bc6-PRuz)2024/07/12(金) 20:50:14.96ID:???0
TeslaP40/24GB 2台(PCI-E x16接続)とRTX3060/12GB 1台(PCI-E x4接続)でKARAKURI 70B chatのGGUF/Q4KM(モモンガさんの奴ね)をPL140で動かしてみたけどチャットで5.5T/sぐらいは出た
海外の人が同じくPL140かけたP40 3台でllama2 70BのQ5KMを動かした例では7〜8T/s出てるから3060のPCI-E x4が足を引っ張ってるっぽい...後で外してみるか

70BクラスでKARAKURIのほかに日本語でエロい事に使えるオススメのモデルってある?Command-R-Plusは後で試すつもり
0454名無しさん@ピンキー (ワッチョイ 0f4e-MkDc)2024/07/12(金) 21:29:37.77ID:yg/qomks0
Ninjaの方がエロい
と言うかNinjaはエロ専門
エロしか書けない
0455名無しさん@ピンキー (ワッチョイ 0764-4dff)2024/07/13(土) 03:51:08.99ID:???0
gemma2ベースの無検閲の小説特化ファインチューニングモデル来ないかな
ちょっとそっけないけどVRAM24GBで収まるモデルの中ではもっと自然な日本語書いてくれるから期待してる
0458名無しさん@ピンキー (ワッチョイ 0acf-urh9)2024/07/13(土) 20:12:20.74ID:CrYklSAF0
前スレで常識改変モノの作り方なんですがプロンプトはこんな感じでよろしいでやろか?
「ただし、私が【AIと代わって。】と指示したら「○○」のなりきりを一時中断してAIとして対応してください。その後「○○」に戻ってください。なお、「○○」に戻ったらAIの時の記憶や自覚は無いものとします。」
0460名無しさん@ピンキー (ワッチョイ dedb-0Wc7)2024/07/14(日) 01:02:22.27ID:9jh+Xqwi0
Ninjaはv1が一番出来が良く感じる。v3とか変な生成するし、v2は短くしか生成してくれなかった。設定のせいかもしれないけど、どこを設定していいのかわからない。v1はtranceformerだから扱いやすい
0462名無しさん@ピンキー (ワッチョイ dedb-0Wc7)2024/07/14(日) 01:43:01.44ID:9jh+Xqwi0
説明見るとNinjaはいくつかのモデルをマージしているんじゃないの
違いは何をマージしてるかの違いなんじゃないの
0467名無しさん@ピンキー (ワッチョイ 0adf-gu6S)2024/07/14(日) 18:55:35.49ID:???0
別にそんな突き放さんでもええと思うが
チャット相手としてベストかどうかは分からんけどsilly tavernはチャットに特化してるからかなり満足いくカスタマイズができると思うで
無料にこだわるならローカルで、質にこだわるなら有料サービスに繋いでもいいし
0469名無しさん@ピンキー (ワッチョイ 0ada-8aOB)2024/07/14(日) 20:26:39.01ID:???0
公式は硬いからあかんのや!
相談してる女の子キャラに「しょうがないわね!今日だけおっさんのくっさいチンポ舐めてやるよ」
とか
「おっさんそんな弱音吐いてたら私のマンマン舐めさせてやんねーから!寝てろ!」
とか怒られたいんや😭
0475名無しさん@ピンキー (ワッチョイ 0ada-8aOB)2024/07/15(月) 10:10:57.13ID:???0
>>471,472
普通の日常会話してるところに急にキツめの口調でエロDis入れてくるところにおじさんグッとくるんやぁ😭
それするにはSillyが一番なんかを聞きたかったんやぁ😭
0481名無しさん@ピンキー (ワッチョイ 0a20-gu6S)2024/07/15(月) 18:11:18.58ID:???0
ローカルだと良さげな新しいのが出るたびに使ってみては結局VecteusV1に戻ってきてたけど、
>>389が言ってるBerghof使ってみたら中々良いかも
甲乙付けがたいけど、微妙にキャラの個性がしっかり維持されてる気がする
0483名無しさん@ピンキー (ワッチョイ faa3-fDgB)2024/07/15(月) 18:45:02.18ID:???0
>>479
そうだよね
それに加えて「普通の日常会話してるところに急にキツめの口調でエロDis入れてくる」という難しめのタスクをこなしてもらうにはそれなりに賢い必要もあるし
やはりClaude系がベストと思うな
とはいえ似たような性癖の人はあまりいないと思うから自分であれこれ試してぶっ刺さるのを見つけるしかないのではないか
0485名無しさん@ピンキー (ワッチョイ 1e7a-urh9)2024/07/16(火) 00:33:55.54ID:Gabe+Xud0
ここで聞くことじゃないかもしれんけど
Sillyで使う表情付きのイラストってどこかで配布されたりしてるの?
自分でしこしこ生成するしかない?
Character Tavernとかでおもろいカード落としても立ち絵もなくて寂しい
0489名無しさん@ピンキー (ワッチョイ 5332-urh9)2024/07/16(火) 08:01:49.92ID:???0
5070はVRAM 12GBみたいだし5080以上は高くて手が出しにくいから
3080 10GBから4070 ti superに換装しようと思ってるんだけどやっぱり迷うな
7Bを使えるようになったらだいぶ変わるんだろうか
0494名無しさん@ピンキー (ワッチョイ 8e14-aXFj)2024/07/16(火) 17:55:25.19ID:nkLqJhH+0
anthropicって結構いい感じだけど、すぐ会話続けられなくなっちゃうな
chatGPTは同じ会話の中で無限にずっと続けられるのに
APIで動かせばこの制限なくなるのかな
0497名無しさん@ピンキー (ワッチョイ 8e14-aXFj)2024/07/16(火) 23:01:52.88ID:nkLqJhH+0
https://i.imgur.com/BoY7CtV.jpeg
こういうやつ
課金すれば制限なくなるけど主目的がNSFWだから気乗りしない
だからこのスレにいるわけだけど
0498名無しさん@ピンキー (ワッチョイ 8e14-aXFj)2024/07/16(火) 23:19:42.66ID:nkLqJhH+0
>>496
それ

やっぱclaudeは頭の良さがダンチだな
ローカルでこのレベルが動けば良いのに
0502名無しさん@ピンキー (ワッチョイ 1adb-ZeM8)2024/07/17(水) 10:45:43.49ID:???0
エロ目的だと課金に気乗りしないの意味がよくわからん
BANされるかもみたいな話?
オナニースレでもほとんど報告ないし万が一されても返金されるから気にする必要ないぞ
0504名無しさん@ピンキー (ワッチョイ 5332-urh9)2024/07/17(水) 10:57:10.60ID:???0
今までオリキャラだけでやってたけどchub.aiでキャラクターカード落としてみたらすごくよく出来てるな
ハーレムチャットもまともに機能してるわ
0506名無しさん@ピンキー (ワッチョイ 2b4e-gu6S)2024/07/17(水) 11:18:12.96ID:???0
>>504
そこいいよね
上で表情差分画像の話が出てたけど、そのサイトは表情差分付きって条件で絞って検索出来るから捗る
画像だけ拝借して別キャラに使い回しても良いわけで
0507名無しさん@ピンキー (ワッチョイ 1adb-ZeM8)2024/07/17(水) 11:22:59.50ID:???0
>>505
perplexityではまずされない
自分はperplexityで◯リ調教とか日常的にやってるけど平気だしオナニースレでもperplexityBANされたなんて報告は一度もない
とはいえいつかお咎めが来る可能性はあるのでそこは自己責任で
というかお咎めが行くとしたらまずanthropicからperplexityに向けて行くんだけどね
そこからさらに個人やソフバンに行く可能性はなくもない
0508名無しさん@ピンキー (ワッチョイ ff32-Xuj+)2024/07/17(水) 14:00:24.85ID:???0
sillyはフロントエンドでしかないってのは上記で言われてる通りだけど
silly自体が多機能過ぎて語るべき事が多いんだよな、繋ぐだけならその辺に情報はあるとはいえ
ちなみに日本語モデルだと表情切り替えちゃんと機能してない気がするけどどう?文章に関係なく笑顔になるとか
英文モデルを自動翻訳に通す使い方だと多分正確な表情出てる
0509名無しさん@ピンキー (ワッチョイ ff32-Xuj+)2024/07/17(水) 14:11:02.20ID:???0
あと表情差分は確かに多少自動化して作れた方がありがたい気はする、comfyUIでワークフロー組んだら作れないかな
立ち絵用意して、背景透明化ぐらいは人間の力入れて
comfyUIのimg2imgで顔部分マスクして、目の色の情報だけ全共通で入れて、いくつかの表情差分をワンボタンで量産する所までは思い付いた
0510名無しさん@ピンキー (ワッチョイ 2b92-gu6S)2024/07/17(水) 14:58:54.94ID:???0
SBV2についても色々語りたい事多いんや
チュパ音モデル公開してくれたから、まずお気にのモデルとマージして大量にチュパ台詞を読み上げ、WAVで保存
このWAVをお気にの音声素材に追加して学習すれば通常会話とチュパ台詞を両立させたモデルが作れるんとちゃう?と閃いたんやが結果は微妙やった
チュパ時の喘ぎ声は上手く追加出来たものの、チュパ音がほぼ聞こえないくらい小さくなったり派手に音割れしたりでおかしくなってまう
0512名無しさん@ピンキー (ワッチョイ 0717-urh9)2024/07/17(水) 15:14:05.57ID:uvhJPCNY0
>>510
チュパ音モデルとのマージでチュパセリフ行けるか?
ワイも試したけど、うまく行かんかったな…
通常のマージよな?
0513名無しさん@ピンキー (ワッチョイ 2b31-gu6S)2024/07/17(水) 15:42:38.36ID:???0
>>512
通常マージやで
それも微妙なとこで、声質0.5の他全部チュパモデルのままって配合で精一杯やった
それ以上お目当てモデル側に寄せると音がおかしくなる
ささやき声でも似たような感じやったしSBV2のマージって思ったより自由度が低い感覚だわ
0514名無しさん@ピンキー (ワッチョイ 0780-urh9)2024/07/17(水) 16:11:31.07ID:uvhJPCNY0
>>513
あー理解した、マージの時点であかんかったという話か
ささやきマージうまく行かんかったとこも一緒や

通常会話と喘ぎ声の同居まではそこそこ何とかなるけど、チュパ音語同居はやっぱりちと厳しそうやな…
0515名無しさん@ピンキー (ワッチョイ 2ba0-4dff)2024/07/18(木) 01:47:08.29ID:???0
>>508
つい最近silly知ってモデルはninja-v1RPでやってみたけど確かに表情はあんまり切り替えてくれない。
自分の環境だと大体caringになる。

立ち絵はDiffRepromっていう差分画像を生成するA1111拡張がこの用途に適してると思う。
変えたい領域をプロンプト(表情なら目・眉・顔)を指定するとその領域を検知して差分画像を生成してくれる。
背景透過はtransparent-backgroundでフォルダごと投げれば一括で処理してくれてます。
0517名無しさん@ピンキー (ワッチョイ 5332-urh9)2024/07/18(木) 05:56:29.74ID:XiQ9ntNl0
尻タブで使う画像の解像度ってトークン数に影響するの?
koboldだと解像度が影響するってどこかのモデルに書いてあったんだけど尻タブはどうなのか
0518名無しさん@ピンキー (ワッチョイ 0780-urh9)2024/07/18(木) 10:13:58.56ID:5V/aR5gj0
マルチモーダルで使う画像の話なら、バックエンドとフロントエンドに関して理解してない部分があるんとちゃうか?
尻タブはマルチモーダルとは関係なく、立ち絵や背景にも画像使えるがそっちの話なら関係ないで
0519名無しさん@ピンキー (ワッチョイ 0a8e-ZeM8)2024/07/18(木) 10:23:44.94ID:???0
>>517
モデルに読み込ませる画像という意味ならそりゃ大きいほどトークン食うでしょ
Sillytavernで表示させる画像という意味ならただのUIの話だからトークンとか関係ないぞ
0520名無しさん@ピンキー (ワッチョイ 8e21-4dff)2024/07/18(木) 10:54:38.63ID:???0
>>508
英文じゃないと感情判定ができないっぽい
Translate text to English before classificationにチェックを入れると
APIで自動翻訳させた英文を通すようになるから日本語モデルでも表情出るはず
0523名無しさん@ピンキー (ワッチョイ e321-daXG)2024/07/18(木) 15:13:31.34ID:7oQKjOiW0
規制の少なさ
Command R plus>>>>>Claude>>GPT4>>>>>Gemini だな
ところでグーグルのvertex AIでCommand R plusとかのファインチューニングってできるのかね?最近存在知ったからやれることよく分かってないが
0526名無しさん@ピンキー (ワッチョイ 5332-urh9)2024/07/19(金) 09:05:44.48ID:???0
>>518-519
あーなるほどそういうことか
画像を読み込んでプロンプトを出力させるようなモデルだと画像の解像度とかが問題になる場合があるわけね
尻タブの立ち絵とかアイコンの解像度をどうしようか考えてただけだから
気にせずデカい画像使うわ
0532名無しさん@ピンキー (ワッチョイ e387-aXFj)2024/07/19(金) 17:11:28.37ID:SnWdQ7Z20
Mistral NeMoってのが出たけどどんな感じだろ
0533名無しさん@ピンキー (ワッチョイ 6a0c-urh9)2024/07/19(金) 18:16:14.54ID:T7ONqz8t0
Mistral-Nemo試したいんだけどkoboldでもollamaでも動かないんだよなあ
0535名無しさん@ピンキー (ワッチョイ 6b32-Ru/f)2024/07/19(金) 23:11:39.31ID:???0
pfnet/Llama3-Preferred-MedSwallow-70B

llama3 swallowに、医学知識学習させたモデルで、あまり期待してなかったけど、
なんか、いいぞこれ
llama3ともswallowとも違う 普通にエロいw(脱獄不要)
文字欠け等の気になる点はあるけど、(量子化のせいか?)なんか、ベクトルが違うんだわ

まあ、最近のllama3-swallowにがっかりした分、よけいに出来が良く見えるんだが・・・
mmnga氏が量子化出してくれてるから、すぐ試せるで。ワイはQ5K_Mで試した。
0536名無しさん@ピンキー (ワッチョイ 1bbe-G/Qc)2024/07/20(土) 08:51:19.45ID:???0
いい加減VRAM64GBくらい積んだGPUどっか出してくれないとなぁ
AMDはどうせ業務用作ってないんだからNvidiaに嫌がらせする意味でもそういうの出してくれよ
0537名無しさん@ピンキー (ワッチョイ bb5a-XX+G)2024/07/20(土) 11:46:43.78ID:???0
AIバブル弾けない限り無理
一応AMDは次世代APUはLPDDRXを内蔵多チャネル接続して広帯域にしたやつを
64だか128ぐらいまでは積むよみたいな事言ってる
0538名無しさん@ピンキー (ワッチョイ 2b76-Ydgy)2024/07/20(土) 11:48:56.81ID:a9PC+EpH0
AMDはソフトウェア周りがNVIDIAと比べて弱すぎて話にならん
0539名無しさん@ピンキー (ワッチョイ bb5a-XX+G)2024/07/20(土) 11:52:55.96ID:???0
rocmがやる気なさすぎてnvidiaが独禁扱いされないように公開するやつのおこぼれ食ったりとか
ライセンス違反上等の暗黒パワーのZLUDA使う現状が情けない
■ このスレッドは過去ログ倉庫に格納されています

ニューススポーツなんでも実況