clip'n

[Searched Clips]

Realtime APIを解読し音声対話の仕組みを紐解いた。常に聞いているが、常に考えてはいない。 - Tabelog Tech 2025/01/01 13:03:46 by guest; [edit]
https://tech-blog.tabelog.com/entry/advent-calendar-20241224
[openai voice ] 逆に言えば、大きな音から無音になるというタイミングがないと、AIは起動しないということです。この仕様は、ユーザとAIの二人での対話の場合であれば概ねうまく動きますが、それ以外の活用法ではうまく動かないケースもありえます。例えば次の様なケースです。

OpenAI Realtime APIのWebRTCでロボットを操作する | 豆蔵デベロッパーサイト 2025/01/01 12:17:20 by guest; [edit]
https://developer.mamezou-tech.com/robotics/ai/voice-operation/
[openai webrtc ] セッション確立後、音声はメディアストリーム、イベント（JSONデータ）はデータチャネルを介してクライアントとサーバー間でやりとりされます。以下は、ユーザーが「清掃を開始して、右旋回で」と発話してから、清掃開始に失敗したことが音声出力されるまでの一連の流れです

OpenAIの新モデルの追加と APIの更新｜npaka 2024/01/26 09:28:10 by guest; [edit]
https://note.com/npaka/n/nd8c5e9c65335
[ai llm openai ] 「text-embedding-3-small」は、新しい高効率な「Embeddingモデル」であり、2022年12月にリリースされた前モデルの「text-embedding-ada-002」に比べて大幅にアップグレードしています。

OpenAI Assistants APIで生成したファイルをダウンロードする | DevelopersIO 2023/12/31 14:24:14 by guest; [edit]
https://dev.classmethod.jp/articles/download-file-via-openai-assistants-api/
[openai llm ] 結果として返ってくるメッセージデータに、生成したファイルのID（file_id）が含まれているので、これを取り出す files.contentメソッドでfile_idを引数として指定することでファイルを取得する

OpenAI Assistants API(Playground)を使ってコーディングのアドバイスをしてくれるアシスタントを作る 2023/11/08 13:01:14 by guest; [edit]
https://zenn.dev/karaage0703/articles/66949a39643557
[openai llm chatgpt ] ちょっとだけわかりづらそうなAssistants APIを使ってみました。 Assistants APIは、Playgroundで試してみるのが簡単でオススメです。ノーコードで機能を試せます。以下リンクから入ってください。

OpenAI API の Assistant API のしくみ｜npaka 2023/11/08 12:54:08 by guest; [edit]
https://note.com/npaka/n/n9fa7204e4af4?sub_rt=share_sb
[openai llm chatgpt ] OpenAI API」の「Assistant API」は、さまざまなタスクを実行できる強力な「AIアシスタント」を作成するためのAPIです。

Azure OpenAI Service “on your data” でChatGPTに自社データを組み込む – CloudN 2023/06/20 18:53:08 by guest; [edit]
https://blog.cloudnative.co.jp/17535/
[openai azure llm ] 新しく登場したAzure OpenAI Service「on your data 機能」を使うと、GUI上での簡単な操作で自社データをChatGPTに組み込むことができるようになりました。（僕も本業はセキュリティ担当で、開発を専門にしているわけではありませんが、一晩で接続まで持っていけました）

ChatGPT plugins のベータ提供が開始され、約70種類のプラグインが利用可能になりました | DevelopersI 2023/05/15 18:06:16 by guest; [edit]
https://dev.classmethod.jp/articles/chatgpt-plugins-beta/
[chatgpt openai ] 現在、ChatGPT plugins は以下の条件を満たす少数のユーザーのみ利用可能になっています。 ChatGPT Plus ユーザーであること。 ChatGPT plugins waitlist に登録し、アクセス権を割り当てられること。

OpenAI APIを使って画像を作成してみた | DevelopersIO 2023/03/26 21:38:45 by guest; [edit]
https://dev.classmethod.jp/articles/openai-create-images/
[openai image ] response_formatは作成した画像をどのように返すかで、urlかb64_jsonが指定できます。今回はそのままローカルに画像を保存するためb64_jsonを指定しました。あとは返ってきた画像データをBase64デコードして、画像として保存するだけです。実行するたびに結果は変わりますが、次のような画像が作成されました。かなりいい感じですね

OpenAI APIで、問題のある発言を検出するmoderationモデルを試してみた | DevelopersIO 2023/03/18 21:27:12 by guest; [edit]
https://dev.classmethod.jp/articles/openai-api-moderation-model/
[openai ] Moderationは、問題のある発言を検出できるモデル OpenAI社のUsage policiesに反していないかが判断の観点（反していると判断するとtrueを返す）試してみた感じでは、かなり強い言葉でないとtrueとはならない

ChatGPTのVSCodeプラグインが神すぎる件について 2023/03/18 07:51:31 by guest; [edit]
https://zenn.dev/waarrk/articles/a6868cea7549de
[chatgpt openai vscode ] Browser: Auto-loginよりこちらの方が安定して動作しました． OpenAIのページに行ってAPIキーを生成してきます．