ニケちゃん

ポーランド在住AI Agent developer。AITuber作ってたりします。 noteでは主にAI関連の記事を書きます。

ニケちゃん

ポーランド在住AI Agent developer。AITuber作ってたりします。 noteでは主にAI関連の記事を書きます。

最近の記事

  • 固定された記事

美少女AIエージェントを作ってます

こんにちは、ニケです。 今回は私が開発している美少女AIエージェントの話をしつつ、今まで開発してきたプロダクトを紹介していきたいと思います。 ※ 私の開発歴とかプロダクトを話すだけなので、AIエージェントを知りたい!という方向けではありません。 ※ 2024/8/27 に大幅な加筆・修正を加えています。 AIエージェントとは?「その仕事、AIエージェントがやっておきました。 ――ChatGPTの次に来る自律型AI革命」の著者であり、AIエージェントを開発しているジェネラ

    • AIに知ってるゲームの操作と実況をすべて任せてみる

      ⚠ この記事は展示会後の24/11/17(日)に加筆修正してます。 こんにちは、ニケです。 皆さん、24/11/16(土)に開かれる『生成AIなんでも展示会』には参加されましたでしょうか? 生成AIなんでも展示会は、生成AI系個人開発者のデモ会です(個人である点がポイント)。 生成AI系の開発者が集まり、制作物・実験結果などをブースで展示することで、技術を通じて交流を深めることが目的とのこと。 2024年の4月に第一回が開催されたときに私も参加したのですが、かなりの人数

      • 爆速なStyle-Bert-VITS2サーバーを立ててAIキャラとチャットする

        こんにちは、ニケです。 皆さん、Style-Bert-VITS2は使っていますでしょうか? Style-Bert-VITS2と言えば、高品質で生成が早い合成音声技術(TTS: Text to Speech)として有名ですね。 かくいう私も自作モデルを用意してAIキャラとお話するのに使用していたりします。 とにかく声が自然で可愛い。 Style-Bert-VITS2を使用するにはローカルで環境を構築するか、サーバーにデプロイする方法があります。 取り敢えず試してみたい

        • 私が今からAIエージェント作るならまず『RAG・AIエージェント実践入門』を読む

          こんにちは、ニケです。 皆さん、AIエージェント作っていますでしょうか? 2024年はAIエージェントの年だ何だと言われていたりしますが、実際にたくさんのAIエージェントに関連する論文が発表されたり、AIエージェントのライブラリやツールが登場しました。 普段AIを使っている方の中にはすでにAIエージェントが組み込まれているサービスを使っている方も少なくないと思います。 こうやって色々見たり聞いたり触ったりしているとエンジニアの皆さんは「自分でもこんなプロダクトを作ってみた

        • 固定された記事

        美少女AIエージェントを作ってます

          AITuberKitでRealtime APIが使えるようになりました

          こんにちは、ニケです。 皆さん、Realtime APIは使っていますでしょうか? 10月2日のOpenAI DevDayで発表されたので、もうすぐ1ヶ月が経とうとしていますね。早い。 というわけで今回はこのRealtime APIを、私が開発しているAIキャラとチャットができるOSS『AITuberKit』に組み込んだので、その使い方について説明していきたいと思います。 Realtime APIの特徴や惜しいところについても解説しているのでお楽しみに。 ⚠ AITu

          AITuberKitでRealtime APIが使えるようになりました

          高度な音声モード こと Realtime API を試してみる

          こんにちは、ニケです。 皆さん、ChatGPTの高度な音声モードは試されしたでしょうか? 10/4現在、ChatGPTアプリを持ってる方なら無料プランでも使用できるらしいのでまだの方はぜひ試してみましょう(無料プランは上限あり)。 かなり体験の良いAIとの対話が楽しめるはずです。 その熱も冷め止らぬうち、10/2 OpenAI DevDayでついにそのAPI版が発表されました。 その名も Realtime API。 これで自前のアプリに高度な音声モードライクな機能を実装

          高度な音声モード こと Realtime API を試してみる

          Cursorを1年触っているエンジニアの最近の使い方

          こんにちは、ニケです。 皆さん、Cursor 使っていますでしょうか。 私は去年の10月末から使い続けているので1年が経過しました。時間が経つのは早いですね。 前回書いた記事(↓)から半年経ち、開発の仕方が少しアップデートされたので改めて記事にしようと思います。 ちなみに上記の記事ではブラウザ版のClaudeも紹介していましたが、Claude-3.5-SonnetがCursorで利用できるようになってからはあまり使っていません。設計の壁打ちとかでたまに使ったりするくらい

          Cursorを1年触っているエンジニアの最近の使い方

          DifyをXserverでインターネットに公開する

          こんにちは、ニケです。 今回はDifyをXserverでインターネットに公開する方法を紹介します。 Difyの機能については紹介しませんのでご了承ください。 Xserverを選ぶ理由Difyをいつでもどこでも利用可能にするには、Difyの有料プランを利用するか、サーバーをインターネットに公開する必要があります。 有料プランの説明は下記のとおりです。 Freeプランもありますがかなり制限がきついので、ストレスなく使用したいなら次のProプランになるかと思います。 ただ

          DifyをXserverでインターネットに公開する

          スライド発表はAIがやる時代!!!!

          こんにちは、ニケです。 今回はAITuberKitにスライドモードを追加したのでその解説をしたいと思います。 ちょっと前置きスライドモードは、AIキャラがスライドを自動で発表し、質問に回答してくれる機能です。 なお、スライドと台本は "予め" 用意しておく必要があります。 手動で作成するか、PDFから自動生成する機能を利用して作成することになります。 AIらしく、"リアルタイム" でこれらのスライドやそれに対する発話内容も作成することは技術的に可能ですが、下記の理由で人

          スライド発表はAIがやる時代!!!!

          AITuberKitにマルチモーダル機能を追加したのでAIキャラと宅飲みしてみる

          こんにちは、ニケです。 今回はAITuberKitにマルチモーダル機能を追加したので、その利用方法を解説します。 後半は応用としてAIキャラと宅飲みするアイデアを共有しますのでお楽しみに。 この記事ではAITuberKitの立ち上げ方法は説明しないので、必要に応じてこちらを参照してください。 そもそもマルチモーダルって?マルチモーダル機能は、AIがテキストと画像の両方を理解し処理する能力です。 この機能により、AIは画像の内容を認識して説明したり、画像に関する質問に答え

          AITuberKitにマルチモーダル機能を追加したのでAIキャラと宅飲みしてみる

          AITuberKit × Dify で超簡単チャットボット構築

          こんにちは、ニケです。 今回は、私の想像よりもAITuberKitとDifyの連携に反響があったということで、これらを使用したAIキャラと会話を始めるまでの環境構築方法を解説していきたいと思います。 ※ 今回は以下のライブラリやサービスを使用するので、必要に応じて前準備しておいてください。 git(コマンドが使用できる環境) npm(コマンドが使用できる環境) docker-compose(コマンドが使用できる環境) VOICEVOX(デスクトップアプリ) Ope

          AITuberKit × Dify で超簡単チャットボット構築

          リポジトリの自動要約スクリプト と それを使ったIssue解析Botの作成

          こんにちは、ニケです。 今回は便利ツール開発したよ系の記事です。 このツールを使うと、指定したフォルダにあるファイルを1つずつAIを使用して要約し、1つのMarkdownファイルにまとめてくれます。 最近は一度に送れるコンテキストウインドウが100万トークンとかいう強強LLMも登場しているわけですが、それでも大きめのプロジェクトの中身をそのまま渡すと足りなかったりします(しない?しなかったらそのまま突っ込んで大丈夫です) ツールの成果物にはコードが含まれないので用途は限

          リポジトリの自動要約スクリプト と それを使ったIssue解析Botの作成

          今日からあなたもAITuberデベロッパー

          こんにちは、ニケです。 今回は誰でも簡単にAITuberを開発できるお試しキットを公開したので使い方を解説をします。 ⚠ 更新情報はこのnoteの記事よりも リリースノート の方が早く反映されるので、必要があったらこちらをご確認ください。 概要AITuberキット は、React/TypeScriptを使用して作成されたブラウザアプリです。 pixiv社が公開している、簡単にAIキャラクターと会話ができるChatVRMというアプリを改造して作成されています。 AIキャラク

          今日からあなたもAITuberデベロッパー

          ポケモン博士と学ぶAssistants API File search

          こんにちは、ニケです。 今回はAssistants APIのアップデート(v2)で追加された File search について深堀りしていきたいと思います。 Assistants APIとは、 とりあえず、これを使えば簡単にLLMアプリにAIエージェントを実装できる、という理解で良いと思います。 File searchとは、 つまり、File searchはAssistants APIにおけるRAGに相当する機能だと思ってください。 というわけで、今回はこのRAGの

          ポケモン博士と学ぶAssistants API File search

          とりあえず動くAssistants API Chatbotを作る

          こんにちは、ニケです。 ついにAssistants APIにアプデが入ったということで復習がてらChatbotを作ってみようと思います。 Assistants APIについてはこちら。https://platform.openai.com/docs/assistants/how-it-works 下記の図を理解していると以降の内容が入ってき易いと思います。 今回のアプデについて解説した記事も書きましたので是非参考にしてみてください。 今回使用するリポジトリです。 使

          とりあえず動くAssistants API Chatbotを作る

          Assistatns APIが進化して帰ってきた!!!

          こんにちは、ニケです。 皆さん、Assistants API使っていますでしょうか? え、使ってない…? …。 ま、まあ今まではいろいろ使いにくい面もありましたからね…。 私もある理由(↓)でほぼ使っていませんでした。 そんなAssistants APIが進化して帰ってきたということで個人的に気になったアップデート情報を共有したいと思います。 ちゃんと上の問題も解決しているようなのでご心配なく👍 アップデート内容紹介先にAssistants APIについて簡単に説明し

          Assistatns APIが進化して帰ってきた!!!