SEが最近起こったことを書くブログ

ITエンジニアが試したこと、気になったことを書いていきます。

2023年11月27日の週に気になった記事などまとめ

GPT APIを使ったテキスト生成コンペ@YANS2023に参加した話

speakerdeck.com

  • 広告コンペでドメイン知識をプロンプトに記述して取り組んだ
    • ドメイン知識を入れるために、人間が広告のよい要素を学習した
    • 生成された広告文を人間が評価し、プロンプトを調整した
  • GPTによる自動評価はワークしなかった

日常能力を試すテスト『GAIA』正答率、人間92%に対してGPT-4は15% 一般的なニーズに応えるAI開発の指針に

aiboom.net

  • AIの能力評価における新たな基準を設ける試みとして「GAIA」というベンチマークが開発された
    • 人間にとっては日常的で簡単なタスクをAIがどれほど達成できるかを試すもの
  • LLMは法律や化学などの専門的なスキルを必要とするタスクではすでに人間を上回る傾向にある一方で、日常的なタスクを網羅的に行う能力においては人間にまだ及ばないという見方ができる結果となった

ドメインの放棄 企業はどのようにドメインを捨てるべきか?

webweb.hatenablog.com

  • 期限切れドメインが取得される理由
  • ドメインを捨てる際のポイント
    • リンクを張ってくれているサイトに可能な範囲で連絡
    • 301リダイレクトを一年間 継続
    • サイトにアクセス出来ない状態で十年

re:Invent関連イベントスケジュール(日本時間)

event.classmethod.jp

GPT-4でコードを生成するなら“日本語”と“英語”どっちがいい? 日立製作所が検証

www.itmedia.co.jp

  • 本語と英語のプロンプトを用いた場合のコードの安全性にはほとんど差がない
    • しかし、Pythonにおいては日本語のプロンプトの方が英語よりも安全なコードを生成する傾向を示した

Join the preview of Amazon Aurora Limitless Database

aws.amazon.com

AWS re:Invent 2023

www.youtube.com

  • AWS re:Invent 2023のYoutube動画のプレイリスト

Amazon Q (Preview)

aws.amazon.com

  • AWS上にビジネス合わせた簡単にカスタマイズされたAIアシスタントを作成するサービスがリリースされた
  • 独自のナレッジベースを元にした回答をするチャットボットを作成できる
  • 開発者向けドキュメント

翻訳に特化したLLM

note.com

  • 翻訳に特化したLLMを試した記事

OpenAI と LangChain の認知アーキテクチャ

note.com

Turingにおける自動運転モデルの開発とW&Bの活用

www.youtube.com

  • 第6回 LLM 勉強会

llm-jp.nii.ac.jp

  • 第6回 LLM 勉強会のプログラムと発表資料

re:Invent 2023 セッションまとめ一覧 (Part 1)

zenn.dev

LLM JP Model Playground

github.com

  • 大規模言語モデルのプレイグラウンドを AWS で実装するためのコード
  • プロンプトやパラメーターを変更した際のモデルの挙動を確認、記録できる

Amazon Bedrock のはじめ方

qiita.com

  • Amazon Bedrock を始める方法を 1) 準備 2) 利用 3) 監視 4) 応用、の 4 ステップでご紹介されている記事

OpenGPTs への長期記憶の追加

note.com

Needle In A Haystack - Pressure Testing LLMs

github.com

  • GPT-4-128KとClaude2.1がどのぐらいの長さの長期記憶を保持しているかをテストした結果をまとめたリポジトリ

Deconstructing RAG

blog.langchain.dev

  • RAGの概念をいくつかのカテゴリーに分けたブログ記事

LLM音声対話システムの応答を高速化してみた

developers.cyberagent.co.jp

  • LLMを用いた音声対話に対していくつかの工夫を施し、その応答速度をできるだけ早めてみようという試みの記事

生成系 AI で成長を生成した 1 週間

speakerdeck.com

  • 生成系 AI で積極的学習に用い成長を生成する方法を紹介したスライド

Microsoft社員が振り返る】Microsoft Ignite

speakerdeck.com

AutoGenで作るLLM Agen

speakerdeck.com

  • AutoGenをサービスに組み込むための工夫が記載されている

Azure OpenAI Serviceの採用と挑戦 - Azure AI Hub meetup #1

speakerdeck.com

Azure AI Hub meetup #1 Azure AI ことはじめ

www.docswell.com

法人向けChatGPTにおける Azure OpenAI Serviceの課題解決の過程と現在

speakerdeck.com

  • Azure Open AI Serviceの負荷分散の方法を紹介するスライド

[11/25~12/1] LLM Weekly News by EXPLAZA

note.com