タグ

2023年5月23日のブックマーク (24件)

  • データオーケストレーションツールDagsterの紹介

    データオーケストレーションとは データオーケストレーションという言葉をご存知でしょうか?日ではまだ耳慣れない言葉ですが、data orchestrationでgoogle検索すると実に3000万件以上ヒットし、世界的には十分に市民権を得ている言葉です。Databricksではデータオーケストレーションを以下のように説明しています。 データオーケストレーションとは データオーケストレーションとは、複数のストレージからサイロ化したデータを取り出し、組み合わせて整理し、分析に利用できるようにするための自動化されたプロセスです。 このプロセスでは、レガシーシステム、クラウドベースのツール、データレイクといったあらゆるデータセンターが接続されます。データは標準形式に変換されるため、理解しやすく、容易に意思決定に利用できます。 オーケストレーションとは、コンピュータシステム、アプリケーション、および

    データオーケストレーションツールDagsterの紹介
    misshiki
    misshiki 2023/05/23
    “現在データオーケストレーションに利用されているツールとして未だ主流のAirflow、その後継と目されるPrefect、そして今回中心となるDagsterの三つを比較”
  • 技術書同人誌「エッジAIコンピュータビジョン入門」を出版します - karaage. [からあげ]

    技術同人誌「エッジAIコンピュータビジョン入門」を書きました 技術同人誌新刊を書きました!第八回 技術書同人誌博覧会で販売予定です。 ダウンロード販売となります。以下リンクから購入ください。 karaage0703.booth.pm せっかくなので、コピーを作成して会場でPDFデータと一緒にセット販売もしようかと考えていますが、正直いくつ作成できるかは未定です。もしどうしても紙で欲しいという人いたら、Twitterとかで教えてください。 「エッジAIコンピュータビジョン入門」の内容 エッジデバイスでAI使ってコンピュータビジョンをするためのです。エッジデバイス、AI、コンピュータビジョンはそれぞれ一般用語ですが、これらを組み合わせた「エッジAIコンピュータビジョン」という用語は、私の造語になります。こので普及させて、エッジAIコンピュータビジョンの第一人者になることを目指しています。

    技術書同人誌「エッジAIコンピュータビジョン入門」を出版します - karaage. [からあげ]
    misshiki
    misshiki 2023/05/23
    “技術同人誌「エッジAIコンピュータビジョン入門」”
  • Introducing RWKV - An RNN with the advantages of a transformer

    ChatGPT and chatbot-powered applications have captured significant attention in the Natural Language Processing (NLP) domain. The community is constantly seeking strong, reliable and open-source models for their applications and use cases. The rise of these powerful models stems from the democratization and widespread adoption of transformer-based models, first introduced by Vaswani et al. in 2017

    Introducing RWKV - An RNN with the advantages of a transformer
    misshiki
    misshiki 2023/05/23
    “RNN とトランスフォーマーの両方の利点を組み合わせた新しいアーキテクチャ RWKV の統合を紹介します。”
  • AWS による Jupyter の 生成系 AI の民主化とノートブック実行のスケールのための新しい拡張機能を発表 | Amazon Web Services

    Amazon Web Services ブログ AWS による Jupyter の 生成系 AI の民主化とノートブック実行のスケールのための新しい拡張機能を発表 Project Jupyter は複数のステークホルダーで運営されるオープンソースプロジェクトであり、データサイエンス、機械学習、計算科学のためのアプリケーションだけでなく公開標準やツールも開発しています。なかでも、2011 年にリリースされた Jupyter Notebook は学術、研究、産業のあらゆる分野で世界で数百万人のユーザーが使用するデファクトスタンダードのツールとなりました。Jupyter ではユーザーがコードやデータをインタラクティブに実行でき、完全に再現可能な作業記録として作成、共有することが可能です。 AWS はデータサイエンティストや機械学習エンジニアにとって欠かせない Jupyter を開発する Proj

    AWS による Jupyter の 生成系 AI の民主化とノートブック実行のスケールのための新しい拡張機能を発表 | Amazon Web Services
  • [解決!Python]PyInstallerでPythonスクリプトを実行可能ファイル化するには

    連載目次 PyInstaller Pythonで書かれたスクリプトを実行可能ファイルに変換すると、Pythonがインストールされていない環境でそのプログラムを簡単に実行できる。Pythonスクリプトを実行可能ファイル化する方法にはいろいろなものがあるが、ここではPyInstallerを紹介しよう。 PyInstallerの特徴を以下に挙げる。 Python 3.7以降に対応 Pythonスクリプトとそれが依存するパッケージを1つのパッケージ(単一の実行ファイルまたは配布ファイルを含んだディレクトリ)に作成する WindowsmacOSLinuxに対応(他のUNIX系統のOSでの動作は保証されていない) あるOSプラットフォームで作成されたPyInstallerパッケージは他のOS上では動作しない なお、実行可能ファイルとしてパッケージ化する際にはPythonの処理系もまとめられるので、

    [解決!Python]PyInstallerでPythonスクリプトを実行可能ファイル化するには
  • 将棋AIの作り方を解説!作り方の流れからおすすめソフト・本まで紹介 | AI専門ニュースメディア AINOW

    最終更新日: 2023年5月21日 AIを実装して将棋ソフトを作りたいと考えている人もいるのではないでしょうか? 将棋界では近年AIの活躍が広がっており、将棋の戦いは複雑なパターンが存在するため人間に対する攻略は困難とされていましたが、2013年にコンピュータ初となるプロ棋士への勝利を達成し、それ以降も急速に進化を続けています。 このような将棋の対局ができるコンピュータを、自分で作ってみたいという人もいるでしょう。そこで、記事では将棋の対局ができるAIの作り方を解説します。 ▶AIの作り方を徹底解説!|簡単に使えるツールやおすすめ20選>> 将棋ソフトの作り方の流れ 以下では実際に将棋ソフトを作る流れを紹介します。実際に棋譜データを学習させて、ルールを守り実際に対局できるようにしましょう。 主に、次の3つの工程にわけられます。 環境構築 ニューラルネットワーク 実装 それぞれ解説します

    将棋AIの作り方を解説!作り方の流れからおすすめソフト・本まで紹介 | AI専門ニュースメディア AINOW
  • ジェフリー・ヒントン「人類を凌駕する人工知能に私は戦慄している」 | “AIのゴッドファーザー”だからこそ語れるAIの脅威

    5月初め、AI研究の第一人者であるジェフリー・ヒントンがグーグルを辞めたことが明らかになった。以来、世界中のメディアからの取材依頼をほぼすべて断っているという彼が、英紙「ガーディアン」だけに語った、AIの真の怖さ、人類滅亡の確率、その決定的瞬間が訪れるとき──。 悪意のある研究者はいない ジェフリー・ヒントンが、インタビューの最初で口にし、私が録音を止める間際にも繰り返したのは、彼が10年間在籍したグーグルを円満に退社したということだった。 「私はグーグルがこれまでに成し遂げたことや、いま現在取り組んでいることに何の異論もありません。メディアは私を『グーグルに不満を募らせた社員』に仕立て上げたいようですが、そうではないんです」 そこをはっきりさせておくのが大事なのは、つい逆の結論に走りがちだからだ。結局のところ、自分の元勤務先を、人類を絶滅へと導く可能性の高い企業のひとつとして冷静に語ると

    ジェフリー・ヒントン「人類を凌駕する人工知能に私は戦慄している」 | “AIのゴッドファーザー”だからこそ語れるAIの脅威
    misshiki
    misshiki 2023/05/23
    “ヒントンは、向こう5~20年の間に「決定的な瞬間」が訪れると考えている。”
  • 「富岳」で大規模言語モデルの研究開発。国内AI研究力向上

    「富岳」で大規模言語モデルの研究開発。国内AI研究力向上
    misshiki
    misshiki 2023/05/23
    “基盤モデルの高性能化には大量のデータを効率的に処理する高性能計算資源が不可欠。そこで4者は、富岳の政策対応枠にて大規模言語モデル分散並列学習手法の研究開発を行なう。”
  • スーパーコンピュータ「富岳」政策対応枠における大規模言語モデル分散並列学習手法の開発について | 理化学研究所

    国立大学法人東京工業大学(注1)(以下、東京工業大学)、国立大学法人東北大学(注2)(以下、東北大学)、富士通株式会社(注3)(以下、富士通)、国立研究開発法人理化学研究所(注4)(以下、理化学研究所)は、「富岳」政策対応枠において、スーパーコンピュータ「富岳」を活用した大規模言語モデル(Large Language Model, LLM)(注5)の分散並列学習手法の研究開発を2023年5月から実施します。 大規模言語モデルは、ChatGPT(注6)をはじめとする生成AIの中核として使用されている深層学習のAIモデルであり、4者は今後今回の研究開発の成果物を公開することで、アカデミアや企業が幅広く使える大規模言語モデルの構築環境を整え、国内におけるAIの研究力向上に貢献し、学術および産業の両面で「富岳」の活用価値を高めることを目指します。 背景 ChatGPTに代表される大規模深層学習モデ

  • スーパーコンピュータ「富岳」政策対応枠における大規模言語モデル分散並列学習手法の開発について

    東京工業大学、東北大学、富士通株式会社、理化学研究所は、「富岳」政策対応枠において、スーパーコンピュータ「富岳」(以下、「富岳」という)を活用した大規模言語モデル(Large Language Model, LLM)[用語1]の分散並列学習手法の研究開発を2023年5月から実施します。 大規模言語モデルは、ChatGPT[用語2]をはじめとする生成AIの中核として使用されている深層学習のAIモデルであり、4者は今後、今回の研究開発の成果物を公開することで、アカデミアや企業が幅広く使える大規模言語モデルの構築環境を整え、国内におけるAIの研究力向上に貢献し、学術および産業の両面で「富岳」の活用価値を高めることを目指します。 ChatGPTに代表される大規模深層学習モデル(基盤モデル)は、インターネットやスマートフォンのように社会全体のあり方を変える革新的な技術であり、Society5.0にお

    スーパーコンピュータ「富岳」政策対応枠における大規模言語モデル分散並列学習手法の開発について
    misshiki
    misshiki 2023/05/23
    “東京工業大学、東北大学、富士通株式会社、理化学研究所は、「富岳」政策対応枠において、スーパーコンピュータ「富岳」を活用したLLMの分散並列学習手法の研究開発を2023年5月から実施。”
  • Metaが次世代AIインフラ構築計画の進捗状況を発表 カスタムAIアクセラレータチップ、次世代DCなど

    Metaが次世代AIインフラ構築計画の進捗状況を発表 カスタムAIアクセラレータチップ、次世代DCなど:AI研究用スーパーコンピュータは第2フェーズへ Metaは、次世代AIインフラを構築する計画の最近の進捗状況を発表した。発表の目玉は、AIモデルを実行するための同社初のカスタムシリコンチップ、AIに最適化された新しいデータセンター設計、1万6000個のGPUを搭載するAI研究用スーパーコンピュータの第2フェーズだ。 次世代AIインフラを構築する野心的な計画を進めているMetaは2023年5月18日(米国時間)、この計画の最近の進捗(しんちょく)状況を発表した。発表の目玉は、AIモデルを実行するための同社初のカスタムシリコンチップ、AIに最適化された新しいデータセンター設計、1万6000個のGPUを搭載するAI研究用スーパーコンピュータの第2フェーズだ。 Metaは、自社がAI研究の新生面

    Metaが次世代AIインフラ構築計画の進捗状況を発表 カスタムAIアクセラレータチップ、次世代DCなど
    misshiki
    misshiki 2023/05/23
    “Metaは、次世代AIインフラを構築する計画の最近の進捗状況を発表した。発表の目玉は、AIモデルを実行するための同社初のカスタムシリコンチップ、AIに最適化された新しいデータセンター設計、...だ。”
  • AI-powered coding, free of charge with Colab

    AI-powered coding, free of charge with Colab
    misshiki
    misshiki 2023/05/23
    “AI を活用したコーディング、Colab を無料で利用可能”
  • Google、Python環境の「Colaboratory」にAIによる開発支援機能を搭載へ。自然言語からのコード生成、チャットボットによる質疑応答など

    GooglePython環境の「Colaboratory」にAIによる開発支援機能を搭載へ。自然言語からのコード生成、チャットボットによる質疑応答など Googleは今月(2023年5月)に開催したGoogle I/O 2023で、同社として最新の大規模AIモデル「PaLM 2」を発表しており、今回Colaboratoryに搭載されるのも、このPaLM 2に基づいてコードの生成用に作られたモデル「Codey」です。 このCodeyを用いて、Colaboratoryには数カ月以内にコード補完、自然言語によるコード生成、コード支援チャットボットなどの機能が搭載される予定です。 下記は「import data.csv as a dataframe」という自然言語での入力からコードが生成されたところ。

    Google、Python環境の「Colaboratory」にAIによる開発支援機能を搭載へ。自然言語からのコード生成、チャットボットによる質疑応答など
    misshiki
    misshiki 2023/05/23
    “PaLM 2に基づいてコードの生成用に作られたモデル「Codey」。Codeyを用いて、Colaboratoryには数カ月以内にコード補完、自然言語によるコード生成、コード支援チャットボットなどの機能が搭載される予定”
  • Governance of superintelligence

    Now is a good time to start thinking about the governance of superintelligence—future AI systems dramatically more capable than even AGI. Given the picture as we see it now, it’s conceivable that within the next ten years, AI systems will exceed expert skill level in most domains, and carry out as much productive activity as one of today’s largest corporations. In terms of both potential upsides a

    Governance of superintelligence
    misshiki
    misshiki 2023/05/23
    “スーパーインテリジェンスのガバナンス。今こそ、AGI よりも劇的に高性能な将来の AI システムである超知能のガバナンスについて考え始める良い時期です。”
  • OpenAIのアルトマンCEO、“スーパーインテリジェンス”の国際規制機関立ち上げを提唱

    OpenAIは5月22日(現地時間)、「スーパーインテリジェンスのガバナンス」というタイトルの公式ブログを公開した。サム・アルトマンCEO、グレッグ・ブロックマン社長、チーフサイエンティストのイリヤ・サツケバー氏の連名で、AIの国際規制機関の立ち上げを提案している。 このブログでは、AIが10年以内に専門家のスキルレベルを超え、高度な生産活動を行う可能性について述べている。そうした将来のAIをAGI(Artificial General Intelligence;汎用人工知能)を超えるsuperintelligence(超知能)と呼び、人類が過去に対処してきたこれまでの技術よりも強力で、潜在的なメリットとリスクが大きいと語る。 そのため、超知能の開発には調整、国際的な監視、安全にするための技術的な能力が必要だとしている。 AIを手掛ける企業自身が責任ある行動をとるべきであることは当然だが

    OpenAIのアルトマンCEO、“スーパーインテリジェンス”の国際規制機関立ち上げを提唱
    misshiki
    misshiki 2023/05/23
    “「スーパーインテリジェンスのガバナンス」。サム・アルトマンCEO、グレッグ・ブロックマン社長、チーフサイエンティストのイリヤ・サツケバー氏の連名で、AIの国際規制機関の立ち上げを提案”
  • ControlNet(v1.1)の詳しい解説!輪郭やポーズから思い通りの絵を書かせる【Stable Diffusion】 | 謎の技術研究部

    ControlNet(v1.1)の詳しい解説!輪郭やポーズから思い通りの絵を書かせる【Stable Diffusion】 AIイラストはPromptだけだと思い通りのポーズが出せない。そこで既存の線画やポーズから出力をコントロールする手法がControlNet。できるだけ細かいところまで設定を見ていく。 ControlNetがv1.1にアップデートされたため随時記事更新中!推定モデルの解説はほぼ網羅(一部あまり使われてないと思われるものは掲載していない) かなり頻繁に更新しているため、履歴を最下部に掲載 最終更新時のControlNetのバージョン:1.1.201 はじめに この記事はStable DiffusionのExtensionであるControlNetのより深い解説を目指す。 なにをするもの? 今まで殆ど運任せだった画像生成だが、ControlNetを使うことである程度ユーザーが

    ControlNet(v1.1)の詳しい解説!輪郭やポーズから思い通りの絵を書かせる【Stable Diffusion】 | 謎の技術研究部
  • 「学校からChatGPTへのアクセスを禁止する」という決定を下したニューヨーク市教育局が方針転換して生成AIを受け入れている

    アメリカ最大の学区であり約110万人もの生徒数を抱えるニューヨーク市教育局(New York City Public Schools)は、人間と同レベルの対話が可能な対話型AIChatGPTの台頭に際し、2023年1月に「学校からChatGPTへのアクセスを禁止する」と発表しました。ところが2023年5月、ニューヨーク市教育局のデビッド・バンクス理事長は、すでにニューヨーク市教育局は当初の方針から転換し、AIについての教育をサポートしていることを報告しました。 After a cautious start, our approach to AI technology is evolving.⁰ Our students will work in a world where understanding generative AI is crucial.⁰ @DOEChancellor wr

    「学校からChatGPTへのアクセスを禁止する」という決定を下したニューヨーク市教育局が方針転換して生成AIを受け入れている
    misshiki
    misshiki 2023/05/23
    “2023年1月に「学校からChatGPTへのアクセスを禁止する」と発表しました。ところが2023年5月、ニューヨーク市教育局のデビッド・バンクス理事長は、すでにニューヨーク市教育局は当初の方針から転換し、AIについての教育
  • 「チャットAIに仕事奪われそう」76.9% 若い世代ほど高い傾向

    キャリア相談サイトを運営するライボ(東京都渋谷区)は5月22日、ChatGPTのようなチャットAI仕事を奪われると思っている人が76.9%いるとする調査結果を発表した。若い世代ほど奪われそうとする人の割合が大きい傾向にあった。 世代別では20代が81.7%、30代が74.6%、40代が72.9%、50代が66.7%。「生産性向上につながる」という肯定的な意見もあったが、「情報の信頼性に不安がある」「情報漏えいが不安」といった否定的な声もあった。 調査は20~50代の男女956人を対象にインターネットで実施。そのうちチャットAIを知っている人は88.5%(846人)。実際に使った人は63.5%(537人)だった。 実際に使った人のうち、業務に活用したことがあるのは31.1%。職種別の利用率はITエンジニアが最も高く98.0%。企画・管理者(48.1%)やマーケティング担当者(46.2%)

    「チャットAIに仕事奪われそう」76.9% 若い世代ほど高い傾向
    misshiki
    misshiki 2023/05/23
    “ChatGPTのようなチャットAIに仕事を奪われると思っている人が76.9%いるとする調査結果を発表した。若い世代ほど奪われそうとする人の割合が大きい傾向にあった。”
  • 「無いぞ、知名度」のSCSK、生成AIを全社導入 新規事業の創出など目指す

    「無いぞ、知名度」をキャッチコピーにしたテレビコマーシャルで知られるシステムインテグレーターのSCSKは5月22日、生成AIの全社導入を発表した。大規模言語モデル「GPT-4」などをMicrosoftのクラウドで使える「Azure OpenAI Service」を使って構築したチャットAISCSK Generative AI」を活用。業務効率化や新事業の創出に役立てるという。 SCSK Generative AIは全ての社員が、社内ネットワークからアクセス可能。入力した情報が二次利用や第三者に提供されない仕組みも整えたという。まずは管理部門での利用を推進し、ノウハウを蓄積。将来は生成AIを使い、顧客の課題解決を目指す。 日企業による生成AI活用を巡っては、パナソニックが同様にAzure OpenAI Serviceを活用したチャットAI「PX-GPT」をグループ全社員に展開。みずほフィ

    「無いぞ、知名度」のSCSK、生成AIを全社導入 新規事業の創出など目指す
    misshiki
    misshiki 2023/05/23
    “「Azure OpenAI Service」を使って構築したチャットAI「SCSK Generative AI」を活用。業務効率化や新事業の創出に役立てるという。”
  • 生成AI活用普及協会、新たに5名が参画

    生成AI活用普及協会、新たに5名が参画元・日マイクロソフト業務執行役員の澤 円氏らを迎え、生成AI活用の社会実装を強力に推進 生成AI活用の社会実装を目的にスキルの習得・可視化を推進する、一般社団法人生AI活用普及協会(代表理事:井畑 敏、所在地:東京都千代田区、英称:Association to Generalize Utilization of Generative AI、以下:GUGA)は、理事として石川 和男、木内 翔大、澤 円(五十音順)、事務局長として内藤 正光、顧問として渋佐 寿彦の5名が新たに参画したことをお知らせいたします。 ■ GUGAとは GUGAは、生成AI活用を社会に実装していくために、スキルの習得・可視化を推進する一般社団法人です。認定試験の実施や資格の発行といった活動を通じて、生成AI活用が企業活動における普遍的なスキルとして定着することを目指しています。

    生成AI活用普及協会、新たに5名が参画
  • 一般社団法人生成AI活用普及協会(GUGA)

    Generative AI Utilization Promotion Association is a general incorporated association that promotes the acquisition and visualization of skills in order to implement the utilization of Generative AI in society.

    一般社団法人生成AI活用普及協会(GUGA)
  • 資格試験“生成AIパスポート”誕生? 一般社団法人「生成AI活用普及協会」が開発中

    生成AIの社会実装を推進する一般社団法人「生成AI活用普及協会」は5月22日、資格試験「生成AIパスポート」を開発していることを発表した。生成AIに関する知識やスキルを可視化する試験という。同日に開設した同団体の公式Webサイトで明かした。 開発中の生成AIパスポート試験では、生成AIに関する基礎知識や簡易的な活用スキルの可視化を目指す。AIを使ったコンテンツ生成の方法や事例、企業に求められるコンプライアンス、注意点などを問うという。企業・団体向け試験と、個人向け試験を作成する予定。試験の実施時期などは未定。 生成AI活用普及協会は5月に立ち上がった団体。生成AIを社会で活用していくために、スキルの習得・可視化を推進することが目的という。公式Webサイトでは「生成AI活用スキルの可視化は、企業における適正な人事評価に役立ち、会社員のキャリア形成や学生の就職活動などの一助になると考えている。

    資格試験“生成AIパスポート”誕生? 一般社団法人「生成AI活用普及協会」が開発中
    misshiki
    misshiki 2023/05/23
    “生成AIの社会実装を推進する一般社団法人「生成AI活用普及協会」は5月22日、資格試験「生成AIパスポート」を開発していることを発表した。”生成AI活用普及協会というのも初めて聞いた。
  • AI生成? 「ペンタゴンで爆発」画像で株価下落 Twitterで青バッジアカウント複数が投稿

    Twitter上で5月22日(現地時間)、青いチェックマーク付きの複数のアカウントがペンタゴン(米国防総省)で爆発があったと主張する画像付きでツイートし、拡散した。中にはブルームバーグと関連があると思わせるアカウントもあった(既に凍結済み)。この影響で株式市場は一時的に下落した。 ペンタゴンのあるバージニア州アーリントンの消防署の公式アカウントはすぐに、「国防総省近くの爆発に関する報告がオンラインで広まっていることを認識している。国防総省近辺で爆発や事件は発生しておらず、公衆に対する差し迫った危険や危険もない」とツイートし、国防総省の公式アカウントもこのツイートをRTした。 調査集団ベリングキャットの一員であるジャーナリスト、ニック・ウォーターズ氏は、この画像がAIによって生成されたものである可能性が高いとツイートした。 数時間後にはほぼすべてのツイートは削除され、一部のアカウントは凍結さ

    AI生成? 「ペンタゴンで爆発」画像で株価下落 Twitterで青バッジアカウント複数が投稿
    misshiki
    misshiki 2023/05/23
    “青いチェックマーク付きの複数のアカウントがペンタゴン(米国防総省)で爆発があったと主張する画像付きでツイート...この画像がAIによって生成されたものである可能性が高い”
  • 「服が赤色か茶色かはっきりしない」「該当者が多過ぎ」でも大丈夫 あいまい条件で人物特定できる技術をNECが開発

    100以上の属性情報を「推定の確信度」とともに表示 特定人物の捜索には、カメラ映像から視覚的な特徴を分析する手法が有効だ。しかし、商業施設での迷子探しなどでは「服装の色の記憶があいまいで、対象の人物を抽出できない」「条件に当てはまる子どもが大勢いる」といった課題がある。顔認証技術を使用する方法もあるが、その場合はカメラの解像度がある程度高い必要があるし、プライバシーへの配慮も欠かせない。そのため、これまでは警備員などの人手による捜索が主な対処法となり、迷子の発見に数時間を要する場合があった。 関連記事 Meta、画像や動画内のあらゆるオブジェクトを識別できるAIモデルを発表 Metaは画像や動画内のあらゆる物体を識別できる「Segment Anything Model」(SAM)とデータセットの「Segment Anything 1-Billion mask dataset(SA-1B)」

    「服が赤色か茶色かはっきりしない」「該当者が多過ぎ」でも大丈夫 あいまい条件で人物特定できる技術をNECが開発
    misshiki
    misshiki 2023/05/23
    事例