論文『Language Models are Unsupervised Multitask Learners』 Abstract ちょっと、うまく意味が取れない部分 2.3. Model わかったこと（そもそも確認したかったこと） 知りたかったこと、わかったこと GPT-2とTransformerの関係 前提 コメント 論文『Langu…

Google scholarで、chatGPTの論文『Training language models to follow instructions with human feedback』が出てこないんですけど。。。 それとも 補足 コメント Google scholarで、chatGPTの論文『Training language models to follow instructions with…

この記事です なぜ安心したか。。。 この記事です katsumakazuyo.hatenablog.com なぜ安心したか。。。 とりあえず、びっくりするようなことではない感じという意味で安心した。 ただ、過小評価、過大評価にならないようには注意が必要だと思う。

対象論文 論文でポイントだと思ったこと 人間の嗜好を報酬信号として 概要(Deepl訳） イントロダクション(の一部)(Deepl訳） コメント 対象論文 https://arxiv.org/pdf/2203.02155.pdf 論文でポイントだと思ったこと 人間の嗜好を報酬信号として ・・・この…

What is this level? Supplementation What is this level? www.youtube.com www.youtube.com Supplementation And what I have presented here is just the beginning. If I were to give you a word of advice, it would be that we, as a people, will al…

固有表現抽出(NER)を動かしてみる4。(windows, python)。 参考にしたサイト 結果 環境 結果 ちょっと、データを増やした結果 入力データ コメント 固有表現抽出(NER)を動かしてみる4。(windows, python)。 参考にしたサイト 参考にしたというより、そのまま…

BERTのソースコードは、どこにあるのか？ 公式Google版は Pytorch版は コメント BERTのソースコードは、どこにあるのか？ 公式Google版は github.com Pytorch版は 有名なのは github.com コメント 別の有効な情報とかあれば、是非！、教えて下さい。(なぞに…

BERTは、『自己教師あり学習』か？ 回答 BERTの論文では コメント BERTは、『自己教師あり学習』か？ BERTは、『自己教師あり学習』(じこきょうしありがくしゅう、英: self-supervised learning、SSL）か？ 回答 たぶん、そうだと思いますが。。。。 BERTの…

『自己教師あり学習』について頭を整理したければ、このサーベイ論文を見るべし このサーベイ論文 上記は、この記事の受け売りです コメント 『自己教師あり学習』について頭を整理したければ、このサーベイ論文を見るべし このサーベイ論文 https://arxiv.o…

ChatGPT、GPT-4とか。AIを脅威に感じたりして疲れた人は、このYoutubeを見ろ！（脱力。。。。） これ 関連する自分のお薦め記事 コメント ChatGPT、GPT-4とか。AIを脅威に感じたりして疲れた人は、このYoutubeを見ろ！（脱力。。。。） ↓ ChatGPTに関するも…

ChatGPT、GPT-4とか。絶対読むべき、この記事⇒『The inside story of how ChatGPT was built from the people who made it』（想定以上の反響だったよう。。） 絶対読むべき記事 記事の中身より 記事抜粋 わかったこと 今後わかりたいこと 関連する自分のお…

ChatGPT、GPT-4とか。AIはこの問いに答えられるか？AIに少し詳しい人が勘違いしている重要なポイント。 AIに対して、こんな質問をしてみます。 予想されるAIの回答 この記事で言いたいこと この問いに対する正しい？AIの回答 言いたいこと 人とAIの考える方…

ChatGPT、GPT-4とか。この記事、恐ろしく意味が取れない。。⇒『大規模言語モデルの優れたパフォーマンスの背後にある理由』 一度読んで下さい。 自分の関連記事でお薦め コメント ChatGPT、GPT-4とか。この記事、恐ろしく意味が取れない。。⇒『大規模言語モ…

論文『GPT-4 Technical Report』を読む。 要約 ここでわからなかったこと 自分の関連記事でお薦め コメント 論文『GPT-4 Technical Report』を読む。 https://arxiv.org/pdf/2303.08774.pdf 要約 以下、deeplで翻訳しました。 GPT-4は、画像とテキストを入力…

固有表現抽出(NER)を動かしてみる3。(windows, python)。 参考にしたサイト 参考にしたというより、そのまま、動かしただけ。 https://github.com/NielsRogge/Transformers-Tutorials Custom_Named_Entity_Recognition_with_BERT.ipynb https://github.com/N…

AIのレベルが本当に上がったときに起こること。 競馬 株式市場 関連する自分の記事 コメント AIのレベルが本当に上がったときに起こること。 競馬 AIによる予想が当たる確率が高くなります。 ↓ 賭けごととして、つまらなくなります。 ↓ 宝くじのような、予測…

固有表現抽出(NER)を動かしてみる2。(windows, python)。 参考にしたサイト 参考にしたというより、そのまま、動かしただけ。 github.com 結果 環境 windows10 python3.7 結果 時短のため、データを減らしたりしているので、全然、正しく動いてませんが。。…

生成AI(ジェネレーティブAI)で、アートは死ぬのか。。。写真の登場は乗り切ったが。。。。 関連 さて本題 話のポイント 関連する自分の記事 コメント 生成AI(ジェネレーティブAI)で、アートは死ぬのか。。。写真の登場は乗り切ったが。。。。 by extending t…

固有表現抽出(NER)を動かしてみる。(windows, python)。 参考にしたサイト 参考にしたというより、そのまま、動かしただけ。 qiita.com 結果 環境 windows10 python3.7 メモリ都合等。 時間短縮、メモリ節約のため、データを小さくしたり、バッチを小さくし…

TF-IDFを動かしてみる。(Windows, Python, 対象文書：英語) わけあって、TF-IDFを動かしてみる。(Windows, Python, 対象文書：英語) 他力 利用させて頂いたコード https://tech.at-iroha.jp/?p=1576 環境 windows10 python3.7 コード修正ポイント1 元の方、w…

シン・シンギュラリティを定義する 「シン・シンギュラリティ」という言葉、自分が世界で(日本で？）初めて発明したと思ってましたが。。。、ぐぐると沢山ありました。 「シン・シンギュラリティ」を定義する シン・シンギュラリティ要件１ シン・シンギュラ…

この記事をみて安心した（ChatGPT、GPT-4とか。）⇒『なぜ人々は、ChatGPTという“トリック"に振り回されるのか？ Google「Bard」参戦、チャットAI戦争の行方 何が言いたいかというと ただし 関連する自分の記事 この記事をみて安心した（ChatGPT、GPT-4とか。…

ベイズの定理を300年ぶりに再発明しようと1時間弱努力したが、できなかった！！（2回目の挑戦） やってみた。結果。 ただし、今回は時間がなかったので、15分の挑戦。 しかも、ベイズの定理という言葉が浮かんでなくて、ベイズ確率として、考えた。。。。 上…

線形回帰の問題をニューラルネットワークを使って解く。（最小二乗法じゃなくて） 今回記載済の内容では、本来の目的には、近づけていないですが。。。。 本来の目的は、従来技術と、ニューラルネットワーク等の新しい技術の関係性（連続性？）等を明確にす…

解決策。mysqldump: Got error: 1045: Access denied for user 'bitnami'@'localhost' (using password: YES) when trying to connect エラー redmine(4です）のバックアップをとろうとして出会ったエラー バックアップは初めてです。 環境 windows10 redmin…

AI（機械学習）のアルゴリズムの分類について、何日か考えたけど、意味ないですね。教師あり、教師なし、強化とか。。。（これは、ゲームの分類や、格闘技の分類をすることを考えると容易に分かる気が。。。） 教師あり、教師なし、強化学習とか、scikit-lea…

機械学習のアルゴリズムのいけてる分類の図（3選） scikit-learn URL https://scikit-learn.org/stable/tutorial/machine_learning_map/index.html 図 Type of AI and Machine Learning URL https://www.itu.int/en/ITU-T/Workshops-and-Seminars/201911/Doc…

１、２年AIのことを勉強したら、Wikipediaのテンソルの説明に耐えられるようになった。 AIで、「テンソル」って、よく出てきますよね。 Wikipediaの「テンソル」の説明 https://ja.wikipedia.org/wiki/%E3%83%86%E3%83%B3%E3%82%BD%E3%83%AB 引用 テンソル（…

有名な論文『Effective Approaches to Attention-based Neural Machine Translation』を、いまさら、のんびり読む。 Google scholarで確認すると、引用数8,049(2022/09/24時点）でした。凄いけど、もの凄くはないか。。。。 概要 Deepl翻訳 An attentional m…

1990年にモンティ・ホール問題はないよね。ひじひじひじ、ひざ、みたいなネタか？ モンティ・ホール問題とは？ （説明がだるいので、、、、以下、参照願います。） ja.wikipedia.org 見解 こんなのが、、、、1990年に問題になるはずなく。 199年とかなら、わ…