人生のオープンソース化。

AI・データサイエンス

カテゴリ一 記事一覧

Jupiter notebook上でKotlinが安定しない、けど使える

先月からKotlinでAndroid アプリを開発することになり、PythnのPandasのコードをKotlin DatFrameに移植していますが、移植作業をJupiter notebook上で実施しています。 pandasは、Jupiter notebookで開発していますが、KotlinもJupiter notebook実行できるようにkanelが提供されているので、pandas版とKotl……

AIに仕事が奪われるという嘘 AIが人間の仕事を奪えない理由

かれこれ4年ほどデータサイエンティストとして働いていますが、やっと物事を俯瞰して見れるようになって(そう感じているだけかもしれない)、いろいろ思うことが増えたのでこの記事を書こうと思います。 AIに人間の仕事が奪われるという主張している人間は詐欺師かエアプ 今回言いたいことは以上です。 これだけだと記事にならないのでどういうことか書いていきます。 AIに解決させたい課題を整理し、導入効果と精度目標……

ChatGPTに日本語文の誤字脱字をチェックしてもらうプロンプト

このブログでもそうですが、昔から自分の文章は誤字脱字が多くて、「誤字脱字くん」とあだ名がついてしまったんですが、最近はChatGPTに誤字脱字をチェックしてもらえるのでだいぶ誤字脱字が減りました。 いままで、様々なNLP技術を利用した文章校正サービスを利用していましたが、やっぱりChatGPTのチェック能力はずば抜けていると思います。 いろんな誤字に対応しているし、文脈も見てくれるし、構成ルールを……

高Recallを求めるのは危険!?失敗するAI導入プロジェクトの特徴とは?

下っ端データサイエンティストがAIプロジェクトの現実を紹介するコーナーの第一回目でございます(今回で最後かもしれないけど)。 数年、支援会社で企業のAI導入プロジェクトにかかわってきましたが、うまく行ったプロジェクトよりもうまくいかなかったプロジェクトの方が多いですね。 と、いうより当初の予定通りすんなり導入までうまくいった例なんて自分がかかわったプロジェクトにはないですね。 単に、自分が仕事がよ……

上野佑馬著「漫画でわかる デジタルマーケティング×データ分析」を読んで

データ分析学習サイト?スタビジの運営を行っている上野佑馬が書かれた「漫画でわかる デジタルマーケティング×データ分析」を読んだので、その感想を書きます。 データサイエンティストの方が書いたデジタルマーケティングの本ということで、普段IT企業(SIer)のデータサイエンティスト?データエンジニア?としてデジタルマーケティングの支援(と自社のデジタルマーケティング)をし始めた自分には、デジタルマーケテ……

AIだって間違える ChatGPTが教えてくれたこと

ChatGPTの利用者が1億人を超えたそうですね。 自分も業務で毎日のように使っていますが、本当にあれは役に立ちます。特に技術系の知識は豊富に持っているのでコーディングしている際にライブラリの仕様を聞いたり、デバックしてもらったりいろいろ活躍してもらってます。 エンジニアリング以外にも文章の校閲ができたり、英訳ができたり。どういう文章に英訳してとか、文章のどういうところを修正してほしいとか、細かい……

CNNと法律問題が多いG検定の傾向と対策

第4次AIブームが始まった!? 第4次AIブームの特徴について考える

最近、第4次AIブームという言葉を少しづつですが、聞くようになりましあ。 2022年年末、ChatGPTが注目されましたが、2012年にILSVRCで深層学習モデルImageNetが圧勝して第3次AIブームが始まったように、ChatGPTの登場は第4次AIブームの始まりを意味しているのでは議論がSNSでされているところを目にしたんですよね。 第4次AIブームって気が早すぎじゃない?というか、第3次……

データサイエンティスト検定で必要な知識まとめ

[カンペ]データサイエンス検定リテラシーレベル合格に必要な知識まとめ

データサイエンス検定リテラシーレベル合格に向けて必要な単語知識をまとめました。テスト前の知識の確認、受験前の出題範囲の確認にお使いください。 あくまで、DS検定に合格するために必要な単語のまとめです。出題範囲でも概念や理論は省いています。もう一点、既に知っている単語を思い出すためにまとめているので、このページだけで初めて知った単語の意味を理解するのは不可能だと思います。わからないことは適宜調べてく……

Google Colaboratory proで割り当てられるGPUについて思ったこと

(ちゃんと検証してQiitaに載せようと思っていたネタですが、まともな検証ができなかったのでこっちのブログに載せます) google colaboratoryのpro版が日本でも契約できるようになりましたね。 (なんか最近5000円払うとpro+にアップデートできるみたい・・・) 別に手元にGPUを積んだ機械学習バリバリこなせるPCがあるよって人は興味ないと思いますが、自分みたいにノートPCしか使……

[Azure Learn]”Azure Machine Learning を使用して AI ソリューションを構築する”の備忘録

Azure Machine Learningの初心者がMSのAzure Learnにある”Azure Machine Learning を使用して AI ソリューションを構築する”実施したときのメモです。 正しさはあまり保証できませんが、英語交じりの内容を「Azure Machine Learning を使用して AI ソリューションを構築する」の内容を1時間程度でザッザっ……

custom vision AI-900

[AI-900] Microsoft Azure AI Fundamentals trainingに参加して

※本記事はセミナー履修時にメモとして書いた記事なので、若干間違っている部分もありますし(若干じゃない)、誤字もめちゃ多いので下のAI-900の記事を参照していただきたいです。この記事はSEO的に残しているだけです。   AI-900における人工知能の定義   「人間の能力を模倣するソフトウェア」 データや経験に基づく意思決定→機械学習 異常なイベントの検知→異常検知 視覚的な入……

AI牛イラスト2021

Lightweight GANで今年の干支の牛のイラストを生成したら失敗した話

あけましておめでとうございます!!今年もどうぞよろしくお願いします。 皆さんとどういう形で関われるのかわかりませんが、来年もたまにこのブログを読んでいっていただけたら嬉しいです。   牛のイラストを生成してみた   画像を生成できるニューラルネットワークであるGNAなるものが世の中に存在するのは昔から知ってましたが、 そういうものがあるって聞いていただけで、使ったこともないし、……

CNNと法律問題が多いG検定の傾向と対策

2020年7月のG検定を受けて感じたG検定の傾向と対策

2020年7月4日G検定を受験して1週間経とうとしていますが、当日のことを忘れてしまわないうちにまとめておこうと思います。 [2020 11月追記]合格してから振り返ってみると、高得点を取ることはかなり難しいテストですが、合格することはそれほど難易度が高くないと感じました。8割とるとなるとかなり膨大な範囲を勉強する必要がありますが、5割得点するだけ合格の可能性はあると思うので、戦略としては解く分野……

G検定で出題される定理・名言まとめ

市販の問題集や模試では定理系の問題はたくさん出題されますが、実際の試験ではほとんど出ないので出題率の高い、深層学習(特にCNN)と法律系の問題演習に時間をかけたほうがいいです。 バニーおじさんのルール   調整しなくちゃいけないパラメータ(重みやバイアスなど)の数の10倍の学習データを用意しないといけないという経験則。あくまで最低10倍で実際はもっとってことだと思います。   ……

G検定の統計学的問題を感覚的に理解する

中学数学だけでG検定で出題される統計学的分手法を感覚で理解する

この記事では数学が得意ではない方でもわかりやすいけど厳密に言うと正しくない説明で、G検定の問題を回答するには十分な理解というコンセプトでG検定に出てくる統計学的分手法(主に回帰と分類)のアルゴリズムやモデルをまとめています(ニューラルネットワーク関係は別記事でまとめます)。 こういうことって数学的に理解することが正しいアプローチだと思うのですが、それだとまず数学のお勉強からになってしまうので、この……

G検定に出てくるAIの開発者、著名人

G検定で出題されるAI界隈の著名人

G検定で出題される可能性のある人物名をまとめます。年齢は2020時点   第一次AIブーム時の著名人 [1960年代]   ジョン・マッカーシー (John McCarthy、故人) AIという言葉を定義したダートマス会議を発議した人です。世界初の対話システムELIZAの開発言語であるLISPというプログラミング言語を開発しました。 ダートマス会議にはジョン・マッカーシーの他に……

脳科学ってヤバイ 脳科学を学びたいと思っている人へ

僕が大学院で研究していたこと

「電通大でニューラルネットワークやってたんだから、専攻は情報工学でしょ?」って会社の人からは言われますが、僕の専攻していたコースは化学生命コースで、その中の脳神経科学の研究室にいました。 なんで、研究室のある棟にいた同僚たちは、マウスの薬品を投与したり、細胞を培養したり、有機化合物を合成したりしていましたし、授業で代謝とか遺伝子とか神経の勉強をしていました。 じゃぁ、生物の人がなんでニューラルネッ……

電通大を卒業して思ったこと 卒業エントリー

[卒業エントリー]電気通信大学(電通大・UEC)に6年間通って感じたこと

今月、学部1年生から修士2年生まで6年間通った電気通信大学を卒業します。 新型コロナウイルスの影響で卒業式はやるのかわかりませんけど、大学に行くのはたぶん卒業式だけになりますね。 「やっと終わった・・・」って感じですけど、でも少し寂しい気もします。まぁ、調布のキャンパスは僕にとっては随分と居心地がよかったです。 話は変わりますが、就活中に企業研究で企業名をネットで検索していると、”退職エントリー”……

脳科学ってヤバイ 脳科学を学びたいと思っている人へ

今から脳科学をやりたい人へ 理論系の研究をしていた自分が思う脳科学の学び方

以前、このブログで「脳科学系の学科に進みたいのだが、いったいどんな進路をとったほうがいいか?」というコメントをいただきました。 このブログでコメントをもらうことはあまりないので、うれしかったですね。 自分もなんとなく脳科学に関係する研究は興味があるなと思っていましたが、そこまで行きたかったわけじゃなくて、修士進学の際にたまたま空いている研究室の中に脳のシミュレーションをやっているところがあったので……

脳のスケッチ 概略図 しわ 研究発表用 フリー ブロードマンの脳地図 視覚伝導路

研究発表用フリー素材 脳のスケッチとモニターを見つめる猿

修論のための素材として人の脳とモニター見つめる、電極が刺さった猿を書いたので使いたい人使ってください。 落書きなのでどう使ってもいいです。2次利用も全然いいです。 一応ブロードマンの脳地図を意識したような気もしますが、しわの位置とか適当だと思います。 こちらは視覚野に電極刺されてモニターを見つめるニホンザル(マカクザルです)。 実際こういう実験するときって電極のでデバイスってもっと大掛かりですし、……

ワーキングメモリ ニューラルネットワーク シミュレーション

序論

執筆中の修論を晒します。 まずは序論。 研究背景と研究目的を書こうと思っていましたが、背景の内容がアプローチ的な内容が多かったので急遽アプローチも序論に入れましたが、先輩や先生になんて言われるかわかりませんね。 そもそも文章が論文というよりはブログみたいですけど、修論は個人要素強いし、チェックが甘いので自由に書かせてほしい。   序論   人の脳中で情報処理がおこわれる際、短期……