絶対に終わらない実験たち

 From:山極綾子

 

 

さてさて。

 

何回目のループまで行ったかな…?

 

最近機械学習に入力するデータをいかに効率的に取得するか、という研究をしています。

 

分野としては「能動学習」と呼ばれる手法なのですが、ここで大問題が一つ。

 

実験が絶対終わらない…!

 

これは何も、明日の締め切りに間に合わない、といったそういった理由ではありません。

 

そもそもが、実験を終わらせることができないのです。

 

 

昨今のデータ分析では、取り扱うデータが膨大になることが多々あります。

 

例えば画像データを使うとすると、スマートフォンで撮影した写真は一枚で

数メガバイトあることは当たり前、超高性能なものであれば

ギガバイトの単位に届いてしまうかもしれません。

 

そして機械学習では、データは一つでは意味がありません。

 

複数のデータを入力してこそ学習され、ルールを見出すことができます。

 

つまり、その膨大なデータを扱う必要があるのですが、

ここが今回の私の実験が終わらない原因でした。

 

つまり、メモリが不足してしまっていました。

 

 

プログラムを頑張って書いて、実行してから外出して。

 

さてどこまで進んだものかと実験の進捗を見ると、すでに実行が停止されていて。

 

(もしかして実験が終わって結果が出てきた…?)

 

と期待したのもつかの間、目に飛び込んできたのは無慈悲なエラーメッセージでした。

 

曰く「データを保存するメモリが不足しています」。

 

仮に実験に時間がかかるだけであれば、気長に待ち続けることで解決できます。

 

ですがメモリの増強は、とくに計算に必要なメモリを増やすことは非常に難しく、

私が実験に使っているPCではほとんど不可能でした。

 

 

ではどうすればいいのか。

 

ここからが頭の使いどころで、現在絶賛手法を検討中なのですが、

せめて今週中には終わらせたいところです。

 

 

ところでこのような創意工夫をAIにやらせようと思ったら、どんな流れになるでしょうか。

 

AIに今の状況を説明して、望ましい状態も説明して。

 

解決策を質問したときにきちんと回答が出てくる見込みは、おそらく少ないかと思います。

 

まずは、状況説明が難しいこと。

 

自分が当たり前に把握している前提知識も含め、すべての情報をAIに伝える必要がありますが、

抜けもれを完全になくすことは非常に難しいと言えます。

 

加えて、同じような状況に陥っている人がいない可能性が高いことです。

 

扱っているデータも、メモリの残量も。

 

手法は当然他に行っている人はいないわけで、私とまったく同じ状況の人はいないはずです。

 

そうすると、過去のデータから学習しているAIでは、解決策が出てこないのでは、

と思うのです。

 

ただしもちろん、なにがしかのアドバイスはもらえる気がするので、

後程聞いてみようとは思います。

 

 

早く、うまくAIを使いこなせるようになりたいものです。。。

 

 

山極綾子

 

 

P.S.

今日も最後まで読んでいただきありがとうございます!

 

メルマガの感想などありましたら、こちらからお聞かせ下さい。

 

いつも嬉しく拝見しています。いつもありがとうございます!

https://keieijinjipartnersytube.typeform.com/to/B8JjDrk5

 

 

—————————————————————-
【経営人事メールマガジン】
発行責任者: 山極毅(株式会社経営人事パートナーズ)
発行者住所:〒100-0005東京千代田区丸の内1-8-3丸の内トラストタワー本館20F
連絡先:https://keieijinji.co.jp/
メールアドレス: strategic-membership-program■■keieijinji.co.jp(■■を@に置き換えてください)
—————————————————————-

↓バックナンバーはこちら↓
PC: https://04auto.biz/brd/BackNumber.htm?acc=keieijinji&bid=3
スマホ・ガラケー: https://04auto.biz/brd/BNMobi.htm?a=keieijinji&b=3

↓メルマガの新規登録はこちらから↓
PC: https://48auto.biz/keieijinji/touroku/scenario13.htm
スマホ: https://48auto.biz/keieijinji/touroku/sp/scenario13.htm
ガラケー: https://48auto.biz/keieijinji/touroku/sp/scenario13.htm