View profile

Weekly Machine Learning #237

Weekly Machine Learning #237
By piqcy • Issue #238 • View online
News:
Berkeleyから、人の評価を使用した強化学習のタスクが公開されました。MineRLとは姉妹コンペティションになるそうです。強化学習用に設計された/強化学習に向いたベンチマークではなく、人間のフィードバックから学習するタスクということで実応用のシチュエーションに近くなっていると感じます。そしてタンパク質構造予測でトップを取ったAlphaFold-v2のモデルが公開されました。コードとモデルの重みでライセンスを分けるという珍しい形態をとっています。ただ、素朴にこの方が公開しやすそうだなと思います。
Articles:
質問回答に知識グラフを使用した研究を紹介しています。久々にGraph Convolutionと自然言語を組み合わせた論文を見ました(Graph Attention Networkは実装までしたので懐かしかったです)。言語モデルで全部行ける感がある中、知識グラフが構築の手間に比してどれだけ有効なのか、気になるところです(むしろ言語モデルで簡単に知識グラフを構築する方がニーズがある?)。そしてACLベストペーパーが公開されましたね。これもWasserstein GAN依頼久々に聞いた最適輸送を使用した手法ですが、ステート・オブ・AIガイドさんなどで解説されています。
Resources:
MLOpsの資料を紹介しています。タクシー配車アプリGOでの活用事例は、デプロイに至るまでのテストフェーズの設計まで言及されています。私が知る中では、ここまで具体的に書いた資料はかなり少ないです。夢のあるTransformer x 強化学習論文の解説スライドを紹介しています。これはやはり、一言で言うと夢がありますね。強化学習の場合探索をどうするかという問題がありますが、最近はオフラインが優勢なので軌跡がある前提で割り切るのもありな気がします(むしろ素面でオンライン学習という状況が研究以外ではない特殊なシチュエーションともみられると思います)。
Listeners:
ICMLの気候変動x機械学習ワークショップ(7/23)まで、関連研究を紹介しています。今回はどんな機械学習の手法が気候変動問題使えるか調べられるサイトを紹介しています。実際この分野で研究しているよ!という方は是非お便りをいただきたいです。
Weekly Machine Learningは機械学習の開発者・研究者を応援するメディアを目指しています。掲載記事の選択や記事執筆に興味がある方がいたら、ぜひご連絡いただければと思います。
※7~8月は書籍執筆・学習強化のため縮退運用中です
Twitterハッシュタグ: #weeklyml

News
BASALTの仕組み
BASALTの仕組み
GitHub - deepmind/alphafold: Open source code for AlphaFold.
Blender Bot 2.0: An open source chatbot that builds long-term memory and searches the internet
Articles
Resources
高速化・並列化・標準化で スケールするML予測システムの開発 - Speaker Deck
GOの機械学習システムを支えるMLOps事例紹介
You Only Look One-level Featureの解説と見せかけた物体検出のよもやま話
Decision Transformer: Reinforcement Learning via Sequence Modeling
Climate Change AI - Interactive Summary | Climate Change AI
Listeners
まとめた記事が100clickを超えてあり難い限りです。新しいNLP応用のヒントになればと思います(私自身もヒントにします)。気候変動関連の記事はなかなか伸びないですね。いろいろ紹介したい所なんですが、arXivでない有料サイトで論文が公開されていることが多くて手こずっています。学生時代に社会工学をやっていた関係で、読者の方にも「社会問題を工学的アプローチで解決すること」に興味を持っていただけたら嬉しいなと考えています。
  1. 機械学習を意思決定に役立てる方法を探る: The Recon Approach: A New Direction for Machine Learning in Criminal Law(105click)
  2. Distill Hiatus (64click)
  3. ICML Mentorship Program (28click)
Did you enjoy this issue?
Become a member for $5 per month
Don’t miss out on the other issues by piqcy
piqcy
By piqcy

make machine learning engineer and researcher more cheerful

You can manage your subscription here.
If you were forwarded this newsletter and you like it, you can subscribe here.
Powered by Revue