Roy 🇺🇦 retweetledi
Roy 🇺🇦
490 posts

Roy 🇺🇦 retweetledi
Roy 🇺🇦 retweetledi
Roy 🇺🇦 retweetledi

I finally started a blog! 🥳🥳
Here are my thoughts on "How to have fun (as a Ph.D. Student" convexoptimist.substack.com/p/how-to-have-…
I would love to hear about your fun Ph.D. life too! Share your tips :)
English
Roy 🇺🇦 retweetledi

ちなみにこれ、「ワイが考えた最強の戦略」ではなくてこれまでに所属したチームで重要とされていた価値観であったり、何ならAndrew Ng先生も似たようなこと言ってるので、AIに関わる全人類が知っておいてほしいし、AIで悩んだ時は心の中のAndrew Ngに相談してほしい。 twitter.com/mr_bay_area/st…
べいえりあ☔🌿@mr_bay_area
CourseraのAndrew Ngの深層学習コースにML Strategy (2)というセクションがあるんだけど、そこの最初のトピックが ・エラー分析をやれ ・ラベルが間違ったデータを綺麗にしろ ・最初のモデルは素早く作り、そしてイテレーションを重ねろ なので、ここだけでも全人類見るべきという思いがある。
日本語
Roy 🇺🇦 retweetledi
Roy 🇺🇦 retweetledi

Tabular Data: Deep Learning is not all you need” or, as @tunguz would say, “XGBoost is all you need”.
If we still need proof of how superior tree-ensembling methods (read XGBoost) are on tabular data, 👇 2 interesting recent papers.
Bottom line: just use XGBoost.

English
Roy 🇺🇦 retweetledi
Roy 🇺🇦 retweetledi
Roy 🇺🇦 retweetledi

ちなみにBERTその他を使う上で重要になるのが「データをどう集めるか」と「ラベルをどう設計するか」だと思っていて、後者は単純な分類とかだとそこまで難しくないけどそれ以外のタスクだとそんなに簡単ではなかったりして、この辺りが出来るようになるのはとても重要だと思う。
べいえりあ☔🌿@mr_bay_area
NLP、自分はBERTが出てきた時、「これは面白い時代が来るぞ」とワクワクしてたのだけれども、T5がBERTの性能を大幅に更新した時「あれ、これ俺ら要らなくなるのでは?😇」と思った。ただ出来る事の幅が広がったので、研究するなら知らんけど、応用する分には面白い時代になったんじゃないかと思う。
日本語
Roy 🇺🇦 retweetledi
Roy 🇺🇦 retweetledi
Roy 🇺🇦 retweetledi

Coursera had started with my machine learning class. I’m delighted to announce that I’ll soon be teaching a new Machine Learning Specialization, created by @StanfordOnline & @DeepLearningAI_. Please help me spread the word! You can sign up here: deeplearning.ai/program/machin…
English

GPT-3ベースのインタラクティブに物語が作れるモデルが試せるサイト発見。やっぱtransformerすげえ。
play.aidungeon.io/main/home
日本語
Roy 🇺🇦 retweetledi

新人エンジニアにおすすめする推薦図書33冊をご紹介しています。ぜひご覧ください🎉
developers.cyberagent.co.jp/blog/archives/…
日本語
Roy 🇺🇦 retweetledi












