Keigo Hattori Profile Banner
Keigo Hattori Profile
Keigo Hattori

@keigohtr

3,314
Followers
1,877
Following
260
Media
15,849
Statuses

Engineering division manager at RevComm / ex Woven by Toyota, ABEJA, LINE and FujiXerox / #MLOps enthusiast / Founder of Apitore / state-of-mlops weekly

神奈川
Joined December 2016
Don't wanna be here? Send us removal request.
@keigohtr
Keigo Hattori
5 years
これ論文だからみんな読みたくないと思うけど、MLOpsに必要な機能が透けて見えるので是非読んでほしい。 が実体験から学んだ6つのレッスン。機械学習を実運用するときに苦労したポイントがまとまっている。
2
78
519
@keigohtr
Keigo Hattori
10 months
以前紹介した「Googleが技術的負債をどう管理しているか」のまとめ記事。技術的負債トップ10がさっとまとまっている。
0
67
531
@keigohtr
Keigo Hattori
1 year
Googleより。技術的負債に関する調査と計測。特に機械学習まわりに負債が積み上がっているとのこと。負債返却モデルを4レベルで定義している。
2
83
458
@keigohtr
Keigo Hattori
4 years
Jupyter NotebookのレビューをとてもやりやすくするGitHub App。たしかにNotebookのレビューは大変(というか無理)だった。これは視覚的にも分かりやすいし良さそう。
1
80
429
@keigohtr
Keigo Hattori
5 years
「Jupyter NotebookでDSするなら再現性を確保するためにこれだけはやってくれ!」というリスト。たしかに。でも多分これだれもやらないだろうな・・・笑 #mlopsslack
1
65
350
@keigohtr
Keigo Hattori
5 years
これは絶対に見たほうが良い。私がMLエンジニアのときに感じた課題であり、今の私がずっと解決しようとしている課題。この課題と設計思想に対して反発するMLエンジニアが居たらむしろ知りたい。
2
48
335
@keigohtr
Keigo Hattori
2 years
Googleが提供している ML Engineer のベストプラクティス。よくまとまっている。
0
28
348
@keigohtr
Keigo Hattori
4 years
久々にとても良いMLOpsの記事。必見。MLOpsとはDevOpsとMLとData Engineeringの要素を合わせたもの。MLOps独自で必要な機能や要件がまとまっていて良き。 #mlopsslack
1
62
339
@keigohtr
Keigo Hattori
1 year
Meta AIよい。 OpenAIのWhisperよりも性能が良く、かつOpenAIのWhisperよりも多言語に対応した音声認識エンジンを公開。学習データに聖書を使う点が特徴。聖書は歴史的に非常に多くの言語に翻訳されている。
2
64
322
@keigohtr
Keigo Hattori
4 years
KubeFlow 1.0が出たぞー!ここに今回のメインの特徴がまとめらていてとても良い!Must Read。個で閉じたJupyter環境、TensorFlowとPyTorchの分散処理(CRD)、port forwarding不要なTensorBoard・・・などなど。枝に詳細書いていき💪 #mlopsslack
1
87
306
@keigohtr
Keigo Hattori
4 years
データサイエンティストもキレイなコードを書こう、という記事。共感しかない(自戒も込めて)
2
37
311
@keigohtr
Keigo Hattori
5 years
BERTのTransfer Learningを3stepsでやるチュートリアル。とても簡潔でとても良い。中で紹介されているPyTorch Lightningがとても良さそうで、PyTorchを誰でも簡単にproductionグレードの再利用可能な形で使えるようにしてくれる。良き。 #mlopsslack
0
61
301
@keigohtr
Keigo Hattori
2 years
GoogleのPython style guideを眺めていて、これはコストかかっているなと関心した。
0
32
304
@keigohtr
Keigo Hattori
1 year
スタンフォードはこういうのを公開してくれるのですごいよな。機械学習システムの授業。
0
46
294
@keigohtr
Keigo Hattori
4 years
機械学習を使ったシステムデザインについてまとめた文章。良くまとまっている。AIコンサル職向けに感じたけど、エンジニアの方もジョブインタビューでこれくらいのことを話せるととても良い。最後に10個の事例が載っているのも良い。
0
29
284
@keigohtr
Keigo Hattori
1 year
ChatGPTなどで使われているLLMを使ってチャットボットを作るOSS。スターが2万件近くついている。
1
29
282
@keigohtr
Keigo Hattori
4 years
PyTorch x Deep LearningのTutorial。「最初は理論を学ばなくても良い。まず使え」というメッセージが気持ち良い!難しく考えずに後から学べばいいと思う、何事も。
0
42
254
@keigohtr
Keigo Hattori
10 months
マイクロソフトより。 MLOpsの経験が詰まっていてとても良い記事。学びが深い。
0
26
254
@keigohtr
Keigo Hattori
2 years
LinkedInでのExplainable AIを主軸に置いた推薦システム。これによってupsell / churn しそうなカスタマーを特定したそうな。良い知見。
2
40
244
@keigohtr
Keigo Hattori
10 months
これはすごい。LLMの実運用における7種類の Tips がまとまっている。評価、外部知識の使い方、Fine tuning、キャッシュ、ガードレール、エラーの扱い、ユーザーフィードバック。情報がリッチで読み応えがある。
1
30
229
@keigohtr
Keigo Hattori
2 years
良い図。MLOpsのレベル。
Tweet media one
1
19
213
@keigohtr
Keigo Hattori
9 months
Netflixより。MLを組み込んだシステムでアーキテクチャを見直した話。とてもよかった。
0
13
205
@keigohtr
Keigo Hattori
4 years
ソフトウェアエンジニアが機械学習領域でどう貢献するか?むしろ機械学習エンジニアに見てもらいたい。
0
21
195
@keigohtr
Keigo Hattori
8 months
これ読んでる。良書。脳の仕組みと、脳の使い方がわかりやすい。実践できるテクニックだらけ。 #ad
0
20
201
@keigohtr
Keigo Hattori
4 years
株式会社ABEJAを退職します
9
9
194
@keigohtr
Keigo Hattori
7 months
PyTorchで学ぶ Deep Learning。無料。大容量。
0
22
194
@keigohtr
Keigo Hattori
4 years
気づいた方もいらっしゃったかもしれませんが、今はTRI-ADでお世話になっています。私は自動運転向けのMLOps基盤を作ってます。裁量はかなりあります。データエンジニアやSRE/DevOpsの方が必要なので、もし興味ありましたらこちらご覧頂けると🙏
@keigohtr
Keigo Hattori
4 years
初出社終わったのでこれから帰宅して家で仕事。
Tweet media one
0
1
14
2
12
186
@keigohtr
Keigo Hattori
5 years
Colab/Notebookでpipelineを組んだらそのままAirFlow/Beamに変換してくれる機能が出た。ポイントはColab上でpipelineを実行でき、動作確認したあとにAirFlow化できるところ。これをProduction-gradeと呼ぶかはさておき、とてもユーザビリティは良い。良き。
@TensorFlow
TensorFlow
5 years
You can now build and run ML pipelines in an interactive Colab notebook using TensorFlow Extended (TFX)! 📓 Develop in a notebook and then export to a production-ready ML pipeline. Try it in your browser today →
8
202
643
1
49
188
@keigohtr
Keigo Hattori
2 years
ざっと流し見たけど、よかった。タイトルは機械学習っぽいけど、実際は MLOps やエンジニアリング。
0
18
185
@keigohtr
Keigo Hattori
2 years
とてもわかりやすい。良記事。どういうアーキテクトしていってどういう考えがそこにあるのか説明されている。初学者にも中級者にもおすすめ。 The Architecture of a Modern Startup
0
15
169
@keigohtr
Keigo Hattori
2 years
新しい挑戦の時が来ました。 Woven Planet Holdingsを退職して、RevCommにジョインしました。MLOpsを牽引していきます。meetyを開設したので、色々話しましょう!
8
11
162
@keigohtr
Keigo Hattori
7 months
本日の登壇資料です。15:10から発表します。 #技術的負債_findy エンジニア不足の中で どう技術的負債と向き合ったのか RevComm Research の場合 -
2
19
157
@keigohtr
Keigo Hattori
9 months
LLMOpsについて扱った記事。プロンプトの管理やらレスポンスの管理やらが簡��にまとまっていて読みやすい。
0
14
149
@keigohtr
Keigo Hattori
7 months
RAGをやるにあたってどれを使えばよいかを調べたブログ。OpenAI ChatGPTやGoogle PaLMなどで作った embeddings と BAAI 等が提供している reranker で、どの組み合わせが精度が良いか。
0
8
145
@keigohtr
Keigo Hattori
7 months
機械学習のバージョニングはgitのブランチでやろう。データ用のブランチ、コード用のブランチ、など。中を読んでみると、こういうのもありかもなと思える。
0
11
140
@keigohtr
Keigo Hattori
2 years
昔見たMLOps関係の良い記事は思い出せなくなってきたので、4ヶ月前から改めてMLOpsでよかった記事のリンクを集めだしました。興味ある方是非っ。 #mlops
1
13
134
@keigohtr
Keigo Hattori
3 years
これはすごい情報量・・・
0
21
126
@keigohtr
Keigo Hattori
2 years
MLOpsじゃないけど、システムデザインインタビューに役立つ資料。チャプター5はいろいろな企業の面接で実施していた印象がある。
0
4
124
@keigohtr
Keigo Hattori
1 year
Notebook用のMLOps用途の可視化ライブラリ。ドリフト検知して可視化したり、データを可視化したり。
0
9
118
@keigohtr
Keigo Hattori
2 years
これは何度か読んだけど、あらためて読むと学びがある。
0
10
117
@keigohtr
Keigo Hattori
2 years
MLOpsのブートキャンプ。Youtubeビデオが公開されていて良い。ざっと眺めたけど丁寧。
0
12
116
@keigohtr
Keigo Hattori
5 years
登壇資料です。 What we need for MLOps #CCSE2019
2
25
105
@keigohtr
Keigo Hattori
4 years
これもあとで読む。機械学習システムの運用のための28個の要点が書いてある。チェックリストになる。 #mlopsslack
1
11
109
@keigohtr
Keigo Hattori
1 year
MLモデルの監視について、要点がよくまとまっている。
2
10
109
@keigohtr
Keigo Hattori
11 months
データ収集、MLモデルのビルド、MLモデルの配信までの一連の MLOps を SaaS や OSS を使って組んだ事例。ひとつの参考事例。
1
9
103
@keigohtr
Keigo Hattori
1 year
とても良い記事だった。共感。MLOpsエンジニアを雇うということ、MLOpsエンジニアというスキル、諸々。同じ分野で働く者として共感した。
0
7
103
@keigohtr
Keigo Hattori
4 years
Facebookからオープンソースでチャットボットがでた。他のチャットボットを超える性能とのこと
1
25
100
@keigohtr
Keigo Hattori
2 years
まだ1/5くらいしか読んでないけど、The MLOpsって感じで良い記事。
0
6
99
@keigohtr
Keigo Hattori
9 months
LLMsの最適化について、データセットの側面からまとめたブログ。人手で高品質なデータセットを作るグループや、LLMから大量のデータセットを生成するグループなど、いくつかの側面が簡潔にまとまっている。
1
14
98
@keigohtr
Keigo Hattori
5 years
Courseraを元にしたGCP上でのMLOps構築チュートリアル的なもの。初級向けではあるものの要所にMLOpsの要点があり良き。 #mlopsslack
0
20
94
@keigohtr
Keigo Hattori
1 year
Kaggleなどを含むMLコンペで使われている技術。自分は詳しくないので、Kagglerの方の意見を聞きたい。ここに載っているのが真実なら、まとめサイトとして使えそう。
0
2
97
@keigohtr
Keigo Hattori
1 year
機械学習エンジニアとデータサイエンティストって何が違うの?など各職種の役割がクリアになってよい記事。
0
9
93
@keigohtr
Keigo Hattori
5 years
Kaggler slack入ったんだけど、てっきりexpert以下へのすごい罵倒があるかと思ったらすごく平和。あと誰かの質問に誰かがちゃんと回答してる。平和。
0
7
87
@keigohtr
Keigo Hattori
4 years
deeplの方が俺よりわかりやすい英語を書くんだが。。。
4
5
88
@keigohtr
Keigo Hattori
4 years
MITの提供する2400以上ものコンピュータ・サイエンスのオンライン教材がフリーだと!月曜だけかな?急げ!
@MIT_CSAIL
MIT CSAIL
4 years
MIT offers free video lectures and online materials from more than 2,400 courses, including intro classes in computer science, AI and algorithms. Browse our open CS courses here: (v/ @MITOCW ) #MondayMotivation
Tweet media one
9
375
741
1
25
84
@keigohtr
Keigo Hattori
4 years
Production readyな機械学習システムに必要な5つのコンポーネント。とても良くまとまっている。よくまとめたな!すごい。 #mlopsslack
0
17
84
@keigohtr
Keigo Hattori
1 year
データサイエンスおよび機械学習の実運用関係の論文やブログをまとめたサイト。ボリュームがすごい。空いた時間に見ていく。
0
8
88
@keigohtr
Keigo Hattori
2 years
あとでみる 無料のMLOpsコース
1
5
80
@keigohtr
Keigo Hattori
4 years
MLflowのチュートリアル。丁寧。MLflow好きなんだけど一部の機能にcondaが必要なのがちょっとな(宗教戦争)。
0
10
77
@keigohtr
Keigo Hattori
4 years
本日の登壇資料です! #mlct Cost-efficient and scalable ML-experiments in AWS with spot-instances, Kubernetes and Horovodの紹介と感想
0
21
75
@keigohtr
Keigo Hattori
4 years
k8s使ったmlops基盤開発が加速してきました。LINEの時と同じように、今回も社内で先陣切ってk8s x mlops進めてます!3年前と比べてツールも経験者も揃ってきて、益々盛り上がってきました。興味ある方は是非っー!
@keigohtr
Keigo Hattori
4 years
カジュアル面談受付中。 TRI-ADでMLOpsやることに興味ある方はゼヒッ〜!
2
17
59
1
13
72
@keigohtr
Keigo Hattori
4 years
キャリアとか色々と考えるより、気の合う奴らと働けることを重視した方が幸せになれる気がしてきた。ミッションとかビジョンとかやりがいとか、もう疲れたよパトラッシュ🦮
1
6
70
@keigohtr
Keigo Hattori
5 years
エムスリーでのAI開発が面白そうだと感じる理由の99%がnishibaさんによるところなのかもしれない。ああいう人間性と行動力と能力は個人として私も持たなければならないと感じる。
0
9
69
@keigohtr
Keigo Hattori
3 years
Tweet media one
1
0
67
@keigohtr
Keigo Hattori
2 years
共立出版 @kyoritsu_pub さまから献本頂きました!"Federated Learning"
Tweet media one
0
15
66
@keigohtr
Keigo Hattori
4 years
カジュアル面談受付中。 TRI-ADでMLOpsやることに興味ある方はゼヒッ〜!
2
17
59
@keigohtr
Keigo Hattori
3 years
良いボスとは笑顔と承認、というYouTubeビデオが流れてきた。胡散臭いセミナーではあったが言ってることは正しい。様々な組織本読んだけど、結局のところ「褒める」「認めて任せる」「失敗したら怒るのではなく振り返る」が大事。
1
6
60
@keigohtr
Keigo Hattori
11 months
Lyftより。リアルタイムMLの基盤について。基盤そのものより、会社でML基盤を作る時にどうやってそのプロジェクトを進めるかについて、プロダクトマネジメントの観点を強調している印象を受けた。
0
4
62
@keigohtr
Keigo Hattori
4 years
yahooからk8s/mlops人材を引っこ抜きたい(正直者のツイート)
3
13
63
@keigohtr
Keigo Hattori
5 years
またまたMichelangeloの紹介なんだけど、この記事はすごく良い。必要な機能の概要が把握できる。MLOps界隈の人間はmust read。これにそって設計すれば間違いない。
0
9
62
@keigohtr
Keigo Hattori
4 years
よくまとめたな笑 すごい!k8s deploymentのトラブルシューティング完全ガイド。
@arungupta
Arun Gupta
4 years
Excellent visual guide on troubleshooting #Kubernetes deployments: Thanks @danielepolencic
Tweet media one
3
120
293
0
22
62
@keigohtr
Keigo Hattori
4 years
前職辞めるとき役員面談があり、同時期に辞める同期は役員面談なかったからてっきり引き止められるのかと思ったけど、話を聞いた上で「君のキャリアプランなら外出たほうが良い、いつか戻ってきてくれ」と言ってもらえたのでそこは普通に印象良かった。
2
3
56
@keigohtr
Keigo Hattori
4 years
PyTorchのモデルをproductionで使うならAWS上にAPIを構築するCortexというのが使える。
@PyTorch
PyTorch
4 years
Learn how to automate most of the infrastructure work required to deploy PyTorch models in production using Cortex, an open source tool for deploying models as APIs on AWS.
0
77
308
0
17
57
@keigohtr
Keigo Hattori
5 years
エムスリー採用順調だなあ。興味ある人は急がないと枠なくなるかも?(煽り)
1
6
53