2024年の振り返り
大晦日、実家の広島に帰省する新幹線の中から2024年を振り返る。
開発(個人プロジェクト)
「LLMやっていくぞ!」の熱意が生まれた転機の年となった。
冬までは麻雀AI + LLM の組み合わせで、従来の牌譜検討ツールの難点であったAIとの不一致手の解釈を与えることをがんばっていた。 合成データを作る段になって、自分で作成しているデータの質に納得がいかずお蔵入りに。これの開発のお陰で Rust の開発にだいぶ慣れた。Rust 最高。
冬からはコンテンツモデレーション(誤情報・フェイクニュース・有害コンテンツ)に関する開発を趣味ではじめた。昔からデータの収集やアーカイブだけは行っていたので研究対象には事欠かない。誤情報・フェイクニュースへの対策は特に重要性が高まっているように感じる。アノテーション作業も自ら行っていたのだけれど、この作業が予想以上に精神的な負担が大きかった。こういった負担を軽減するためにも LLM をうまく活用したい。
最後まで開発してリリースしたものはFastKaggle(Kaggle のための VS Code 拡張機能)が唯一となった。Kaggle への機能リクエストなどしつつ開発を続けていく。
買い物
Synology の NAS が良かった。DiskStation DS923+ (¥99,391) と Expansion Unit DX517 (¥76,843) を購入。ソフトウェア(というかOS)の完成度が高くて驚いた。初めから8ベイの製品を購入すれば良かったと後悔してる。
自宅にある大量のアーカイブデータは大半をクラウドに移動しつつ、ローカル環境で実験するデータセットなどは自宅の NAS に配置している。
旅行
長野(信濃大町)でゆっくりした。 ただ、イベント参加のために宿泊日数を短くしたりハイキングに行ったので十分にゆっくりできなかったように思う。 2025年はもっとゆっくりする。観光はほどほどにして、普段とは違う環境で長く過ごすというのが良い。
仕事
マネージャーになった。いわゆるプレイングマネージャーとして、チームのマネジメント以外にPL、開発、企画、営業活動など幅広くやっています。10年前は生粋のエンジニアキャラだったので、当時を知る知人に今の姿を見せると非常に驚かれます。
マネジメントについては、企業文化やビジネス形態の違いがあるので、これまでの職場での正解と現在の職場での正解が必ずしも一致しないという気付きの年でした。
ざっくり振り返ると、エンジニアリング以外のビジネス面(コンサルと営業の狭間)で活動することが増えた年でした。そこで成功体験も得られた。得難い経験なので、高い目標を持ちつつ成果を積み上げていきたい。
来年への意気込み
LLM がっつりとやっていく。開発したものをリリースするなり評価結果をレポートするまで完成させることを目指す。
AI Agent についても何かしらやっていきたい。これについては失望と期待の両方の気持ちがある。データリークに対する配慮の不十分さや誇大広告が目立つ。データリークについて指摘されると toxic な返事を研究者が返すところさえある。ベンチマークの論文でいくらリークの注意書きがあっても、それを平気で無視して誇大広告するプレイヤーが現れる。 MLE-Bench についても SWE-Bench についてもこうした課題があると思う。 Konwinski Prize のように private test のある環境の重要性が再認識されてくれと願いばかりです。 2024年はブログを書いただけであったが、2025年は色々と手を動かす。
フリーランス
フリーランスとしての活動を再開します。いきなり多くの時間を使うことは難しいのですが、良い関係を築くことができたならば、そこに多くの時間を費やしたいと思います。気軽にメールやXにてご連絡いただければ幸いです。あるいは私からネタを作って営業をかけに行くのでよろしくお願いいたします🙌