Takuya Murayama
マーケティングシステム開発 / エンジニア
✅クローラー機能の負荷分散
1日に数万回走るWeb媒体へのクローリングの処理を単一のEC2のみで行っており、大量にプロセスが消滅してしまっていた & ECの費用が異常に高かったので、 Lamdaへ移行して、コストの削減と負荷の軽減を実施しました。 クローラーの処理自体もバグだらけで、その時は先人達を少し恨んでしまいましたが、 オフィスで寝泊まりしたりと今思えば、良い思い出です。
Discover companies you will love
中古車検索サイト リニューアル案件 / バックエンドエンジニア
Available to logged-in users only
View Takuya Murayama's
Full Profile
View past posts
View mutual connections
View Takuya Murayama's full profile
マーケティングシステム開発 / エンジニア
1日に数万回走るWeb媒体へのクローリングの処理を単一のEC2のみで行っており、大量にプロセスが消滅してしまっていた & ECの費用が異常に高かったので、 Lamdaへ移行して、コストの削減と負荷の軽減を実施しました。 クローラーの処理自体もバグだらけで、その時は先人達を少し恨んでしまいましたが、 オフィスで寝泊まりしたりと今思えば、良い思い出です。