データエンジニア/データ活用プラットフォームConat
- 採用企業名
- 株式会社フライウィール
- 職種
-
IT(PM・SE) - BI・DWHエンジニア
技術系(機械設計・製造技術) - IoT・AI・データマネジメント
- 雇用形態
- 無期雇用
- 勤務地
-
東京都
- 仕事内容
-
...
■ポジションについて
プロダクト開発本部はフライウィールにて共通的に利用されるインフラストラクチャや、データの課題を解決するプロダクトの企画・開発・運用を行っています。
その中でデータエンジニアは、データサイエンティストや他のエンジニアと協力しながら、データ基盤を構築・改善して、大事なデータを守りながら、フライウィール全体およびクライアントのデータ活用を推進します。
プロフェッショナルサービスで得られた知見を基に、セキュリティレベルの担保やスムーズなデータ処理を実現しています。
■プロダクトに関して
「データを誰もが自在に活用できる社会」を目指し、エンタープライズ向けデータ活用プラットフォーム「Conata」を提供しています。Conata は、データの収集・処理・分析・可視化、生成AI(RAG)を活用した知識検索、AI エージェントによる業務自動化まで一貫して支援し、企業のデータ活用を最大化します。
ビッグテックで培ったデータ管理・情報検索技術を活用し、高度な DataOps を実現。その技術と 生成 AI・AI エージェントを組み合わせることで、企業のデータ活用をさらに強化します。2024年には「Conata Data Agent」をリリースし、大量な社内データを自然言語で横断的に検索・活用できる環境を提供しています。
※参考記事
企業のAI活用は、「使われていない情報」こそが価値
~MSでのグローバル開発経験を持つフライウィールCTO・波村氏が指摘する、日本企業が抱えるデータ整備の課題~
https://www.fastgrow.jp/articles/flywheel-hamura
■業務内容
<データ収集>
・パートナー・クライアントとのデータの受け渡しをするためのインテグレーションシステムの構築
・Webクローリングやスクレイピングなどの、Webから情報を収集・活用するシステムの構築
<データ処理>
・データの ETL/ELT 処理の開発。また安定的に動作させるためのデータ処理パイプラインの構築
・バッチ / ストリーミングベースのシナリオに対応したシステムの開発と運用
<データ管理>
・収集したデータ、処理済みデータを保存・活用するためのデータウェアハウスの設計と構築
・収集した、処理済みデータ活用のための検索基盤の設計と構築
センシティブなデータを安全に処理可能にするためのシステム設計・構築
・Webクローリングやスクレイピングなどの、Webから情報を収集・活用するシステムの構築
・他のエンジニア職と共通の業務
サービスの安定提供を24時間365日、維持するためのシステム運用
システムの技術的な問題の発見と解決
運用を自動化あるいは低コストにするためのツールの開発
■データエンジニアの魅力
・大規模データを安定的に処理するデータインフラ環境構築の経験ができます。
・現在だけでなく将来的にConataを利用する数多くのクライアントに対して、スケーラブルかつ効率的なプロダクトや機能の開発に携われます。
・データの進化にも対応できるように拡張性を持たせたデータエンジニアリングの設計、構築に携わることができます。
・ビッグテックで開発・データサイエンスの業務に携わってきた方と密に連携しながら働くこともでき、技術的な成長ができ一緒に互いを高め合える環境です。
■開発環境
クラウド:AWS
Data Platform:Python, Dagster, dbt, Snowflake, Amazon Athena
Infrustructure:Amazon EKS(Kubernetes), Terraform, Prometheus, Grafana
DevOps:Bazel, GitHub, GitHub Actions■休日:完全週休二日制, 土, 日, 祝日, GW, 夏季休暇, 年末年始
- 求める経験
-
...
【必須要件】
・下記の項目を1つ以上満たす方
データベース、データウェアハウスを使ったデータ基盤の開発経験
データ処理パイプラインの開発経験
Apache Hadoop、Sparkなどの分散データ処理の開発経験
【歓迎要件】
・AWSやGCP、Azureなどのクラウドにおける開発経験
・コンピューターサイエンスの学士号、もしくはそれに相当する知識と業務経験
・Java、 Kotlin、Python、C++、Golang などの1つ以上のプログラミング言語でのソフトウェア開発の経験
・新しい技術、ツール、プログラミング言語を必要に応じて学ぶ能力と意欲
・臨機応変に状況に対応できる柔軟性
・フライウィールのミッションとバリューに共感できること■職種未経験者:不可
- 想定年収
- 600万円 - 1200万円




