職務内容
【仕事内容】
様々なプロジェクトにおいて、大量のデータを活用した分析やサービス開発が進められています。これらのプロジェクトを支えるデータエンジニアとしてご活躍いただきます。
具体的な業務内容としては、以下のようなものが挙げられます。
■データ収集・抽出: 多様なデータソース(データベース、API、ファイルなど)から、分析に必要なデータを抽出
■データクリーニング: 抽出されたデータの品質向上のため、欠損値の補完、異常値の検出、データの標準化
■データ変換: 分析に適した形式に変換するために、データの構造化、正規化、集計
■データ格納: データウェアハウスやデータレイクにデータを格納、管理
■データモデリング: データの構造を設計し、データベースを作成
これらの業務を通して、データ基盤を強化し、データドリブンな意思決定を支援します。
環境
・OS: Linux (CentOS, Ubuntuなど)
・プログラミング言語: Python
・データベース: SQL、PostgreSQL, MySQL, Redshift, BigQuery
・クラウド環境: AWS, Azure, ...