らの求人はジャパンデジタルソリューションズ株式会社の紹介求人となります。 給与・待遇 年収420万円〜490万円 勤務地 東京渋谷区 【住所】 東京都渋谷区宇田川町3番5号 Spark SHIBUYA 6階 【アクセス】 ☆東京メトロ副都心線・半蔵門線「渋谷」駅より徒歩5分 ☆東急...
／Python ミドルウェア：PostgreSQL／Spark／GNU／Fluentd／Elasticsearch／Docker／Terraform インフラ：AWS（Aurora／ECS／Fargate／Kinesis／Lambda...
経験 分散処理基盤（Apache Spark等）の利用経験 機械学習アルゴリズムおよび最適化アルゴリズムに関する知識・開発経験 Pythonおよび関連MLライブラリ（scikit-learn、TensorFlow、PyTorch等...
環境＞ －クラウド：AWS（ECS/Glue/RDS/S3/Lambda など）/Databricks －データ処理基盤：Apache Spark/AWS Glue －DB：Amazon RDS（Aurora MySQL）/DynamoDB...
】・ビッグデータ処理技術（Hadoop、Sparkなど）の経験・データ可視化ツール（Tableau、Power BIなど）の使用経験・クラウド環境（Azure、AWS、GCP）でのデータ分析経験・Gitlab、Jira、Confluenceの使...
／Tailwind／Storybook／Jest／Testing Library／NestJS／TypeORM 配信バックエンド・ETLジョブ：Go／Gin／Scala／Python ミドルウェア：PostgreSQL／Spark／GNU...
to GKN Automotive. We need people of different backgrounds, with different skills and perspectives to spark originality...
の大量データ処理を実現する各種システムの設計、構築、運用をお任せします。 メインとなる業務はデータ基盤システムの運用で、日々増えていくデータを蓄積し、バッチ処理や機械学習、分析者が使っているデータ基盤の運用を行います。現在はIceberg、Trino、Spark/Hadoopを使...用していますが、新しいサービス、技術があればそれらの検証、導入に関わることもできます。 ■業務内容 ※基本的には内製しております。 ・データ基盤（Iceberg、Trino、Spark/Hadoop）の設計、構築、運用 ・デー...
タ処理パイプラインの構築（SQL、Spark、Pandasなど） ・ビジネスサイドとの要件定義・設計フェーズへの参画 ■主な取引先：※全体の9割が直案件 エイベックス / 三菱電機 /トラストバンク / キヤノンマーケティングジャパン / ユニクロ / パナ...
orchestration tools (Airflow, Dagster, Prefect) Experience with Spark, Hadoop, or large-scale data processing frameworks...