機関向けのデータ基盤およびAI活用基盤構築プロジェクトにおける、設計・開発・運用支援の実行 ・データ収集・加工・集計・クレンジングなど、分析・AI活用に向けたデータ整備処理の実装 ・PythonやSQL、Spark、Airflowなど...
に向けたデータ整備処理の実装 ・PythonやSQL、Spark、Airflowなどを用いたデータパイプライン構築および運用 ・AWS／GCP／Azureなどクラウド環境上でのDWH／データレイク構築支援 ・Snowflake、Databricksなどを活用した基盤構築・性能...
of the software delivery lifecycle, version control (Git & GitHub), and data engineering tools such as Pandas and Spark...
ゼルビアとのスポーツテック事例記事をご覧ください。 ※上記以外にも、事業成長や業務改善につながる各種システム開発・技術検証に幅広く携わっていただくことがあります。 ■主な利用技術： React／Node.js／Go／Java／Bash／Python／Apache Spark／Apache...のいずれかのカテゴリに属するミドルウェアの構築または運用に関する実務経験 └メッセージング／ストリーミング基盤（例：Kafka、Pulsarなど） └データ処理基盤（分散処理エンジン・クエリエンジン）（例：Spark、Flink、Trinoなど） └データベース（RDBMS／NoSQL／KVストア）...
++ ・Python, Go, Hadoop, Hive, Spark, HBase, Presto, Kafka, re:dash ・AWS (EC2, S3, VPC, Route 53), Puppet, Fluentd, Elasticsearch...
から運用まで広く担当します ■開発環境： Linux (CentOS), MySQL, TokyoCabinet, Memcached, Perl, Java, Scala, C/C++ Python, Go, Hadoop, Hive, Spark, Presto...
地（住所）］ ＜勤務地詳細＞ 東京 住所：東京都渋谷区宇田川町3-5 Spark SHIBUYA 6F 勤務地最寄駅：各線／渋谷駅 受動喫煙対策：屋内全面禁煙 変更の範囲：会社の定める事業所 ［待遇・福利厚生］ 通勤手当、健康...
の地熱発電所のメンテナンスも手掛けています。特に、パルスパワーを利用した革新的なスケール除去技術「BLUE SPARK」により、生産井や還元井の機能回復を行い、発電効率の維持・向上に貢献しています。 ■扱う最先端技術 ◎G-Pulseとは G-Pulse社が...
を読み、実際に実装が可能なこと、また英文の読解力があること ・MLOpsの使用経験（Docker、Kubernetes、Sparkなど）...
、Java DWH：Snowflake、BigQuery、Redshift、Synapse データ基盤：Databricks、Spark、Presto、Hadoop BIツール：Tableau、Looker、PowerBI、Datorama...