★エンド直★【即日データエンジニア募集】AWS/GCP/SQL・100万＠リモートの案件・求人【ライトアーム株式会社】

案件情報

• 業務内容

  作業内容	データエンジニアとして、ビッグデータ解析/分散処理基盤開発をお任せします。 具体的な作業内容は下記となります。 ・AWSを利⽤したビッグデータ解析⽤分散処理基盤のアーキテクチャ選定から設計 ・実装、運⽤フロー⾃動化の提案、実装 ・ビジネスサイドの要望をヒアリング、最適なアーキテクチャの選定 ・各所ニーズ(マーケター、サイエンティスト、機械学習エンジニアなど）に応じたデータセットの作成 ・機械学習エンジニアと協業し、機械学習モデルのAPI環境の実装や、git,CI/CDの仕組み作りと維持
  必須スキル	・データ処理基盤の設計/構築、または運用経験（1年以上） ・AWS もしくは GCPを利用したサービスの構築経験（1年以上） ・SQL による簡単なデータ分析の経験
  尚可スキル	・データ基盤チームの立ち上げ、チームリードの経験 ・Apache Airflow (Amazon MWAA, Google Cloud Composer) などのワークフローオーケストレーションを利用した開発経験 ・AWS Glue, Amazon EMR などによる ETL 処理の開発経験 ・Amazon Athena, Amazon Redshift, BigQuery などの DWH 製品の利用・運用経験 ・Apache Spark, Apache Flink 等の分散処理フレームワークを利用した開発経験 ・Amazon Kinesis Data Streams, Apache Kafka などを用いたストリーム処理の開発経験 ・アジャイル (スクラムベース）での開発経験 (CSM, CSPO, CSD保有者歓迎)
  開発環境	■使用している開発環境 サーバーサイド：Scala, Play Framework, ZIO, Flink, Akka フロントエンド：TypeScript, Vue.js, Nuxt.js, Jest, Cypress, Storybook クラウドサービス：AWS（ECS, EKS, Fargate, Kinesis Data Stream, Lambda, EMR, RDS, Aurora, S3, CloudFront, ElastiCache） 仮想化基盤：Docker, Kubernetes 検索：Elasticsearch, Solr 分析基盤：fluentd, AWS(Glue, Athena, CDK), Airflow, BigQuery, Google Data Studio, Redash プロビジョニング：Terraform, Ansible 監視：DataDog, Kibana ミドルウェア：nginx, MySQL, ClickHouse その他使用言語：Python, Go, Rust 開発ツール：Github, Slack, Intellij IDEA, Jenkins, JIRA, SlackBot

  表示

• 基本情報

  単価	～ 1,000,000 円 /月額
  精算幅	140－180
  勤務地	渋谷駅 / 渋谷駅 ※実際の勤務地は応募時にご確認下さい
  契約形態	業務委託
  商流	元請

  表示