転職・求人情報の詳細をご覧になる場合は会員登録（無料）が必要です
データの構築をするデータエンジニアを募集
年収：応相談
採用企業案件
社長面接
株式会社SMALL WORLD
-
- 資本金95百万円
- 会社規模非公開
- 人材紹介・人材派遣
| 部署・役職名 | データの構築をするデータエンジニアを募集 |
|---|---|
| 職種 | |
| 業種 | |
| 勤務地 | |
| 仕事内容 |
※SMALL WORLDで雇用後、各プロジェクトへアサインしていただきます※ 【Job Description】 We are looking for a Data Engineer to join our growing team responsible for building Rakuten's data pipeline used for analyzing all services' apps and web sites. Data Engineer shall be: - Responsible for design and development of data pipeline that processes several terabytes of data hourly and required to be available to consumers in timely manner - Responsible for maintenance and operation of the data pipeline which includes, but not limited to: deployment of new features/fixes, outage troubleshooting, data discrepancies investigations, and the likes. - Working with customer service team and product team to add more features and address customer use cases on accessing the data. - Working with other engineering teams to improve the performance and reliability of services responsible for accessing the data. ---------------------------- 【業務内容】 楽天の全サービスのアプリやウェブサイトの分析に使用されるデータパイプラインの構築を担当するデータエンジニアを募集しています。 データエンジニア： - 毎時数テラバイトのデータを処理するデータパイプラインの設計と開発を担当し、消費者がタイムリーに利用できるようにする。 - データパイプラインの保守・運用を担当し、新機能の導入や修正、障害時のトラブルシューティング、データ不一致の調査などを行う。 - カスタマーサービスチームやプロダクトチームと協力し、より多くの機能を追加し、データへのアクセスに関する顧客のユースケースに対応する。 - 他のエンジニアリングチームと協力して、データへのアクセスを担当するサービスのパフォーマンスと信頼性を向上させる。 |
| 労働条件 |
【休日 / 休暇制度】 休日：週末（土曜日・日曜日）、祝日 休暇：年次有給休暇（法定付与）、夏季休暇、年末年始休暇、慶弔休暇 【諸手当】 交通手当(上限あり) 【福利厚生】 1 on 1 ミーティング : 上司と部下が毎月1対1でミーティングを実施し、上司が部下の直面している課題の解決や目標達成への支援を毎月行っています。 ビザ申請 : 外国籍の社員向けに、ビザ申請にかかる費用を補助しております。 【保険】 健康保険、厚生年金保険、雇用保険、労災保険 |
| 応募資格 |
【必須（MUST）】 - Extensive experience on building streaming and/or batch applications for processing data such as Spark, Flink and SQL- Able to create a spark application from scratch to production grade - Able to understand and modify existing spark applications to add new features and/or fix bugs - Able to tune Spark applications’ performance challenges by either utilizing various configurations, JVM tuning, and/or code refactoring - Able to work with the team using various project management methodologies like SCRUM, Sprint, Kanban, etc. - Working experience on handling production-related operations - Proactively participate on code review across data engineering team - Ability to do QA or investigate data discrepancies using SQL or Spark - English proficiency (business level, TOEIC 800 or above) ---------------------------- - Spark、Flink、SQLなどのデータ処理のためのストリーミングおよび/またはバッチアプリケーションの構築に関する豊富な経験 - Sparkアプリケーションをスクラッチからプロダクショングレードまで作成できる。 - 既存のSparkアプリケーションを理解し、新機能の追加やバグの修正を行うことができる。 - 様々な設定、JVMのチューニング、コードのリファクタリングによって、スパークアプリケーションのパフォーマンス課題を調整できる - SCRUM、Sprint、Kanbanなどの様々なプロジェクト管理手法を使ってチームと協働できる。 - プロダクション関連業務の実務経験 - データエンジニアリングチーム全体のコードレビューに積極的に参加できる - SQLまたはSparkを使用して、QAまたはデータの矛盾を調査する能力 - 英語能力(ビジネスレベル TOEIC800以上) 【歓迎（WANT）】 - Have worked on developing and optimizing applications that regularly accesses data with atleast 10TB's in size- Have worked on developing and optimizing applications that regularly processes data with atleast 1TB's in size - Experience on cloud bigdata technologies like BigQuery, DataProc, PubSub, etc. - Extensive experience on building streaming application using big data technologies such as Spark, Flink, Kafka, Pubsub, Dataproc - Working knowledge in DevOps tooling like Jenkins, Ansible, Chef, etc. ---------------------------- - 少なくとも10TBのサイズのデータに定期的にアクセスするアプリケーションの開発と最適化に携わったことがある。 - 少なくとも1TB以上のデータを定期的に処理するアプリケーションの開発と最適化に携わったことがある。 - BigQuery、DataProc、PubSubなどのクラウド・ビッグデータ・テクノロジーの経験 - Spark、Flink、Kafka、Pubsub、Dataprocなどのビッグデータ技術を使用したストリーミングアプリケーションの構築に関する豊富な経験 - Jenkins、Ansible、ChefなどのDevOpsツールの実務知識 |
| リモートワーク | 不可 |
| 受動喫煙対策 | 屋内禁煙 |
| 更新日 | 2024/08/09 |
| 求人番号 | 3769177 |
採用企業情報
- 株式会社SMALL WORLD
-
- 資本金95百万円
- 会社規模非公開
- 人材紹介・人材派遣
-
会社概要
【設立】2018年4月5日
【代表者】チャン リュンヒ
【資本金】9,500万円（資本準備金含む）
【本社所在地】愛知県名古屋市東区東桜1丁目10-9
【事業内容】
■「SMALL WORLD」の運営
■人材紹介
■人材派遣
■紹介予定派遣
■受託開発業務
転職・求人情報の詳細をご覧になる場合は会員登録（無料）が必要です