転職・求人情報の詳細をご覧になる場合は会員登録(無料)が必要です
部署・役職名 | 【データプラットフォームエンジニア】自然言語処理AI×ニュースで大企業の新規事業創出を支援 |
---|---|
職種 | |
業種 | |
勤務地 | |
仕事内容 |
私たちが目指すのは、Web上のあらゆるビジネス情報を再整理し、ビジネスシーンでのデータ活用業務を自然言語処理AIで総置換することです。そのために、世界中のニュース、企業情報、論文、特許などをWebから収集、抽出、加工して顧客に提供し、企業の製品化・事業化を加速させられるような「オープンデータリサーチサービス」を開発しています。 【現状の課題】 ・数億件規模のWeb上の文献をクローリング/コンテンツ抽出/配信するためのアプリケーションおよびインフラの開発と運用が必要になっている。 ・Web上の文献(ニュース、論文、特許)および顧客社内文献を解析、配信するためのデータパイプラインの開発と運用が必要になっている。 ・Web上の文献を安定的に収集・拡充していくための監視基盤の構築が必要になっている。 【ミッション】 全プロダクト共通のデータ配信システムに位置する、Webクローラーと文書配信パイプライン の設計、開発、運用を行なっていただきます。 エンジニアとして記載の課題解決のための開発を進めながら、データプラットフォームチームをリードし生産性の最大化を行うことも期待しています。 【業務内容】 ・TypeScript/Pythonを用いたWebニュース・特許・論文などを配信するデータプラットフォームの開発と運用 ・大規模言語モデル(LLM)の学習に必要となる日本語データセットの作成 ・顧客の社内文献を解析/配信するための解析ロジック及びデータパイプラインの新規構築と運用 ・FaaS/CaaSによる分散処理のスケーラビリティ向上と監視設計 ※変更の範囲 開発業務全般 【開発環境】 [開発言語] Webクローラー: TypeScript(Node.js) データパイプライン: Python [コンテナ] Docker [IaC] Terraform [クラウド] AWS, GCP 【ポジションの魅力】 全プロダクト共通の文書配信システムの開発と運用に携わることで、以下の経験を積むことができる。 ・数億件規模の文書データのサーバーレス分散処理に携わることができる ・数万サイトを対象としたWebクローラーの開発に携わることで、Webフロント・バックエンド両方の知見を活かしつつ、不安定なシステムの監視・運用設計のノウハウを取得できる ・PdMやCustomer Successチームとコミュニケーションしながら新規開発や改善策を自身で提案・開発することで、事業へのコミットを経験できる |
労働条件 |
【雇用形態】 正社員 ※試用期間3か月(条件に変更なし) 【勤務地/就業場所】 本社(東京都)または自宅等リモートワークが行える場所(変更なし) ※リモートワーク可 ■リモートワークについて ・基本的にはフルリモート体制です 居住地は日本国内に限ります(海外に居住してのフルリモート不可) ・リモート/出社は自由選択です。(出社回数規定/制限なし) それぞれの事情に合わせて使い分けながら勤務しています。 仙台・京都・大阪などからフルリモートで働いている人、ワーケーションを楽しみながら働いている人、母国に数週間帰国して働いている外国籍社員、また出社メインの人など多様な働き方を実現しています。 【勤務時間】 フレックスタイム制 コアタイム:10:00~14:00 1ヶ月の標準労働時間:1日8時間×営業日数 時間外労働あり(平均10〜20時間) ・リモートワークと合わせて、時間や場所に縛られない柔軟な働き方が可能です。 ・勤務時間の調整や中抜けなどで、子育てや介護との両立もしやすい環境です。 【給与】 ・想定年収 5,798,000円〜8,798,000円 ※月給×12ヶ月+リモートワーク準備一時金5万円 ・月給(一律手当含む):479,000円〜729,000円 <内訳> 基本給:335,168円〜520,537円 固定残業代45時間分:123,832円〜188,463円 ※超過分は別途支給 顧客と向き合う手当:2万円 ・昇給年2回(5月、11月) 【手当】 ・通勤交通費(リモートのため実費支給) ・リモートワーク準備一時金(初回給与にて一律5万円) 【休日休暇】 ・年間休日123日 ・完全週休2日制(土日祝休み) ・年末年始休暇 ・有給休暇(入社時付与、付与日数は入社月による) ・産前産後休暇 ・育児休暇 【保険】 各種保険完備(健康・厚生年金・雇用・労災) ※関東ITソフトウェア健康保険組合加入 【その他】 ・定期健康診断(全額会社負担) ・インフルエンザ予防接種 ・希望のPC支給 ・オフィスにて水/コーヒー/炭酸/アルコールなどのドリンク無料提供 ・オフィスグリコ設置 ・屋内禁煙(屋外喫煙所あり) |
応募資格 |
【必須(MUST)】 ※①〜③すべて必須①PythonまたはTypeScript(Node.js)を用いたアプリケーション開発経験 ②要件定義から設計〜実装〜運用に至るまで一気通貫での経験 ③以下の経験1つ以上 ・サーバーレスを用いたフルスタックな開発/運用及びそのリード経験(Lambda, ECS, Fargate, Step Functions, Cloud Functions, Cloud Runなど) ・データパイプライン・ETLの構築やワークフローエンジン、分散処理フレームワークを用いた開発/運用経験(Hadoop、Sparkなど) 【歓迎(WANT)】 ・コンピュータサイエンスに関連する技術分野の修士号または博士号・チーム開発をリードした経験 ・顧客向け自社開発サービスの開発、運用経験 ・文書検索や文書推薦を行うサービスの開発、運用経験 ・サーバーレスに対する幅広い知見と業務経験 ・Terraformを用いた開発/運用経験 【求める人物像】 ・コンピュータサイエンス、分散処理が好き ・最新の理論や事例をフォロー、検証するのが好き ・与えられた課題だけでなく、自ら問いを立て、そのために必要な解決策を生み出せる ・ビジネスサイドとコミュニケーションしながら、いかにプロダクトに貢献できるかを考えられる ・前向きなチャレンジ精神 <その他> ・日本国内に居住可能な方 ・開発に関する技術的な内容含め、日本語で円滑にコミュニケーションが取れる方 目安:日常会話レベル |
アピールポイント | 自社サービス・製品あり ベンチャー企業 2年連続売り上げ10%以上UP 年間休日120日以上 産休・育休取得実績あり 新規事業 完全土日休み フレックスタイム |
リモートワーク | 可 「可」と表示されている場合でも、「在宅に限る」「一定期間のみ」など、条件は求人によって異なります |
受動喫煙対策 | 屋内禁煙 |
更新日 | 2024/11/22 |
求人番号 | 3388734 |
採用企業情報
転職・求人情報の詳細をご覧になる場合は会員登録(無料)が必要です