世界最速レベルのRDB【劔】を用いたデータ処理PJのシステムエンジニア(Java)
2024/10/25 更新
システムエンジニア、テックリード
東京都
500-800万円
自社サービスありリモートワーク可服装自由オンライン選考可新技術に積極的ベンチャー企業残業月20時間未満裁量労働制あり
事業概要
例として「IT企業の原価計算・管理会計システム構築」において、「従来型RDBMSで約20時間の処理が約10分に短縮 (ほぼリアルタイムの環境で分析が可能に)」など顧客のデータ処理に関する課題解決を製品提供やコンサルティング~システム開発を通じて行っております。
今後は、研究開発し、2023/10に公開した世界最速レベルのRDB「劔(Tsurugi)」を用いて、よりデータ処理の高速化を行ってまいります。
仕事内容
世界最速レベルのRDB「劔(Tsurugi)」を用いたデータ処理に関するシステム開発業務を行います。 ※「劔(Tsurugi)」はNEC社や各大学の研究室と共同で研究開発を行ない2023/10にOSSで公開したRDBとなります。 システムエンジニアの方には、Javaを軸としたデータ処理に関するシステム開発や劔のサポートを行って頂きます。 (変更の範囲:会社の定める業務)
<主な業務内容> ・(要件定義)、基本設計、詳細設計、実装(Java)、テスト、運用 ・顧客対応、劔のサポート(質問回答、運用ツール提供、障害分析、設計、レビュー、サンプルコード作成など) ・インフラ設計構築(クラウド/オンプレ) ※基本的に常駐作業ではありません。 ※ご志向に応じて、技術スペシャリストもマネジメントも目指すことができます。
■開発環境 言語:Java(メイン言語)/C++/(Python)/SQL DB:劔/他 OS:Linux クラウド:AWS/Azure 分散処理基盤: Amazon EMR/Azure HDInsight/Hadoop/Spark/Databricks その他: Gradle/AsakusaFW/Git/slack/Docker/Jenkins/Backlog/BOX/(zendesk)等
■劔の開発の過程で実証実験を行った事例 ・国立天文台での宇宙空間における観測データ(ビッグデータ)の処理 ・3D航空マップの災害発生後の初動・応急対策段階での活用 ・LiDARカメラによって得られる大量の点群データの格納および解析 など
■世界最速レベルのRDB「劔(Tsurugi)」とは 国の機関から支援を受け、NEC社や各大学の研究室と共同研究開発(RDBのエンジン部分はノーチラス・テクノロジーズが開発)。 2023/10にOSSで公開された純国産の次世代超高速RDBです。 HW性能を最大限に引き出し、コア数に応じて処理性能がスケール、また、RDBとして一貫性が担保出来ます。 フロントRDBはPostgreでSQL記述が可能、APIはJavaとなります。
求められるスキル・人物像
■ 必須スキル/経験 ・Javaの開発経験(目安3年以上) →一人称で設計開発が出来る想定 ・RDBを用いた業務システム開発経験 ・基本設計以降一通りの経験
■ 歓迎スキル/経験 ・要件定義の経験 ・インフラやクラウドの基礎知識や構築経験 ・DBのチューニング経験 ・業務系システム経験 ・システム開発に関して自身の得意な事が有る事
■ 求める人物像 ・技術が好きで学び続けている方 ・技術を続けていきたい方 ・裁量を持って業務に取り組みたい方
勤務地・給与・その他情報
- 勤務地
- アクセス
- 勤務時間
- 想定年収
- 雇用形態
- 休日・休暇
開発環境・現場
■ 配属先:開発部 ■ チーム詳細(2023年10月時点) ・11名の内訳は、アーキテクト3名、PM3名、SE8名です ・その他、R&Dのチームには7名のエンジニアが在籍しています ※状況により変更有 ■ 現場・社員の雰囲気 ・少数精鋭の組織で全員が自走しているチームですが、質問をすると快く回答してくれます ・平均年齢は40代で、落ち着いた人柄の社員が多い傾向があります(2023年10月時点) ・とにかく技術が好きで、自身のスキルを極めたい志向の方にマッチする職場です
このPJ・案件で使われている技術
- プログラミング言語
- JavaPythonC++SQL
- データベース
- MySQLPostgreSQL
- ミドルウェア・ツール
- DockerJenkinsApache HadoopSpark
- クラウド
- AWSMicrosoft Azure
- サーバー・OS
- Linux
- 開発手法
- ウォーターフォール
- プロジェクト管理
- RedmineBacklogGitHub
- コミュニケーションツール
- Slack
- その他
- Gradle
- 支給PC
- 現場で選択可能(Windows/Mac)
得られる経験・キャリアパス
■ キャリアパス ・志向に応じて、技術スペシャリストやマネージャーを目指せます
■ 得られる経験 ・自社サービスとこれまでのノウハウがあるほか、優秀なエンジニアが在籍しているので、データ処理技術が身につけられます
事業内容の詳細
■実績例 ・IT企業の原価計算・管理会計システム構築 →従来型RDBMSで約20時間の処理が約10分に (ほぼリアルタイムの環境で分析が可能に) ・金融機関の分析処理バッチの高速化 →従来の10時間かかる処理を7分まで短縮 ・食品製造業の原価計算システム構築 →従来のRDBMSで4時間かかる処理を20分まで短縮 <劔の開発の過程で実証実験を行った事例> ・国立天文台での宇宙空間における観測データ(ビッグデータ)の処理 ・3D航空マップの災害発生後の初動・応急対策段階での活用 ・LiDARカメラによって得られる大量の点群データの格納および解析 など
■自社製品(OSS) <Asakusa Framework(分散処理用フレームワーク)> 主に基幹システムなど業務システムへのHadoop,Spark等の並列分散処理の能力を活用するためのフレームワークです。難易度の高い並列分散処理のアプリケーション開発の敷居を下げ、開発後のプログラム改編や保守・運用も行いやすくなります。 その為、データ量が増え続ける現在、従来では難しかった複雑でデータ量の多い業務データ処理時間の短縮を行い、さらに運用や保守の難易度を下げることで、時間的な制約・運用・保守にかかるコストの高さから解放され、機会損失となっていたデータ活用にリソースを割くことが可能となります。
<劔(RDB)> 2023年10月に、NEDO(国立研究開発法人新エネルギー・産業技術総合開発機構)の研究開発事業支援に採択され、各大学の研究室やNEC社と共に開発を行っている国産RDB「劔(Tsurugi)」をOSSとして公開。
NEDOのリリース:https://www.nedo.go.jp/news/press/AA5_101671.html 製品コミュニティサイト:https://www.tsurugidb.com/
この企業の他の求人
同じ職種の求人
同じ業種の企業
関連リンク
関連スキル
同じ勤務地の求人
同じ年収帯の求人
求人検索ページに戻る
- ITエンジニア・デザイナーの求人・転職TOP
- ITエンジニア・デザイナーの求人・転職を探す
- システムエンジニアの求人
- 世界最速レベルのRDB【劔】を用いたデータ処理PJのシステムエンジニア(Java)