BigQueryの副業

事業内容 お財布に溜まっているレシートが、すぐにお金にかわる｢ONE（ワン）」のサービス開発、運営をしています。 スマートフォンのカメラ機能でレシートを撮影すると、すぐにアプリ内のウォレットに1~10円が振り込まれ、振り込まれた現金が銀行の手数料分以上になれば、国内のほぼ全ての金融機関で好きなタイミングで引き出すことができます。 レシートには”究極のデータ”がたくさん含まれており、いつ、どこで、誰が何をいくら払って、いくらお釣りをもらって買ったのかという、一人ひとりの購買行動やパターン分析ができます。 そしてその蓄積データをメーカーなど法人企業向けに販売するというビジネスモデルです。 業務内容 ONEやこれからの新規プロダクトのデータ分析「基盤」の構築 機械学習のためのデータパイプラインの構築、運用 非エンジニアの社内メンバーが分析可能になる運用方法の構築 技術スタック PostgreSQL BigQuery metabase GCP（Herokuから移行中） 募集要件 必須スキル・経験 実務経験3年以上 AWS / GCP上でのデータパイプラインの構築または運用経験 Python, Scalaなどデータ分析に利用するプログラミング言語の経験 BigQuery, Hadoop, Spark, Hive, Kafkaいずれかの利用経験 RDBMSの利用経験 チーム開発の経験 歓迎スキル・経験 Cloud Pub/Subの利用経験 Cloud Dataprep, Dataflow, Dataprocの利用経験 カンファレンスの登壇経験 求める人物像 価値観 必要なら何でもやる気概を持っている 楽しいことが好き 誰も思いつかないようなことをやってやりたい ダサいことが嫌い 無駄なことをやりたくない 技術志向 開発スピード < コードの品質（=読みやすい、後々も変更しやすいなど） 幅広い技術に興味がある エンジニアチームの魅力 事業あたりのチーム人数は6名程度に抑えスモールチームを保ちます。 本人の希望で限定的な開発を行うのか、フルスタックなのかは決定していただいてOKです。 最低限のリソースで最大限のパフォーマンスを発揮する全員能力者集団を作っていきます。 ONE以外にも事業展開していくため、フルスクラッチでアプリケーションを作る機会は多いです。 入社時には、各自希望のスペックの PC やディスプレイを支給します。

仕事内容 ￣￣￣￣ 大量のデータを受け付けるデータパイプラインの構築 幅広い分析ワークロードをサポートする柔軟な分析基盤の構築 大規模な分散システムを分析して、パフォーマンスのボトルネック、障害ポイント、およびセキュリティホールの特定 こんなひとにおすすめ ￣￣￣￣￣￣￣￣￣￣ プロジェクトのオーナーシップと強い責任感 新しい言語、フレームワーク、スキルを習得を喜び勇んで行う マニュアルオペレーションするぐらいなら自動化する 今までの携わった 分散システムにおける、ThroughputやLatencyにまつわるクリティカルな問題を解決してきた経験がある 必須要件 ￣￣￣￣ BigQuery, RedShift, Hadoopなどの並列分散処理基盤(MPP)の活用経験 Hadoop、Presto、MySQL、PostgreSQL、その他のオープンソースの分散データベース/エンジンに関する知識 分散システムのプロダクション運用経験 歓迎要件 ￣￣￣￣ Ruby on Railsを用いたwebサービス開発の経験 スケーラビリティ、パフォーマンス、スケジューリングを踏まえたスケーラブルな分散マルチノード環境の経験 プロセス、メモリ、ストレージ、ネットワーク管理などのシステムアーキテクチャの深い知識

ハイトラフィックを支えるアーキテクチャ設計と開発 コストを意識したビッグデータ分析基盤の設計と開発 必要に応じたライブラリの作成やコントリビュート 新しい技術コンセプトに追従し、サービス成長のための採用・不採用の判断 こんなひとにおすすめ ￣￣￣￣￣￣￣￣￣￣ プロジェクトのオーナーシップと強い責任感 新しい言語、フレームワーク、スキルを習得を喜び勇んで行う マニュアルオペレーションするぐらいなら自動化する 今までの携わった 分散システムにおける、ThroughputやLatencyにまつわるクリティカルな問題を解決してきた経験がある 必須要件 ￣￣￣￣ Ruby on Railsを用いたサービス開発・プロダクション運用経験 分散システムのプロダクション運用経験 高度にスケーラブルな分散システムの開発と運用経験 歓迎要件 ￣￣￣￣ Hadoop、Presto、Spark、または他のほぼリアルタイムのバッチまたはMPP処理エンジンのソースコードレベルに精通