オルフェオン
@orfeon
Followers
282
Following
649
Media
45
Statuses
798
個人でWebサービスを作ってます。最近はデータ分析も始めました。ソーシャルライブラリー,GCP,Java,Python
Japan Tokyo
Joined July 2009
2020年にOSSとして公開した mercari/DataflowTemplate を大幅に機能強化して mercari/pipeline としてv1beta版をリリースしたので紹介記事を書いてみました。 https://t.co/Iv5lxQzKe4
engineering.mercari.com
はじめにこんにちは。メルペイ Solutionsチーム所属のデータエンジニア @orfeon です。この記事は、Merpay & Mercoin Tech Openness Month 2025 の15日目の記事です。2020年にデータパイ
0
6
19
社内で「Mercari Dataflow Template 便利だけどあまり使ってる人見ないよね」という話をしていたので勧めていく https://t.co/z749KcDSzt
zenn.dev
1
1
8
Cloud RunにさくっとSolrサーバを立てて、BQ等から取り込んだデータを検索する記事の続編を書きました。 複数コア対応・Embedding化支援・分散検索について紹介しています。 https://t.co/1mPwrSfMXn
engineering.mercari.com
こんにちは。株式会社メルペイのSolutionsチームのデータエンジニアの@orfeonです。この記事は、Merpay Advent Calendar 2023 の22日目の記事です。Solutionsチームは、社内向けの技術コンサルや技術
0
2
10
BigQueryからNeo4jにグラフデータを取り込んでCloud Runにデプロイしたり、Cloud Dataflowで作ったグラフデータにローカルでバッチ検索する記事を書きました。 https://t.co/39ndBMiLkV
engineering.mercari.com
この記事は、Merpay Tech Openness Month 2023 の13日目の記事です。こんにちは、メルペイ Solutionsチームのエンジニア@orfeonです。メルペイ Solutionsチームでは社内向けの技術的な相談対応
0
6
14
キャンペーンのインセンティブ付与をCloud Dataflowを使ってニアリアルタイムに実行する話を書きました。 付与ロジックはBeam SQLで定義して動かしています。 同じSQLでもバッチ実行と比べてトリガーの概念が出てくるのが面白い(つらい)ところ。 https://t.co/OARbt8uGtF
engineering.mercari.com
この記事は、Merpay Advent Calendar 2022 の14日目の記事です。こんにちは。メルペイ Solutions チームの orfeon です。メルペイ Solutionsチームはメルペイに限らず社内のプロジェクトでデータ
0
7
14
予定しているトピックはSpanner Release Historyの振り返り。google-cloud-goの思い出、Query Performance、Lockです！ https://t.co/lsvCeQ35uO
#MerpayTechFest
docs.google.com
1
3
2
2022年9月10日(土) から25日(日) の16日間、オンラインとオフラインで技術書典13を開催決定🎉オフラインは9月11日(日) 池袋サンシャインシティ 展示ホールDにて開催！出展申込や参加方法などの詳細は後日発表📚✨技術に出会えるイベントにみんなで参加しよう🐑 #技術書典 https://t.co/ABmfFIKcoT
1
295
465
Cloud RunにさくっとSolrサーバを立てて、BQから取り込んだデータを検索する記事を書きました。 個人開発や社内サービスなどでちょっとした検索機能を使いたい時の参考になれば。 https://t.co/ccuh1WOIwU
engineering.mercari.com
こんにちは、メルペイソリューションチーム所属エンジニアの＠orfeonです。この記事は Merpay Tech Openness Month 2021 5日目の記事です。メルペイソリューションチームでは、社内向けの技術コンサルや技術研修、部
0
24
145
#bq_sushi 遅くなってすみません！今日の資料です。 https://t.co/542S8NVb7w
docs.google.com
BigQueryユーザのための Cloud Dataflow入門 bq_sushi 2021-04-16
0
19
62
コンピュータアーキテクチャの第6版、GoogleのTPUとかウェアハウススケールコンピュータの話も載ってるぽい。MicrosoftのCatapultの話とかも載ってて面白そう。 https://t.co/VfWIzdkNch
amazon.co.jp
チューリング賞受賞(2017年度)記念翻訳版 コンピュータ科学最高の栄誉であるチューリング賞をRISCアーキテクチャへの貢献により2018年に受賞したヘネシーとパターソンによる 『コンピュータアーキテクチャ 定量的アプローチ[第6版]』 ヘネシーはGoogleの親会社Alphabet会長、パターソンはRISC-V財団副会長かつGoogleのExtinguished Engineerとして、オ...
0
1
10
Cloud Data Fusion．定形的な処理はだいたいプログラミングレスにできそう。対応ストレージや加工処理も豊富。実行はSpark，MapReduceを選べたので多分Dataprocで動いてそう？Dataflowにも対応予定らしい。 #GoogleNext19
0
13
53
終わった後発表者に質問が殺到してるけどGCPに関する質問というより、株価予測のモデリングやシミュレーションに関するのが多い様子。 このテーマにガチで取り組んでる人多そう。
0
0
0
あとはTFRecord作ってEstimaterAPI使ったTFモデリングの例。 DataEngineerトレーニングコースの教科書通りの解説。 #GoogleNext18 #TGNext18
1
0
0