はじめに こんにちは、バックエンドエンジニアのおおたわらです。 これまで2つの記事にわたり、弊社のアンケートシステムについて紹介させていただきました。 大規模調査を支えるアンケートシステムのアーキテクチャ 大規模調査を支えるアンケートシステムのアーキテクチャ おかわり 今回は、このシステムに対し大量アクセスを想定した負荷試験をどのように行っているかについて紹介します。 負荷試験の目標 システムの性能を評価するためには、定量的な目標を立てる必要があります。 大規模調査を支えるアンケートシステムのアーキテクチャ で紹介した非機能要件を再掲すると、以下の通りです。 大規模調査における大量のリクエスト…

はじめに こんにちは、エモーションテックでSREチームに所属しているsugawaraです。 エモーションテックでは、Google Cloudにおける一時的な権限付与の運用を改善するため、Privileged Access Manager (以降PAM) を導入しました。 PAMの導入によって、これまで手動で行っていた一時的な権限の付与・剥奪のプロセスを自動化し、セキュリティと作業効率を大幅に向上させることができました。 本記事では、導入の背景、導入前後の権限付与フローの比較、導入の際につまづいた点についてご紹介します。 導入背景：一時的な権限付与についての課題 開発者や運用担当者が本番環境など…

はじめに こんにちは！フロントエンドエンジニアの有馬です。 以前、コードレビューでこんな指摘を受けたことがあります。 「テンプレートでメソッドを呼び出すとパフォーマンスに影響が出る可能性があるので、Pipeを使いませんか？」 当時はその理由を深く理解していませんでしたが、実際に計測してみると、その指摘の裏にはパフォーマンスに関わる明確な理由があることがわかりました。 今回は、多くの開発者が一度は書いてしまいがちなアンチパターン「テンプレート内でのメソッド呼び出し」に焦点を当てます。これが実際にどれだけアプリケーションの負荷を高めるのかを計測し、解決策として「純粋パイプ (Pure Pipe)」…

はじめに こんにちは！バックエンドエンジニアの谷口(@ravineport)です。 以前、 大規模調査を支えるアンケートシステムのアーキテクチャという記事で弊社のアンケートシステムのアーキテクチャについて紹介しましたが、今回はこれをもう少し深堀りしてみようと思います。 必要なことは改めてこの記事でも取り上げるので、この記事を読むにあたって前述の記事は前提としていません（が、読んでいただけるととてもうれしいです！）。 EmotionTech では Google Cloud を採用しており、今回紹介するアンケートシステムも Google Cloud 上で構成されています。 アンケートシステムの概要…

はじめに 皆様こんにちは。エモテクでエンジニアとして働いているしんです。個人的な都合でエモテクを7月いっぱいで卒業することになりました。 そんな時だからこそ、エモテクプロダクトチームの特に良いところ3つを本音で紹介したいと思います。社内Slackの情報が多めなので、所々モザイクを入れています。 とにかくよい居心地 神がすぐ降臨する安心感 社内のSlack には個人用のタイムラインチャンネルがあり、自由に仕事のこと、個人のことを呟いていいんです。そこで仕事の悩みごとを呟いたりすると、見かけた神はそこに反応してくれます。 適度なゆるさが心地よい 普通の仕事でも、楽しんでいます。以下不要となったコー…

はじめに こんにちは、エモーションテック SREのおかざきです。 弊社ではGoogle Cloud Runを利用していますが、そのマニフェスト管理方式とデプロイワークフローを紹介します。 背景 弊社プロダクトでは複数のマイクロサービスをCloud RunとCloud Run Jobs上で運用しています。 各サービス・各環境ごとにCloud Runの設定ファイル（以下、マニフェスト）を管理する必要があります。 現在はCloud Run / Cloud Run Jobsを合わせて100を超えるマニフェストが存在するため、それらをうまく管理する必要があります。 全体像 方式の全体像を図で表すと以下の…

こんにちは、生成AI事業開発・データサイエンティストのikegameです。 最近当社では、「60％最速」すなわち「60%の成果物を最速で出す」という行動指針を掲げています（ご参考：エモーションテックという船の加速度をあげるために｜エモーションテック）。 最初から完璧を目指すのではなく、周囲からフィードバックをもらえる回数を増やそう、という考え方ですね。 この指針は、他の行動指針に比べても、意識できている社員が多いように思います。プロダクトチーム内でも「60%最速で」という発言がよく聞かれるようになりました。 ただ、この考え方は、理解しやすい反面、認識を誤るとプロダクトの崩壊にもつながり得る、諸…

はじめに こんにちは、QAエンジニアのなかじまです。 昨今、生成AIを利用したサービスや製品に触れる機会が増えてきており、弊社でもTopicScanという生成AIを利用したプロダクトを展開しております。 今回は増えつつある生成AIを利用したサービス・機能に対し、どのような観点を持ってテストを実施していくのが望ましいかを検討した話をしていきます。 生成AI活用に伴うリスクについて 生成AIを利用したサービスというと、簡単、便利という反面で、権利侵害やフェイク情報を含むコンテンツ出力、情報漏洩といったリスクについて注意喚起されて、利用に不安を感じるユーザーも多いと思います。 QAエンジニア視点でも…

はじめに こんにちは、PMのかどたみです。 今回はライセンスに関するお話です。以前cargo-deny によるクレートのライセンス確認 という記事でよしかわさんにRustにおいて採用しているクレートに意図しないライセンスが含まれていないかをチェックする方法を紹介してもらいました。 Rustであれば記事の方法をなぞればよいのですが、エモーションテックではRustの他にもTypeScriptやPythonといった言語も利用してアプリケーション開発を行っています。 今回は言語をまたがってライセンスチェックができないか検討したのでその紹介をしたいと思います。 背景 Rust以外の言語でのライセンス管理…

はじめに こんにちは、QAチームのもときです。以前、参入後のQAチームの取り組みについて、以下の記事で紹介させていただきました。 https://tech.emotion-tech.co.jp/entry/two-years-passed-enter-qa-team この記事内で紹介できなかったことがいくつかあり、その中から今回はバグ分析について紹介したいと思います。 QAチームは日々、自社サービスに対してのQA活動やテストを実施しております。自社サービスは、2週間ごとのスプリントで開発タスクを決め、開発→テスト→リリース→振り返り という流れで対応しています。テストで検出した不具合はバグレポ…

はじめに こんにちは、あるいはこんばんは。フロントエンドエンジニアの id:kasaharu です。 Web アプリケーションにユーザーがアクセスしてきたとき、ユーザーはブラウザを介して HTML / CSS / JavaScript といった多くの assets をダウンロードすることが多いのではないでしょうか？ フロントエンド技術の進化に伴い、ユーザーがダウンロードする assets ファイルの数は増え、またファイルひとつひとつのサイズも増加しています。 ファイル数やサイズの増加はユーザーがそのアプリケーションを使えるようになるまでの時間が増えることにもつながるため望ましくありません。 遅…

こんにちは。バックエンドエンジニアの李です。弊社ではアンケート回答の分析など時間のかかる処理の実行環境として Cloud Run Jobs を活用しています。そこで今回は Cloud Run Jobs を使ったプロダクトを安定運用するための仕組みの一部として、Google Cloud の Workflows を用いた試みを紹介いたします。 背景 弊社が開発している TopicScan では、大規模データをバッチ処理するために Cloud Run Jobs を採用しました。しかし、初期はリソース不足やアプリケーションの不具合でジョブが失敗したり Cloud Run Jobs の内部的な障害により…

はじめに こんにちは。バックエンドエンジニアのよしかわです。Rust を用いた大抵のソフトウェア開発では何らかの外部クレートを用いるかと思います。crates.io で公開されているようなクレートは MIT や Apache-2.0 といったライセンスを採用していることが多いですが、それ以外のライセンスを採用していることもあります。間違えてプロダクトに合わないライセンスのクレートを利用しないようにするにはプログラムによる機械的な確認が有効です。そこで今回はクレートのライセンスを cargo-deny によって確認する方法をご紹介します。 インストール 他の cargo プラグインと同じく ca…

こんにちは！エモーションテックで UX エンジニアをしている高橋（@fusho_takahashi）です。 今回はFigmaのプロトタイプ機能を活用して、以下のようなフォームを実現する方法をご紹介します。 このフォームはユーザーの趣味や興味のある分野について尋ねる内容になっています。質問形式はラジオボタンを使用した単一選択式で、提示された選択肢に該当する項目がない場合は「その他」を選択し、自由記入欄に具体的な趣味を記入できるようにしています。 仕様 1. 基本動作 単一選択式: 選択肢のいずれか1つのみ選択可能 既に選択されている場合、新しい選択肢を選ぶと前の選択が自動的に解除される 2. 入…

はじめに 皆様、メリクリです。エモーションテックでバックエンドエンジニアをやっているしん(@sinyo-matu)です。 Anthropic社が11月に公開したModel Context Protocol（MCP）について調べてみたので、こちらの記事では、MCPの紹介とその応用について書きたいと思います。 また、この記事は エモーションテック Advent Calendar 2024 25 日目の記事です。 MCPって？ まず一次情報源として、公式の紹介ブログ及び公式ドキュメントを載せておきます。 最近では生成AIと既存のワークフローの連携をテーマにした製品開発が非常に盛り上がっています。ID…

はじめに こんにちはテックリードのかどたみです。 昨年のアドベントカレンダーでプロダクトチームが行っている勉強会のリニューアルについて紹介しました。この記事から1年経過しましたが、提案者である私が育児休暇を取っている間も自然消滅することなく継続することができております！ 途中で振り返りも実施し、更に内容をブラッシュアップしました。 今回はこの一年で行った勉強会の内容や振り返りの内容を紹介したいと思います。 この記事はエモーションテック Advent Calendar 2024の24日目の記事です。 開始当初の目的 本題に入る前に勉強会の目的をおさらいしておきます。 この勉強会のもともとの目的は…

はじめに こんにちはあるいはこんばんは。フロントエンドエンジニアの id:kasaharu です。 エモーションテックでは GitHub Actions のワークフローを使ってフロントエンドのデプロイフローを組んでいます。 少し前にワークフローの permission の設定ミスにより突然デプロイができなくなったことがあったので、今回はそのとき起こったことについて書きます。 これは エモーションテック Advent Calendar 2024 23 日目の記事です。 前提 今回の問題について話す前に、まず対象リポジトリとワークフローについて前提を揃えようと思います。 今回登場するワークフローは…

Angular Material を愛する皆さんこんにちは！フロントエンドエンジニアの高橋 a.k.a 黄色い人（ @fusho_takahashi ）です。 エモーションテック Advent Calendar 2024 22 日目の記事を担当させていただきます！ M2 のまま使い続ける恐怖 エモーションテックでは、UI コンポーネントライブラリとして Angular Material を使用しています。Angular Material はその名の通り、Material Design のデザインを基に作られており、本家 Material Design のバージョンアップに伴い、これまでに 2 …

はじめに こんにちはProduct Teamのマネージャーのよしだです。弊社では、様々なサービスのバックエンドでPostgreSQLを利用しています。セキュリティを強化するためにロール管理、特に新規ロール作成時のパスワード管理は、非常に重要です。データベーススキーマの変更を行う管理者権限とBIツール連携などで利用される読み取り専用ロールを分けて運用することで、意図しないデータ変更のリスクを低減できます。読み取り専用ロールは新規作成の機会が多く、パスワード管理を適切に行わないとセキュリティリスクが発生する可能性があります。 弊社では、機密情報管理に1Passwordを活用しており、Postgre…

はじめに こんにちはProduct Teamのマネージャーのよしだです。エモーションテックでは、生成AIを活用したテキストAI分析サービス「TopicScan®︎」を提供しております。「ChatGPT」の登場以来、生成AIの進化は目覚ましく、日々新しいモデルが登場しています。TopicScanも常に最新のモデルを活用し、お客様により良い体験を提供できるよう努めています。しかし、Azure OpenAI Service (以下Azure OpenAI)のモデル管理は決して簡単なものではありません。モデルのアップデートは頻繁に行われるため、公式ドキュメントの更新が追いつかないこともあります。今回は…

はじめに こんにちは。バックエンドエンジニアのよしかわです。本記事では Rust の簡単なマクロの実装例をご紹介します。 この記事はエモーションテック Advent Calendar 2024の19日目の記事です。 動機 まず今回紹介するマクロを実装した動機について述べます。弊社では下記のようなレイヤードアーキテクチャを採用しているのですが、レイヤーをまたぐ際の値の詰め替えについての気掛かりが動機となっています。 project/ |- api/ |- domain/ |- infrastructure/ |- usecase/ |- Cargo.toml Rustバックエンドのテスト構成何も…

こんにちは。Analyticsチームの川向です。 Analyticsチームはクライアント企業の皆様がよりよい示唆を得られるために、新たな解析手法やビジュアライゼーションを考案しています。今回はその中の一つの取り組みである「決定木モデルにより重要度を算出する試み」を紹介させていただきます。 この記事はエモーションテック Advent Calendar 2024の18日目の記事です。 NPS®について 本題に入る前に、エモーションテックでの調査で目的変数になることが多く、本記事内での検証においても目的変数であるNPS（Net Promoter Score）について紹介させていただきます。NPSは顧…

はじめに エモーションテックでSREチームに所属しているsugawaraです。先日弊社の旧プロダクトで利用していたMySQL 5.7をMySQL 8.0へアップグレードしました。（旧プロダクトとは、先日アナウンスされた「EmotionTech CX/EXの新環境・パブリックベータ版」に対して、従来から存在していたプロダクト環境を指します。）今回はこのアップグレード対応についてまとめてみました。この記事はエモーションテック Advent Calendar 2024の17日目の記事です。 経緯 弊社の旧プロダクトではMySQL 5.7(Amazon Aurora MySQL バージョン2)を利用し…

はじめに こんにちは、SREのおかざき(@tomoy_715)です。本記事ではSREチームとして今年やってきたことを振り返ってみます。 この記事はエモーションテック Advent Calendar 2024の16日目の記事です。 SREチームの紹介 簡単にSREチームの位置付けについてご紹介します。 SREチームは複数のプロダクトの開発チームを横断的に支援します。 チーム構成概略 開発初期から信頼性と開発生産性を意識し、開発メンバーが機能開発や改善にスムーズに取り組める環境を整備します。 また、開発メンバーが信頼性向上や顧客に届ける新たな価値を考える上で「試したい」と思ったことをすぐ行動に移せ…

1. はじめに: 変革の背景と目的 こんにちは。Analyticsチームの松田です。 Analyticsチームではクライアント企業のCXMおよびEXMに関する課題解決のため、統計解析を用いて主にアンケートデータ等の分析およびレポーティングを行なっているチームです。 今日は長年使い慣れたExcelから、Pythonベースのデータ分析環境に移行した話をしたいと思います。 Excelは便利なツールですが、分析を進める上では様々な課題がありました。そこで、より効率的で柔軟な環境構築を目指しPythonを導入して業務に取り入れていくまでの経緯と過程について共有したいと思います。 この記事はエモーションテ…

はじめに こんにちは、フロントエンドエンジニアの有馬です。前回 Intersection Observer を利用して遅延読み込みを行う方法についてお伝えしましたが、応用して仮想スクロールのようなものを実装することもできたので今回はその方法についてお伝えします。 この記事はエモーションテック Advent Calendar 2024の14日目の記事です。 課題 現在開発中の機能には、アンケートの回答を質問ごとに集計し、質問の種類に応じてグラフや表で表示する画面があります。 現状ではこの画面を開いたときに、全ての質問に対して個別に集計リクエストが送られています。質問数が10問くらいであれば問題に…

はじめに こんにちは、テックリードのかどたみです。 今回もテストネタです！こちらの記事でも紹介しましたが、エモーションテックではデータストアとの結合テストを行っています。RDBに関するコードのテストは実行ごとにデータを生成するのですが、BigQueryに関しては事前にデータをアップロードしてSQLのテストを行っています。 今回はBigQueryのテストデータ準備について紹介したいと思います。 この記事はエモーションテック Advent Calendar 2024の13日目の記事です。 前提 BigQueryのデータもテストの実行ごとに生成すればよいのでは？という意見もあるかと思いますが、以下の…

はじめに こんにちは、QAチームのもときです。 私は正社員1人目のQAエンジニアとしてエモーションテックに参入し、今日2024年12月12日で丸2年が経過しました。2年の間にQAチームのメンバーの一員として、どのようにプロダクトに関わってきたかを振り返ってみます。 この記事はエモーションテック Advent Calendar 2024の12日目の記事です。 参入当初 〜 テスト体制確立まで 参入当初は、サービスのテスト体制が無いに等しい状態でした。テスト管理ツールは無く、過去のテスト記録、実績は残っていませんでした。また、テストに関するレビューは実施しておらず、テスト範囲は個々のエンジニアによ…

はじめに こんにちは、バックエンドエンジニアのおおたわらです。 アドベントカレンダー 2 日目でテストコードの振り返りという記事も公開されましたが、弊社では単体テストをしっかりと書きながらプロダクト開発を進めています。 そんな中でテストをもっと書きやすくしたい！という思いから、Rust の googletest-rust クレートをプロダクト開発で使ってみたので、所感を紹介します。 この記事はエモーションテック Advent Calendar 2024の11日目の記事です。 googletest-rust とは もともと Google 社が C++ 向けのテストライブラリ GoogleTest…

はじめに こんにちは。バックエンドエンジニアのよしかわです。本記事では GitHub Actions のワークフローを少し安全に書くコツを一つご紹介いたします。 この記事はエモーションテック Advent Calendar 2024の10日目の記事です。 脆弱性を含むワークフローの例 今回取り上げるのはスクリプトインジェクション対策です。例として公式ドキュメントで脆弱性を含むとして挙げられているコードを見てみます。これはプルリクエストのタイトルが octocat で始まっていれば「PR title starts with 'octocat'」を出力して成功し、そうでなければ「PR title …