はてなブックマーク

はじめに こんにちは。GMOアドパートナーズのs-tです。 半年に一度のエンジニアによるLT(ライトニングトーク)大会を実施しました。前回からストリーミング配信ソフトのOBSを使ったYouTube Liveで開催しており、2021年下期も同様に開催しました。 今回はそこで起きた音声トラブルを紹介していきます。 前回(2021年上期)開催時のブログはこちら 前回のLT大会との違い 今回のLT大会では沖縄からの登壇者がいたため、Zoomの映像/音声も配信に載せることになりました。 渋谷フクラスオフィスと沖縄オフィスをZoomで繋いでの配信という初めての試みでLT大会を開催しました。 また、機材面でも優先のマイクからワイヤレスのマイクにアップデートしたりと配信機材も新しくなっています。 LT大会準備 Zoomの映像/音声を配信に載せるにあたって、問題が発生しました。 配信マシンにMacbook、

GoogleスプレッドシートとGoogle Apps ScriptとGoogleデータポータルでRSSリーダーを構築してみた件(その2・GAS内でフィード取得編) GMO NIKKOのK.Aです。前回の記事に引き続きGoogleのサービスを組み合わせて簡単なツールを構築した事例の紹介です。 前回記事:GoogleスプレッドシートとGoogle Apps ScriptとGoogleデータポータルでRSSリーダーを構築してみた件(その1・IMPORTFEED関数編) RSSリーダー|GAS版の全体フロー 前回はGoogleのスプレッドシート関数(IMPPORTFEED)だけでRSSのフィードデータ取得する方法で構成しましたが、今回はGoogle Apps Script(GAS)内でフィードデータ取得する方法で構成します。 利用ツールは、Googleスプレッドシート、Google Apps Sc

GoogleスプレッドシートとGoogle Apps ScriptとGoogleデータポータルでRSSリーダーを構築してみた件(その1・IMPORTFEED関数編) GMO NIKKOのK.Aです。今は開発エンジニアとしてではなく、ディレクション中心の業務が中心のため、プログラミングや技術的に深い内容ではなく、誰でも無料で利用できるGoogleのサービスを組み合わせて簡単なツールを構築した事例を紹介いたします。 RSSリーダーが復権? 先日、Android端末のChromeブラウザのアプリで「Follow」機能として、RSSフィードの情報を表示できる機能がリリースされたというニュースがありました。昨今、あまり注目を浴びていなかったRSSリーダーのニーズが今後、また少し盛り上がるかもしれません(?)。 今回は、そんな「RSSリーダー」を本格的なサーバーやDBを用意せずに、Googleスプレッ

個人的に気になるC++の対応状況ですが、 VSは他のコンパイラに比べて対応が遅いイメージですがC++23にかなり対応しているようです。

GMO NIKKOのT.Iです。 今回は当社のTRUE データフィードで使用している正規表現検索の効率化についての記事となります。 前提(背景と目的) まずは宣伝(笑) 当社公式サイトでは上記となっていますが、簡単にいうと ・クライアントからデータを預かる ・預かったデータを広告媒体毎のフォーマットの変換する ・変換したデータを指定された場所に送信する ということをやっています。 その中のデータの変換時に禁止文言が入ったデータを行ごと除外するということをやっています。 大量のデータに禁止文言が入っているかをチェックする必要があるのですが、 初期想定では精々10万件に対して100〜1000個の禁止文言をチェックする程度(1億回程度)で十分と判断していました。 ×ばつ3万=30億回のチェックを行う場合があり、処理時間がかなり長くなっ

GMOアドマーケティングのT.Oです。 今回はオフライン評価について調べてみました。 0.オフライン評価とは? 過去に集めたアクセスログなどの蓄積データを利用して、過去の施策とは別の施策を適用した場合、どのような結果となるかをオフラインで評価する方法です。施策を決めるための意思決定モデルを変更するのは手間とリスクがありますが、オフライン評価ならば既存システムに改修を加えずに新しい意思決定モデルを評価することが可能です。 1.オフライン評価の手順 オフライン評価を行うには以下のような手順を実施します。 2.オフ方策学習で実施すること 蓄積データをもとに施策を決定するための新たな意思決定モデルの学習(Off-Policy Learning; OPL)を行ないます。ここでの目的は既存システムの意思決定モデルの性能を上回る新たな意思決定モデルを得ることです。 意思決定モデルの例 バンディットアルゴ

この記事は GMOアドマーケティングAdvent Calendar 2021 25日目の記事です。 はじめに こんにちは、GMOアドマーケティングの星野です。 今年のアドベントカレンダーも本日で最後となりました。 アドベントカレンダーを書いていると今年も終わりということを感じます。 GMOアドマーケティングではいくつかのプロダクトをGCPへと移行をしています。 移行では障害を起こさないことが優先されますが、最終的には単に移行するだけではなく、システムをクラウドネイティブな設計に変えていくことで、クラウドの恩恵を最大限に受けれるように改善していきたいと思ってます。 既存のシステムをクラウドネイティブな設計に変えていくにはコンテナ化が必要になります。 コンテナ化を行う際の設計指針の一つにコンテナ・デザインパターンというものがあります。 今回は、書籍の分散システムデザインパターン からいくつかの

この記事は GMOアドマーケティング Advent Calendar 2021 24日目の記事です。 はじめに こんにちは、GMOアドマーケティングのR.Yです。 今回はp5.jsを使用して読み込みの長い画面でも退屈しないようなゲーム風読み込み画面を作成しましたのでその紹介です。 p5.jsとは p5.jsとはJavaをベースに作られた「Processing」と言う電子アートのプログラミング言語をJavaScriptで使用できるようにしたライブラリになります。p5.jsを使うことでブラウザ上で表示できるアニメーションを作成することができます。 サンプル 文字だけではわかりづらいと思うのでp5.jsによるアニメーションのサンプルを用意しました。以下が実際の表示とプログラムになります。※(注記)以降の動画は全て当社が作成したものになります。 sample.html <script src="https

こんにちは、GMOアドマーケティング インフラ開発部のhakumaiです。前回の記事「AWSエンジニアから見たGCPサービス(DB/ストレージ編)」を読んでいただいた方々、ありがとうございます。今回は、GCPのマネージドサービスであるCloud SQLへPostgreSQLのバージョンアップも兼ねて無事故で移行した時に思ったこと・気づいたことがたくさんあったので、それについてお話しいたします。移行の経緯約1年前、女子向けメディア「めるも」はオンプレ環境からGCPへほぼ既存構成のまま移行をし(lift)、その後現在までマネージドサービスへの移行を... きっかけ きっかけは今年2月末にGCPのPCAを取得したこともあり、「であればSAPも」と軽い気持ちで思ったことがきっかけです。 また、SAPの試験範囲を確認したところ、クラウドへの移行や組織としてのAWSアカウントの管理など自分には知見がな

この記事は GMOアドマーケティング Advent Calendar 2021 21日目の記事です。 はじめに GMOアドマーケティングの吉岡です。 皆様は趣味で開発することはありますでしょうか? エンジニアであれば面白いサービスを開発して世に公開したいという方も多いと思いますし、非エンジニアでも公開までの流れは気になると思います。 今回は自分の興味あるテーマでウェブサービスを公開した結果、ありがたいことに多くのアクセスがあったので、開発構想から公開までの簡単な流れを紹介したいと思います。 開発構想 まずはどんなサービスを作るかを決めていきます。 今回は新型コロナウィルスワクチンの職域摂取が始まるというタイミングでワクチンの仕組みを調べた結果、自分の考えと政府を含めた大多数の人の考えに大きな乖離があったため、わかりやすいウェブサイトを作ろうと考えたことがきっかけです。 開発するテーマを選定

この記事は GMOアドマーケティングAdvent Calendar 2021 20日目の記事です。 こんにちは、GMOアドマーケティングのM.H.と申します! 文章のカテゴリ分類って難しいですよね。例えばメールの本文からそれがスパムか否かを判定する二値分類ならまだ良いですが、書かれた文章のテーマで分類するなどの話になってくると、その分カテゴリ数が増えて問題の難易度が上がります。 このような問題に対処するために機械学習を使うことはよくあることですが、大きく「教師あり学習」による予測モデルの学習と「教師なし学習」によるクラスタリングの2つのアプローチが使われることが多いように思います。 教師あり学習は素直な方法ですが、学習にあたり文章に対する正解カテゴリのアノテーションを付与する必要があり、入力データの作成にあたってかなり骨の折れる作業を強いられますし、時が経てば対応したいカテゴリが増減

この記事は GMOアドマーケティングAdvent Calendar 2020 3日目の記事です。皆さんこんにちは、GMOアドマーケティングのS.Rです。前回のブログでは、GCPのSDKでBigQueryを実行する状況をBigQueryのテーブルへ格納するプログラムの作り方を皆さんへ紹介させていただきました。実際の運用にはBigQueryの実行状況を集計することだけではなく、大きな課金が発生する場合にリアルタイムで責任者へ共有することも重要です。今回はBigQueryの実行する情報を、よく使われているSlackという業務用チャットツールへ共有する方法を皆さんへ紹介... また、毎日確認するようなデータの可視化/メンバーへの提供を行う場合には、Google BigQueryとGUIベースでシームレスに連携が可能な「Google Data Portal」を利用しています。 現状の課題 社内

この記事は GMOアドマーケティング Advent Calendar 2021 17日目の記事です。 はじめに おはようございます。こんにちは。こんばんは。 GMOアドマーケティングのY-Kです。 突然ですが、機械学習関連のタスクでこんなことを経験したことはありませんか? 書籍や論文に載せられている有効的な手法を使用したにもかかわらず、タスクの評価指標(KPI)が向上しない訓練データ上では良い結果だが、本番環境で予測させてみるとそうでもないそもそも、機械学習を用いてタスクを取り組む際、どこから手をつけていけば良いかが分からない 機械学習についての基本的な知識はある(はず)与えられたデータに対して、データ分析〜学習〜予測の一連の作業を行なったことがある(大学の研究、kaggleのコンペ等)が、実際のビジネスの施策として機械学習を用いようと考えた途端に思考が纏まらなくなる 上記のような、ひよっ

こんにちは。GMOアドマーケティングのM.Nです。 少し前になりますが、GMOインターネット 次世代システム研究室のTECHNOLOGY INTERNSHIPに参加してきました。 例年GMOアドマーケティングと次世代システム研究室で共同開催しているのですが、私はWebエンジニアリングコースのチューターとして参加しました。 今回はTECHNOLOGY INTERNSHIPで実施した課題と、課題に取り組む上でのポイントについて紹介します。 TECHNOLOGY INTERNSHIPについて TECHNOLOGY INTERNSHIP は以下のような形式で進めており、実務に近い形で就業体験ができるという特徴があります。 お題のWebサービスの構築を行い、実サービスで運用できるクオリティの構成を一人、もしくはチームで実現してもらいます。メンターにヒントを貰いながらアプリケーション全体の構成を自分た

この記事は GMOアドマーケティング Advent Calendar 2021 15日目の記事です。 みなさんこんにちは。GMOアドマーケティングのH.Tと申します。 Cloud Shellで作るチュートリアルを試してみたのでご紹介したいと思います。 Cloud Shellとは GCP環境で使えるブラウザでアクセスできるオンライン開発/運用環境です。 Cloud Shellで社内勉強用などのチュートリアルが作成できる機能があります。 きっかけ Google Cloud主催のG.I.G.プログラムに参加しているのですが そこでハンズオンのセッションがありスピーカーの方から共有されたリンクをクリックしたら簡単にチュートリアルが開けたので便利だなと思い試してみました。 チュートリアルの仕組み チュートリアルはMarkdownで記述されたファイルをCloud Shellで実行することで機能するので

この記事は GMOアドマーケティング Advent Calendar 2021 14日目の記事です。 こんにちは。GMOアドマーケティングのT.Mです。 はじめに 開発に携わるマネージャーのキャリアパスについて考えてみました。 本稿で対象とするマネージャーとは普段コードを書きつつ、メンバーの進捗確認や評価、1on1などを行う人を考えています。 マネージャーのやっていること キャリアパスについて考える前にマネージャーが何をやっているのか振り返ってみます。 仕様調整、設計、コーディング、テスト技術的な相談を受ける進捗確認開発タスクの調整目標設定人事評価1on1メンバーの教育採用エンジニア組織の改善etc... テクニカルな部分からメンバーへの教育、人事に係るところまで様々です。 キャリアパスを考える 会社によりマネージャーの立ち位置は様々あると思いますが、係長、課長相当と考えると、 部長や開発本部

この記事は GMOアドマーケティング Advent Calendar 2021 13日目の記事です。 GMOアドマーケティングのT.Nです。 Java 17でSealed ClassesがPreviewからStandardになりました。 弊社でも先日一部のプロダクトをJava 17にバージョンアップしたので、 今後Sealed Classesを活用していけるように記事にまとめました。 今回の記事は全体的にJEP 409 を参考にしています。 Sealed Classesとは 簡単に説明すると、 extends、implementsできるクラスを制限するための仕組みです。 sealed、non-sealed、permitsという新しい文法を使って実現できます。 Sealed Classesを活用することで、 クラスの階層でドメイン知識を表現しやすくなります。 sealedをつけたクラス、イン

この記事は GMOアドマーケティング Advent Calendar 2021 12日目の記事です。 こんにちは、GMOアドマーケティングのS.Rです。 機械学習エンジニアとしてよくある開発はレコメンダーシステムの構築になります。今日は皆さんへTensorFlow Recommenderで簡単に映画レコメンダーシステムを構築する方法を紹介します。 TensorFlow Recommenderとは TensorFlow Recommender(TFRS)は、レコメンダー システムを構築するためのライブラリです。 TensorFlow Recommenderで学習データの準備、モデルのトレーニングと評価まで簡単に作業が行えます。 モデルの簡単な説明 TensorFlow Recommender の基本モデルはユーザーが商品を購入する履歴を利用してレコメンド結果を作成することです。 Colabの

この記事は GMOアドマーケティング Advent Calendar 2021 11日目の記事です。 こんにちは。GMOアドマーケティングのS.Rです。 前回はJumanpp 1.04/KNPの環境構築方法を紹介しました。いかがでしたでしょうか? Jumanpp1.04よりJumanpp 2.0の実行速度は20倍以上に改良されました。今回は後継のJumanpp 2.0のpython環境構築方法を皆さんへ紹介させていただきます。 ColabのInstanceを作る 今回はGoogleのMachine Learning Cloud ServiceというColabを利用して説明します。Colabの公式サイトからColabのPython3のInstanceを作ります。 Jumanpp V2をダウンロードする 下記のcommandでJumanpp V2をダウンロードします。 !wget https:

この記事は GMOアドマーケティング Advent Calendar 2021 10日目の記事です。 はじめに こんにちは。 GMOアドマーケティングのKONCEです。 最近、弊社で運用している技術ブログの数値集計システムの一部を改修したので本ブログの執筆に至りました。 弊社技術ブログ「https://adengineer.internet.gmo/」は「所属エンジニアのアウトプットの場」と「ブランディングの向上」がメインの役割です。その上で取り組んでいる数値集計やその傾向などについて今回は触れていきたいと思います。 Google Analytics 集計数値について 流入調査などにメインで Google Analytics を使用しています。 PV、UUをメインに Google スプレッドシート と併用して数値を集計しています。スプレッドシートのアドオンから月別数値や記事別数値を取得し必

この記事は GMOアドマーケティング Advent Calendar 2021 9日目の記事です。 こんにちは。GMOアドマーケティングのS.Rです。 前回はJumanpp1.04/KNPの環境構築方法を紹介しました。いかがでしたでしょうか? Juman を利用するとMeCab より形態素解析の精度を上げることができます。今回は後継のJumanppでユーザー辞書を追加する方法を皆さんへ紹介させていただきます。 Jumanppとは JumanppはRNNLM(Recurrent Neural Network Language Model) で日本語の単語の並びの意味的な自然さを考慮した形態素解析ツールです。JumanppはJuman,MeCab に比べ大きく性能が向上しています。文法・辞書・出力フォーマット等は Juman から引き継いだものを利用しています。 Jumanppをインストールす

この記事は GMOアドマーケティング Advent Calendar 2021 8日目の記事です。 こんにちは。GMOアドマーケティングのS.Rです。 今回はJumanppと構文分析のツールKNPを連携する方法を皆さんへ紹介します。 KNPとは 構文解析については京都大学黒橋・ 褚・ 村脇 研究室の公式サイトで下記のように紹介されています。 KNPは同じく京都大学橋・ 褚・ 村脇研究室で開発されている日本語の構文解析を行うシステムです。 形態素解析システムJUMANの解析結果(形態素列)を入力とし、文節および基本句間の係り受け関係,格関係,照応関係を出力することができます。 引用元 | 京都大学大学院情報学研究科知能情報学専攻黒橋・褚・村 脇研究室 (https://nlp.ist.i.kyoto-u.ac.jp/ ) ColabのInstanceを作る 今回はGoogleのMachine

この記事は GMOアドマーケティング Advent Calendar 2021 7日目の記事です。 皆さんこんにちは。 広告配信システムの管理画面開発と全社業務自動化のRPA開発を担当してるR.Aです。 今回は業務を行う上で欠かせないスプレッドシートのアクティビティを紹介します。 Gsuiteアクティビティを使用すると画面を操作せず、一瞬で項目の更新が行えます。 1Gsuiteアクティビティをインストールする。 これまで何回かご紹介してきた時同様、メニュー画面内パッケージ管理より「UiPath.GSuite.Activities」と入力し、インストールを行います。 インストール方法については以下を参照ください。 https://adengineer.internet.gmo/2019/07/08/practice_robot_creation/ インストールを行うとActivitiesパネ

この記事は GMOアドマーケティング Advent Calendar 2021 6日目の記事です。 はじめに こんにちは。 GMOアドマーケティングの石丸(@thomi40)です。 これまで弊社のテックブログではOWASP ZAPやBurp Suiteを用いた脆弱性診断に関する記事を紹介してきました。 この記事は GMOアドマーケティング Advent Calendar 2020 14日目の記事です。はじめにこんにちは、GMOアドマーケティングのR.Yです。今回はタイトルの通り、Railsで作った脆弱性をOWASP ZAPで診断してみたいと思います。自分は主にRailsを使ったWebアプリの開発やWebアプリの脆弱性診断を行うことが多いので、この記事を書くことによってRailsのセキュリティ周りや脆弱性診断を行うツールについての理解をより深められたら良いなと思います。1.用意するものRub

この記事は GMOアドマーケティング Advent Calendar 2021 3日目の記事です。 GMOアドマーケティングのK.Mです。 オンライン開催はYouTubeLiveにより実施され、ボランティアの方によりLive動画はセッション毎に分割されました。 それでは、個人的に良かったセッションを紹介します。 1.PHPで学ぶオブジェクト指向プログラミング入門 参加された小学生からも分かりやすいと言われており、とても理解しやすい説明でした。 個人的に刺激を受けたのは「愚者は経験に学び、賢者は歴史に学ぶ」 歴史を学べは進化の過程だけでなく、未来まで想像出来そう。 2.MySQLとインデックスとPHPer -PHPが本職でもMySQLを手懐けるために 難しい事を、初心者にわかり易く説明できる人ってあまり居ないと感じていますが、相手が得意な事や良く知っている事に極力合わせて説明すると、ここまで

この記事は GMOアドマーケティング Advent Calendar 2021 2日目の記事です。 こんにちは。 GMOアドマーケティングの@zakisanbaimanです。 業務でGoogle Cloud Functionsを使っていますが、タイムアウト対策を行ったので共有しておきます。 Cloud Functionsとは GCPのサーバレスバッチのサービスであり、関数の実行時間に対して従量課金されるFunctions as a Service(FaaS)です。 AWSで言うところのLambdaですね。 タイムアウトの挙動確認 環境 ランタイム: Node.js 14 リージョン: us-central1 Cloud Functions設定 ▼タイムアウトは5秒に設定 正常時 ▼5秒タイムアウトのところ、4秒で処理を完了させる exports.helloWorld = (req, res

この記事は GMOアドマーケティング Advent Calendar 2021 1日目の記事です。 はじめに こんにちは、 GMOアドマーケティング 開発本部 本部長のクリスです。 開発本部では、半期ごとの目標設定・評価にあわせてエンジニア360度評価を実施しています。 今回はその導入背景、内容について皆さんと共有していきたいと思います。 導入背景 もともと会社全体では、会社の行動規範に則って、部署横断で匿名、点数のみ、コメントなしという形式で360度評価を実施しています。 部署横断のおかげで開発メンバー同士だけではなく、仕事に関わる事業部のメンバーからも評価をもらえるのはよかったという声がある一方、匿名とコメントなしの仕組みのために、FBされるのは点数だけで、具体的に何がよかったか悪かったか、なかなか実感が湧かないという声が多くありました。 せっかくやるなら、もっと納得感が高い、自分自身

インフラを担当しているGMOアドマーケティングのK.Aです。 日本時間の2021年10月5日に「Windows 11」が発売されました。 尚、DSP版の発売日は11月11日のようです。 システム要件 OSをアップグレードするにあたり、Windows10に比べ色々とシステム要件が変わりました。 https://www.microsoft.com/ja-jp/windows/windows-11-specifications 特に気になる点は以下3点です。 1 ギガヘルツ (GHz) 以上で 2 コア以上の64 ビット互換プロセッサまたは System on a Chip (SoC)UEFI、セキュア ブート対応トラステッド プラットフォーム モジュール (TPM) バージョン 2.0対応 CPUは、いよいよシングルコアおよび32bitプロセッサは除外されたようです。 これによりIntelが2