AWSを活用した機械翻訳のためのGPU並列処理環境の構築 - Stockmark Tech Blog

2021/06/15 13 users AWS 機械翻訳 Anews 構築 ウェブサービス

はじめにこんにちは、ストックマークでエンジニアをしている麻生です。ストックマークでは、「Anews」というウェブサービスを提供しています。この度、Anewsで新機能導入のために日次バッチの大規模なインフラ変更を行い、GPU並列処理環境を構築しましたのでご紹介します。 組織の自律化を支援するナレッジプラットフォ... 続きを読む

Anewsの裏側で動く、自然言語処理を活用したビジネスニュースの推薦システム - Stockmark Tech Blog

2021/06/07 22 users Anews 金田 組織変革 推薦システム 言語処理

ML事業部の金田です。今回は、ストックマークの提供する法人向けサービス「Anews」の裏側で動くビジネスニュース推薦システムについて、簡単に紹介いたします。 AnewsとはAnewsは組織変革のための情報収集＋コミュニケーションプラットフォームです。 情報収集のためのコア機能としては、国内外３万メディアから収集した... 続きを読む

Astrategyを支える技術: gRPC, Elasticsearch, Cloud TPU, Fargate... SaaS型AIサービスの内側の世界 - Stockmark Tech Blog

2021/05/10 11 users elasticsearch grpc Astrategy

ストックマークでは、法人ユーザー向けの「Astrategy」というウェブサービスを開発、提供しています。 本エントリでは、Astrategyで使われている技術やシステム構成をご紹介したいと思います。 Astrategyとは Astrategyとは、AIがウェブニュースを解析してあらゆる市場の動向やトレンド、有力企業の経済活動を可視化し、... 続きを読む

GPT-2におけるテキスト生成 - Stockmark Tech Blog

2021/02/03 31 users GPT-2 テキスト生成

はじめにMachine Learning部門の江間見です。ストックマークでは、自然言語処理技術の研究開発を行っています。 昨今、OpenAIからGPT-3が発表され、生成系モデルが大きな注目を集めています。 そこで、本記事では、弊社で作成している生成系モデルの紹介をいたします。 自然言語処理におけるテキスト生成自然言語処理（N... 続きを読む

Flutterで高速開発したAnewsモバイルアプリ - Stockmark Tech Blog

2020/12/23 22 users Flutter 祖父江 モバイルアプリケーション Anews

はじめに2020年11月にリリースされた、ストックマークのAnewsのモバイルアプリケーションにはFlutterが利用されています。本記事では、Flutterをなぜ採用したのか、どのような点に課題があり、どのように工夫していったのか、という開発現場の知見について紹介いたします。(本記事は、実際に開発を行った祖父江 聡士さん... 続きを読む

Wikipediaを用いた日本語の固有表現抽出データセットの公開 - Stockmark Tech Blog

2020/12/15 8 users Wikipedia 日本語 公開

ML事業部の近江崇宏です。 ストックマークではプロダクトで様々な自然言語処理の技術を用いていますが、その中のコア技術の一つに固有表現抽出があります。固有表現抽出はテキストの中から固有表現（固有名詞）を抽出する技術で、例えば「Astrategy」というプロダクトでは、固有表現抽出を用いてニュース記事の中から企... 続きを読む

Wikipediaを用いた日本語の固有表現抽出データセットの公開 - Stockmark Tech Blog

2020/12/15 11 users Wikipedia 日本語 公開

ML事業部の近江崇宏です。 ストックマークではプロダクトで様々な自然言語処理の技術を用いていますが、その中のコア技術の一つに固有表現抽出があります。固有表現抽出はテキストの中から固有表現（固有名詞）を抽出する技術で、例えば「Astrategy」というプロダクトでは、固有表現抽出を用いてニュース記事の中から企... 続きを読む

Cloud TPUを用いたBERT推論処理基盤の開発 - Stockmark Tech Blog

2020/11/04 9 users Cloud TPU 開発

ML事業部の近江崇宏です。 Stockmarkでは日々、膨大な数のニュース記事に対してBERTの推論処理を行なっています。このような重いタスクを効率的に処理するために、最近、TPUを用いたBERTの推論処理基盤をGoogle Cloud Platform上に構築し、運用を開始しました。その結果として、これまで1週間程度かかっていた、数千万件... 続きを読む

Cloud TPUを用いたBERT推論処理基盤の開発 - Stockmark Tech Blog

2020/11/04 26 users Cloud TPU 開発

ML事業部の近江崇宏です。 Stockmarkでは日々、膨大な数のニュース記事に対してBERTの推論処理を行なっています。このような重いタスクを効率的に処理するために、最近、TPUを用いたBERTの推論処理基盤をGoogle Cloud Platform上に構築し、運用を開始しました。その結果として、これまで1週間程度かかっていた、数千万件... 続きを読む

TPU VS GPU(日本語版) - Stockmark Tech Blog

2020/10/30 23 users 日本語版 ニューラルネットワーク 昨今 訓練 深層学習モデル

はじめに(この記事の英語版はTPU VS GPU(English Edition)にあります。) Machine Learning部門の江間見です。ストックマークでは、自然言語処理技術の研究開発を行っています。 昨今、大規模データでニューラルネットワークを訓練し良い結果を得ようとするならば、深層学習モデルの訓練にかかる時間の膨大さに誰もが悩ま... 続きを読む

ビッグリライトでシステム刷新した秘訣 ~ Anewsの成功事例から ~ - Stockmark Tech Blog

2020/09/15 24 users Anews アーキテクチャ刷新 秘訣 フロントエンド 両方

はじめにストックマークが提供するプロダクトであるAnewsにおいて、ビッグリライトによるフロントエンド・バックエンドの両方を含むアーキテクチャ刷新を成功させました。一般にビッグリライトは、ハイリスク・ハイリターンであり、難易度も高いと言われていますが、大きなトラブルもなく、かつお客様評価も高い状態を実... 続きを読む

ストックマークにおけるB2B SaaSセキュリティへの取り組み - Stockmark Tech Blog

2020/09/03 13 users ストックマーク プロダ SRE Anews Astrategy

こんにちは、ストックマークでSREを担当している松下です。 ストックマークでは企業向けの情報収集・企業分析・営業支援サービス(Anews, Astrategy, Asales)を運営しており、導入を検討されているお客様よりセキュリティの取り組みに関してお問い合わせをいただくことが多々あります。 お客様のセキュリティ基準をプロダ... 続きを読む

BERTによるニュース記事の構造化：企業名抽出 - Stockmark Tech Blog

2020/07/15 16 users Bert 構造化 ニュース記事

はじめにMachine Learning部門の近江です。ストックマークでは、自然言語処理技術の研究開発を行っています。 先日、弊社のTech Blogにて弊社が公開している言語モデルを紹介しました。 ストックマークが公開した言語モデルの一覧と振り返り 今回は、言語モデルがプロダクトにおいて実際にどのように利用されているかに... 続きを読む