BigQueryエミュレータを使ったETLのインテグレーションテスト - MonotaRO Tech Blog

2024/12/19 10 users ETL インテグレーションテスト 藤本 CSVファイル テスト

TL;DR BigQuery Emulator と fake-gcs-server を組み合わせることでbqコマンドでCSVファイルを読み込んでETLのインテグレーションテストができた。 はじめに こんにちは。先日こちらの記事を書いたCTO-Officeの藤本です。そこでは書ききれなかったETLについて書いておきたいと思います。 ビッグデータを扱うETLのテスト... 続きを読む

JR東日本、Suicaの位置情報で改札フリー　個人間送金も - 日本経済新聞

2024/12/08 324 users 一元 SUICA スイカ モバイルSuica クラウド

JR東日本は交通系ICサービス「モバイルSuica（スイカ）」の位置情報データを活用し、自動改札機で精算しなくても鉄道に乗れるようにする。スイカの個人間送金を可能にし決済機能も高める。膨大な移動や決済のビッグデータを集約してクラウドで一元管理し、沿線地域の効果的な商業開発や街づくりにもつながるサービスの開... 続きを読む

「今年の一皿」は「うなぎ」チェーン店拡大や多様な商品開発で | NHK

2024/12/03 14 users ウナギ 世相 NHK 一皿 商品開発

ことし1年の世相を反映した食を選ぶ「今年の一皿」に「うなぎ」が選ばれました。手ごろな価格で提供するチェーン店の拡大や提供方法が多様化したことなどが理由だとしています。 「今年の一皿」は飲食店情報サイトを運営する企業が検索、閲覧履歴などのビッグデータや消費者へのアンケートなどをもとに毎年、発表してい... 続きを読む

アングル：トランプ次期政権がプライバシー侵害の恐れ、監視ツールをフル活用か

2024/11/21 11 users アングル トランプ次期政権 監視ツール プライバシー侵害 送還

米国のトランプ次期政権は不法移民の送還など重要政策を進める際に法執行機関の強力な監視システムやビッグデータを利用し、国民のプライバシー権を侵害するのではないかとの懸念が、市民の自由や移民の保護を訴える人権擁護団体の間で高まっている。写真はバスで米移民当局の職員により送還される、ホンジュラスからの... 続きを読む

トヨタ自動車、中国テンセントと提携　電気自動車にAIやビッグデータ - 日本経済新聞

2024/04/25 13 users トヨタ自動車 騰訊控股 中国テンセント 攻勢 提携

【北京=多部田俊輔】トヨタ自動車は25日、中国ネット大手の騰訊控股（テンセント）と戦略提携すると発表した。トヨタが中国で販売する電気自動車（EV）で、テンセントが人工知能（AI）やクラウド、ビッグデータなど3分野で協力する。中国はEVが急速に普及し、中国勢の攻勢でトヨタの中国販売は苦戦している。次世代車の... 続きを読む

NTTデータが快眠ホテル　宿泊客･企業に睡眠データ提供 - 日本経済新聞

2023/12/05 23 users NTTデータ スリープテック 宿泊客 日本経済新聞 人工知能

NTTデータは2024年夏から就寝中の心拍数や呼吸数などを自動測定するカプセルホテルを自社で展開する。睡眠データを人工知能（AI）で解析して宿泊客に睡眠改善策を提案するほか、匿名化したビッグデータを消費財や医療、製薬会社などに販売する。最新技術で睡眠の質を高める「スリープテック」のビジネスが広がってきた。... 続きを読む

「自転車専用通行帯」東京23区で134路線整備も8割余に違法駐車 | NHK

2023/05/29 237 users 違法駐車 NHK 自転車専用通行帯 車道 警視庁

車道の端を青く塗装するなどして区切り、自転車が安全に走行できるようにする自転車専用通行帯。東京23区では去年10月の時点で134路線が整備されていますが、警視庁が平日のある1日に調査した路上駐車のビッグデータをNHKが入手し分析したところ、その8割余りに違法駐車があることが分かりました。 自転車の関係する事故... 続きを読む

ゴールデンウィーク序盤の人出 ビッグデータを分析 傾向は？ | NHK

2023/05/02 14 users 新型コロナ 人出 NTTドコモ 基地局 大型連休

新型コロナによる行動制限のない、ことしの大型連休、都道府県をまたぐ移動は、これまでと比べてどう変化したのか。 最初の土日の2日間について、人の移動の傾向を分析しました。 ビッグデータ分析 NHKは、NTTドコモが携帯電話の基地局からプライバシーを保護した形で集めたデータを使い、大型連休が始まった先月29日か... 続きを読む

米スノーフレイク、AWSと販売連携　競争優位に - 日本経済新聞

2023/03/22 11 users AWS ゴム 日経 クラウド基盤 複製

日経の記事利用サービスについて 企業での記事共有や会議資料への転載・複製、注文印刷などをご希望の方は、リンク先をご覧ください。 詳しくはこちら 米スノーフレイクはビッグデータを分析するクラウド基盤を手掛ける。米アマゾン・ドット・コムの「AWS」などクラウド大手と競合しつつも、時には手を組む独自の経営で... 続きを読む

就活生「ES何書いたらええんや…」GPT「それっぽいアピール文書を作成します」企業「ESどう捌いたらええんや…」GPT「就活生の真の実力を推定します」

2023/03/16 105 users GPT dr_vegepamyu ドクター 貴方 実力

ドクター・べじぱみゅ @dr_vegepamyu 就活生「ES何書いたらええんや…」 GPT「ESにお困りではありませんか？貴方の過去のアルバム画像群からそれっぽいアピール文書を作成します」 企業「大量のそれっぽいESどう捌いたらええんや…」 GPT「ES選別にお困りではありませんか？ビックデータをもとに就活生の真の実力を推定し... 続きを読む

中高年男性向けのJ-POP、若い女性向けのK-POP──ビッグデータが示すガールズグループの日韓差異（松谷創一郎） - 個人 - Yahoo!ニュース

2023/03/07 180 users ガールズグループ Ive NiziU Perfume K-PO

勢いを増すK-POP 昨年の『紅白歌合戦』で注目されたのは、K-POPガールズグループが３組も出場していたことだ。TWICE、IVE、LE SSERAFIMである。 対してJ-POPのガールズグループはPerfume、乃木坂46、NiziU、日向坂46の４組。だがNiziUはK-POPのプロダクションが日本で生んだ「K-POP日本版」であることを踏まえれば、K-PO... 続きを読む

JAL、サウナ特化の新サービス　LiDARで室内監視、満室かどうかアプリで分かる

2023/02/21 12 users サウ LIDAR 満室 JAL 混雑状況

日本航空（JAL）とアクティアは2月20日、サウナ室内の混雑状況を可視化するクラウド型サービス「TOKYO SAUNIST」を発表した。サービス提供開始は2023年4月頃を予定している。 TOKYO SAUNISTは、サウナ室前に設置される3D-LiDARセンサで人の動きを検知し、集約したデータを基にサウナ室内の混雑状況やビッグデータをサウ... 続きを読む

数千万ユーザーのビッグデータに機械学習モデルを適用するには（広告配信ソリューション実現の工夫紹介）

2023/02/01 17 users 機械学習モデル

こんにちは。Yahoo!広告にてデータアナリストをしている國吉です。 ヤフーでは、「Yahoo!広告」という広告出稿サービスを提供しており、それに付随して、広告を出稿するクライアントを支援するためのソリューションを提供しています。本記事では、私が開発に携わっている「Yahoo! JAPAN 予測ファネル」（以下、予測ファ... 続きを読む

マッチングアプリのビッグデータを解析→女性は年収を条件に検索しており年収ボーダーは20代は500万、30代は800万以上

2022/12/18 9 users 解析 年収 マッチングアプリ archives 条件

ツイッター速報 @tsuisoku777 【マッチングアプリのビッグデータ】女性が相手に求める年収ボーダーは500万円以上、30代以降は希望年収800万円以上 tsuisoku.com/archives/60024… 2022-12-17 22:00:48 リンク マイナビニュース 女性が相手に求める年収ボーダーは? - 30代以降は希望年収がさらに上がる! マッチングアプリ... 続きを読む

「SPY×FAMILY」　アニメ放送の初速パワーは「鬼滅」「呪術」超えも　ビッグデータから読む（河村鳴紘） - 個人 - Yahoo!ニュース

2022/07/10 14 users 呪術 定例会見 スパイファミリー SPY×FAMILY 絶賛

アニメが人気を博した「SPY×FAMILY（スパイファミリー）」。テレビ東京の定例会見でも社長が絶賛。4～6月の放送時にツイッターのタイムラインでもよく見かけました。そこでビッグデータから探ってみます。 「スパイファミリー」は、集英社のマンガアプリ「少年ジャンプ+」に連載中の遠藤達哉さんのマンガが原作です。す... 続きを読む

詳説！ノーコードでつくる生産管理アプリ | さくらのナレッジ

2022/06/22 147 users ナレッジ 詳説 プラットフォーム ソーシャル クラウド

こんにちは！ ユニフィニティーの曽良です。 DXの必要性が叫ばれ業務基盤の移行が進む中、いわゆる第三のプラットフォーム（モバイル、クラウド、ソーシャル、ビッグデータ）上のアプリを作成できる、さまざまなノーコードツールが誕生しています。 今日は、ノーコードを活用して、モバイルのアプリを開発する際の具体的... 続きを読む

IT人材が79万人不足する4つの理由｜優秀なIT人材獲得する方法 | GALK

2022/06/13 206 users IoT GALK 発達 先端IT IT人材

「IT人材が不足していると聞くけれど、どうして不足しているの？」 「IT人材が不足すると、どんな悪影響があるの？」と思ったことはありませんか。 IT業界の発達は目覚ましく、経済産業省の調査によると、2030年には最大79万人のIT人材が不足すると言われています。 先端ITと言われるAIやビッグデータ、IoTといった専門... 続きを読む

政府 「スーパーシティ」に大阪市と茨城県つくば市を指定へ | NHKニュース

2022/03/10 32 users 政府 スーパーシティ 茨城県つくば市 NHKニュース 諮問会議

政府は、国家戦略特区の諮問会議で、最先端技術の実証実験を街全体で行う「スーパーシティ」の対象に、大阪市と茨城県つくば市を指定することを決めました。 「スーパーシティ」は、AI＝人工知能やビッグデータを活用しながら最先端技術の実証実験を街全体で行うもので、全国の自治体に公募したところ31件の提案が寄せら... 続きを読む

睡眠時間、授乳回数、排泄回数...17万人のビッグデータで知る「赤ちゃんのこと」 | Lidea(リディア) by LION

2022/02/14 706 users Lidea リディア ヨッピー 赤ちゃん by LION

息子が爆誕しました！ 「くらしとココロに、彩りを。」でお馴染みのLideaをご覧の皆さんこんにちは。 ライターのヨッピーです。 今日は皆さんにお知らせがあります。 実は……、 かわいいかわいい息子が爆誕してしまいました。本当にありがとうございます。 「お前に息子が誕生したことと、くらしとココロの彩り、何が関係... 続きを読む

🥺「役に立たないもの教えるのは時代遅れ！」「というわけでビッグデータで時系列解析を教えます！｣→冗談みたいな世の中になるかもねという話

2022/01/23 21 users 冗談 時系列解析 コサイン リプ ＦＦ

てんにょ @barinoriron アメリカで Astroparticle Physics (宇宙素粒子物理学) の研究をしています。FF 以外からの通知は全部切ってるので、リプや引用 RT などは基本気づきませんm(_ _)m てんにょ @barinoriron 🥺「サイン・コサインなんて役に立たないもの教えるのは時代遅れ！」 😄「そうだ！」 🥺「というわけでビッ... 続きを読む

データセンターの地方分散 自治体の調査費用 国が補助へ | NHKニュース

2022/01/15 32 users 地方分散 補助 自治体 進展 NHKニュース

デジタル化の進展に伴い重要性が高まるデータセンター。日本では関東・関西に集中し、大地震などが起きたときには影響が大きいことから、政府は地方分散を進めるため、自治体が候補地を調査する費用を補助することになりました。 5Gや自動運転、AIによるビッグデータの処理などデジタル化の進展に伴い、データセンターの... 続きを読む

｢デジタル力は中国､韓国以下｣なぜ日本は"数学ができない大人"ばかりになってしまったのか ｢下手に理系に進むと損をする｣

2021/12/23 15 users 理系 数学 GAFA 中国 韓国以下

「数学はゲーム業界を支える」投稿が話題に 政府や産業界が「数学」に力を入れ始めた。デジタル化が進む中、数学の知識や思考法が、AI（人工知能）、ビッグデータなど、これからのビジネスや生活に不可欠になっているからだ。グーグル、アップルなどの「GAFA」と呼ばれる大手IT企業を生み出した米国では、すでに10年ほど... 続きを読む

【将来性あり】データベースエンジニアとは？仕事内容や資格、今後の需要についても解説 ｜ IT・エンジニア派遣のModis

2021/12/14 10 users IoT MODIS 進歩 データベースエンジニア 領域

近年AIやIoTなどでビッグデータが活用されはじめ、データベースエンジニアの需要は急速に高まっています。データベースエンジニアが担当する業務の領域はとても広く、また技術の進歩も目まぐるしいため、知識とスキルを常に磨いていくことが大切です。 そこで今回は、データベースエンジニアの仕事内容やおすすめの資格... 続きを読む

ビジネス特集 データを“宝の山”に 企業が今、なんとしても欲しい人材 | NHKニュース

2021/09/09 21 users 欲しい人材 NHKニュース ビジネス特集 データ 企業

“The Sexiest Job of the 21st Century”（21世紀の最もかっこいい仕事） アメリカでこう呼ばれたことのある専門職、聞いたことありますか。統計学やプログラミング技術などを駆使してビッグデータを分析する「データサイエンティスト」です。情報を“宝の山”に変えるとも言われるそのスキルをなんとしてもほしい…。企業は... 続きを読む

“ワクチンで不妊”のデマ なぜ拡散し続けているのか | 新型コロナウイルス | NHKニュース

2021/08/10 172 users ワクチン接種 デマ 根拠 ワクチン 新型コロナウイルス

去年からネットで広がっている「ワクチン接種で不妊になる」という、科学的根拠がないとして多くの専門家が否定している情報は、誰が広め、なぜ拡散し続けているのか。 私たちが専門家と協力してSNSのビッグデータを分析したところ、誤った情報の「拡散者」の存在と、そこにごく一部の現役の医療関係者たちが加わってい... 続きを読む