似た文書をベクトル検索で探し出したい ~SentenceTransformersとFaissで効率的にベクトル検索~

2024/03/17 63 users ベクトル 文書 ベクトル検索 ベクトル化 コード

はじめに この記事では、ベクトル検索で似た文書を検索するコードを解説します。具体的には、Sentence Transformersライブラリを用いてベクトル化、Faissという近似最近傍探索ライブラリを用いて高速な検索を行います。 用語説明 ベクトル検索 ... 文書の検索にベクトルを使用する方法。例えば、文書に映画に関する内容... 続きを読む

【マンガ探してます】20年以上前に発行されていて瞳がこんな感じの少女漫画がわかる人いませんか

2024/03/13 143 users マンガ 少女漫画 スルメ 感じ pic

するめ🦑💯 @Surume9MMD 【マンガ探してます】 ・瞳がこんな感じ(だった気がする、瞼は覚えてない) ・学校もの(だった気がする) ・20年前以上に発行されてる ・少女漫画 10年間本屋とか検索で探し続けてるけど見つからない(覚えてなさすぎ) こんなにも覚えてないのにめちゃくちゃ読みたい、、、、わかる人いたら、、 pic... 続きを読む

ast-grep VSCode: 構造検索と置換の強力なツール

2024/03/03 95 users vscode 置換 SSR マッチング 無視

こんにちは、 ast-grepの作者Herringtonです。 正規表現でコードを検索したことがある方なら、複数行のマッチングや入れ子構造の処理、コメントの無視などに苦労したことがあるかもしれません。 そこで、ast-grep VSCodeという新しい拡張を紹介します。これは、構造的検索と置換（SSR）という技術を利用して、より正確で... 続きを読む

Googleは大手サイトを検索で優遇している、個人サイトに勝ち目はない!?

2024/02/26 88 users 中級 批判 勝ち目 実体験 Google

[レベル: 中級] 個人サイトはたとえ実体験に基づいた記事を書いても、大手サイトが作成した実体験に基づかない記事に Google 検索で勝つことはできないのでしょうか？ 「大手サイトを Google は優遇している」という批判に Google はどのように反応したのでしょうか？ Google は独立系サイトを冷遇している 「How Google... 続きを読む

イーロン・マスク、グーグルのAIを「非常識で人種差別的」と非難　検索も攻撃 | Forbes JAPAN 公式サイト（フォーブス ジャパン）

2024/02/24 72 users イーロン フォーブス GEMINI 非難 ジェミニ

米企業家イーロン・マスクは22日、グーグルの対話型人工知能（AI）「Gemini（ジェミニ）」について、偏向した「人種差別主義者」だと非難した。翌23日にはグーグル検索にも攻撃の矛先を向け、同社が2024年米大統領選挙を不正に操作しようとしているとの陰謀論をあおる投稿を行った。 グーグルに対しては、GeminiのAI画像... 続きを読む

我々の愛したGoogle検索はすでに死んでいる - novtanの日常

2024/02/15 850 users novtan goldhead.hatenablog 本件

Google検索終わってしまったの？という話で界隈が少し盛り上がっていてうーんはてなってなっていてそこはかとなく嬉しい。 goldhead.hatenablog.com orangestar2.hatenadiary.com 本件については僕も定期的に何かを言っている話ではあるんだけど、特にここ最近でキャッシュの検索もしなくなったってところが非常に象徴的... 続きを読む

「Google 検索」の結果ページからキャッシュへのリンクが消えた……どうすれば？／「cache:」検索演算子を覚えておくと便利だぞ！【やじうまの杜】

2024/01/29 366 users Cache やじうま キャッシュ 検索演算子 Google

続きを読む

いまこそリンク集(2024.1.27)

2024/01/27 60 users リンク集 選者 バイアス パーソナリティ デイリーポータルZ

デイリーポータルZをはげます会では会員限定コンテンツとしてリンク集を公開しています。 リンク集？ そう、2024年のいまこそリンク集です。 コンテンツは増えているのに、そのナビゲーションである検索もSNSも心もとない。そこで必要なのはリンク集なのではないか。 選者のパーソナリティやバイアスをはっきりさせた上... 続きを読む

フォトからフォント検索

2023/12/26 249 users フォト フォント フォント名 種類 文字

フォトからフォント名を検索！文字が使われている画像や写真をアップロードすると、その文字に似ているフォントを検索します。検索できるフォントの種類は順次増えていく予定です。 続きを読む

法律のデータ構造と検索

2023/12/18 288 users 法律 データ構造 Pythonライブラリ 現行 法令

デジタル庁は、法令標準 XML スキーマに準拠した、現行の法令データをe-Gov法令検索というサイト上で公開しています[1]。今回、この法令XMLをパースするPythonライブラリ ja-law-parser をつくり、法令データの全文検索をしてみました。 この記事では、日本の法令とそのデータ構造、法令XMLパーサについて解説し、最後に... 続きを読む

参院予算委 河野デジタル相 答弁でスマホ取り出し委員長が注意 | NHK

2023/11/27 150 users 参議院 質疑 答弁 末松委員長 通話

27日の参議院予算委員会、午前の質疑では、河野デジタル大臣が、自身のスマートフォンを取り出し検索をしながら答弁しようとして末松委員長から注意を受ける場面がありました。 参議院によりますと、委員会でスマホを通話や検索などで使用することは禁じられているということです。 続きを読む

[欲しい]これがあれば美術館や博物館への来客がめっちゃ増えるのでは？

2023/11/12 124 users 来客 博物館 ゲームス guchi_fukui 美術館

かわぐち（ちゃがちゃがゲームズ）kawaguchi(ChagaChagaGames) @guchi_fukui 今日はフリー 美術館や博物館でおもしろそうな展示にいきたいなと思って検索。 これがとても困難。 ・情報サイトは一部施設の情報のみ。 ・施設の一覧をしらべても、いちいちクリックしないと特別展はわからない。 「ああ！こういうのがほしい... 続きを読む

都道府県 一覧 | 『日本歴史地名大系』地名項目データセット

2023/10/20 153 users 都道府県 日本歴史地名大系 一覧 緯度経度 マーカー

地名項目の位置情報（緯度経度）の推定については、精度を改善する余地が大きいため、今後も各種資料を精査しながら精度を向上させていきます。現状では、地図上のマーカーの位置が最適でない場合もあるかと思いますが、今後さまざまな精度向上の取り組みを進めていく予定です。 都道府県 一覧 検索 歴史的地名／現代地... 続きを読む

分散型SNS「マストドン」、待望の全文検索機能を追加。他サーバーの公開投稿もまとめて検索可能に【やじうまWatch】

2023/09/27 154 users マストドン やじうまWatch 待望 分散型SNS 追加

続きを読む

なぜ、ネパール定食「ダルバート」を出す店が、東京に300店もあるの？（田嶋章博） - エキスパート - Yahoo!ニュース

2023/09/22 204 users ダルバート 田嶋章博 ネパール エスニック エキスパート

ネパールの国民料理、「ダルバート」（※1）。今や東京では、ダルバートを出す店が、300軒を超えています（※2）。 ためしに食べログで「東京 かつ丼」で検索してみると、389軒がヒット。親子丼だと、265軒。もちろん検索に引っかからない店もあるでしょうが、大まかにいえばダルバートというエスニックなマイナー料理が、... 続きを読む

【緊急提言】アプリ名の過剰なローカライズはやめてくれ……検索・起動しにくい！！／Microsoftの開発ダッシュボードアプリ「Dev Home」が日本名「開発ホーム」になった模様【やじうまの杜

2023/09/05 182 users やじうま ローカライズ Microsoft 緊急提言 模様

続きを読む

ITスキルを「本」で高める『技術書の読書術』

2023/08/12 227 users 読書術 ITスキル 一方 ノウハウ 最初

ネットがあるでしょ？ わたしもそう思っていた。 ITスキルに限らず、新しい技術や分野を学ぶとき、最初にすることは検索だ。ネットで紹介されている記事やノウハウを読むことで、どんなものか把握できる。無料で最新の情報が手軽に手に入る。お金をかけずに学習できるメリットは大きい。 一方で、ネットで検索するために... 続きを読む

クビになった青い鳥のイラスト

2023/07/25 499 users マスク単体 マスク あいまい検索 既存 Eテレ

あいまい検索（英語検索） あいまいな日本語で（英語でも）検索できます。上手く動くか分からないのでお試しです。 「マスクを付けた〇〇」というイラストが無い場合はマスク単体と既存のイラストを組み合わせてください。 検索の仕方については「検索のコツ」をご覧ください。 Eテレのショートアニメです。 いらすとや... 続きを読む

Twitterがインターネットから切り離されてしまったが、だからといっていまさらブログ＋RSSには戻れないので困った - ABAの日誌

2023/07/01 93 users Aba Twitter THEO Breaking 日誌

ツイートやタイムラインが、Twitterにログインしないと見られなくなった。 BREAKING: Twitter now BLOCKS ALL ACCESS FROM SIGNED OUT USERS pic.twitter.com/tCl3isILf2— Theo - t3.gg (@t3dotgg) 2023年6月30日 前からログアウトした状態での検索ができなくなっていたが、これで本格的にTwitterはlogin wallの向こう側... 続きを読む

Twitter、ログインしないと見れない

2023/06/30 379 users Twitter Twit ＲＯＭ専 大打撃 午後

今日の午後から Twitterはログインしないとツイートが表示できなくなった 災害情報を流してる自治体とか、ホームページと連動してROM専でも見れる情報を運営していたところは大打撃 少し前からログインしないと検索できないようになってたけど （しかしログイン状態で検索したところで検索は死んでるに等しい） もうTwit... 続きを読む

GPT-3.5-turboの新機能を使ってCVPRの論文を良い感じに検索・推薦・要約するシステム

2023/06/14 129 users CVPR Turing gpt-3.5-turbo 論文 推薦

はじめに 5月からTuringに中途入社した棚橋です。前職はリクルートで広告配信システムの開発や量子アニーリングに関する研究開発に関わっていました。現在、Turingのリサーチチームで完全自動運転システムの研究開発に取り組んでいます。 3行でまとめ 今月開催されるCVPR2023では約2400本もの論文が発表されるため、見る... 続きを読む

Twitobu - Twitterを簡単に検索

2023/05/07 107 users Twitter ウェブサービス 特定 アカウント キーワード

Twitobu（ツイ飛ぶ）は、Twitterの過去のツイートを簡単に検索できるウェブサービスです。ユーザーが特定の期間やキーワード、アカウントを指定して検索することができます。さらに、画像や動画を含むツイートを絞り込むことが可能です 続きを読む

検索が爆速になるデータベース設計を公開します

2023/04/28 724 users 爆速 データベース設計

こんにちは。エンジニアの谷井です。 フォルシアでは、Spookと呼んでいる技術基盤を用いて、主に旅行業界やMRO業界に対して、膨大で複雑なデータを高速検索できるアプリケーションを提供しています。 今回はその高速検索のノウハウのうち、特にDBの扱いに関連する部分について、ベテランエンジニアへのインタビューを通... 続きを読む

セマンティック検索の活用で、Elasticsearchの検索が根本的に変わる！？ - Taste of Tech Topics

2023/04/14 60 users elasticsearch shin0higuchi 新年

こんにちは、@shin0higuchiです😊 業務では、Elasticsearchに関するコンサルティングを担当しています。 最近すっかり春らしく、暖かくなってきました。 新年を迎えたばかりの感覚でしたが、あっという間に時が経ちますね。 さて、今回の記事では、Elasticsearchの検索を根本的に変える可能性を秘めたセマンティック検索... 続きを読む

生成系AI(ChatGPT, BingAI, Bard, Midjourney, Stable Diffusion等)について

2023/04/03 287 users Bard Midjourney chatgpt BingAI

生成系AI(ChatGPT, BingAI, Bard, Midjourney, Stable Diffusion等)について 目次 何ができるか、「検索」ではなく「相談」するシステム 仕組み上、書かれている内容の信憑性には注意が必要 機密情報や個人情報などを安易にChatGPTに送信することは危険 将来著作権や文書を用いた試験・評価に問題が発生する可能性がある... 続きを読む