【プログラミング不要】suumoの物件情報をスプシに一覧化する方法｜ハチ

2024/10/04 176 users SUUMO スプシ ハチ 坪単価 プログラミング不要

IMPORTXML関数を使ってsuumoの物件情報ページをスクレイピングし、スプシに一覧化する方法をご紹介します。 suumoから引っ張ってくる情報は以下の通り。 物件名 価格(万円) 広さ(m^2) 築年(年、月) 最寄り駅と駅徒歩 ※友人用に作ったスプシは坪単価も出したかったので、いったんデータを引っ張ってきてからスプシ上で価... 続きを読む

中国・深圳で日本人学校に登校中の小学児童が襲われて負傷　容疑者は当局が確保

2024/09/18 7 users 深圳 広東省深圳 ケガ 三塚聖平 当局

【北京＝三塚聖平】日本政府関係者や現地関係者によると、中国南部の広東省深圳（しんせん）市で18日午前、日本人学校に登校中だった小学生の男子児童が男に襲われて負傷した。児童は病院に搬送されて治療を受けている。けがの程度などは明らかになっていない。 中国では6月にも、東部の江蘇省蘇州市で日本人学校のスク... 続きを読む

「絶対にdisabled属性を避けて、aria-disabled属性を使わなければならない」わけではありません - Qiita

2024/09/07 68 users Qiita ARIA アクセシビリティ HTML 主張

「絶対にdisabled属性を避けて、aria-disabled属性を使わなければならない」わけではありませんHTMLアクセシビリティWAI-ARIA 最近、「アクセシビリティのために、HTMLの disabled 属性ではなく、aria-disabled 属性を使うべき」という主張を見かけますが、本当にそうなのでしょうか？ disabled属性を使っていても、スク... 続きを読む

複数の大手ニュースサイトがAppleのパーソナルAI「Apple Intelligence」をトレーニングするために使用されるクローラーをブロックしていることが明らかに

2024/08/30 5 users クローラー many パーソナルＡＩ ボット Apple

生成AIのトレーニングに使用するコンテンツは、ボットを使ってウェブ上からスクレイピングすることがありますが、これは度々問題視されています。AppleもAIのトレーニングに使用するコンテンツをスクレイピングしているものの、複数のニュースサイトがこのクローラーをブロックしている実態が明らかになりました。 Many ... 続きを読む

Stack OverflowとOpenAIの提携に反発し回答を削除したユーザーがBANされる

2024/05/09 6 users OpenAI ナレッジコミュニティ chatgpt 提携 回答

コンピューターやプログラミングに関するナレッジコミュニティのStack OverflowがChatGPTを開発するOpenAIと提携し、ChatGPTが回答にStack Overflowに投稿された検証済みの技術的知識を利用できるようにすることを発表しました。この決定を受けて一部のユーザーが、自身の回答がスクレイピングされないように内容を削除... 続きを読む

Adobeの画像生成AI「Firefly」の学習用データセットにMidjourneyなど別の画像生成AIが生成した画像が全体の約5％ほど混入していることが判明

2024/04/15 21 users firefly Midjourney ライブラリ Adobe

Adobeの画像生成AI「Firefly」は、Adobe Stockという写真や映像のライブラリでトレーニングされていることが特徴で、インターネット上の画像をスクレイピングして学習した他の画像生成AIと異なり、商業的にも安全なAIだとAdobeは主張しています。しかし、実際はFireflyの学習したデータセットにMidjourneyなどによって生... 続きを読む

「月50万円稼げる」と勧誘されて海外に行こうとしてる人、取り返しのつかない恐ろしい被害が横行してるから気をつけて

2024/03/20 244 users 恐ろしい被害 海外 ブローカー 出稼ぎ るみ

よろづのかるみ @calmicco 今「月50万円稼げるぜ」と勧誘されて海外へ出稼ぎに行こうと思ってる人は、たぶんブローカーのカモになるだけなので気をつけた方がよきだと思う。「まずはご自身の身元保証金で200万円準備してください」「渡航手続きおよびなんとか代行でプラス100万円」「大丈夫ですあちらで稼いだらスグ返せ... 続きを読む

iframe を使って安全にブラウザ拡張機能を実装する - mizdra

2024/02/27 9 users mizdra DOM iframe セキュリティ 成分

DOMDOM トークス #1 mizdra (みずどら) です 株式会社はてな フロントエンドエキスパートやってます DOM をとりまく ブラウザのセキュリティ の話 DOM 成分ほとんど無いです 「iframe」がちょっと登場するくらい すみません... 皆さんご存知 ツールバーに機能を足したり Webページをカスタマイズしたり Webページにスク... 続きを読む

自作した時間割アプリが大学の公式アプリに採用された話 - Qiita

2024/01/14 552 users Qiita ポータルアプリ 時間割アプリ 時間割 時系列順

記事の概要 私（芝浦工業大学学部4年生）が大学２年時に1人で制作した、大学のポータルアプリ（ポータルサイトからスクレイピングして時間割などを表示する）が、大学に正式採用され、公式アプリ"ScombApp"としてリリースされるに至った経緯を時系列順に説明します。 ホーム画面 時間割画面 制作の動機 大学のポータルサ... 続きを読む

GPT-4、Microsoft 365 Copilot、日本語LLM…　2024年も追い続けたい「生成系AI」のおすすめ記事5選

2024/01/02 77 users GPT-4 ログミーTech 日本語LLM 生成系AI 数々

GPT-4の発表から、より一層注目を浴びるようになった生成系AI。2023年には数々のイベントで生成系AIについて語られていました。そこで今回は、2023年に掲載したログミーTechの記事から、今あらためて読み返したい生成AI系の記事を5つピックアップしました。 「今の生成系AIは“人間人間したもの”を生み出している」　スク... 続きを読む

｢生成AIによる著作権侵害の責任はユーザーが負うべき｣グーグル、マイクロソフト、OpenAIら主張

2023/11/09 7 users マイクロソフト 生成AI グーグル 対価 マイクロ

どの企業も、AIツールのトレーニングにインターネットからスクレイピングした大量の著作物を利用しており、それらの著作物に対して対価を支払っていないことや、AIツールが著作物を表示する可能性があることについては否定していない。この場合はすべてユーザーに責任がある、というのがグーグル、オープンAI、マイクロ... 続きを読む

OpenAIはChatGPTを消去して作り直さなければならないかも知れない | TEXAL

2023/08/18 20 users OpenAI chatgpt TEXAL TOS Times紙

New York Times紙がサービス利用規約（TOS）を更新し、AI企業がAIモデルを訓練するために記事や画像をスクレイピングすることを禁止していることが明らかになったが、どうやら事態はそれだけでは収まらないようだ。 New York Times紙はOpenAIを提訴する準備を進めており、その結果次第ではChatGPTのデータセットは再構築... 続きを読む

Twitterの親会社であるXが「Twitterでデータスクレイピングを行い損害を与えた」として4人を提訴、1億3000万円超の損害賠償を求める

2023/07/14 14 users Twitter 訴状 親会社 提訴 被告

Twitterの親会社であるXが2023年7月6日、「Twitterのユーザーデータをスクレイピングして損害を与えた」として匿名の個人4人を訴えました。Xはテキサス州ダラス郡の連邦地方裁判所に提出された訴状で、「テキサス州の住民に関連するデータを違法にスクレイピングした」と主張し、被告に対して100万ドル(約1億3700万円)以... 続きを読む

「オンラインで公開されたものすべてをAIのためにスクレイピングする」とGoogleが発表

2023/07/04 26 users Google poli オンライン 発表 すべて

2023年7月1日にGoogleがプライバシーポリシーを変更し、「GoogleのAIモデルのトレーニング」のために「一般に公開される情報」を使用すると明言したことが分かりました。記事作成時点で、このプライバシーポリシーはアメリカ国内向けに発行されています。 プライバシー ポリシー – ポリシーと規約 – Google https://poli... 続きを読む

Twitter、スクレイピング対策を理由として非ログインユーザーを一時的にブロック | スラド IT

2023/07/01 8 users Ghacks BleepingComputer スラド 組織

Twitter では現在、ログインしなければユーザーの投稿やタイムラインを閲覧できないよう制限されている (BleepingComputer の記事、 The Verge の記事、 Deskmoder.de の記事、 Ghacks の記事)。 複数ユーザーの質問に対するイーロン・マスク氏の回答によれば、大量に Twitter のデータをスクレイピングする組織が数百も... 続きを読む

無料でGPT-4を使い倒して料金を他人に払わせる「海賊版GPT-4」が横行している

2023/06/08 10 users GPT-4 MOTHERBOARD OpenAI 他人 手口

共同でコードを書くサービスを悪用し、開発者がそれと気づかないまま公開してしまったOpenAIのAPIキーをスクレイピングしてGPT-4を無料で使う手口が確認されたことを、Motherboardが報告しました。 People Are Pirating GPT-4 By Scraping Exposed API Keys https://www.vice.com/en/article/93kkky/people-pirating-gpt... 続きを読む

シェルスクリプトでスクリプトの引数をループする方法

2023/05/20 18 users シェルスクリプト done 引数 usr スクリプト

B! 0 0 0 0 0 今更ながら知ったこと。 通常の方法 in無し The for Loop (POSIX Shell Command Language) ;の省略 man bash その他の方法 参考 通常の方法 bashとかでよくやる方法は arg1.sh 1 2 3 4 5 #!/usr/bin/env bash for arg in "[email protected]";do echo "$arg" done とする方法。 "[email protected]"はスク... 続きを読む

ChatGPT(GPT-4) で一撃でスクレイピングするコードを生成出来たので感想とコツ - Qiita

2023/05/08 335 users Qiita chatgpt プロンプト GPT-4 一撃

今回やりたかったこと 目標：ChatGPT(GPT-4) で一撃でスクレイピングするコードを生成 するにはどうしたらいいのか、ChatGPT のハードルとかコツとかを知りたい。 ※最終的なプロンプトの入力と出力の全文は本ページ下部に貼り付けてます。 作ったもの概要 保険組合のウォーキングイベントの会社内の3チームの歩数進捗の ... 続きを読む

インターネットは断片化されることを望んでいる

2023/01/04 324 users 断片化 インターネット Twitter Noahpinion

Noahpinionより。 全世界を1つの部屋に一緒に放り込んでもうまくいかない。 BY ノア・スミス ノア・スミス @Noahpinion 15年前、インターネットは現実世界からの逃避先だった。 今や、現実世界がインターネットの逃避先になっている。 5年前、私は大学時代の友人Dayvとビールを飲みながら座っていました。Twitterをスク... 続きを読む

5つのスクラム開発で大事にしていること/取り入れたいこと - Qiita

2022/12/25 14 users 用語 自社プロジェクト no plan株式会社 チーム 5つ

no plan株式会社では、自社プロジェクトは全てスクラム開発を行っています。 そこで大事にしていることや、他のチームを見た時に取り入れたいと思ったことも書こうと思い筆を取りました。 今回はスクラム開発用語がわからない人でも読めるようにあえて用語を使わないようにしてみたいと思います。 スクラム開発とは スク... 続きを読む

最近は「スク水揚げ」記事を見かけないと思ったら取れなくなってたのか | ず＠沖縄

2022/08/07 24 users スク水揚げ 風物詩 ボー おかげ SNS

一時期は夏の風物詩だった「スク水揚げ」記事。何かを勘違いした人のおかげでSNSでも話題だったのですが、最近見かけません。ワンパターンだからWeb記事にするのを止めたのかと思ってたのですが、別の理由もあったようです。 沖縄でおつまみに人気の魚「スク」　取れなくなったのはなぜ？　1キロ5千円で売れる「海のボー... 続きを読む

沖縄でおつまみに人気の魚「スク」　取れなくなったのはなぜ？　1キロ5千円で売れる「海のボーナス」失い漁師は落胆 | あなたのナゼにココホル取材班 | 沖縄タイムス＋プラス

2022/08/07 178 users ナゼ 落胆 漁師 ココホル取材班 沖縄タイムス

沖縄でおつまみに人気の魚「スク」　取れなくなったのはなぜ？　1キロ5千円で売れる「海のボーナス」失い漁師は落胆 ［あなたのナゼにココホル取材班］ 「今年はスクがなかなか手に入らない。原因を調べてほしい」。こんな取材依頼が本紙に寄せられた。スクとはアミアイゴの稚魚。旧暦６月と７月の１日、１５日の大潮の... 続きを読む

例のスクレイピングしてる不動産物件検索が復活している・・・（で、結局「悪の黒い不動産屋」、という話に・・・Orz）｜torum｜note

2022/04/06 287 users orz torum Note

これが、また某所で少し話題になっていました。 「使いやすい」、と、多少の支持はあるようですね。大手不動産物件検索サイトの運営者も、自社のサービス改善の余地があると自戒すべきことです。 ただ・・・ ・そもそもレインズを客に見せない不動産業界が黒い ・レインズ公開しちゃったら宅権協会の入会者が減って稼げ... 続きを読む

TikTokの親会社がInstagramやSnapchatに投稿されたコンテンツを自社SNSの偽アカウントで勝手に転載していた、「いいね」の水増しも

2022/04/05 6 users Instagram TikTok Snapchat 水増し

ショート動画共有SNS・TikTokの親会社であるByteDanceの元従業員らが、「以前ByteDanceが運営していたショート動画共有SNSの『Flipagram』では、InstagramやSnapchatのコンテンツをスクレイピングして勝手に作った偽アカウントで転載していた」と証言したと、海外メディアのBuzzFeed Newsが報じました。BuzzFeed Newsが... 続きを読む

実行中のシェルスクリプトをchattr(1)を使ってimmutableにするというのはどうか - その手の平は尻もつかめるさ

2022/01/02 25 users bash immutable 挙動 スクリプト 現象

実行中のbashシェルスクリプトを上書きするとシェルスクリプトが実行中に再読み込みされ、意図しない挙動をするという現象が昨年末に話題になりました。 bash は、シェルスクリプトの実行中に適時シェルスクリプトを読み込みます。この挙動による副作用を認識できておらず、実行中のスクリプトが存在している状態でスク... 続きを読む