タグ スク
人気順 5 users 50 users 100 users 500 users 1000 users【プログラミング不要】suumoの物件情報をスプシに一覧化する方法|ハチ
IMPORTXML関数を使ってsuumoの物件情報ページをスクレイピングし、スプシに一覧化する方法をご紹介します。 suumoから引っ張ってくる情報は以下の通り。 物件名 価格(万円) 広さ(m^2) 築年(年、月) 最寄り駅と駅徒歩 ※友人用に作ったスプシは坪単価も出したかったので、いったんデータを引っ張ってきてからスプシ上で価... 続きを読む
「絶対にdisabled属性を避けて、aria-disabled属性を使わなければならない」わけではありません - Qiita
「絶対にdisabled属性を避けて、aria-disabled属性を使わなければならない」わけではありませんHTMLアクセシビリティWAI-ARIA 最近、「アクセシビリティのために、HTMLの disabled 属性ではなく、aria-disabled 属性を使うべき」という主張を見かけますが、本当にそうなのでしょうか? disabled属性を使っていても、スク... 続きを読む
Adobeの画像生成AI「Firefly」の学習用データセットにMidjourneyなど別の画像生成AIが生成した画像が全体の約5%ほど混入していることが判明
Adobeの画像生成AI「Firefly」は、Adobe Stockという写真や映像のライブラリでトレーニングされていることが特徴で、インターネット上の画像をスクレイピングして学習した他の画像生成AIと異なり、商業的にも安全なAIだとAdobeは主張しています。しかし、実際はFireflyの学習したデータセットにMidjourneyなどによって生... 続きを読む
「月50万円稼げる」と勧誘されて海外に行こうとしてる人、取り返しのつかない恐ろしい被害が横行してるから気をつけて
よろづのかるみ @calmicco 今「月50万円稼げるぜ」と勧誘されて海外へ出稼ぎに行こうと思ってる人は、たぶんブローカーのカモになるだけなので気をつけた方がよきだと思う。「まずはご自身の身元保証金で200万円準備してください」「渡航手続きおよびなんとか代行でプラス100万円」「大丈夫ですあちらで稼いだらスグ返せ... 続きを読む
自作した時間割アプリが大学の公式アプリに採用された話 - Qiita
記事の概要 私(芝浦工業大学学部4年生)が大学2年時に1人で制作した、大学のポータルアプリ(ポータルサイトからスクレイピングして時間割などを表示する)が、大学に正式採用され、公式アプリ"ScombApp"としてリリースされるに至った経緯を時系列順に説明します。 ホーム画面 時間割画面 制作の動機 大学のポータルサ... 続きを読む
GPT-4、Microsoft 365 Copilot、日本語LLM… 2024年も追い続けたい「生成系AI」のおすすめ記事5選
GPT-4の発表から、より一層注目を浴びるようになった生成系AI。2023年には数々のイベントで生成系AIについて語られていました。そこで今回は、2023年に掲載したログミーTechの記事から、今あらためて読み返したい生成AI系の記事を5つピックアップしました。 「今の生成系AIは“人間人間したもの”を生み出している」 スク... 続きを読む
OpenAIはChatGPTを消去して作り直さなければならないかも知れない | TEXAL
New York Times紙がサービス利用規約(TOS)を更新し、AI企業がAIモデルを訓練するために記事や画像をスクレイピングすることを禁止していることが明らかになったが、どうやら事態はそれだけでは収まらないようだ。 New York Times紙はOpenAIを提訴する準備を進めており、その結果次第ではChatGPTのデータセットは再構築... 続きを読む
Twitterの親会社であるXが「Twitterでデータスクレイピングを行い損害を与えた」として4人を提訴、1億3000万円超の損害賠償を求める
Twitterの親会社であるXが2023年7月6日、「Twitterのユーザーデータをスクレイピングして損害を与えた」として匿名の個人4人を訴えました。Xはテキサス州ダラス郡の連邦地方裁判所に提出された訴状で、「テキサス州の住民に関連するデータを違法にスクレイピングした」と主張し、被告に対して100万ドル(約1億3700万円)以... 続きを読む
「オンラインで公開されたものすべてをAIのためにスクレイピングする」とGoogleが発表
2023年7月1日にGoogleがプライバシーポリシーを変更し、「GoogleのAIモデルのトレーニング」のために「一般に公開される情報」を使用すると明言したことが分かりました。記事作成時点で、このプライバシーポリシーはアメリカ国内向けに発行されています。 プライバシー ポリシー – ポリシーと規約 – Google https://poli... 続きを読む
無料でGPT-4を使い倒して料金を他人に払わせる「海賊版GPT-4」が横行している
共同でコードを書くサービスを悪用し、開発者がそれと気づかないまま公開してしまったOpenAIのAPIキーをスクレイピングしてGPT-4を無料で使う手口が確認されたことを、Motherboardが報告しました。 People Are Pirating GPT-4 By Scraping Exposed API Keys https://www.vice.com/en/article/93kkky/people-pirating-gpt... 続きを読む
シェルスクリプトでスクリプトの引数をループする方法
B! 0 0 0 0 0 今更ながら知ったこと。 通常の方法 in無し The for Loop (POSIX Shell Command Language) ;の省略 man bash その他の方法 参考 通常の方法 bashとかでよくやる方法は arg1.sh 1 2 3 4 5 #!/usr/bin/env bash for arg in "[email protected]";do echo "$arg" done とする方法。 "[email protected]"はスク... 続きを読む
ChatGPT(GPT-4) で一撃でスクレイピングするコードを生成出来たので感想とコツ - Qiita
今回やりたかったこと 目標:ChatGPT(GPT-4) で一撃でスクレイピングするコードを生成 するにはどうしたらいいのか、ChatGPT のハードルとかコツとかを知りたい。 ※最終的なプロンプトの入力と出力の全文は本ページ下部に貼り付けてます。 作ったもの概要 保険組合のウォーキングイベントの会社内の3チームの歩数進捗の ... 続きを読む
インターネットは断片化されることを望んでいる
Noahpinionより。 全世界を1つの部屋に一緒に放り込んでもうまくいかない。 BY ノア・スミス ノア・スミス @Noahpinion 15年前、インターネットは現実世界からの逃避先だった。 今や、現実世界がインターネットの逃避先になっている。 5年前、私は大学時代の友人Dayvとビールを飲みながら座っていました。Twitterをスク... 続きを読む
5つのスクラム開発で大事にしていること/取り入れたいこと - Qiita
no plan株式会社では、自社プロジェクトは全てスクラム開発を行っています。 そこで大事にしていることや、他のチームを見た時に取り入れたいと思ったことも書こうと思い筆を取りました。 今回はスクラム開発用語がわからない人でも読めるようにあえて用語を使わないようにしてみたいと思います。 スクラム開発とは スク... 続きを読む
最近は「スク水揚げ」記事を見かけないと思ったら取れなくなってたのか | ず@沖縄
一時期は夏の風物詩だった「スク水揚げ」記事。何かを勘違いした人のおかげでSNSでも話題だったのですが、最近見かけません。ワンパターンだからWeb記事にするのを止めたのかと思ってたのですが、別の理由もあったようです。 沖縄でおつまみに人気の魚「スク」 取れなくなったのはなぜ? 1キロ5千円で売れる「海のボー... 続きを読む
沖縄でおつまみに人気の魚「スク」 取れなくなったのはなぜ? 1キロ5千円で売れる「海のボーナス」失い漁師は落胆 | あなたのナゼにココホル取材班 | 沖縄タイムス+プラス
沖縄でおつまみに人気の魚「スク」 取れなくなったのはなぜ? 1キロ5千円で売れる「海のボーナス」失い漁師は落胆 [あなたのナゼにココホル取材班] 「今年はスクがなかなか手に入らない。原因を調べてほしい」。こんな取材依頼が本紙に寄せられた。スクとはアミアイゴの稚魚。旧暦6月と7月の1日、15日の大潮の... 続きを読む
例のスクレイピングしてる不動産物件検索が復活している・・・(で、結局「悪の黒い不動産屋」、という話に・・・Orz)|torum|note
これが、また某所で少し話題になっていました。 「使いやすい」、と、多少の支持はあるようですね。大手不動産物件検索サイトの運営者も、自社のサービス改善の余地があると自戒すべきことです。 ただ・・・ ・そもそもレインズを客に見せない不動産業界が黒い ・レインズ公開しちゃったら宅権協会の入会者が減って稼げ... 続きを読む
実行中のシェルスクリプトをchattr(1)を使ってimmutableにするというのはどうか - その手の平は尻もつかめるさ
実行中のbashシェルスクリプトを上書きするとシェルスクリプトが実行中に再読み込みされ、意図しない挙動をするという現象が昨年末に話題になりました。 bash は、シェルスクリプトの実行中に適時シェルスクリプトを読み込みます。この挙動による副作用を認識できておらず、実行中のスクリプトが存在している状態でスク... 続きを読む
スクラム開発の現場にJoinして失敗した俺が悪い話 - Qiita
ほぼノー知識でスクラム開発の現場に乗り込んで失敗した話を書き記します。 「なぜスクラムは上手くいかないのか」「スクラム開発のアンチパターン」などチームにフォーカスした記事はあれど、個人にフォーカスした失敗談が見当たらなかったので書こうと思いました。 はじめに 大前提として、その現場が悪かったとかスク... 続きを読む
なるがみ on Twitter: "とらのあなさん、GAE使って大量にSkebのスクレイピングするのやめてください"
Something went wrong, but don’t fret — let’s give it another shot. 続きを読む
スクレイピングした物件データを利用した物件検索サービスは問題ないのか|torum|note
スクレイピングとは、サイト上のページの内容をHTMLで解析して(大したことではないし、大昔からある)データとして取得する、という手法を言います。 昔なら、Perlの正規表現でワンライナー、またはHTMLパーサーをかましてDOMにQueryかけたり、Linqで料理したり・・・ 今、たまたまこんなのを見つけてしまったのですが... 続きを読む
なぜスクラムチームの開発者が複数チームを兼任しないほうがよいのか | Ryuzee.com
みなさんこんにちは。@ryuzeeです。 よく受ける相談の1つに、「スクラムの開発者は複数のチームやプロダクト、プロジェクトを兼任してもよいのか」というのがあります。コーチ業をしている人ならみんな受けたことがあるものだと思いますが、詳しく見ていきます。 まず最初に結論ですが、タイトルにもあるとおり、「スク... 続きを読む
Clubhouseからスクレイピングされたユーザーデータ130万件も無料公開 - ITmedia NEWS
Facebookの5億3300万人、LinkedInの5億人に続き、Clubhouseの130万人のユーザーデータもスクレイピングにより集められ、同じハッカーフォーラムで公開されたと報じられた。Clubhouseは「われわれのAPIを使えば誰でもアクセスできるもの」とツイートした。 米Clubhouseの個人データ約130万件が、米Facebook、米Microsoft... 続きを読む
Kindle蔵書一覧を取得する方法 - Qiita
Kindleの蔵書が1万冊を超えてきて、そろそろ蔵書管理したくなり、 蔵書一覧を取得する方法を調べたので、まとめておく。 概要 蔵書一覧の取得方法としては大きく2つあり、 コンテンツと端末の管理ページからスクレイピングする方法と、 Kindle Cloud Readerが使っているWeb SQL Databaseのクライアント側のDBからそのま... 続きを読む