【プログラミング不要】suumoの物件情報をスプシに一覧化する方法｜ハチ

2024/10/04 176 users SUUMO スプシ ハチ 坪単価 プログラミング不要

IMPORTXML関数を使ってsuumoの物件情報ページをスクレイピングし、スプシに一覧化する方法をご紹介します。 suumoから引っ張ってくる情報は以下の通り。 物件名 価格(万円) 広さ(m^2) 築年(年、月) 最寄り駅と駅徒歩 ※友人用に作ったスプシは坪単価も出したかったので、いったんデータを引っ張ってきてからスプシ上で価... 続きを読む

「月50万円稼げる」と勧誘されて海外に行こうとしてる人、取り返しのつかない恐ろしい被害が横行してるから気をつけて

2024/03/20 244 users 恐ろしい被害 海外 ブローカー 出稼ぎ るみ

よろづのかるみ @calmicco 今「月50万円稼げるぜ」と勧誘されて海外へ出稼ぎに行こうと思ってる人は、たぶんブローカーのカモになるだけなので気をつけた方がよきだと思う。「まずはご自身の身元保証金で200万円準備してください」「渡航手続きおよびなんとか代行でプラス100万円」「大丈夫ですあちらで稼いだらスグ返せ... 続きを読む

自作した時間割アプリが大学の公式アプリに採用された話 - Qiita

2024/01/14 552 users Qiita ポータルアプリ 時間割アプリ 時間割 時系列順

記事の概要 私（芝浦工業大学学部4年生）が大学２年時に1人で制作した、大学のポータルアプリ（ポータルサイトからスクレイピングして時間割などを表示する）が、大学に正式採用され、公式アプリ"ScombApp"としてリリースされるに至った経緯を時系列順に説明します。 ホーム画面 時間割画面 制作の動機 大学のポータルサ... 続きを読む

ChatGPT(GPT-4) で一撃でスクレイピングするコードを生成出来たので感想とコツ - Qiita

2023/05/08 335 users Qiita chatgpt プロンプト GPT-4 一撃

今回やりたかったこと 目標：ChatGPT(GPT-4) で一撃でスクレイピングするコードを生成 するにはどうしたらいいのか、ChatGPT のハードルとかコツとかを知りたい。 ※最終的なプロンプトの入力と出力の全文は本ページ下部に貼り付けてます。 作ったもの概要 保険組合のウォーキングイベントの会社内の3チームの歩数進捗の ... 続きを読む

インターネットは断片化されることを望んでいる

2023/01/04 324 users 断片化 インターネット Twitter Noahpinion

Noahpinionより。 全世界を1つの部屋に一緒に放り込んでもうまくいかない。 BY ノア・スミス ノア・スミス @Noahpinion 15年前、インターネットは現実世界からの逃避先だった。 今や、現実世界がインターネットの逃避先になっている。 5年前、私は大学時代の友人Dayvとビールを飲みながら座っていました。Twitterをスク... 続きを読む

沖縄でおつまみに人気の魚「スク」　取れなくなったのはなぜ？　1キロ5千円で売れる「海のボーナス」失い漁師は落胆 | あなたのナゼにココホル取材班 | 沖縄タイムス＋プラス

2022/08/07 178 users ナゼ 落胆 漁師 ココホル取材班 沖縄タイムス

沖縄でおつまみに人気の魚「スク」　取れなくなったのはなぜ？　1キロ5千円で売れる「海のボーナス」失い漁師は落胆 ［あなたのナゼにココホル取材班］ 「今年はスクがなかなか手に入らない。原因を調べてほしい」。こんな取材依頼が本紙に寄せられた。スクとはアミアイゴの稚魚。旧暦６月と７月の１日、１５日の大潮の... 続きを読む

例のスクレイピングしてる不動産物件検索が復活している・・・（で、結局「悪の黒い不動産屋」、という話に・・・Orz）｜torum｜note

2022/04/06 287 users orz torum Note

これが、また某所で少し話題になっていました。 「使いやすい」、と、多少の支持はあるようですね。大手不動産物件検索サイトの運営者も、自社のサービス改善の余地があると自戒すべきことです。 ただ・・・ ・そもそもレインズを客に見せない不動産業界が黒い ・レインズ公開しちゃったら宅権協会の入会者が減って稼げ... 続きを読む

スクラム開発の現場にJoinして失敗した俺が悪い話 - Qiita

2021/10/25 224 users スクラム Qiita アンチパターン スクラム開発 失敗談

ほぼノー知識でスクラム開発の現場に乗り込んで失敗した話を書き記します。 「なぜスクラムは上手くいかないのか」「スクラム開発のアンチパターン」などチームにフォーカスした記事はあれど、個人にフォーカスした失敗談が見当たらなかったので書こうと思いました。 はじめに 大前提として、その現場が悪かったとかスク... 続きを読む

Kindle蔵書一覧を取得する方法 - Qiita

2020/06/27 532 users Kindle Qiita 蔵書 SQL Database 端末

Kindleの蔵書が1万冊を超えてきて、そろそろ蔵書管理したくなり、 蔵書一覧を取得する方法を調べたので、まとめておく。 概要 蔵書一覧の取得方法としては大きく2つあり、 コンテンツと端末の管理ページからスクレイピングする方法と、 Kindle Cloud Readerが使っているWeb SQL Databaseのクライアント側のDBからそのま... 続きを読む

N国・立花党首、参院補選出馬のため議員辞職を検討 8日夕に記者会見 - 毎日新聞

2019/10/08 196 users 立花党首 毎日新聞 議員辞職 立花孝志党首 立候補

NHKから国民を守る党の立花孝志党首は8日、国会内で記者団に、参院埼玉選挙区補欠選挙（10日告示・27日投開票）への立候補に向け、参院議員辞職を検討していると明らかにした。同日夕に国会内で記者会見を開き、詳細を説明する。 立花氏が辞職すれば放射線専門医の浜田聡氏（42）が繰り上げ当選する。 立花氏はNHKのスク... 続きを読む

5ch(旧2ch)をスクレイピングして、過去流行ったネットスラングの今を知る - にほんごのれんしゅう

2018/11/11 1224 users ミーム Twitter れんしゅう ネットスラング スラング

5ch(旧2ch)ではここ数年はTwitterを使用するようになってしまいましたが、ネットのミームの発信地点であって、様々なスラングを生み、様々な文化を作ってきたと思います。 学生時代、2chまとめとか見ていたので、影響を受けてきたネット文化で、感覚値からすると、どうにも流行り廃りがあるようです。 5chの過去ログを過... 続きを読む

5ch(旧2ch)をスクレイピングして、過去流行ったネットスラングの今を知る - にほんごのれんしゅう

2018/11/11 1224 users ミーム Twitter れんしゅう ネットスラング スラング

5ch(旧2ch)ではここ数年はTwitterを使用するようになってしまいましたが、ネットのミームの発信地点であって、様々なスラングを生み、様々な文化を作ってきたと思います。 学生時代、2chまとめとか見ていたので、影響を受けてきたネット文化で、感覚値からすると、どうにも流行り廃りがあるようです。 5chの過去ログを過... 続きを読む

Python: Selenium + Headless Chrome で Web ページ全体のスクリーンショットを撮る - CUBE SUGAR CONTAINER

2018/07/27 317 users Selenium ProductName Python 通り

スクレイピングした Web サイトからページ全体のスクリーンショットを撮影したい機会があった。 そこで Selenium の Python バインディングと Headless Chrome を使ったところ実現できたのでメモしておく。 使った環境は次の通り。 $ sw_vers ProductName: Mac OS X ProductVersion: 10.13.5 BuildVersion: 17F77 $ pyth... 続きを読む

FFアンソロ同人誌に公式画像を加工して使おうとして炎上 - Togetter

2018/02/23 160 users Togetter 昨晩 商用 ヤツ 炎上

これか…昨晩、TLでチラホラ見かけた、FFアンソロが何とかってヤツ… ちょっと調べたら、公式画像を同人誌の裏表紙に使ってると何とか…ヤバすぎだろ(；´Д｀) スク⚫ニの著作物を加工して同人誌に使う輩現る ↓ 良識ある人達が必死に止めようとする ↓ 輩「今までも同じ事してきたけど怒られた事ない！弱小ｻ-ｸﾙだし利益無いから趣味の範囲！商用じゃない！今回だけ許して！頑張って作ったのに中止なんてできない... 続きを読む

「フランスの徴兵制復活の時系列」がわかりやすい「フランスヤバいな…」「兵と言うより警備員」 - Togetter

2018/01/20 199 users 移民 スウェーデン 表明 マクロン大統領 ヨーロッパ各国

リンク HuffPost Japan 1462 4 users 徴兵制、フランスも復活へ　マクロン大統領が表明　18～21歳の男女対象 ヨーロッパ各国に軍事強化の波。スウェーデンでも7年ぶりに復活 フランスの 徴兵制復活への時系列 ・移民が１０万人もやって来た ・パリ市内は移民が出したゴミの山 ・マクロン移民法を改正しようとするが潰される ・浮浪移民を警察が追い出すがスグに戻ってくる ・警察だけで... 続きを読む

【ロシア】名前が「◯◯スキー」の人は名家出身？地名の「◯◯グラード」「◯◯スク」の意味は？ロシアの地名、人名にまつわる雑学 - Togetterまとめ

2017/10/05 172 users グラード 人名 地名 語尾 Togetterまとめ

ロシアの地名には「〇〇スク」「〇〇スキー」という名前のものが多い。 これは語尾によって街の大きさを表している。日本の市町村のようなもの。 集落：スカヤ(ская) 村：スコエ(ское) 町：スキー(ский) 市：スク(ск) 大都市(城塞都市)：グラード(град) 試しに宗谷本線の沿線自治体にこれを当てはめてみると、 アサヒカワ-グラード ピップ-スキー ワッサム-スキー ケンブチ-スキー ... 続きを読む

沖縄・奥武島でスク水揚げ　「昨年よりも大漁」漁師ら笑顔こぼれる | 沖縄タイムス＋プラス　ニュース | 沖縄タイムス＋プラス

2017/07/21 432 users 旧暦 大漁 漁船 スク漁 スク水揚げ

沖縄県南城市玉城の奥武島でスク漁が始まっている。奥武漁港では２１日、大量のスクが水揚げされ、地元の鮮魚店には刺し身用のスクが並べられた。　スクが寄るのは旧暦６～８月の１日前後で、２３日が旧暦の６月１日に当たる。島には２０日からスクが寄ってきており、この日５隻の漁船で漁を行った。 続きを読む

ヘッドレスブラウザ(Chrome)を使ってSPAをスクレイピングする - Qiita

2017/07/03 536 users Qiita SPA ヘッドレスブラウザ Chrome

一般的なスクレイピング手法とその問題点 スクレイピングというと、HTTPクライアントライブラリを用いてHTML取得し、HTML/XMLパーサーで解析するというのが一般的だと思います。 この手法の場合、以下の場合にうまく処理できない場合があります。 ターゲットのページがJavaScriptにより動的にDOMを操作する場合 HTML/XMLパーサーが取得したHTMLを正しく解釈できない場合(正しくない... 続きを読む

スク水揚げ　奥武島で今年も大漁 | 沖縄タイムス＋プラス　ニュース

2016/08/01 619 users 大漁 南城 漁獲 海人 スク水揚げ

【南城】南城市の奥武島でスク漁が始まり、島の海人が大漁を喜んでいる。１日は漁船１５隻ほどが島周辺で追い込み漁を行い、体長４センチほどの魚を漁獲。袋いっぱいに詰め、鮮魚店では刺し身用として販売されている。　スクは旧暦６―８月の１日前後に島に寄るが、前回は数が少なく漁師も渋い顔だった。 続きを読む

Wikipedia からスクレイピングして… とか言ってる人におすすめしたい，DBPedia からの情報抽出 - Qiita

2015/11/24 559 users Qiita RDF Wikipedia ご存知 体系化

みなさん DBPedia をご存知でしょうか．DBPedia とは，Wikipedia から構造化データ (RDF) として情報を抽出するものです．DBPedia では Linked Data として情報が体系化されているので，Wikipedia 内の必要な情報を，非常に簡単に抽出することができます． 「◯◯ の情報を Wikipedia からスクレイピングして取ってきて…」みたいな話をよく耳にし... 続きを読む

PythonでJavaScriptを使ったWebサイトをスクレイピングする - Qiita

2015/10/29 200 users Qiita Pipeline Python Selenium

概要 JavaScriptでDOMを作ってるサイトをPythonを使ってスクレイピングしたので、手順をメモ。 大雑把には、ScrapyとSeleniumを組み合わせてやった。 Scrapy Scrapyは、クローラーを実装するためのフレームワーク。 クローラーをSpiderのサブクラス、スクレイピングした情報をItemのサブクラス、スクレイピングした情報に対する処理をPipelineのサブクラス、... 続きを読む

おい、peco もいいけど fzf 使えよ - Qiita

2015/10/29 222 users peco ローカルリポジトリ Qiita fzf GHQ

peco 便利ですよね。正直、使い始めてしまうと使わない日はありません。最近の CLI 界隈では選択的インターフェイスやインタラクティブフィルタなどと呼ばれるツールが盛んに開発されています。特に peco は ghq との連携で一躍人気が出た気がします。 ghqを使ったローカルリポジトリの統一的・効率的な管理について こんなやつですね。以下は ghq のリポジトリへのアクセスを簡単にするためにスク... 続きを読む

URLを入力するだけ！コンテンツをスクレイピングしてデータ化してくれる無料ツール「import.io」

2015/08/19 1288 users Import.io スクレイピング URL コンテンツ 以下

import.ioとは import.ioは、データ化したいページのURLを入力するだけで、自動でデータ箇所を判断して情報を集めてくれるスクレイピングサービスです。 無料で利用することができ、セットアップも、データ収集用のトレーニングなども必要ありません。 URLを入力して、ボタンを押すだけという簡単さから、誰にでも利用できるデータ収集ツールだと思います。 以下では、その簡単な使い方や、利用例など... 続きを読む

奥武島でスク水揚げ　「ウミンチュへのボーナス」 | 沖縄タイムス＋プラス

2015/08/13 373 users 南城 海人 出だし スク水揚げ スク漁

スク漁が始まった南城市の奥武島。あるウミンチュは「漁の出だしとしては、いい感じ」と笑顔だった＝１３日、奥武漁港 【南城】南城市奥武島で１３日、スク漁が始まった。漁師仲間５人と、奥武漁港に３０～４０キロを水揚げした同島在住の中本幸光さん６７は「島に自ら近づいてくるスクは、ウミンチュ（海人）へのボーナス。漁の出だしとしては、いい感じ」と笑顔。スクは早速、島の鮮魚店に刺し身用として並んでいる。 　スクは... 続きを読む

【裏技】知らない人は損してるなあと思う豆知識49 | 日刊キャリアトレック

2015/07/08 923 users 日刊キャリアトレック 王将 ライス ルー 餃子

こんにちは。日刊キャリアトレックの仁田坂です。高校のころ、雑学クイズみたいなイベントに出て優勝しました。それ以来、雑学王の名を欲しいままにしています。 今回は分野別に今スグ使える豆知識・雑学・裏技を49個まとめてご紹介。たぶん一つくらいは知らないことありますよ。 外食 １. カレーハウスCoCo壱番屋ではライスが残ってしまった場合、ルーを無料でかけてもらえる（1回のみ）。 ２. 餃子の王将で天津飯... 続きを読む