しんたろーしんたろーのITアカデミー

#Webスクレイピング の記事一覧

全3件

OpenAIのrobots.txt学習拒否導入で何が変わるのか。開発者が知るべきAI連携の未来
·37 views·しんたろー

OpenAIのrobots.txt学習拒否導入で何が変わるのか。開発者が知るべきAI連携の未来

Webサイトの学習拒否を巡る動きが標準化へ動いた。OpenAIが発表した「共通シグナル」への対応は、規律作りだ。AIが学習する「公開データ」と、開発者が触れる「ローカル環境」の境界線が分断される。 PerplexityがMac向けに解放したエージェント機能は、ローカルファイルを直接操作する主戦場を示唆する。モデル性能の飽和、データ収集の制限、OSレベルに食い込むエージェント。

Cursor Agentが自律的なPR作成に対応した理由。開発者がコードを書く時代が終わる訳
·70 views·しんたろー

Cursor Agentが自律的なPR作成に対応した理由。開発者がコードを書く時代が終わる訳

Cursorのクラウドエージェントが、PRの作成からCIの修正、Slack連携まで自律で完結させるようになった。AIが勝手にバグを直してコードを出荷する環境が整った。 開発者の役割は「コードを書くこと」から「エージェントの運用ルールを定義すること」へシフトしている。コンテキストを汚さない技術により、トークン消費量を抑える割合は87%に達した。READMEの自動同期までAIが担う。

【2026年版】AIスクレイピングと記事生成の6ステップ|1人開発者が教える実践ガイド
·317 views·しんたろー

【2026年版】AIスクレイピングと記事生成の6ステップ|1人開発者が教える実践ガイド

Web上のデータを自動で集めて、そのままブログ記事にしてくれたらどんなに楽だろうと思ったことはないだろうか。 結論から言うと、今のAI技術を使えばそれは完全に可能だ。 しかも、プログラミング初心者でも正しい手順を踏めば、今日から自分のパソコンで動かすことができる。 この記事では、Webデータ収集から構造化データの抽出、そして記事の自動生成までを1つの流れとして構築する6つのステップを解説する。