テキストマイニング練習サイト

Webスクレイピングとテキスト解析の学習用コンテンツ

物語

生成AIによる創作物語集。「ちくわ君と学ぶ（教育）」「ちくわ君の物語」「その他の創作物語」の3カテゴリに分かれ、感情分析・文体分析・テキスト分類などの練習に適したコンテンツです。

物語ページへ

みんなの物語（投稿）

ログインユーザーが投稿した物語。大学メール（@vc.ibaraki.ac.jp）でログインすると1日1回まで物語を投稿できます。読むだけなら誰でも閲覧可能です。

みんなの物語へ

仮想ニュース

架空のニュース記事を集めたページ。記事の分類、トピックモデリング、要約生成などの実践的な練習ができます。

ニュースページ（準備中）

学習のポイント

  • 基本的なスクレイピング：BeautifulSoup、requestsライブラリの使用方法
  • データ抽出：CSSセレクタ、XPathの活用
  • テキスト前処理：正規表現、文字列操作
  • 形態素解析：MeCab、janomeを使った日本語処理
  • データ保存：CSV、JSON、データベースへの保存
注意事項： このサイトは学習目的で作成されています。実際のWebサイトをスクレイピングする際は、robots.txtの確認、利用規約の遵守、適切なアクセス頻度の設定を心がけてください。