Wizard mode

オンラインサービス に関するメモランダム

→ → → Entries ← ← ←
カテゴリー: Webスクレイピング 　閲覧数:758　配信日:2017-09-27 16:57


単一ページ上のデータを抽出する



List or Table Extraction


リンク遷移先のデータを取得
・リストのリンク先もたどって取得する
・ページネーションを移動しながらリストデータを取得する
・同一ページ内のデータは取得不可

対象テーブル例
・それぞれのリンク先ページに掲載している情報を取得
・Octoparseがユーザの代わりに、実際に「リンク先ページ」へアクセスしてデータを取得してくる
- リンク
1 コピー履歴
2 ハードディスク管理表



URLを複数指定して全てのページから指定したデータを取得する

週間人気ページランキング ／ 6-25 → 7-1
順位 ページタイトル抜粋 アクセス数
1 ログイン 12
2 オンラインサービス 0 11
3 Xの「矢印を使い、指示された席に人物を移動させてください。」は縦横アイコンを合わせる方式 | X 7
4 radikoでは、今現在の「オンエア曲」をWeb画面で確認できる | radiko(ラジオ) 6
5 AGPtEK M20(MP3プレーヤー) カテゴリー 5
6 故障した小型冷蔵庫(46L)をどうするの？ | 冷蔵庫(購入履歴) 4
6 「Twitterデータ」をダウンロード出来ない。途中で失敗する。ネットワークエラーが発生する | Twitter 4
6 ソフトバンクの携帯電話番号は「My SoftBank」から無料で変更できます。※My SoftBankから電話番号の変更手続きをする場合には、料金(事務手数料)の発生はありません | ソフトバンク(通信) 4
6 らじれこで録音予約で存在しないフォルダを指定するとどうなるの？ → 自動作成される | らじれこ(ラジオ) 4
7 お使いのアカウントに不自然なアクティビティを検出しました。安全のため、パスワードが変更されるまでアカウントはロックしました。 | Twitter 3
7 ネットでオリーブオイルを購入したい | EC 3
7 LINEヤフー共通利用規約に反する行為を確認したため、この携帯電話番号は利用できません ／ 感想 3
7 Twitter改善して欲しい仕様ランキングTOP2 | Twitter 3
7 Twitter全ツイート履歴は、2019年7月以降、ツールを使用しなければ取得不可能(index.htmlはダウンロードファイルに含まれないよう仕様変更されている) | Twitter 3
7 Bluesky の仕様 | Bluesky(social networking service) 3
8 複数Twittterアカウントを新規作成するための手順 ／ 注意点 2
8 「らじれこ」で作成したタスクを「タスクスケジューラ」毎エクスポート/インポートすれば、「らじれこ予約録音の設定」を「他PCのらじれこ」へ移行できるのでは？と考えたが、諦めた話 | らじれこ(ラジオ) 2
8 バリカンの問題 | バリカン(購入履歴) 2
8 OCNでインターネット開通するためには、新規申込時の書類は不要。「userID」と「認証パスワード」さえわかれば、インターネット接続可能 | OCN(インターネットサービスプロバイダ) 2
8 宅配便の「ご不在者連絡票」に従い電話すると、60円費用が発生する場合がある | クロネコメンバーズ(荷物) 2
2026/7/2 5:05 更新
指定期間人気ページランキング ／ 2020-5-27 → 2026-7-1
順位 ページタイトル抜粋 アクセス数
1 ビックカメラへの苦情連絡先 | ビックカメラ(EC) 8040
2 Twitter全ツイート履歴は、2019年7月以降、ツールを使用しなければ取得不可能(index.htmlはダウンロードファイルに含まれないよう仕様変更されている) | Twitter(social networking service) 4030
3 Twitter動画を無料でダウンロードする方法 | Twitter 3785
4 Yahoo!メールで[SendMessageFailed]が表示される場合は、しばらく待ってから再度試す | Yahoo!メール(メール) 3441
5 「Twitterデータ」をダウンロード出来ない。途中で失敗する。ネットワークエラーが発生する | Twitter(social networking service) 3263
6 Xの「矢印を使い、指示された席に人物を移動させてください。」は縦横アイコンを合わせる方式 | X 2557
7 Twitterモーメント作成しようと思い、自分の過去のツイートを遡る。途中までしか遡れない。面倒くさくなって止める | Twitter(social networking service) 2106
8 「mmpx12 / twitter-media-downloader」は 52 件しか一括ダウンロードできません | X 1812
9 オンラインサービス 0 1658
10 ソフトバンクの携帯電話番号は「My SoftBank」から無料で変更できます。※My SoftBankから電話番号の変更手続きをする場合には、料金(事務手数料)の発生はありません | ソフトバンク(通信) 1637
11 Twitter 画像サイズの問題 | Twitter(social networking service) 1478
12 お使いのアカウントに不自然なアクティビティを検出しました。安全のため、パスワードが変更されるまでアカウントはロックしました。 | Twitter(social networking service) 1255
13 「楽天トラベル」の宿泊履歴は 3 年経過すると削除されるため、注意が必要です。 | 旅行 1161
14 Amazon Music「まだ再生中ですか？」問題 | Amazon Music(Amazon) 1148
15 Amazonの「カスタマー Q＆A」より製品に関する質問を行っても、回答がつくまで、投稿者自身も確認することは出来ない | Amazon(EC) 1061
16 Windows10で、Twitterタイムラインを一番下(最後)まで自動でスクロールする無料ソフトウェア「Twitterオートスクローラー」 | Twitter(social networking service) 1025
17 3 種類ある「楽天カード」利用明細確認方法の内、「楽天e-NAVI」の「Web明細サービス」だけは、過去 15 カ月以前の情報が表示されないため注意が必要です。 | カード 948
18 「Google Chrome」ブラウザで「Yahoo!メール」を開くと「読み込み中」が耐え切れないほど長いです。検索してみましたが、解決する方法が分かりません。 | Yahoo!メール(メール) 774
19 インターネットへ突然接続できなくなった理由は、NTTぷららのマイページのパスワードを変更したから | NTTぷらら(インターネットサービスプロバイダ) 762
20 故障した小型冷蔵庫(46L)をどうするの？ | 冷蔵庫(購入履歴) 709
2026/7/2 5:05 更新