今回(できれば)取得したかったデータ / 感想 / 具体例

Windows PC に関するメモランダム

カテゴリー: Webクローラ  閲覧数:211 配信日:2023-04-10 19:23


今回(できれば)取得したかったデータ


教えて!goo
「質問本文」「回答」を含む一覧データ

Yahoo!知恵袋
「質問本文の全文」「回答全文」を含む一覧データ

感想


出だしは良かったのですが
「Octoparse」を操作し始めて割とすぐに「今回取得できたデータ」の抽出&ダウンロードに成功しました。

しかし、それだけでした。
それ以降、5 ~ 6 時間試すも進展はありませんでした。

「Octoparse」の操作勘所と成果について
ページネーションされているデータは(偶然)取得できたのですが、ページネーション先のデータも合わせて取得する方法が最後まで分かりませんでした。

具体例


下記内容のデータは取得できたのですが、
質問A(リンク)
質問B(リンク)
質問C(リンク)
質問D(リンク)
質問E(リンク)
12345次へ

下記内容のデータをまとめて取得する方法が分かりませんでした。
質問A(リンク)
質問B(リンク)
質問C(リンク)
質問D(リンク)
質問E(リンク)
12345次へ

リンク先の質問Aページ
質問Aタイトル
質問A本文
質問A回答

リンク先の質問Bページ
質問Bタイトル
質問B本文
質問B回答
以下略


「『下記リンクのテキスト+URLを抽出する』を選びます」と掲載されていますが、どうしても「下記リンクのテキスト+URLを抽出する」が表示されません……。
検索結果ページと詳細ページを同時にスクレイピングの方法


※このページをご覧になられた方の中で、操作方法をもしご存知の方がいたらぜひ教えて(コメントして)ください。

週間人気ページランキング / 9-11 → 9-17
順位 ページタイトル抜粋 アクセス数
1 クイックアクセスから複数のピン留めを一括で解除することはできません | Windows エクスプローラー(Windows) 39
2 タスクスケジューラ | Windows 10(Windows) 34
3 Audacity で再生ボタンを押しても音が鳴らない時は、再生レべルスライダーを右にドラッグして「再生レべル:100%」にします。 | Audacity(音) 28
4 「Audacity」で複数ファイルへ対する一括変換対応について | Audacity(音) 25
5 MP3ファイルの「プロパティ」を変更できない | Windows 10(Windows) 23
6 Windows エクスプローラー再起動するためには、タスクマネージャーでエクスプローラーを選択後、再開ボタンを押します。 | Windows エクスプローラー(Windows) 17
6 これまで正常動作していた「CrystalDiskInfo」である日突然「対応ディスクが見つかりませんでした」と表示された場合は、アップデートしてみます。 | CrystalDiskInfo(ソフトウェア) 17
7 「Tablacus Explorer」でアクティブタブに背景色を付けるためには、「タブをデザイン」アドオンをインストールします。 | Tablacus Explorer(ソフトウェア) 16
8 「VLC media player」で動画再生した際、動きが大きくなるにつれて横シャギーが入ったように横線が表示される場合には、「デインターレース」設定を「オン」へ変更します。 | VLC media player(ソフトウェア) 14
9 「みまもり合図」に関する疑問。2019年 | みまもり合図(ソフトウェア) 11
9 Xboxを使用していない場合、XblGameSaveを動作させる必要は全くない 11
10 タスクスケジューラ。実行中の全てのタスクを表示 / SystemSoundsService 9
10 エクスプローラの右クリックメニュー「Microsoft Defender でスキャンする」が表示されなくなりました。→ 勘違いかもしれません | Windows 10(Windows) 9
10 VLC media player で複数曲を「繰り返し連続再生する」ためには、プレイリスト全体をリピート再生指定する | VLC media player(ソフトウェア) 9
10 「タイムゾーン間で同期」にはチェックを入れない 9
11 FileZillaでディレクトリ内容が表示されない理由は、「ディレクトリリストのフィルタリング」の「Source control directories」にチェックを入れているから | FileZilla(ソフトウェア) 8
11 「WDDM」は、要件を満たさないとアップデートできません。 | Windows 10(Windows) 8
11 「みまもり合図」に関する疑問。2018年 | みまもり合図(ソフトウェア) 8
11 Twitterよりダウンロードした「largeファイル」や「origファイル」を一気に「.jpgファイル」へリネームするバッチファイル | バッチファイル(Windows) 8
12 コマンドプロンプトでchkdsk /B | ハードディスクトラブル(ハードウェア) 6
2025/9/18 1:01 更新
指定期間人気ページランキング / 2020-5-27 → 2025-9-17
順位 ページタイトル抜粋 アクセス数
1 MP3ファイルの「プロパティ」を変更できない | Windows 10(Windows) 24334
2 Windows 0 10813
3 ファイル名の一部(指定文字列)を削除するバッチファイル | バッチファイル(Windows) 10562
4 「接点復活剤」「接点復活スプレー」は、100円ショップで販売されていない | イヤホン(ハードウェア) 7269
5 「機能を構成しています 100%完了 コンピューターの電源を切らないでください」の画面が表示され続ける場合でも、1時間ぐらいは待った方が良いかも | 起動トラブル 2019年(Windows) 6083
6 タスクスケジューラ | Windows 10(Windows) 6040
7 コマンドプロンプトでchkdsk /B | ハードディスクトラブル(ハードウェア) 5795
8 解凍先の指定。デフォルト設定ではデスクトップに解凍 4701
9 Audacity で再生ボタンを押しても音が鳴らない時は、再生レべルスライダーを右にドラッグして「再生レべル:100%」にします。 | Audacity(音) 4422
10 VLC media player で複数曲を「繰り返し連続再生する」ためには、プレイリスト全体をリピート再生指定する | VLC media player(ソフトウェア) 4127
11 コンピューターは正しく構成されていますが、デバイスまたはリソース (DNS サーバー) が応答していません。 | ネットワーク 3887
12 「コンテナー内のオブジェクトを列挙できませんでした」と表示される場合は、「Everyone にフルコントロール権限を与えて全て削除する」 | Windows 10(Windows) 3682
13 マウスの選択範囲がおかしくなった時、試してみた方が良いかもしれないこと | マウス(ハードウェア) 3578
14 「みまもり合図」に関する疑問。2019年 | みまもり合図(ソフトウェア) 3296
15 「タイムゾーン間で同期」にはチェックを入れない 2801
16 「みまもり合図」に関する疑問。2018年 | みまもり合図(ソフトウェア) 2627
17 「HD-LD4.0U3-BKA」と「HD-NRLD4.0U3-BA」と「HD-AD4U3」は同じ | 外付けハードディスク(ハードウェア) 2608
18 「★ページは機能していません」「★からデータが送信されませんでした。」 「ERR_EMPTY_RESPONSE」と表示されるようになったら、 Kasperskyを一旦停止してみる | ウイルス対策ソフト(Windows) 2570
19 Windows10でデスクトップにファイルを保存できない。ESPRIMO DH77 | Windows 10(Windows) 2514
20 Xboxを使用していない場合、XblGameSaveを動作させる必要は全くない 2495
2025/9/18 1:01 更新