【DataScraping】次ページ以降が取得できない！

日本 フォーラム
,
1

割と簡単なデータスクレイピングだと思って挑戦したのですが、
またもやハマってしまいました。
datascraping.zip (2.7 キロバイト)

■やりたい事
１．下記サイトの情報をデータスクレイピングで抜きたいと思っています。
https://netforum.acec.org/eweb/DynamicPage.aspx?Site=ACEC&WebKey=21ff36e0-65d4-4cab-a743-772e58682e6e&FromSearchControl=Yes

２．抜き出すデータは「Name」から「Countries where firm is working」まで全部

３．Nextをクリックして次ページ以降もデータを抜き出したい

■つまづいている点
セレクターの設定が悪いのか、上記３のNextのリンクがクリックできません！

宜しくお願いします。

2

こんにちは

Extract Structured Data のMaxNumberOfResultsが５になっているのが原因かと思います。最後まで（無制限に）取得するなら０にしてみてください。

2 Likes
3

検証してみました。

１）“ACEC Organization Directory”
をIEで開く
２）30秒待ちの間にアラバマを選択してクリック⇒結果表示
３）ブラウザにアタッチ（）
４）スクレイピング（ ）
セレクタは<webctrl css-selector='body&gt;form&gt;table&gt;tbody&gt;tr&gt;td&gt;table&gt;tbody&gt;tr&gt;td&gt;table&gt;tbody&gt;tr&gt;td&gt;div&gt;div&gt;table' idx='1' parentid='ContentPane' tag='TABLE' />
結果は、こんな感じです。
image

1 Like
4

返信ありがとうございます。

[MaxNumberOfResults]は「１ページから取得するデータ数」だと勝手に思い込んでいました。
設定値を「０」にしてみます！

＜追記＞
問題なく、最後まで取得できました。
ありがとうございました。

2 Likes
5

This topic was automatically closed 3 days after the last reply. New replies are no longer allowed.