Question

htmlの<script language="JavaScript">内の関数を実行してWeb内容を更新したいです。
あるサイトをスクレイピングしているのですが、自分がほしいデータはhtmlの埋め込み関数がボタンが押されることによって更新されます。
なので、外からその関数を実行してやればほしいデータが手に入るのでは？と思い、質問させていただきました。

pythonになれているのでできればpythonでどのようにすればいいのか教えていただきたいです。
しかし、その他の言語でも全く構いません。
どなたか教えていただけないでしょうか。

下の例で言うと、ボタンを押すとvalueが表示される。このvalueを取得したい。

-------htmlのイメージ------
<html>
<head>
<script language="JavaScript">

</script>
</head>
<body>
<input onclick="JavaScript:exec()" type="button" />
<div id="value">
</div>
</body>
</html>

fujillin · Accepted Answer

No1です。

＞おそらく勘違いされているのではないかと推測します。
回答にも書きましたが、勘違いではなく「質問文からではわからない」ので、ありそうな内容を推測して回答しただけです。ですので、当たるも八卦みたいなものです。

＞そのままスクレイピングをしようとすると結果が得られない
対象とするページがどのような仕組みになっているかによって方法は変わるでしょう。
仕組みによっては無理な場合もあり得ます。

ほとんど内容がわからないので、以下は推測だけによる回答です。

例えば、入力値をform送信するような仕組みの場合であれば、URLとクエリをダイレクトに作成してアクセスするだけで済むのかも知れません。

最適かどうかはおいていおいて、対応範囲が広いかも知れないのは、手動での操作を自動で行う方法でしょうか。
windowsであれば、ブラウザ（IE）をvbsなどから制御して必要な操作を行うなといった方法です。
https://www.fastclassinfo.com/entry/vba_ie_links_control

fujillin · Answer

こんにちは
なさりたいことがよくわからないので、的はずれかもしれませんが・・・

＞このvalueを取得したい。
スクリプトをみる限り、valueは最初に送る際は「1」の値以外は取らないので、それ以外の値を送りたいなら、直接値をセットして送る方が良さそうに思えます。

「取得したい」のはサーバ側のブログラムでしょうから、普通にformから送信すれば良いのではないでしょうか。
あるいは、URLのクエリ部を利用して「URL?value=××」として直接リクエストするとか。
どちらの場合も、レスポンスを待ってページ遷移が行われます。
遷移をさせたくないのであれば、ajaxを利用するとかでしょうか。
https://developer.mozilla.org/ja/docs/Web/Guide/AJAX

<script language="JavaScript">内の関数を実行してWeb内容を更新したい

No1です。

こんにちは

関連するカテゴリからQ&Aを探す

デイリーランキングこのカテゴリの人気デイリーQ&Aランキング

マンスリーランキングこのカテゴリの人気マンスリーQ&Aランキング