Python クローラーに関する質問

Question

Web フォーム データをクロールするために post を使用しています。Web サイトは次のとおりです http://www.ipe.org.cn/Industr.... ここで 2 つの問題が発生しました。そのうちの 1 つは違反タイプ < です。 input type= "checkbox" name="violation" data-role="all" selected="" value="0">、Web ページはチェック済みに設定されており、デフォルト値があり、データのみが必要です違反=1 で、どうすればよいかわかりません。
2 番目の問題は、国、州、都市を選択するプロセスです<select class="select" name="select" id="country_0" onchange= "setProvince_0();"> 名前と値を直接使用して必要なフォーム データを選択することはできません

ひざまずいて偉大な神々に答えを求めてください

Answer 1

データを返す API があり、それを取得して、フィルターされたデータ ストリームをクリックできます。おそらくこの API (http://www.ipe.org.cn/data_as...) には、投稿モードで、 itemType というパラメーターがあり、これが必要な違反タイプです。
そうすると、対応する国、省、都市、その他の情報がAPIに反映されるので、自分で調べることができます。次に、要件に従って、リクエストする必要があるデータを構築し、残りは解析です。 。 。 。