目前在学习Python的数据抓取(爬虫),突发奇想,如果在豆瓣抓取到电影名称后,如何通过获取的电影名称抓取对应的视频URL呢?
本人的流程如下:1、去豆瓣抓取部分电影名称2、保存到数据库3、通过数据库保存的名称去优酷等网站搜索相关电影4、获取相关电影的视频链接地址5、把链接地址保存到对应的数据表中。
不知大神有何建议?为感。
光阴似箭催人老,日月如移越少年。
クロールされた URL が必要な動画かどうかを検討する必要があります
各ビデオ Web サイトは異なる方法でビデオ アドレスを取得し、それぞれが対応するキャプチャ メソッドを記述する必要があります。また、Youku と同様に、大きなビデオは通常、複数の URL がある場合でもセグメント化されているため、これも考慮する必要があります。
なぜDoubanから名前を取得する必要があるのですか?スコア? 通常の状況では可能ですが、たとえば、映画を検索すると、多数の結果が得られる可能性があります。
Douban ムービーをクロールしている場合、通常は再生ソースがあり、URL を直接クロールできます
クロールされた URL が必要な動画かどうかを検討する必要があります
各ビデオ Web サイトは異なる方法でビデオ アドレスを取得し、それぞれが対応するキャプチャ メソッドを記述する必要があります。また、Youku と同様に、大きなビデオは通常、複数の URL がある場合でもセグメント化されているため、これも考慮する必要があります。
なぜDoubanから名前を取得する必要があるのですか?スコア?
通常の状況では可能ですが、たとえば、映画を検索すると、多数の結果が得られる可能性があります。
Douban ムービーをクロールしている場合、通常は再生ソースがあり、URL を直接クロールできます