Sohu Video のすべてのユーザーのアルバム名をキャプチャします

Sohu Video 内のすべてのユーザーのアルバム名をキャプチャします。すべてのレコードを取得すると、関連するキーワードを含むビデオアルバムを簡単に検索できます。しかし、ユーザーが多すぎるため、1 つのスレッドが何年間実行されるかわかりません。複数のテーブルと ID セグメントを設定することで、複数のチャネルの同時キャプチャを実現できます。

$user_id の開始と終了を変更することで、複数のチャンネルを同時にセグメント化できます。

sleep(1) は個人的なテストのみを目的としており、変更可能です

set_time_limit(0);

$col_title = '' //タイトル
$col_url = '; '; //URL番号
$user_id = 26; //ユーザー番号の取得を開始

//MySQLの事前操作
$mysqli = new mysqli("p:localhost", 'root', '', 'sohutv' ) ;
if ($mysqli->connect_errno) {
 printf("接続失敗: %sn", $mysqli->connect_error);
 exit();
}
$mysqli->set_charset("utf8" ) ;
$sql = "アルバム (ユーザー ID,タイトル,URL) VALUES(?,?,?) に挿入";
$stmt = $mysqli->prepare($sql);
$stmt->bind_param( " sss",$user_id ,$col_title ,$col_url);



//ループキャプチャ
while (true) {
 $url = "http://my.tv.sohu.com/user/a/ playlist/ ta/list.do?userId=".$user_id;
 $temp_html = file_get_contents($url);
 $temp_json = json_decode($temp_html);
 $column_no = $temp_json->{'data'}- > {'count'};

 if ($column_no) {
 //var_dump($temp_json->gt;{'data'});
 $temp_array = $temp_json->{'data'}-> {' list'};

 for($i=0; $i {
 $temp_obj = $temp_array[$i];
 //var_dump($temp_obj);
 $col_title = $temp_obj ->{'title'};
 $col_url = substr($temp_obj->{'url'}, 25, -6);

 $stmt->execute();
 }
 }
 // 1秒スリープ
 sleep(1);
 $user_id++;
}

/*
アクセス方法
http://my.tv.sohu.com/pl/URL番号.shtml
*/

?> ;