ThinkPHP6에서 스파이더 크롤링 로그를 기록하는 방법

다음 thinkphp프레임워크 튜토리얼 칼럼에서는 ThinkPHP 6이 Baidu와 같은 스파이더 크롤링 로그를 기록하는 방법을 소개합니다. 도움이 필요한 친구들에게 도움이 되길 바랍니다!

thinkphp6은 Baidu 스파이더 로그를 기록합니다.

IndexBase와 같은 컨트롤러의 상위 클래스에 다음 코드를 작성합니다. 모든 프런트 엔드 컨트롤러는 이 컨트롤러를 상속합니다.

  public function initialize()
    {
        parent::initialize(); // TODO: Change the autogenerated stub
        if ($this->Config['web_status'] == 0) {  // 判断是否关闭网站
            die('网站已经关闭');
        }
        $this->baiduLog();
    }
    protected function baiduLog()
    {
        $useragent = strtolower($_SERVER['HTTP_USER_AGENT']);
        $url = $this->request->controller() . "/" . $this->request->action();
        $param = input("param.","","htmlspecialchars");
        $url = (string) url($url,$param);
        $ip = get_real_ip();
        $title = "";
        if (strpos($useragent, 'googlebot') !== false){
            $title =  'Google';
        } elseif (strpos($useragent, 'baiduspider') !== false){
            $title =  'Baidu';
        } elseif (strpos($useragent, 'msnbot') !== false){
            $title =  'Bing';
        } elseif (strpos($useragent, 'slurp') !== false){
            $title =  'Yahoo';
        } elseif (strpos($useragent, 'sosospider') !== false){
            $title =  'Soso';
        } elseif (strpos($useragent, 'sogou spider') !== false){
            $title =  'Sogou';
        } elseif (strpos($useragent, 'yodaobot') !== false){
            $title =  'Yodao';
        } elseif (strpos($useragent, 'googlebot') !== false){
            $title =  'Google';
        } elseif (strpos($useragent, 'baiduspider') !== false){
            $title =  'Baidu';
        } else {
//            $title = $useragent; // 不怕数据大的话可以取消注释，记录所有访问日志
        }
        if (!empty($title)) {
            BaiduLog::create(["title"=>$title,"href"=>$url,"ip"=>$ip]);
        }
    }

위는 thinkphp6이 Baidu 스파이더 크롤링 로그를 기록하는 방법입니다.

get_real_ip()

은 고객의 실제 IP를 가져오는 사용자 정의 함수입니다.

추천: "최신 10개 thinkphp 비디오 튜토리얼"

위 내용은 ThinkPHP6에서 스파이더 크롤링 로그를 기록하는 방법의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!