php的curl多线程采集类

<?php
<?php
set_time_limit(0);
$urls = array('http://www.baidu.com','http://www.php.cn',);
$handle = curl_multi_init();
$curls = array();
foreach ($urls as $k=>$url)
{
$curls[$k] = add_handle($handle, $url);
}
function add_handle(& $handle, $url)
{
$curl = curl_init();
curl_setopt($curl, CURLOPT_URL, $url);
curl_setopt($curl, CURLOPT_HEADER, '');
curl_setopt($curl,CURLOPT_USERAGENT,"Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; .NET CLR 1.1.4322; .NET CLR 2.0.50727)");       
curl_setopt($curl, CURLOPT_RETURNTRANSFER, 1);
curl_multi_add_handle($handle, $curl);
return $curl;
}

这是一个php的curl多线程采集类，需要的朋友可以下载使用。

相关文章

如何使用自连接从自引用表中检索数据？

13 Jan 2025

了解 SELF JOIN 及其应用程序在数据库管理领域中，SELF JOIN 是一种特殊类型的联接操作，它允许...

Oracle 数据库现在支持布尔数据类型吗？

12 Jan 2025

Oracle 数据库中布尔数据类型的可用性与其他 RDBMS（例如提供 BIT 数据类型的 Microsoft SQL Server）不同，Oracle 数据库...

在 Joomla 中连接第三方 PHP 库

28 Dec 2024

PHP 库很方便，因为可以从应用程序中的任何位置访问它们：从插件、组件模型、模块等。如果有人已经解决了类似的问题并将其设计为库（甚至更新了它），那就有意义了

为什么要从 Python 中的'object”继承：一个类继承问题

24 Dec 2024

了解 Python 类继承在 Python 中，类可以从其他类继承，这使它们能够访问父类的属性并...

oracle数据库中常用的段有哪些

04 Mar 2025

本文研究了Oracle数据库细分类型（数据，索引，回滚，临时），其性能含义和管理。 它强调根据工作量和数据特征选择适当的段类型，以提高最佳效率

为什么需要类型保护？探索不同类型及其用例

11 Nov 2024

为什么需要类型保护？探索不同类型及其用例 在 TypeScript 中，类型防护在使代码库更加可靠、对开发人员更友好方面发挥着重要作用。它们允许开发人员缩小范围，从而帮助确保类型安全

See all articles