找回密码
 立即注册
查看: 388|回复: 1

蓝天采集器开启PHP-CLI(命令行)教程

[复制链接]
匿名
匿名  发表于 2020-12-31 03:32:47 |阅读模式
   



                                                                        相信许多的站长在使用蓝天采集器的时候,开启自动采集时采集没有效果采集会自动中断。
这是一个让人苦脑的事,当然看到这里你就不需要苦恼了。我来一步步教你开启PHP-CLI,让你采集快人一步。
我这里用的宝塔 测试版本5.6:

打开宝塔终端,链接后输入命令:
rm -f /usr/bin/phpln -sf /www/server/php/56/bin/php /usr/bin/php然后测试命令: php -v
如图:

如果你是php7.0或者7.1 把命令里面的56换成70或者71就可以了,其他版本同理。
如图出现php版本信息后面有(cli)就代表成功了,然后我们回到蓝天采集去设置。
把php可执行文件目录复制下:/www/server/php/56/bin/php
填写到我们采集器的设置里面,如图:

然后选择自动采集运行方式,自己去配置自动采集就可以了。
               

相关帖子

回复

使用道具 举报

匿名
匿名  发表于 2020-12-31 03:58:38
采集中断、自动采集无效、图片下载不了</p><p>详见:https://www.srso.cn/fy/657.html</p><p><br></p><p>cli命令模式</p><p>php可执行文件:默认自动识别,识别不了,在linux系统中关闭目录跨站保护,手动输入:可输入环境变量名“php”(需要系统中已配置)或输入可执行文件路径,注意不是php目录,一般windows中文件为“php目录/php.exe”,linux中文件为“php目录/bin/php”</p><p>详见:https://www.srso.cn/fy/248.html</p><p><br></p><p>触发不了采集:</p><p>1、确定php配置是否正确</p><p>2、开启proc_open函数(详见:https://www.srso.cn/fy/103.html)</p><p>3、给web服务器配置执行命令的权限</p><p><br></p><p>页面渲染设置(详见:https://www.srso.cn/fy/93.html)</p><p>谷歌浏览器安装:windows百度下载安装即可,linux请看https://www.srso.cn/fy/93.html</p><p>配置谷歌路径:可输入环境变量名“chrome”(需要系统中已配置),或者输入可执行文件路径:一般windows中文件为“浏览器目录/chrome.exe”,linux中文件为“浏览器目录/bin/google-chrome”,注意:浏览器版本不同可能会导致可执行文件名不同!</p><p><br></p><p>采集规则设置</p><p>手机移动端页面:开启请求头信息,设置UserAgent浏览器标识</p><p>需要登录的页面:开启请求头信息,设置Cookie缓存数据,如何获取cookie:https://jingyan.baidu.com/search ... D%91%E7%AB%99cookie</p><p><br></p><p>采集到的网址没有域名:开启自动补全网址</p><p><br></p><p>规则中的特殊字符识别不了:使用正则规则的时候特殊字符必须使用“”转义才能使用,和正则冲突的字符有:^$.*+|?[]{}()</p><p><br></p><p>页面渲染:使用渲染和不使用时的html源码是不一样的,规则可能不通用!</p><p><br></p><p>浏览器中获取到的xpath在采集器中没有用:可能该xpath的对象是渲染出来的元素,采集器默认只能抓取原始html源码的内容,渲染出来的元素需要开启“页面渲染”功能,或者分析相应的js链接来抓取,使用“测试》分析网页”可以看到采集器实际抓取到的页面</p><p><br></p><p>字段怎么插入内容:添加一个新字段,获取方式选择“字段组合”</p><p><br></p><p>发布设置</p><p>本地cms程序检测不出来:</p><p>1、采集器和cms程序是在同一个网站目录中,可能是不支持您的cms程序,需要在路径结尾中加上“@cms名称”即可识别出插件</p><p>2、采集器和cms程序不在同一网站但在同一服务器中,可能是服务器开启了目录跨站保护,关闭即可</p><p><br></p><p>工具</p><p>错误日志文件太多占用空间:可以在“站点设置”中关闭,后台首页使用“清除缓存”可以清空日志</p><p><br></p><p>插件/应用开发</p><p>应用程序无法访问:应用需要配置伪静态才能使用,配置文件在蓝天采集器根目录:nginx.conf(nginx),.htaccess(apache),web.config(iis)</p><p>函数插件创建后不显示:需要在“云端》已下载》函数插件”中点击开启</p><p><br></p><p>云平台下载的文件去哪了</p><p>在“云端》已下载”中可找到云平台中下载的规则、插件等</p><p>采集规则在 “编辑任务 > 导入规则 > 已下载规则” 中使用</p><p>发布插件在 “任务 > 发布设置 > 本地CMS程序” 中使用</p><p>函数插件在 “任务 > 采集器设置 > 数据处理” 中使用</p><p><br></p><p>第三方如何使用</p><p>开发者安装了“第三方平台”应用,点击“云端》已下载》应用程序》第三方平台”的管理连接,界面中的“应用首页”链接即为您需要提供给用户的平台网址!</p><p>用户在“云端》第三方”中添加开发者提供的平台网址即可在对方平台中下载规则、插件等。</p><p>更多使用教程请看这里:[url=https://www.srso.cn/skycaiji</p]https://www.srso.cn/skycaiji




&#12289;=、
&#12290;=。
&#12296;=〈
&#12297;=〉
&#12298;=《
&#12299;=》
&#12300;=「
&#12301;=」
&#12302;=『
&#12303;=』
&#12304;=【
&#12305;=】
&#12308;=〔
&#12309;=〕
&#65281;=!
&#65288;=(
&#65289;=)
&#65292;=,
&#65294;=.
&#65306;=:
&#65307;=;
&#65311;=?
&#8208;=‐
&#8210;=‒
&#8211;=–
&#8212;=—
&#8213;=―
&#8214;=‖
&#8215;=‗
&#8216;=‘
&#8217;=’
&#8218;=‚
&#8219;=‛
&#8220;=“
&#8221;=”
&#8222;=„
&#8223;=‟
&#8224;=†
&#8225;=‡
&#8226;=•
&#8229;=‥
&#8230;=…
&#8240;=‰
&#8242;=′
&#8243;=″
&#8244;=‴
&#8245;=‵
&#8249;=‹
&#8250;=›
&#8251;=※
&#8252;=‼
&#8254;=‾
&#8260;=⁄
&#8286;=⁞
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

Archiver|手机版|小黑屋|翻墙党

GMT+8, 2026-11-7 00:42 , Processed in 0.035294 second(s), 33 queries .

Powered by Discuz! X3.5

© 2001-2026 Discuz! Team.

快速回复 返回顶部 返回列表