本帖最后由 zizdog 于 2019-6-24 14:38 编辑
今天遇到了一个问题:
采集器开启图片本地化,下载图片是在采集入库之前完成的。
我在写入数据库之前需要做判断,有些不满足条件内容是不需要采集的。但这时所有图片都被下载下来了,占用了大量空间。
希望实现:让图片本地化在判断之后呢,如果需要采集就下载,如果不需要就不本地化。
实测,昨天采集内容500篇,服务器下载了2000张图片,而且无法对照删除。十分浪费资源啊。
判断用数据处理》条件判断 就不会下载图片
您好大佬,这个条件判断我真的不会用啊,您能具体说一下吗。
我的理解是,在 字段列表-》缩略图字段-》数据处理-〉条件判断-》满足条件采集(还是,不满足不采集)
然后具体的逻辑怎么写呢,因为这里看不到调用其他字段,我是无药判断:存在“下载链接”字段 则 下载采集缩略图。
只能过滤整条数据,满足条件就采,不满足就跳过,你这种只是判断下载图片只能用自定义插件实现(自定义插件可以手动操作下载图片)
好明白了,原来这个条件判断是如此的好用,实用。太棒了!!!
- 1163K网站系统短信通知配置教程(S版)
- 2蓝天采集器无法安装怎么回事???
- 3PbootCMS后台登录验证码看不清怎么回事?
- 4163K网站系统微信支付、支付宝支付,实时原路退款,设置教程(X版)
- 5蓝天采集器Wordpress文章远程免登录发布接口插件操作教程
- 6163K网站系统升S版前注意事项和准备工作
- 7蓝天采集器在测试爬取字段的时候,一直在转圈
- 8蓝天采集器文章采集示例教程
- 9蓝天采集器为啥我的不能自动采集,有没有和我遇到同样问题的?
- 10蓝天采集器请问像问答这种模块怎么采集?
- 11蓝天采集器内容匹配换行问题
- 12火车头采集器FTP连接出现530 Login authentication failedvoid 错误解决办法
- 13163K网站系统阿里短信状态全部是发送中的解决办法
- 14蓝天采集器采集出现代码,什么意思
- 15163K网站系统图片系统+七牛云存储配置教程
- 16163K网站系统微信支付配置教程(S版)
- 17蓝天采集器https的网站不支持加载云平台
- 18蓝天采集器建议增加关键字TAG提取
- 19蓝天采集器图片本地化的功能,目前貌似没用?
- 20网站SEO优化100条经验解答分享76-100
-
蓝天采集器数据库发布,数据库连接测试···
数据库发布,数据库连接测试成功,点数据表是空的,获取不到数据表 下个版本修复,临时解决http://bbs.skycaiji.com/forum.ph ... &extra=page%3D1 什么时候发布新版本?期待……
-
蓝天采集器问下管理,数据处理 有没有···
汉字转拼音 暂不支持
-
163K网站系统自动升级常见报错检查···
在使用自动升级过程 ,可能会遇到一些报错,这里列举一些常见问题的检查解决办法 一 、 进度为1%时 提示 升级升级exe失败....。升级终止 0>升级服务没有启动 在服务器 开始 运行中 输入 services.msc 回车 后 ···
-
蓝天采集器入数据库日期如何操作?
如数据库的日期如何填写? 采集器添加一个时间字段,绑定到数据库中
-
蓝天采集器后台提示:您的网站开启了目···
登录蓝天采集器后台提示:您的网站开启了目录访问限制(open_basedir),受保护的站点目录:/www/wwwroot/190.225.155、/tmp/,这会影响到站点目录外的文件读写和CMS程序的访问。如果您未更改图片保存目录(站点···