有的网址,一直都是一样的,只是里面的数据会变,比如pubg的新浪微博,这是微博的json数据 https://m.weibo.cn/profile/info?uid=6037906900 这网址一直不会变,但里面的数据就会变,如果可以单独指定此任务网址允许重复采集(采集了此网址只要不入库已采集网址就可以了),或者允许在网址后面加个随机数的参数,比如https://m.weibo.cn/profile/info?uid=6037906900&rand=rand() 就象显示验证码一样,加一个随机数就每次不一样,采集的时候就是网址不重复的
另外数据处理希望添加采集的数据进行base64等加密处理,因为有些系统的内容不是明白保存的,使用了base64等加密保存,采集直接入库是明文!
还有你们的论坛注册不方便,即然云注册了,登录进来还要注册论坛用户,为什么注册的时候不直接注册论坛帐号?最不可理解的,是注册的时候用邮箱注册了,发验证码到邮箱了,说明邮箱真实可用,登录进来再注册论坛帐号,居然还要验证邮箱,论坛可以设置去掉邮箱验证激活,这样操作重复了!
好的,感谢反馈,后续会改善
- 1蓝天采集器json分类信息采集规则教程
- 2pbootcms类型站点怎么查看图片、网页元素的路径和大小和颜色
- 3蓝天采集器关键json采集的问题
- 4蓝天采集器采集到的数据是JSON数据,怎么转化成正常可展示的数据
- 5蓝天采集器替换功能不正常 BUG反馈
- 6蓝天采集器采集两个就停下不动了
- 7163K网站系统微信小程序注册流程与代码发布教程
- 8极致cms火车头采集内容带评论入库操作教程
- 9蓝天采集器关于自动采集 多个任务
- 10zblog蓝天采集器发布插件带评论置顶标签
- 11蓝天采集器这种页面不能采集吗
- 12蓝天采集器如何简单只抓取列表页中的标题?
- 13阿里云ESC服务器linux系统CentOS7.6安装SSL工具FinalShell教程
- 14蓝天采集器dedecms发布问题
- 15各大平台站长推送平台简介
- 16蓝天采集器能否针对图片进行,其他保存路径设置处理
- 17腾讯云winds服务器挂载数据盘在系统桌面教程
- 18网站的外链资源圈如何来建立
- 19蓝天采集器pbootcms文章 (PbootDemoSkycaiji)插件如何设置调用整站目录
- 20163K网站系统提现和结算出错需检查的项目
-
阿里云ESC服务器linux系统Ce···
FinalShell是目前使用人数非常多的一款远程连接终端管理器,FinalShell远程连接以后是可视化浏览,很直观的可以看到服务器的运行情况,内存占用等;宝塔也有远程连接终端工具,但是不推荐使用,免费的不好用,收费版价格上千,对于一般的···
-
SEO月推广运维服务参考
一个好的SEO学习人员应该给自己制定一个SEO计划表B2B商铺第一个:<一呼百应>商铺 http://www.youboy.com/第二个:<95供求网>商铺&n···
-
蓝天采集器数据库发布,数据库连接测试···
数据库发布,数据库连接测试成功,点数据表是空的,获取不到数据表 下个版本修复,临时解决http://bbs.skycaiji.com/forum.ph ... &extra=page%3D1 什么时候发布新版本?期待……
-
163K网站系统结算/提现自动支付到···
本教程帮助您实现:用户申请好店结算、分销提现、余额提现经后台审批后,自动从您的微信商户企业零钱中打款支付到用户的微信零钱中<温馨提示:本教程适用于您已经拥有微信公众号支付、支付宝开放平台支付的权限;且全站已经部署HTTPS的前提下&g···
-
集团/公司品牌营销网站建设方案
作为一个集团公司企业来说,企业官方网站是必须要拥有的;企业官方网站核心作用:展示公司形象和宣传公司的产品或服务新闻动态等。做一个企业官网如何让自己公司形象得到更好宣传和推广就显得尤为的重要,众多的网络公司中选择一家有责任心,踏实做事情的公司···