今天优化了链接抓取功能,增加mip网站链接抓取

动态 0
网站在线工具,网站抓取工具
cjl 2020-01-19 10:23:45
回复

根据大大反馈的,有一个站抓取不了链接,然后这边就根据大大反馈的域名,进行了检查,后来发现这个网站是mip的网站,跟我们平时的链接形式不太一样,然后也细想目前市场的这种网站数量也不少,特在昨晚优化了该功能,加入mip链接提取。

提取mip链接,只属于本站的链接,筛选掉垃圾链接和脚本链接。

加强对mip链接的处理速度。

采集mip链接全站。

各项全站链接功能都加入mip识别抓取。

如有更多问题,请在社区或者联系站长进行反馈处理。谢谢!

回帖
  • 消灭零回复
最新评论 Latest comments
大大们,帮看下,网站想改版,有什么好办法.可报价 2614
请问官方有没有官网群呢?有时候想和大大们聊以下都没办法 5329
申请贵站友链。 1821
建议增加微信支付通道 5826
换友联的直接回复 1640
Django框架是当前python语言比较热门的一个框架 6514
【伪原创】自动采集文章兼发布文章,可否加入PBOOTCMS的采集功能 6857
百度站长在添加站点后,提示error":401,"message":"site sid is empty或者推送链接错误 10334
生成sitemap.xml网站地图工具 7984
近期推出的文字合成语音 - 在线文字合成mp3语音文件-在线工具 6448
为什么关键词排名做不上百度首页 6102
python 环境用哪个好 2690
百度站长后台的主动推送中的更新数据接口没有条数? 7547
lmcjl在线工具一直追求用户体验至上 7876
今天优化了链接抓取功能,增加mip网站链接抓取 7719
相关评论 Related comments
自动采集兼发布文章工具之伪原创正在修复 0
推出自动抓取链接,自动推送给百度站长后台 1
站长工具 4
生成sitemap.xml网站地图工具 1
lmcjl在线工具一直追求用户体验至上 0
今天优化了链接抓取功能,增加mip网站链接抓取 0
今天优化了自动写伪原创文章的工具(多篇文章整合成一篇进行伪原创的文章) 1
百度实时推送工具 0
自动抓取链接和自动推送工具升级公告 1
Django框架是当前python语言比较热门的一个框架 0
近期推出的文字合成语音 - 在线文字合成mp3语音文件-在线工具 0
小程序模板消息能力调整通知【官】 0
【懒人工具】升级大礼包!!首先,我不是懒,我是怕懒! 0
小弟一心努力只为追求用户体验,却还是抵挡不住有人想破坏。 4
2019-12-26腾讯的事故,微信公众号后台提示发生错误,连头像链接也瘫痪了 1