关于RSS/FEED抓取不到的处理方法

支付宝内搜索 9155838 即可领现金红包 每天都能领哦

19:10:51
刚刚用FeedDemon添加一些订阅的时候,显示:

无法定位 Feed。 如果这个网站包含 Feed,那么这个 Feed 可能无效或无法被自动发现。

但是我用浏览器的时候明明可以直接打开的呀,然后用curl测试了一下,果然有猫腻,要么直接返回403禁止访问,要么就返回一个过渡页面,需要cookies才能正常访问:
某些feed不能直接访问

如果不用feed,而用手动去查看博友的新文章真心有点累,之前我就是那样手动一个一个去看,好多都是一个多星期没更新,次次跑空,后来也学聪明了,用本机电脑FeedDemon客户端去看,虽然那个FeedDemon版本已经是我修改过的版本,解决了很多不能博客获取feed失败的问题,但没想到还是有获取不到的。

既然获取不到,要么就放弃订阅该博客,要么就想办法解决了,当然改FeedDemon是不太可能了,只能另辟蹊径!

构想,先用工具或者写个php,抓到本地,我再从本地去获取,貌似用php简单点,就用php吧。

折腾两下搞定:
搞定不能访问的feed

订阅的时候订阅地址只要填本地地址即可:
feed订阅成功!

其实蛮简单的,目前测试这两个站问题解决,其他更多的还有待测试。

我个人认为rss、feed不应该这样粗暴的限制,rss输出是一种最起码的博客精神,当然也不能完全怪博主,只能说是现在的不良人士太多了,要么疯狂扫你的feed,拿去洗稿,要么就直接通过rss直接采集做它的垃圾站,无耻之极!在这种情况下导致部分博主不得不作出下下策直接限制。

但其实可以有针对性的限制,比如限制按频率,或严重的封IP,或封禁明显有问题的来源等等。

题外话:这两天不知道为啥,又回到高考那几天的状态了,真是衰!

推荐文章

已有 23 条评论
  1. 响石潭

    高考那几天的状态,时刻紧绷着哇

    响石潭 回复
    1. xylx

      @响石潭

      是的,这样的感觉不好受呐。

      xylx 回复
  2. 猫叔

    订不到的我全部都存书签里了,想起来就点一下看看,想不起来我也没办法了。

    猫叔 回复
    1. xylx

      @猫叔

      我发现你,波哥,大鸟,奶爸这些人很多共同点啊。好多方面都是

      xylx 回复
      1. 猫叔

        @xylx

        快来罗列罗列!

        猫叔 回复
  3. 老蒋

    你再试试FeedDemon是否可以订阅

    老蒋 回复
    1. xylx

      @老蒋

      仍然订阅不了,还是提示:无法定位 Feed。 如果这个网站包含 Feed,那么这个 Feed 可能无效或无法被自动发现。
      没事,我自己已搞定。

      xylx 回复
  4. 张波博客

    我也遇到有些博客订阅不到,只能保存到书签里了!

    张波博客 回复
    1. xylx

      @张波博客

      你比我聪明,会融会贯通,我只会死磕

      xylx 回复
  5. 霭客溪主

    看来,有技术真的可以为所欲为。

    霭客溪主 回复
  6. 石樱灯笼

    需要认证才能访问的RSS,我如果遇到这种,就直接取消订阅了。

    石樱灯笼 回复
    1. xylx

      @石樱灯笼

      其实你这样挺好的,比较干脆。我总有点“舍不得”

      xylx 回复
  7. Action

    用过wordpress官方的app来订阅网站,体验一般般,博主有没有好用的rss订阅客户端推荐?

    Action 回复
    1. 执迷不悟

      @Action

      http://blog.dngz.net/rssfeeddemon.htm

      博主一早就给出了解决方案,目前我在使用中,感觉非常好用。这里要感谢一下博主的无私分享!

      执迷不悟 回复
      1. Action

        @执迷不悟

        谢谢啦

        Action 回复
  8. 征稿网

    可是我的feed因为插件原因不能获取

    征稿网 回复
    1. xylx

      @征稿网

      那你要想办法处理好一下,玩博客没feed是很不友好的。

      xylx 回复
  9. 哥斯拉

    博主厉害,技术范

    哥斯拉 回复
    1. xylx

      @哥斯拉

      技术菜鸟,只是比较喜欢折腾

      xylx 回复
  10. wordpress建站吧

    感觉还有好多人在用feeder呢

    wordpress建站吧 回复
  11. 行吟游子

    我在用inoreader,感觉还好

    行吟游子 回复
  12. 小石

    我同上,也是看浏览器书签2333

    小石 回复
  13. Sam.Z

    我在公司看不到你博客的图片,晚点回去看看。我的RSS还是设置的全文,反正没什么人看也就懒得去做一些限制了。

    Sam.Z 回复
发表新评论