首页
关于
优乐购
开发
生活
大事记
导航
关键字:爬虫
警告!OpenAI爬虫正在抓取我的网站
今天从网站的日志中无意发现了gpt的爬虫,没错,就是openai的那个gpt。不确定是真的,但是从爬虫的useragent来看是它,虽然这个请求头是可以伪造的,但是姑且认为它是真的吧。如果你用过chatgpt这一类聊天工 ...
分类:
阅读:210
发布时间:2025-12-29
最终决定还是将网站的百度广告去掉
网站的百度广告挂了应该有好几年了,当初想着是蚊子再小也是肉,有一点算一点,刚上线广告的时候每个月还有点收益,访问量跟点击量或多或少都有一些,到后面就几乎就没有了,收益到目前为止少得可怜,因为没有实名认证,所以收益一直在账户上。 ...
分类:
阅读:290
发布时间:2025-12-07
如何整治各种网络爬虫(比如SemrushBot)
最近一段时间网站的访问量一直有异常,具体的表现就是访问量一直很大,但是uv跟pv却很低,这种情况大概率就是爬虫惹的祸,爬虫会不停的爬取接口数据,而不需要通过访问页面,由于一般的统计插件都是需要在页面加载完成后才进行统计的,所以就导致数 ...
分类:
阅读:807
发布时间:2025-12-02
《AJAX与服务器端渲染SSR:一段简短的技术旅程》
编程之旅在技术领域,常出现多元化的技术观点与发展趋势。随着前端与后端开发的分离 ...
分类:
阅读:825
发布时间:2024-09-25
nuxtWebPlus更新日志
有好长一段时间没有更新网站内容了,导致侧边栏的推荐阅读数量都少于十条了,当初设计推荐阅读这个功能的时候就是只查一个月内的10条数据,也是想逼着自己更新一些文章,使得推荐阅读好看一些。但是现实的情况永远是复杂的,人总有懒惰 ...
分类:
阅读:574
发布时间:2024-05-19
网站的内容阅读性很差怎么办?
大家好我是图恩,建站初期由于网站缺乏内容但又想要更快的获得流量的时候,就写了一个python爬虫工具每天从其他网站爬取内容然后发布到自己的网站,爬虫运行的很好,内容也如期发布,但是忽略了一个问题,就是爬取的细节没有处理好,内容不分段, ...
分类:
阅读:557
发布时间:2023-04-22
网站指定是被爬虫爬了
大家好我是图恩,今天登录网站后台发现今天的访问量为七万四千多,这个访问量指所有文章的访问量,具体是指每次文章接口被调用访问量会+1,所以瞬间感觉到网站应该是被爬了,虽然平常也有一些爬虫在爬,但是平常的访问量是保持在七千左右,今天的访问 ...
分类:
阅读:624
发布时间:2022-08-16
从日志看到网站在被人使用php攻击
最近升级了宝塔面板,看到新增了一个安全分析的功能,可以看到当前站点的日志分析情况。从扫描结果来看,分xss、sql、php攻击等类型,简单看了一些这几种类型的分析,xss基本上都是一些正常数据,扫描日志也大致正常,只有p ...
分类:
阅读:696
发布时间:2022-07-26
爬虫太多添加robots文件来禁止一些爬虫访问网站
自从网站的统计插件升级后,每天的uv/pv数据直线下降,但是每天的访问量却没有变化,访问量笔者采用的是统计每篇文章接口的调用量,所有有理由怀疑是爬虫导致的。之前网站一直都是没有做任何限制的,但是从某一天后发现网站运行比较 ...
分类:
阅读:655
发布时间:2022-07-17
更新统计插件让网站的统计功能更强大效果更好
这个周末更新了一些网站的功能,主要是更新后台管理首页统计数据模块功能。更新这个模块的原因主要是更新了统计插件,之前引入的统计插件会经常获取不到数据,还会记录一些无效信息,经过这次的优化,功能精简许多。< ...
分类:
阅读:639
发布时间:2022-07-03
暂无数据
1
2
3
专题推荐
从零搭建博客
前端开发
javascript教程
vue3+ts教程
推荐阅读
1
如何整治各种网络爬虫(比如SemrushBot)
阅读:807
发布时间:2025-12-02 22:35:29
2
umami统计:适合个人网站的专业统计工具
阅读:785
发布时间:2025-12-11 22:10:45
3
CleanAds:百度、Bing、CSDN 广告清理插件
阅读:570
发布时间:2025-10-10 21:19:32
4
如何将Node.js REST API转换为AI专用的MCP服务器
阅读:429
发布时间:2025-12-27 23:56:12
5
利用AI自动发布文章效果如何?
阅读:378
发布时间:2025-11-30 21:21:53
6
2025年国庆回家行程记录
阅读:368
发布时间:2025-10-09 22:25:15
7
如何理解 JavaScript 中的事件循环(Event Loop)?
阅读:346
发布时间:2025-11-26 16:00:15
8
Vue3中如何正确使用`ref`和`reactive`来声明响应式数据,它们有什么区别?
阅读:328
发布时间:2025-11-20 11:00:19
9
JavaScript 中的事件循环(Event Loop)是如何工作的?
阅读:321
发布时间:2025-11-25 23:00:11
10
最终决定还是将网站的百度广告去掉
阅读:290
发布时间:2025-12-07 22:41:19