关键字:爬虫
  • redis 如何设置过期时间
    之前笔者的网站就用上了redis,但是并未注意给数据添加过期时间的,时间一长通过vscode的redis插件看到缓存的数据有两万多条,很多时候都是爬虫访问导致的,因为目前的缓存策略是如果访问某篇文章的时候优先从redis中取,如果re ...
  • 友盟U-Web将于2022年5月10日起不再提供免费的网站统计分析服务
    今天通过友盟统计查看网站数据时发现上方有通知,点击去一看发现友盟在5月份将停止免费服务,不胜唏嘘。本来之前网站一直使用的百度统计,但是为了避免对数据造成不真实性,因为笔者发现使用百度统计后在站长工具查询网站信息时能比较准 ...
  • 一些常见的搜索引擎爬虫
    对于个人网站来说,爬虫是很重要的的,爬虫可以将你网站的内容收录从而提升网站曝光率。这里爬虫指的就是搜索引擎,因为搜索引擎本身也是爬虫。</s ...
  • 如何给网站添加查看更多的功能
    现在我们可以看到很多网站都有一个查看更多的功能,需要点击这个按钮才能看到完整的功能,究其原因还是网站想留住用户,通过这个功能来跟用户产生互动。同时这个功能还能防止一些爬虫无节制的爬取资源,比如一些 ...
  • 网站的文章的id改为uuid
    最近更新了网站的一些功能,主要还是优化,发现之前的实现的功能有些缺陷。自增id改为uuid:虽然mysql官方支持将主键设置为自增id,但是对于数据量不大的网站来说用uuid也一样,而且对于爬虫采 ...
  • 精读《前后端渲染之争》
    本期精读的文章是:Here's why Client ...
  • HTML5详解
    HTML5的介绍 Web 技术发展时间线 1991 HTML 1994 HTML2 ...
  • web前端自动化测试及爬虫利器puppeteer介绍
    web前端自动化测试及爬虫利器puppeteer介绍 Intro Chrome59(linux、macos)、 Chrome60(windows)之 ...
  • 前端面试之css篇
    CSS面试题答案Doctype作用是什么?严格模式与混杂模式分别是如何触发这两种模式的,区分它们有何意义?(1)&lt;!DOCTYPE&gt; 声明位于文档中的最前面,处于&lt;html&gt;标签之前。告知浏 ...
  • 前端面试题及答案(四)
    html部分说说你对语义化的理解?1,去掉或者丢失样式的时候能够让页面呈现出清晰的结构2,有利于SEO:和搜索引擎建立良好沟通,有助于爬虫抓取 ...

暂无数据