在之前的一篇文章中，我提到了 AutoBangumi 搭建动画媒体库。不过需要一台永远开机的电脑，VPS、树莓派、NAS等，可能还需要做内网穿透。如果只想在一台电脑上运行，可以直接在本地部署。 工作原理是获取蜜柑计划的RSS的番剧更新推送，使用 AutoBangumi 的管理番剧（解析、过滤、下载、重命名、推送通知），AutoBangumi 连接 qBittorrent 的 Web UI，发送下载请求。最后通过弹弹Play播放。 本地部署 AutoBangumi Linux 上 Docker 部署可能是个好方案，但…
川上悠治1995年毕业，他是私立大学毕业。他的老家是兵库县，离大阪和京都很近。但他打算报考东京的私立大学，竞争实在太激烈。第一年的偏差值只够次一点的公立大学。高中在无止境的补习班中度过，他不想将就。准备复读一年中，终于符合智力和服从性的筛选。 川上君入学那年大流感还没结束。对于川上君，除了天灾之外，他能感受的影响是另一种意味。虽然延迟开学了，但是大学生活是美好的，新鲜的，自由的。川上的学校是在离市区很远的地方。这里所有的配套都是服务大学，真正的“大学城”。但是在本就高耸象牙塔外又围上了一道厚厚的障壁。 因为大流感的…
有些 Javascript 生成的动态内容，没有办法通过网页源代码查看。因为解析出的网页内容只是静态页面，不包含动态元素。 目前最新的前端技术比如服务器端渲染（SSR）、单页面应用（SPA）等，都是看不到静态的网页源码的。这种网页只能通过访问网站，使用浏览器开发者工具即时查看显示的元素。 Python可以使用Selenium模拟浏览器行为加载页面，就可以获得网页的实际显示元素。 下载浏览器驱动 搜索浏览器名字 + webdriver ，是一个单文件程序。下载后扔到C:\Users\user\AppData\Loca…
这次要从一个贴图论坛下载赛马娘tag的所有色图，预计要下载6700张图片。 查看网页结构 从网站在查询时的url可以看出网站是PHP搭建的。经过测试发现，页面的每张图片的缩略图链接，稍微修改一下就是完整的图片链接。 查看了分页逻辑的，看到JS代码是手动计算分页。每页显示42张图片，将总数除以42得到页数。可以解析每一页分页的图片链接，点击进去帖子里面。然后获取到图片地址。 使用公开的API 要处理近6700张图片，每页有42张图，就要处理160页面，解析帖子链接。然后从6700个帖子链接中获取图片地址。 这恐怕是个…
查看网页结构 找到了一个公网的网盘，他有存我原来关注过的微博博主的相片。我想把这些图片全部下载下来。 首先来看一下图片的路径放在哪里了。右键检查，看到了这是个有序列表元素。里面<a>标签就是图片的链接了，点一下列表就会跳转到图片。这个列表显示的<img>是图片的缩略图。 实际查看了网页的Html结构，发现实际列表元素并不是ul无序列表或者li有序列表。而是td表格。 图片链接在a标签里，而a标签是td标签里。我们先找出全部的td标签，然后再从中找出a标签。然后打印出a标签的href属性，获得…
要将原来的博客数据迁移到新建的表上。表结构不一样，需要一条一条的重新插入。 使用pymysql模块，Python自动批量将数据迁移到不同表结构的新表上。 #导入mysql数据库驱动 import pymysql #建立与数据库的连接 conn=pymysql.connect(host='localhost',user='root',password='123456789',database='blog_ingke_net') #创建游标 cursor=conn.cursor() sql1='SELECT ID, p…
国内的评分网站很有意思，并不能客观的反映观众的喜欢，更不能作为评判作品的优秀好坏的标准。影片打分网站大体上有视频网站和影评网站两种。 视频网站评分最大的问题就是评分虚高，因为影片版权买下了，完全的利益关联者，再臭底边也低不到哪里去。 而影评网站其实就是用户的社区，影评网站打分的问题更有意思。从众心理和光环效应在这里尤其的显著。 高分赢者通吃 评分高的，大家都说好的，作品的品质是有保障的。事实往往不是这样。 通常影评类网站都有一个电影、电视剧的TOP排行榜。前几名的影片在时间的流逝中，会与后面的作品逐渐拉开差距。高分…
网页发布不更新一般是这么几个问题，浏览器缓存，CDN缓存，Nginx缓存，Apache\Tomcat缓存，Redis缓存，忘记打包静态资源了。 解释型语言构建的网站 PHP、Python、Node.js、Ruby On Rails等 如果是博客是WordPress，就像我的博客，是PHP编写的，解释型语言是不需要编译静态资源，通常修改了php页面，浏览器应该更新了。 就要排查这几个方面： 1.浏览器启用了HTTP缓存，Ctrl + F5 强制刷新。网站更新了，页面没更新，大多数都是缓存的问题。 2.反代服务器Ngi…
把js代码放在文章页面里，会在网页加载完毕时，自动生成一个目录。 需要修改lightgallery为自己文章的所在<div>的的id即可。 <!--引用JQuery--> <script src="http://ajax.aspnetcdn.com/ajax/jQuery/jquery-1.8.0.js"> </script> <!--生成文章页目录--> <script type='text/javascript'> window.onloa…
