发表于 分类于 阅读次数：
本文字数： 184 阅读时长 ≈ 1 分钟

第四周年博客最大的变化就是使用了自己开发的个人数据中心系统进行博客后台数据管理，因此也将侧栏中使用多年的clustrmaps下线，使页面加载速度有了大幅提升。 在过去一年中一共发布了23篇文章。主要集中于22年十一月份到十二月份发布的个人数据中心系列文章。该文同步发布于少数派，并被编辑推荐至首页。 ...

阅读全文 »

发表于 更新于 分类于 ， 阅读次数：
本文字数： 1,866 阅读时长 ≈ 2 分钟

  研一的时候就和室友约好要抽时间去武隆玩一趟，没想到研三要毕业了才付诸实践。

阅读全文 »

发表于 分类于 ， ， 阅读次数：
本文字数： 1,696 阅读时长 ≈ 2 分钟

  由于一些数据采集任务需要访问外网API接口，在服务器没有配置代理的情况下无法正常采集。同时，由于我买的服务器内存只有2G，服务部署多了以后服务器资源压力比较大。所以将一部分数据采集和Web接口服务迁移到腾讯云函数进行部署，使用了半年多以后感觉还是挺不错的。

阅读全文 »

发表于 更新于 分类于 阅读次数：
本文字数： 1,942 阅读时长 ≈ 2 分钟

  数据源为研究生院官网公布的复试名单及拟录取名单，因此统计范围为上线同学成绩。
  学校公布的原文件都为PDF，需要将其转换为Excel表格，去除多余的表头。其中部分数据表字段不完整，仅使用单张数据表难以完成分析，需要使用python代码将多张表进行键值连接来联合查询。由于18、19年的数据相较20年以后差距较大，参考意义不大，本文仅对20年及以后的数据进行统计。

阅读全文 »

发表于 更新于 分类于 ， ， 阅读次数：
本文字数： 2,796 阅读时长 ≈ 3 分钟

更新于20250425：之前由于api接口更新，导致该方案失效。感谢Colin提供的参考代码，帮我把问题修复，现在又可以使用了！Colin的代码要比我的更为成熟完善一些，github链接已附在文章末尾参考资料中，欢迎大家学习Star。

  Switch是我目前的主力游戏平台，在实现了Steam游戏数据采集以后，一直有实现Switch数据采集的执念。相较于可以使用Steam官方的API接口，任天堂官方并没有向普通用户开放接口，使得Switch游戏数据的获取极为困难。但因为Jump等一些应用平台上都上线了Switch账户绑定与游戏时长统计的功能，使我相信一定是有办法可以实现Switch数据采集的。
  起初想在任天堂官网找到相关的开发文档，但是并没有收获，反倒是发现目前网上的一些可行方案都是社区通过逆向工程解析出的Web API，不过流程相当复杂。好在最终找到了一篇基于python实现的文章，得以将流程跑通。
  因为我都是使用日服账号进行游戏，并开通了任天堂会员以同步游戏数据到云服务器，所以我的所有游玩记录都集中在日服账号上。本文计划获取自己Switch日服账户中所有游戏的信息以及各时段的游玩时长记录，并存储到个人数据中心当中。

阅读全文 »

发表于 更新于 分类于 阅读次数：
本文字数： 823 阅读时长 ≈ 1 分钟

最近一年花了很多时间来搭建自己的数据体系，正好看到少数派推的一篇关于年末数据报告的文章，于是也统计回顾一下我过去一年的数据。 影视 今年观看电影、动漫明显下降，电视剧上升较多，番剧大多都是看的以前老番的续集。 今年最喜欢的电影： 入殓师 子弹列车 今年最喜欢的电视剧： 绝命律师 第六季 老友记...

阅读全文 »

发表于 更新于 分类于 ， ， 阅读次数：
本文字数： 1,218 阅读时长 ≈ 2 分钟

本文承接个人数据中心解决方案，补全系统架构中的最后一个重要模块——数据备份模块。 即使再稳定的服务器也难免会遇到出问题的时候，所以异地容灾备份不可或缺。我的备份方案是每天将数据库中的重要数据表全量导出，然后备份到坚果云上。同样的思路也可以备份到不同的云盘或本地设备。 1234graph LR...

阅读全文 »
0%