Diary

2025/09/07 10:06 有点感冒，昨天中午在将军二园睡的可能有点着凉，今天早上嗓子就有点不舒服了，但是现在看起来还好，不知道能不能扛得住这次的感冒，不要继续恶化演变了。 昨天又是接送的一天，下午送了二小姐去上了英语，在万象城休息了会儿，然后再去接她。晚上一起去买了电瓶车，这次买了辆爱玛的电瓶车，也是在电瓶车新新国标出来之前，真不知道要把电瓶车变成什么样才肯罢休。上完牌，然后带着二小姐一起去吃了烧烤，顺便在室外看了看扬州和南通的苏超比赛。 这场比赛有点沉闷，一直都互相撬不开对方的大门，而且这场比赛的上座率也不高，偌大的体育场在最后散场的时候看到了观众席，可能只有30%的上座率。可能扬州人民已经对苏超散去了热度，后面比赛的整体走向估计也就是那几个拥有流量的城市的狂欢了。比赛的后几名，特别是常州，在后面的淘汰赛二阶段，应该也不能带来更多的热度了，下面就看这个被各方围剿的文旅项目能不能继续顶住压力，通过其他的方法把这波流量继续保持住，让所有的队伍都能继续参与起来，创造更多的话题度吧！可能互联网经济的时代，一切都如昙花一现，都要被算法所支配，如果真的是这样，那也真的是比较可悲了。 然后，早上又研究了下家里的网络，主要的问题是出在了入户的那台家庭网关上，连接的设备一多起来，网关上的DNS服务就响应非常慢了，然后给感觉就是整体的上午速度很慢，一旦跳过这个DNS，就一切速度都很正常了。目前暂时没有找到办法直接推外网的DNS到设备上，只能每个设备上进行调整，另外外挂的路由器因为打印机和设备间组网的问题，也通过二层进行了互联，这就导致所有的出网压力全部在家庭网关上，现在就主要看，家庭网关的DHCP服务上，能不能把外网的DNS直接推到设备上了。 最后，就是一直使用的Unidays，已经没有办法通过验证了，网站的CORS验证没有办法顺利通过，和ChatGPT的处理方式一样，更换了IP地址也没有办法解决，之前是用的Cloudflare的vless代理通过的验证，现在这个途径也被CF给封锁了，可能就要通过整体路由的引入来解决这个问题了，这就略微有些麻烦了。但是后面可以继续尝试一下。 2025/09/07 15:01 家庭网关的root权限目前折腾了好久，用了mips的交叉工具链编译也没有成功。可能要改一下思路，把家庭网关改成桥接模式，通过无线路由器的路由模式进行拨号然后连接上网。这个理论上可以解决拨号的问题，但是不知道能不能解决DNS能力不足的情况。等回去后再去研究一下。 稍微记录一下这个过程： # 检查系统架构 uname -m # 安装mips交叉工具编译器 apt install gcc-mips-linux-gnu # 编译生成MIPS架构的可执行文件 mips-linux-gnu-gcc -static -O2 rootshell.c -o rootshell.mips # 检查文件情况 file rootshell.mips > rootshell.mips: ELF 32-bit MSB executable, MIPS, MIPS32 rel2 version 1 (SYSV), statically linked, BuildID[sha1]=a97e808d04ab3dff3431442c35f10f52dd3e282b, for GNU/Linux 3.2.0, not stripped

2025/09/06 07:53 今天早上有一场陇剑杯，从昨天测试环境的题目来看，题目的难度会相当高。可能基本上没有什么得分的可能。但是还是需要努力的参与一下。 比赛网址：https://www.longjiancup.cn/ ，用户名是手机号码，通过短信验证码登录。 果然，第一关都搞不定，只能看看理论题目了。不过理论题就是拼AI了。

2025/09/05 07:48 还是在地铁站内，昨天把招聘信息的爬虫给处理完了，一直到晚上才把所有的企业给全部抓完了，早上草草看了一眼结果，结果应该还是勉强可以接受的，能够有少量的准确信息。当然，由于是大模型做的分析，里面的正确率不能保证100%，但是这个流程应该可以了。后面改进的方向就是一个是抓取搜索结果可以不依赖于接口，可以自行写一个百度或者微信搜狗（用于搜索微信公众号）的接口。另外一个就是可以研究一下如何模拟登录和交互的步骤，让这个的能力扩展开来。 项目，还是要亲手去做，才会有新的能力学习到，比如python的流式输出，比如ollama的ndjson的输出解析等等。 后面有几个项目，一个是基于文件hash值的文件整理功能，还有的忘记了，后面想到之后及时记录。对了，还有markdown文件的解析和翻译。 另外，最近两个娃对我的感觉，让我也感觉到不适，也不知道是什么原因，也可能是我自己的感受有问题，感觉真的现在没有什么交流了，这种感觉不大好。还是要想办法扭转下。

2025/09/03 07:44 地铁上了，最近两个小姐都到学校比较早，挺好的，我也有充裕的时间坐地铁去上班。 今天是9月3日抗战胜利纪念日的阅兵，也要集中观看阅兵仪式，也是国家展现实力，扬国威的时候。 昨天在移动硬盘里找到了星际争霸的游戏，突然发现里面还是有点东西，这是一个有音乐的版本，配合原来下载的版本，现在家里的游戏已经有了背景音乐，还是挺带感的，就是战役打完之后还是会有点小问题，会奔溃，但是已经挺好的啦。 今天要把爬虫的那个再处理一下，有了大模型之后，确实还是很方便的，可以少很多不必要的麻烦去分析网页的固定结构，利用大模型能力可以很快的解析网页内容。后面看看家里的小参数模型是不是也有同样的效果。 2025/09/03 13:47 迷迷糊糊睡了个午觉，然后发现已经被拉黑了，也不知道是什么意思，也不知道想要怎么收场，就感觉有点不大对劲，然后发现确实和自己想的一样，先这样吧，太累了…… 单位这里的布鞋也坏了，10块钱一双的鞋子好像没有必要再去换鞋垫了，就再买两双布鞋吧，可以换换布鞋了，也不能老是用些坏的，这双布鞋也确实陪伴了好久了。 看来确实要好好检讨一下自己，也不知道是怎么的，谁看我都不顺眼，可能还是适合养只阿猫或者阿狗，人可能我真的没法打好交道。 2025/09/03 18:21 折腾了半天的ChatGPT，结果却是IP地址被CDN给通过奇怪的方式给封了，换了个出口地址之后就一切正常了……

2023/05/08 17:09 昨天又看了下之前爬漫画的程序，程序太久不用，已经失效了。主要是两个方面，一个是数据库，原来的数据库居然是放在了原有的云平台上，现在已经下线了，也不打算再做迁移了。后期更改数据库类型试一下，使用mongodb来做数据的承载。 另一个就是那个网站居然上了Cloudflare用来反扒，这个就有点恶心了，参考了两个用来绕过的方案，软件直接绕cf-ray有点难度，要么就是要花钱。通过另外一种方案试了下，找到原站的源IP地址。测试了一下，应该有戏。 查找隐藏记录的网站：https://search.censys.io/，还挺好使的。 参考文档： https://scrapeops.io/web-scraping-playbook/how-to-bypass-cloudflare/ https://www.zenrows.com/blog/bypass-cloudflare-python –这篇用处不大 主站可以绕，但是cdn的文件位置绕不过去……还需要进一步测试。还好这个站不是很复杂，是相同的主机地址，可以比较方便的绕过。

2023/04/28 13:47 昨天把PaaS平台上的Rocket.Chat给重新处理了一下，更换了最新的6.x的版本，主要是原来的发布版本找不到了，原来的文件不知道怎么回事，启动的时候又报错了。更新了版本之后，通过更新node版本，结合昨天对mongodb的处理，把有ReplicaSet控制的mongodb给启动起来了。 然后昨晚的时候，又想着通过snap把原有的Server给升级上去，但是升级失败了。主要的问题有两个，一个是snap中自带caddy没有办法自行签署证书，然后就启动失败了。把caddy的服务给停掉了，之后应用就正常了。 另外还有一个就是升级到6.x的版本时，应用启动出现了错误，说是无法新建索引，因为原来的索引存在了。然后，通过mongosh学会了查找索引，然后删除某一个索引，然后删除表上的所有索引。接着应用也就正常了。 最终的使用环境内，只是把caddy给停用了，毕竟现在有nginx，而且申请证书之类的一切都正常的，暂时没有时间再去研究caddy了，虽说可能用起来可能比nginx更好一些。 具体的处理步骤以及脚本记录如下：Rocket.Chat 关于这个应用的基本维护工作也就到这步了，通过这个学了点nodejs、snap以及mongodb的基本操作处理。 后面继续把重心转去量化计算。 同时，发现自己更适合坐硬板凳，换了一个硬靠背的凳子之后，主要有个手托，然后比之前更舒服一些，天气也开始热起来了。

2023/04/27 08:42 今天把之前的欠账清一清，宽带那里的月度绩效调整、mongodb的研究学习并投入使用。 mongodb使用起来感觉还是很方便的，特别是pymongo的方法。如果不是用来做复杂的分析的话，不需要写SQL语句，适合用来做编程。就是自己改的那个chatgpt_telegram_bot的项目不知道是放在哪里了……

2023/04/26 14:33 昨晚折腾了一段时间的O聊，突然报表中心就慢的不行了，点完了之后没有正常的请求发送，连抓包都抓了。非常诡异，Chrome上测试就基本正常，但是O聊上就始终打不开，就是完全没有反应的那种。 今天早上听到了其他地市也反馈了相关消息，发现也不只是报表中心的问题，只是我现在几乎不用，所以没有这方面的感觉，真是亏了这些同志们还能坚持用下去，真是不容易。领导们估计也都不用，所以，这个公司、这个部门还能好么？ 给了一个妥协后的解决方案，就是换了一个版本的O聊，幸好还有历史版本的下载，也算是能一定程度上缓解这个问题。至于最终处理这个问题，就等别人去找了之后，问题爆发再说吧，这个问题应该很快就能解决的。