Clik here to view.
多个站点同时抓取！怎么做到的？
你好，我是悦创。 本篇将开启我自己啃代理池的心得，将逐步放送，因为代理池搭建较为复杂，这里我就尽可能把代理池分成几篇来讲，同时也保证，在我其他篇放出来之前，每一篇都是你们的新知识。 学习就像看小说一样，一次一篇就会显得额外的轻松！ 当你把学习当作某个娱乐的事情来做，你会发现不一样的世界！ 我们无法延长生命长度，但是我们延长生命宽度，学习编程就是扩展生命最有力的武器！ 1. 看完之后你会得到什么 返回...
View Article浅入浅出Hash算法
本文预计阅读需3min 你好，我是你老朋友Payne，大家都或许过我之前写的水文-JS解密入门，没看过的童鞋开源回头看看啊。里面主要讲述了Hash MD5的例子，以及加密与解密，相关的。那么今天我们去搞一下MD5的“父亲”， Hash。主要阐述了什么是哈希，哈希运用方向以及hash碰撞及解决方向，请查阅 Hash算法 哈希...
View ArticleClik here to view.
MiGu登录参数分析
MiGu登录参数分析 目标：分析咪咕视频登录参数（enpassword、fingerPrint、fingerPrintDetail） 工具:NodeJs + Chrome 开发者工具 许久没有水文了，闲来无事特来混混脸熟 源码在此，欢迎白嫖，star就更好啦 enpassword 找到登录入口： 查找方式： 点击登录 —> 开启chrome开发者工具 -> 重载框架 —>...
View ArticleClik here to view.
qimingpian数据接口分析
qimingpian接口加密分析 工具：Chrome + NodeJS + Pycharm 点击获取结果 如果能留下小星星就最好啦 抓包 调出开发者工具，直接到xhr(这里点击改变的时候并未发生网址变更、所以这是Ajax) 参数寻找 一共就两个包，但Preview里面没有数据，but几KB的包没有鬼？反正我不相信 追根揭底 直接把encrypt_data，拉出来全局搜索（ctrl + shift +...
View ArticleClik here to view.
JS 逆向的时候 Python 如何调用 JavaScript 代码？
本篇目标 了解为什么我们需要直接调用 JavaScript 了解常见的 Python 调用 JavaScript 的库 了解一种性能更高的操作方式 知道什么场景下应该使用什么方式进行调用 通过本文的学习，在你写爬虫时，你应该会对调用 JavaScript 有一个更清晰的了解，并且你还要了解到一些你平时可能见不到的骚操作。 大家如果接触过 JavaScript 逆向的话，应该都知道，通常来说碰到 JS...
View ArticleClik here to view.
某道词典在线翻译JS解密,完全扣js代码解密 （小白基础篇）
一、先试着英汉翻译一波： 1.按F12打开调试台，再点击Network,再点击Headers,可以找到i=good,这就是我们刚才输入需要翻译的词语good,from Data中的就是请求的参数，分别为： i: good from: AUTO to: AUTO smartresult: dict client: fanyideskweb salt: 15972332870677 sign:...
View ArticleScrapy 如何存储图片？
官方文档说明 在设置中找到ITEM_PIPELINES并加入以下代码 scrapy.pipelines.images.ImagesPipeline: 301 settings配置: 图片存储路径： IMAGES_STORE = “your path” 图片存储天数 images_EXPIRES = 30 设置缩略图(固定值): IMAGES_THUMBS = { 'small':(50,50)...
View ArticleClik here to view.
浅淡程序设计模式-总纲篇
设计模式(Design Patterns),旨在软件设计（可重用的面向对象软件的要素）中，被反复使用的一种代码设计经验。设计模式旨在简化代码量、降低耦合度、高效使用可重用代码，提高代码可拓性和可维护性。 3V3H概念： 3V: Voluem(海量)，Variety(多样)、Velocity(实时) 3H: High concurrency(高并发)、High...
View ArticleGit 中文显示编码问题解决
刚装了台新机器，Git 显示总是呈现这样的样子："\346\265\213\350\257\225.txt"解决办法：git config --global core.quotepath false仅此记录，完毕。 转载请注明：静觅 » Git 中文显示编码问题解决
View Article追根揭底-循环、迭代、分治、回溯
在计算机的世界中由最基本的for loop、while loop、if…else无限衍生，无论多么复杂的逻辑最后大多可归纳为以上三种。当然除非原本逻辑无重复性，无条件分支。 一、循环(重复) 不断的重复、有始有终 循环实现private loop(){ for(start; end; loop termination){ expression1; expression2; expression3;...
View Article详解循环、迭代、递归、分治(Leet Code 509 斐波那契数列)，实际运用
Multiple solutions of Fibonacci (Python or Java) 本章是用英文写的，作为或想成为一名优秀的攻城狮，习惯阅读英文文档将使你受益良多。例如更好的查看最新版的官方文档、与国外友人交流、等等...
View Article手摸手搭建个人Leanote云笔记
搭建个人Leanote云笔记 Leanote是一款在线的云笔记应用，有如下特点： 支持网页、PC、手机APP客户端和微信版，随时记录，方便分享，支持语音，图片输入。 代码高亮，涵盖所有主流语言的代码高亮，随心所欲在Leanote里写代码，记知识。 Markdown 编辑器,实时同步预览。 专业数学公式编辑,像Word和Latex能编辑数学公式。 支持创建思维脑图，将散乱的想法以树状信息分层展示。...
View ArticleClik here to view.
Docker容器数据卷
Docker容器数据卷 Docker理念： 将运用与运行的环境打包形成容器运行，运行可以伴随着容器，但由于对数据要求希望是持久化的 容器之间希望可以共享数据 一、Docker容器数据卷是什么？ docker容器产生的数据，如果不通过docker commit生成新的镜像，使数据做为镜像的一部分保存下来，那么删除容器之后，数据也随之被删除。为了能保存数据在docker中，我们使用容器卷。...
View ArticleClik here to view.
DockerFile
Docker File 解析： 构建简史 编写一个dockerfile的文件，符合dockerfile的规范 docker build 执行，获得一个自定义的镜像 docker 运行 Docker执行docker file文件的大致流程 docker 从基础镜像运行一个容器 执行一条指令并对容器作出修改 执行类似docker commit的操作提交一个新的镜像层 docker...
View Article近学习分布式感想随笔
Abstract 随着大数据人工智能时代的来临，互联网的快速发展。许许多多以前可能并不那么实际或需要的算法、技术也逐渐进入我们的眼中。例如分布式、集群、负载均衡、也越来越“平民”化。近期重新再一次的对于分布式理念、思想进行了学习。此随笔也因此而来。请多指教 为什么需要分布式？ 什么是分布式？ 分布式的核心理念是什么？ 如何实现分布式、负载均衡、集群？ Why distributed？...
View Article
