投稿    登录
  您好,欢迎光临崔庆才的博客,祝大家新年快乐,鸡年大吉!

 分类:技术杂谈

Python

Scrapy小技巧-MySQL存储

Scrapy小技巧-MySQL存储
这两天上班接手,别人留下来的爬虫发现一个很好玩的 SQL脚本拼接。 只要你的Scrapy Field字段名字和 数据库字段的名字 一样。那么恭喜你你就可以拷贝这段SQL拼接脚本。进行MySQL入库处理。 具体拼接代码如下: ...

哎哟卧槽 1周前 (03-19) 667浏览 9评论 14喜欢

技术杂谈

Scrapy分布式的前篇–让redis和MongoDB安全点

Scrapy分布式的前篇–让redis和MongoDB安全点
各位小伙伴 大家好啊!年假结束了··· 也该开始继续我的装逼之旅了。 年前博文的结尾说了 还有一个基于Scrapy的分布式版本、 今天这博文就先给大家做些前期工作,其实吧、最主要的是防止你的服务器因为这篇博文被轮········· 博文开始之前 我们先来看篇文章: http://...

哎哟卧槽 2个月前 (02-03) 1214浏览 5评论 5喜欢

PHP

Mac下升级PHP版本至7.1

Mac下升级PHP版本至7.1
博主在搞Web开发主要采用的是Laravel,然而发现其对PHP版本的要求是越来越高,PHP5.6已经越来受到限制,Laravel 5.5将正式弃用PHP5.6,所以博主决定直接升级到7.1版本。 移除旧版本 由于系统本身已经装了PHP5.6,所以需要先将其移除。 在这里列出目录...

崔庆才 2个月前 (01-26) 529浏览 4评论 2喜欢

Python

小白进阶之Scrapy第二篇(登录篇)

小白进阶之Scrapy第二篇(登录篇)
  其实拿这个网站当教程刚开始我是拒绝、换其他网站吧,又没什么动力···· 然后就··········· 上一篇Scrapy带大家玩了 Spider 今天带带大家玩的东西有两点、第一CrawlSpider、第二Scrapy登录。 目标站点:www.haoduofuli...

哎哟卧槽 2个月前 (01-22) 6956浏览 14评论 17喜欢

Other

配置北航校园内免流量科学上网

配置北航校园内免流量科学上网
前言 博主研究生在北京航空航天大学,简称BUAA,在这边上网情况是这样的:全校园覆盖了BUAA-WIFI,然而上网是需要花钱的,需要使用学号登录认证,套餐是50块钱100G,然而对于我这种流量重度依赖者远远不够用啊,100个G不到一个月就用完了。在实验室上网的时候,也是需要使用账...

崔庆才 4个月前 (12-10) 1702浏览 15评论 21喜欢

Python

小白进阶之Scrapy第一篇

小白进阶之Scrapy第一篇
这博文写得我懒癌犯了,最后的那个章节内容排序,我没有实验是否是正确的,不过这只是个教大家用Scrapy的教程,正确与否并不重要···  如果不正确,记得留言;等我懒癌过了,我再改改······ 还有其它的问题也是一样··· ,把问题留言下; 等我懒癌过了·· 我改回来!嗯!是等我...

哎哟卧槽 4个月前 (12-07) 31248浏览 83评论 62喜欢

PHP

Composer进阶使用之常用命令和版本约束

Composer进阶使用之常用命令和版本约束
这篇文章主要介绍一些常用的包管理命令以及包的版本如何进行约束。 常用命令 require命令 在《Composer快速入门》中已经简单介绍过使用install命令安装依赖的方式。除了install命令,我们还可以使用require命令快速的安装一个依赖而不需要手动在compos...

崔庆才 4个月前 (11-26) 690浏览 0评论 0喜欢