投稿    登录
  您好,欢迎光临崔庆才的博客,祝大家新年快乐,鸡年大吉!

最新发布 第2页

静觅崔庆才的个人博客

Python

Python爬虫进阶七之设置ADSL拨号服务器代理

Python爬虫进阶七之设置ADSL拨号服务器代理
那夜 那是一个寂静的深夜,科比还没起床练球,虽然他真的可能不练了。 我废了好大劲,爬虫终于写好了!BUG也全部调通了!心想,终于可以坐享其成了! 泡杯茶,安静地坐在椅子上看着屏幕上一行行文字在控制台跳出,一条条数据嗖嗖进入我的数据库,一张张图片悄悄存入我的硬盘。人生没有几个比这更...

崔庆才 3个月前 (11-21) 4288浏览 17评论 23喜欢

Python

小白爬虫第四弹之爬虫快跑(多进程+多线程)

小白爬虫第四弹之爬虫快跑(多进程+多线程)
PS:使用多线程时好像在目录切换的问题上存在问题,可以给线程加个锁试试 Hello 大家好!我又来了。 你是不是发现下载图片速度特别慢、难以忍受啊!对于这种问题 一般解决办法就是多进程了!一个进程速度慢!我就用十个进程,相当于十个人一起干。速度就会快很多啦!(为什么不说多线程?...

哎哟卧槽 3个月前 (11-20) 6117浏览 19评论 52喜欢

Python

Python爬虫进阶六之多进程的用法

Python爬虫进阶六之多进程的用法
前言 在上一节中介绍了thread多线程库。python中的多线程其实并不是真正的多线程,并不能做到充分利用多核CPU资源。 如果想要充分利用,在python中大部分情况需要使用多进程,那么这个包就叫做 multiprocessing。 借助它,可以轻松完成从单进程到并发执行的转...

崔庆才 3个月前 (11-13) 4871浏览 6评论 16喜欢

Python

小白爬虫第三弹之去重去重

小白爬虫第三弹之去重去重
好了!开头要说点啥,我想你们已经知道了! 没错!我又来装逼了·· 前面两篇博文,不知道大家消化得怎么了。不知道各位有没注意到,前面两篇博文完成的工作,只能保证下载;你电脑不能关机,不能断网,总之不能出意外!否则啊!!! !!!!你就得重头开始啊!!!! 今天,我们来想想办法...

哎哟卧槽 4个月前 (11-05) 5771浏览 33评论 34喜欢

Python

Python爬虫进阶五之多线程的用法

Python爬虫进阶五之多线程的用法
前言 我们之前写的爬虫都是单个线程的?这怎么够?一旦一个地方卡到不动了,那不就永远等待下去了?为此我们可以使用多线程或者多进程来处理。 首先声明一点! 多线程和多进程是不一样的!一个是 thread 库,一个是 multiprocessing 库。而多线程 thread 在 Py...

崔庆才 4个月前 (11-03) 5027浏览 5评论 9喜欢

职位推荐

百观科技 – 爬虫数据工程师

百观科技 – 爬虫数据工程师
Hi,爬虫学习得还不错吧? 做了这么久的爬虫,想不想找一份充分施展才华的工作?博主最近去参观了一下百观科技,在北京,感觉非常不错,公司人也超级好!不过博主现在还在念书,现在还不能去啦~ 在这里将职位推荐给大家,如果你对爬虫非常感兴趣,那么强烈推荐你来!待遇丰厚着呢~ 关于百观 百...

崔庆才 4个月前 (11-03) 4288浏览 5评论 10喜欢

Other

腾讯云ubuntu账号更改为root登录的方法

腾讯云ubuntu账号更改为root登录的方法
需求分析 有需求才有动力! 腾讯云有个比较坑的地方,Ubuntu的机子必须要用ubuntu账号来登录,给我的统一管理带来了很大的麻烦。 在这里我想把它的账号名称改成root来统一登录。 步骤 首先用ubuntu账号登录主机。 然后输入 ...

崔庆才 4个月前 (10-31) 810浏览 3评论 2喜欢

Other

配置SSH免密码登录远程服务器

配置SSH免密码登录远程服务器
需求分析 有需求才有动力! 最近有不少服务器,但是管理起来还需要输入密码,而且有的还不一样,太麻烦了,所以就利用SSH配置免密码登录服务器。 流程 生成秘钥 首先在自己的电脑上生成SSH秘钥。 ssh-keygen –...

崔庆才 4个月前 (10-31) 958浏览 2评论 4喜欢

Python

小白爬虫第二弹之健壮的小爬虫

小白爬虫第二弹之健壮的小爬虫
我又来装逼了!上次教大家写了一个下载www.mzitu.com全站图片的小爬虫练手、不知道大家消化得怎么样? 大家在使用的时候会发现,跑着跑着 就断掉了!报错了啊!丢失连接之类的。幸幸苦苦的抓了半天又得从头来,心累啊! 这就是网站的反爬虫在起作用了,一个IP访问次数过于频繁就先...

哎哟卧槽 4个月前 (10-30) 8919浏览 30评论 96喜欢

HTML

利用Sass自动生成padding和margin边距样式

利用Sass自动生成padding和margin边距样式
需求分析 有需求才有动力! 写CSS的时候,你经常会遇到要设置一个小边距,比如设置: 所有内边距10px,外左边距20px,内右边距0,上下内边距50px,外左右边距自动…. 而你是不是又不想自己单独为它们定义一个class,然后把padding, margin之类的...

崔庆才 4个月前 (10-29) 377浏览 1评论 1喜欢