千锋教育-做有情怀、有良心、有品质的职业教育机构

400-811-9990
手机站
千锋教育

千锋学习站 | 随时随地免费学

千锋教育

扫一扫进入千锋手机站

领取全套视频
千锋教育

关注千锋学习站小程序
随时随地免费学习课程

上海
  • 北京
  • 郑州
  • 武汉
  • 成都
  • 西安
  • 沈阳
  • 广州
  • 南京
  • 深圳
  • 大连
  • 青岛
  • 杭州
  • 重庆
当前位置:郑州千锋IT培训  >  面试技巧  >  郑州Python爬虫工程师必会面试题汇总

郑州Python爬虫工程师必会面试题汇总

来源:千锋教育
发布人:Yolanda
时间: 2020-03-05 11:19:46

  爬虫是Python的重要应用方向之一,也是学习Python的学员求职的主要方向。为了帮助学员更快更好的通过企业面试,千锋郑州Python培训小编悉心整理了5道Python爬虫面试题及答案,希望能够给大家提供帮助!

零零零零

 

  1、简要介绍下scrapy框架及其优势

  scrapy是一个快速(fast)、高层次(high-level)的基于Python的Web爬虫构架,用于抓取Web站点并从页面中提取结构化的数据。scrapy使用了Twisted异步网络库来处理网络通讯。

  scrapy框架的优点:1)更容易构建大规模的抓取项目;2)异步处理请求速度非常快;3)可以使用自动调节机制自动调整爬行速度。

  2、爬虫使用多线程好?还是多进程好?

  对于IO密集型代码(文件处理,网络爬虫),多线程能够有效提升效率(单线程下有IO操作会进行IO等待,会造成不必要的时间等待,而开启多线程后,A线程等待时,会自动切换到线程B,可以不浪费CPU的资源,从而提升程序执行效率)。在实际的采集过程中,既考虑网速和相应的问题,也需要考虑自身机器硬件的情况,来设置多进程或者多线程。

  3、什么是栈溢出?怎么解决?

  因为栈一般默认为1-2m,一旦出现死循环或者是大量的递归调用,在不断的压栈过程中,造成栈容量超过1m而导致溢出。

  栈溢出的情况有两种:1)局部数组过大。当函数内部数组过大时,有可能导致堆栈溢出。2)递归调用层次太多。递归函数在运行时会执行压栈操作,当压栈次数太多时,也会导致堆栈溢出。

  解决方法:1)用栈把递归转换成非递归。2)增大栈空间。

  4、MySQL的索引在什么情况下失效?

  1)如果条件中有or,即使其中有条件带索引也不会使用(这也是为什么尽量少用or的原因)

  要想使用or,又想让索引生效,只能将or条件中的每个列都加上索引。

  2)对于多列索引,不是使用的第一部分,则不会使用索引。

  3)like查询以%开头。

  4)如果列类型是字符串,那一定要在条件中将数据使用引号引用起来,否则不使用索引。

  5)如果MySQL估计使用全表扫描要比使用索引快,则不使用索引。

  5、HTTPS是如何实现安全传输数据的?

  客户端(通常是浏览器)先向服务器发出加密通信的请求;

  服务器收到请求,然后响应;

  客户端收到证书之后会首先会进行验证;

  服务器收到使用公钥加密的内容,在服务器端使用私钥解密之后获得随机数pre-master secret,然后根据radom1、radom2、pre-master secret通过一定的算法得出session Key和MAC算法秘钥,作为后面交互过程中使用对称秘钥。同时客户端也会使用radom1、radom2、pre-master secret,和同样的算法生成session Key和MAC算法的秘钥。

  然后再后续的交互中就使用session Key和MAC算法的秘钥对传输的内容进行加密和解密。

  当然,除了以上内容,企业在招聘Python爬虫工程师时还会考察其他内容,后续小编会继续整理分享给大家。如果你想更快更好的入行Python,可以来千锋郑州Python培训班,专业大牛讲师以项目驱动讲解高端潮流的课程,让你理论与实战兼备,筑造职场高起点。

声明:本站稿件版权均属千锋教育所有,未经许可不得擅自转载。

猜你喜欢LIKE

最新文章NEW

相关推荐HOT

更多>>

快速通道 更多>>

最新开班信息 更多>>

网友热搜 更多>>