常用技术:

  1. scrapy:一种爬虫框架,我用来爬取了静态页面
  2. Xpath : 用来取路径,根据写的标签路径来取值
  3. beautifulSoup: 与Xpath作用一样,根据标签路径来取值
  4. splash:一个Javascript渲染服务