博客
关于我
Python3.6爬虫记录
阅读量:370 次
发布时间:2019-03-05

本文共 1295 字,大约阅读时间需要 4 分钟。

Python????????

1. Python2?Python3???

Python2?Python3??????????????????????

  • ?????Python3???print?????print()???Python2???print???
  • ????Python3?urllib2????urllib???????urllib.request?
  • ?????Python3???????utf-8??Python2???gbk???

2. GET?POST??

  • GET??????????????URL?????????????
  • POST????????????????????????data???
  • ????????headers???????HTTP?????User-Agent?

3. User-Agent???

???????????????????????User-Agent?Python-urllib/x.y?

4. URL?????

  • ?????urllib.parse.urlencode()??????URL?????
  • ?????parse.quote()?parse.unquote()????URL??????

5. HTTPS???????

Python3????SSL??????????????CA?????

6. ???Handler?Opener

  • Handler????????????Cookie?
  • Opener???build_opener()???????????
  • ????Opener???install_opener()????Opener??????

7. Cookies??

  • ??Cookie???CookieJar?HTTPCookieProcessor??????Cookie?
  • ???????Cookie?????????????

8. ???????

  • ???????re.compile()??????????
  • ?????match()??????????search()????????
  • ????????groups()???????sub()???????

9. ??DEMO??

Demo1?????
  • ???????urllib.request.Request??HTTP???
  • ??????????????????
  • ???????a+???????????
Demo2?????????
  • ????????requests???????????
  • XPath?????????????????
  • ???????????????????
Demo3???????
  • URL???????URL???
  • XPath?????lxml??????????
  • ??????????????JSON???

10. CSRF??

  • Token?????csrf_token???????
  • ???????????????????????????

?????????DEMO???????Python?????????????????????

转载地址:http://tavg.baihongyu.com/

你可能感兴趣的文章
Objective-C实现RRT路径搜索(附完整源码)
查看>>
Objective-C实现rsa 密钥生成器算法(附完整源码)
查看>>
Objective-C实现RSA密码算法(附完整源码)
查看>>
Objective-C实现runge kutta龙格-库塔法算法(附完整源码)
查看>>
Objective-C实现segment tree段树算法(附完整源码)
查看>>
Objective-C实现selection sort选择排序算法(附完整源码)
查看>>
Objective-C实现sha256算法(附完整源码)
查看>>
Objective-C实现shell sort希尔排序算法(附完整源码)
查看>>
Objective-C实现SinglyLinkedList单链表算法(附完整源码)
查看>>
Objective-C实现skew heap倾斜堆算法(附完整源码)
查看>>
Objective-C实现Skip List跳表算法(附完整源码)
查看>>
Objective-C实现slack message松弛消息算法(附完整源码)
查看>>
Objective-C实现slow sort慢排序算法(附完整源码)
查看>>
Objective-C实现tanh函数功能(附完整源码)
查看>>
Objective-C实现z-algorithm算法(附完整源码)
查看>>
Objective-C实现zellers congruence泽勒一致算法(附完整源码)
查看>>
Objective-C实现Zero One Knapsack零一背包计算算法(附完整源码)
查看>>
Objective-C实现一个Pangram字符串至少包含一次所有字母算法(附完整源码)
查看>>
Objective-C实现一个通用的堆算法(附完整源码)
查看>>
Objective-C实现一分钟倒计时(附完整源码)
查看>>