之前一段时间还做过这个需求，输出了两篇关于静态和动态网页数据获取和网络数据交互流程的详解博文。能够获取到数据之后，有数据资源下一步无非就是打通API进行数据交互就行。该项目的难点在于现在很多网站都设置了反爬机制，可能会存在层层障碍阻止数据获取，而且光靠会Python编程还不够，很多时候都需要对前端代码有所了解，才能清晰的获取到定位信息。总体来说数据采集项目算得上是一个考验全方位技术栈的综合项目，那么本篇文章将带你从操作实践学会Python数据采集，并完成采集文章到微信公众号平台。

Internet和其他网络上的人与设备之间的通信使用协议进行。您可以说协议定义了对话规则：谁必须在何时发送哪些信息？如果数据没有到达接收者，会发生什么？您如何保护转帐免受错误和犯规？每当我们使用Internet时，OSI模型中的这些协议就一直在使用。最著名的是HTTP和HTTPS，通常用于访问网站。另一个重要协议是文件传输协议。那么它是用来干什么的呢？

你所浏览的网站基于网络，当前看到的网页也是基于网络，在前端中，网络几乎无处不在，哪怕代码里面没有和网络打交道，在使用、发布等过程中一定会用上网络。所以不管看不看得到，网络一定是前端里面重要的部分

由于近几年来各大网站越来越注重安全性都改成了https协议，不像前十几年前直接是http协议直接裸奔在互联网。HTTPS 从协议上解决了 HTTP 时代的中间人攻击问题，但是 HTTPS 在用户主动信任了伪造证书的时候也会发生中间人攻击（比如早期的 12306 需要手动信任证书），所以从这一角度来看，HTTPS对中间人也不能完全束手就擒了。

说到上网，大家最熟悉不过；而DNS服务则是连接网站域名和ip地址的桥梁。例如百度搜索的域名网址是“www.baidu.com”，其对应的ip地址是“182.61.200.6”。这时，终端可以通过ip地址直接访问百度搜索网页，也可以通过域名网址访问百度搜索首页。但在网站相对多的时候，我们通过记忆ip地址去访问网站就显得十分吃力了，因此，网站一般会约定轴承设定一些标志性的域名地址，当你想访问某个网站时，脑海里会联想到与该网站关联的关键英文词组。记忆这个网站的域名地址就相对简单了。

咦咦咦，各位小可爱，我是你们的好伙伴——bug菌，今天又来给大家普及通信协议相关知识点了，别躲起来啊，听我讲干货还不快点赞，赞多了我就有动力讲得更嗨啦！所以呀，养成先点赞后阅读的好习惯，别被干货淹没了哦~

TCP/IP是互联网通信的基础协议。它由两个部分组成：TCP负责数据的可靠传输，确保数据按序到达目标；IP负责寻址和路由，确保数据在网络中正确传递。TCP/IP协议簇涵盖了多个层次，其中最重要的四个层次是：应用层、传输层、网络层和链路层。

对于一些网络排障场景，需要借助各类网络排障工具来做一些基础类信息排障和信息收集，本文将从多平台讲述各类网络排障工具的安装及使用方法。

说到上网，大家最熟悉不过；而DNS服务则是连接网站域名和ip地址的桥梁。例如百度搜索的域名网址是“www.baidu.com”，其对应的ip地址是“182.61.200.6”。这时，终端可以通过ip地址直接访问百度搜索网页，也可以通过域名网址访问百度搜索首页。但在网站相对多的时候，我们通过记忆ip地址去访问网站就显得十分吃力了，因此，网站一般会约定轴承设定一些标志性的域名地址，当你想访问某个网站时，脑海里会联想到与该网站关联的关键英文词组。记忆这个网站的域名地址就相对简单了。

咦咦咦，各位小可爱，我是你们的好伙伴——bug菌，今天又来给大家普及通信协议相关知识点了，别躲起来啊，听我讲干货还不快点赞，赞多了我就有动力讲得更嗨啦！所以呀，养成先点赞后阅读的好习惯，别被干货淹没了哦~