ArcToolbox 应用(网页提取)
先设精度（小数点位数）8
金字塔文件：Tool -> options -> raster ->general （一、总是建，二、提示，三、不建）
张姐说：有拓扑关系的数据千万不能在数据库里做，不然。。。。忘了！
一、矢量图,栅格图,匹配?
在arcMap中,有一个工具georeferncing是进行遥感图的地理坐标匹配的,右键点击工具栏,选择georeferncing,添加.
1 . 粗配准
把遥感图和矢量图一起添加到map中,选择一个地标地物A,先把遥感图和矢量图大致位置配齐.
工具条右数第二个按钮,tooltip为"add control point",添加控制点,在矢量图上把鼠标放在 A 上,记下状态栏的坐标,x0,y0;在遥感图上找到 A 的大致位置,左键点击,紧接着右键"input x and y",输入x0,y0.结束后,遥感图的位置就会大致和矢量图重合.
2. 精细配准
在大致配准后,视工作区的大小,需要选择5-8个地标点,进行精细配准.
说明:地标点选择时应该选择河流边线,道路边线,十字路口等地面点,不能选择建筑物的顶层边线,因遥感图拍摄时是有角度的
如上,逐一添加控制点,去除偏差比较大的控制点,Arcmap会自动生成world file.
比如对于tif格式的遥感图来说,world file 为文件名.tfw.此文件的内容为6行:示例如下
0.6 x方向的分辨率
0.0 行旋转
0.0 列旋转
(以上两个参数是旋转的,一般是0,如果配准时输入的控制点多,就会产生图象旋转.)
-0.6 y 方向上的分辨率
-222222.000 图象象素00的x坐标
-222222.000 图象象素00的y坐标
至于esri world file 可以参考
https://www.360docs.net/doc/e35073246.html,/sid/bin/zhelpworld_nofrm.htm
http://www.kralidis.ca/gis/worldfile.htm
3. 一体化(对于tif 格式)
这样配准后的文件,只要在同一个文件夹内包含world file (如文件名.tfw),下次读入(arcmap,sde,erdas)中时都会带着地理坐标了.
但是,这样两个文件始终不方便.如果遥感图是tif 格式的,可以考虑将tif 格式转换成geotif 格式.
使用一个geotiffexaminer(https://www.360docs.net/doc/e35073246.html,/search?q=geotiffexamine)的工具,可以把地理坐标写入tif 文件本身,这样文件拷贝的时候就只需要拷贝一个.
4.图象优化
对于一般的遥感图来说,色彩总是偏暗,不够鲜艳,对比度也不够.
同样在ArcMap中有个工具effects,可以调节图片的亮度,对比度和显示的透明度.
一般把亮度增加5%,对比度增加5%,图象打印出来的效果会好很多.
二、在ArcMap中，快捷键与一些编辑工具和命令相关联。使用快捷键能使编辑工作更加快捷有效，总结如下：一、公共快捷键（对所有编辑工具有效）：
Z：放大X：缩小C：漫游V：显示节点ESC：取消Ctrl+Z：撤销Ctrl+Y：重做SpaceBar：暂停捕捉E编辑状态、选择状态切换S旋转辅助描点二、编辑工具：
Shift：添加至/取消选择Ctrl：移动选择锚N：下一个被选要素
三、用于Edit工具的与注记相关的快捷键：
E：在Sketch工具、Edit工具和Edit Annotation工具间切换；
四、Edit Annotation工具：
Shift：添加至/取消选择Ctrl：移动选择锚N：下一个被选要素R：切换至旋转模式/从旋转模式切换F：切换至要素模式/从要素模式切换E：在Sketch工具、Edit工具和Edit Annotation工具间切换L：在跟踪要素模式下将选中的注记要素旋转180度
O：在跟踪要素模式下打开Follow Feature Options 对话框
Tab：在跟踪要素模式下对注记放置的位置进行左右边的切换
P：在跟踪要素模式下对注记放置的角度进行平行和垂直方向的切换。
五、Sketch工具：
Ctrl+A：方位
Ctrl+F：偏转
Ctrl+L：长度
Ctrl+D：X,Y增量
Ctrl+G：方位/长度
Ctrl+P：平行
Ctrl+E：垂直
Ctrl+T：切线
Ctrl+Delete：删除草图
F2：完成草图
F6：绝对X,Y坐标
F7：线段偏转
T：显示容限
F8
三、对影像校准
四、polyline转polygon
Topology工具条上的TopoEdit工具：要在一个面图层中修改两个多边形的公共边，修改其中一个多边形的边时另外一个边会自动做相应的变化。
在arcmap下如何旋转影像图？rotate tool，还有rotate data frame都是旋转框架的没有旋转图形的，那有没有旋转图形的呢？draw工具条里有一个rotate & flip 工具，你可以试试。Georeferencing工具条->Rotate工具
问一下,如何将表(有经纬度)转成点(.SHP)?如下图
ArcMap->Tools->Add XY Data
ARCGIS下能否根据大地坐标或者地理坐标（左下及右上坐标）生成1：1万等比例尺的接合图表？试试ArcToolbox-->Data Management Tools-->Feature Class-->Create Fishnet，这玩意儿我怎么看怎么觉着不对啊！怎么还要我输入行列数？不应该啊！
ARCGIS中矢量裁剪栅格图象
最近有朋友问arcgis中怎么用矢量图来裁剪栅格图，现在发现了两种方法供大家参考
(1)
是否需要裁剪栅格图象区域通过一个面状的shapefile表达出来？
如果可以，那么就很简单了。
在ArcMap中，调用空间分析扩展模块，将你感兴趣区的shapefile多边形图层设置为掩膜，然后在栅格计算器中重新计算一下你的图象，它就会沿掩膜裁出。设置掩膜：空间分析工具条的下拉菜单>option里面设置
(2)
用任意多边形剪切栅格数据(矢量数据转换为栅格数据)
2.1在ArcCatlog下新建一个要素类（要素类型为:多边形），命名为：ClipPoly.shp
2.2在ArcMap中，加载栅格数据：例如kunming.img、和ClipPoly.shp
2.3打开编辑器工具栏，开始编辑ClipPoly ，根据要剪切的区域，绘制一个任意形状的多边形。打开属性表，修改多边形的字段“ID”的值为1，保存修改，停止编辑。
2.4打开空间分析工具栏
执行命令：<空间分析>－<转换>--<要素到栅格>
指定栅格大小：查询要剪切的栅格图层kunming的栅格大小，这里假设指定为1
指定输出栅格的名称为路径
2.5执行命令: <空间分析>-<栅格计算器>
2.6构造表达式：[kunming]*[polyClip4-polyclip4] ，执行栅格图层：kunming和用以剪切的栅格polyClip4 之间的相乘运算
重叠要素的选择切换
目标：在覆盖同一区域的多个要素中切换被选择要素
操作步骤：
1．在编辑环境中选中覆盖同一区域的多个要素中的一个要素
2．按下N键，被选要素就会自动地切换到另一个图层的要素上去
技巧3：编辑时一些常用的快捷键
目标：在编辑的过程中，切换到其他的工具
操作步骤：
1．在编辑环境下打开工具开始创建要素
2．在编辑未完成时按快捷键E切换到选择的环境中去
3．选择要素，在选择完之后再按E切换回编辑的过程中
其它编辑工具的快捷键见表1：
专业的3S站https://www.360docs.net/doc/e35073246.html,
专业的3S站https://www.360docs.net/doc/e35073246.html,
arcmap中shp格式的相邻的两幅矢量图如何拼接?拼接后如何保证它们的属性表合二为一?
先用arctoolbox---data management tools---general----append,然后再用arctoolbox---data management tools----generalization----dissolve.效果很好.
面另外生成一个图层用线边界arctoolbox-->polyline to point/polygon polygon to polyline
在arcgis里面怎么剪节影像图用mask掩膜，细节请你们回答：用mask切出来的数据常常会与原数据错开半个栅格，这个问题怎么解决？
数据在拓扑完面关系后，修改一处后出现一片压盖。处理方法：重新建拓扑，并且用拓扑生成的数据（拓扑时的参数选用压盖的长度）并重新导出。
一查交叉：Analysis tools->overlay(覆盖)->intersect（交叉）
二合图：arctool -> data management tool -> general -> append (在层属性相同的情况下，目标层为最底层，添加数据由底层逐个添加，NO TEST ,最后导出数据data -> export data )
Data Frame，将Clip to shape的Enable选项选中，选定形状（Specify Shape）
在显示标注的地方把线断开的方法：１、把标注转成注记，保存在*.gdb中(如下)２、ArcToolbox工具Cartography
Tools->Masking Tools->Intersecting Layer Masks，为注记创建模版（模版的大小用参数Margin来决定）
用mask图层掩盖线图层。
（在如下的placement里，可设置mask）
Edit Annotation工具：
Shift：添加至/取消选择Ctrl：移动选择锚N：下一个被选要素R：切换至旋转模式/从旋转模式切换F：切换至要素模式/从要素模式切换E：在Sketch工具、Edit工具和Edit Annotation工具间切换L：在跟踪要素模式下将选中的注记要素旋转180度
O：在跟踪要素模式下打开Follow Feature Options 对话框
Tab：在跟踪要素模式下对注记放置的位置进行左右边的切换
P：在跟踪要素模式下对注记放置的角度进行平行和垂直方向的切换。
（1）3D分析工具(3D Analyst Tools)：使用3D分析工具可以创建和修改TIN以及栅格表
面，并从中抽象出相关信息和属性。创建表面和三维数据可以帮助你看清二维形态
中并不明确的信息。
（2）分析工具(Analysis Tools)：对于所有类型的矢量数据，分析工具提供了一整套的方法，
来运行多种地理处理框架。主要实现有联合，裁剪，相交，判别，拆分；缓冲区，
近邻，点距离；频度，加和统计等。
（3）制图工具(Cartography Tools)：制图工具与ArcGIS中其他大多数工具有着明显的目的性差异，它是根据特定的制图标准来设计的，包含了三种掩膜工具。
（4）转换工具( Conversion Tools)：包含了一系列不同数据格式的转换工具，主要有栅格
数据，shapefile , Coverage ,table ,dBase数字高程模型,以及CAD 到空间数据库
( Geodatabase )的转换等。
（5）Coverage 工具(Coverage Tools)：提供了一系列强大的工具来实现各种地理处理过
程，且输入输出都只使用Coverage文件，主要实现分析，数据管理和转换，使用
workstation执行。
（6）数据管理工具(Data Management Tools)：提供了丰富且种类繁多的工具用来管理和
维护要素类，数据集，数据层以及栅格数据结构。
（7）地理编码工具(Geocoding Tools)：地理编码又叫地址匹配，是一个建立地理位置坐标
与给定地址一致性的过程。使用该工具可以给各个地理要素进行编码操作，建立索
引等。
（8）地统计分析工具(Geostatistical Analyst Tools) ：地统计分析工具提供了广泛全面的工
具，用它可以创建一个连续表面或者地图，用于可视化及分析，并且可以更清晰了
解空间现象。
（9）线性要素工具(Linear Referencing Tools)：生成和维护线状地理要素的相关关系，如
实现由线状Coverage到路径(Route)的转换，由路径事件(Event)属性表到地理要素类
的转换等。
（10）空间分析工具(Spatial Analyst Tools)：空间分析工具提供了很丰富的工具来实现基
于栅格的分析。在GIS三大数据类型中，栅格数据结构提供了用于空间分析的最全
面的模型环境。
（11）空间统计工具(Spatial Statistics Tools)：空间统计工具包含了分析地理要素分布状
态的一系列统计工具，这些工具能够实现多种适用于地理数据的统计分析。
1.geodatabase的topology规则：
多边形topology
1.must not overlay：单要素类，多边形要素相互不能重叠
2.must not have gaps：单要素类，连续连接的多边形区域中间不能有空白区（非数据区）
3.contains point：多边形＋点，多边形要素类的每个要素的边界以内必须包含点层中至少一个点
4.boundary must be covered by：多边形＋线，多边形层的边界与线层重叠（线层可以有非重叠的更多要素）
5.must be covered by feature class of：多边形＋多边形，第一个多边形层必须被第二个完全覆盖（省与全国的关系）
6.must be covered by：多边形＋多边形，第一个多边形层必须把第二个完全覆盖（全国与省的关系）
7.must not overlay with：多边形＋多边形，两个多边形层的多边形不能存在一对相互覆盖的要素
8.must cover each other：多边形＋多边形，两个多边形的要素必须完全重叠
9.area boundary must be covered by boundary of：多边形＋多边形，第一个多边形的各要素必须为第二个的一个或几个多边形完全覆盖
10.must be properly inside polygons：点＋多边形，点层的要素必须全部在多边形内
11.must be covered by boundary of：点＋多边形，点必须在多边形的边界上
线topology
1.must not have dangle：线，不能有悬挂节点
2.must not have pseudo-node：线，不能有伪节点
3.must not overlay：线，不能有线重合（不同要素间）
4.must not self overlay：线，一个要素不能自覆盖
5.must not intersect：线，不能有线交叉（不同要素间）
6.must not self intersect：线，不能有线自交叉
7.must not intersect or touch interrior：线，不能有相交和重叠
8.must be single part：线，一个线要素只能由一个path组成
9.must not covered with：线＋线，两层线不能重叠
10.must be covered by feature class of：线＋线，两层线完全重叠
11.endpoint must be covered by：线＋点，线层中的终点必须和点层的部分（或全部）点重合
12.must be covered by boundary of：线＋多边形，线被多边形边界重叠
13.must be covered by endpoint of：点＋线，点被线终点完全重合
14.point must be covered by line：点＋线，点都在线上
拓扑处理arcmap中的topolopy工具条主要功能有对线拓扑（删除重复线、相交线断点等，topolopy中的planarize lines）、根据线拓扑生成面（topolopy中的constru ct features）、拓扑编辑（如共享边编辑等）、拓扑错误显示（用于显示在arccatalog中创建的拓扑规则错误，topolopy中的error inspector），拓扑错误重新验证（也即刷新错误记录）。
customize->new->杨志玩的->command->选个命令，把右边的图标托到空工作框，右击，image and text
用于制图表达的地理处理工具用于制图表达的地理处理工具：
**在在ArcGISArcGIS9.29.2中中, ArcToolbox , ArcToolbox 在地图工具箱内有在地图工具箱内有
三个新的工具集三个新的工具集
1–Graphic QualityGraphic Quality（图形质量）
2–Representation ManagementRepresentation Management（表达管理）
2.1 Select Feature by Override toolSelect Feature by Override tool––选择有属性覆盖，形状（选择有属性覆盖，形状（shapeshape）覆盖或者两者均有）覆盖或者两者均有的要素的要素
2.2 Update Override toolUpdate Override tool––将覆盖从覆盖字段移动到由表达规则定义的显示字段将覆盖从覆盖字段移动到由表达规则定义的显示字段
3–Symbolization RefinementSymbolization Refinement（符号精细化）
如何抓取网页数据,以抓取安居客举例
如何抓取网页数据，以抓取安居客举例 互联网时代，网页上有丰富的数据资源。我们在工作项目、学习过程或者学术研究等情况下，往往需要大量数据的支持。那么，该如何抓取这些所需的网页数据呢？ 对于有编程基础的同学而言，可以写个爬虫程序，抓取网页数据。对于没有编程基础的同学而言，可以选择一款合适的爬虫工具，来抓取网页数据。 高度增长的抓取网页数据需求，推动了爬虫工具这一市场的成型与繁荣。目前，市面上有诸多爬虫工具可供选择（八爪鱼、集搜客、火车头、神箭手、造数等）。每个爬虫工具功能、定位、适宜人群不尽相同，大家可按需选择。本文使用的是操作简单、功能强大的八爪鱼采集器。以下是一个使用八爪鱼抓取网页数据的完整示例。示例中采集的是安居客-深圳-新房-全部楼盘的数据。 采集网站：https://https://www.360docs.net/doc/e35073246.html,/loupan/all/p2/ 步骤1：创建采集任务 1）进入主界面，选择“自定义模式”
如何抓取网页数据，以抓取安居客举例图1 2）将要采集的网址复制粘贴到网站输入框中，点击“保存网址”
如何抓取网页数据，以抓取安居客举例图2 步骤2：创建翻页循环 1）在页面右上角，打开“流程”，以展现出“流程设计器”和“定制当前操作”两个板块。将页面下拉到底部，点击“下一页”按钮，在右侧的操作提示框中，选择“循环点击下一页”，以建立一个翻页循环
如何抓取网页数据，以抓取安居客举例图3 步骤3：创建列表循环并提取数据 1）移动鼠标，选中页面里的第一个楼盘信息区块。系统会识别此区块中的子元素，在操作提示框中，选择“选中子元素”
如何抓取网页数据，以抓取安居客举例图4 2）系统会自动识别出页面中的其他同类元素，在操作提示框中，选择“选中全部”，以建立一个列表循环
网页链接提取方法
https://www.360docs.net/doc/e35073246.html, 网页链接提取方法 网页链接的提取是数据采集中非常重要的部分，当我们要采集列表页的数据时，除了列表标题的链接还有页码的链接，数据采集只采集一页是不够，还要从首页遍历到末页直到把所有的列表标题链接采集完，然后再用这些链接采集详情页的信息。若仅仅靠手工打开网页源代码一个一个链接复制粘贴出来，太麻烦了。掌握网页链接提取方法能让我们的工作事半功倍。在进行数据采集的时候，我们可能有提取网页链接的需求。网页链接提取一般有两种情况：提取页面内的链接；提取当前页地址栏的链接。针对这两种情况，八爪鱼采集器均有相关功能实现。下面介绍一个网页链接提取方法。 一、八爪鱼提取页面内的超链接 在网页里点击需要提取的链接，选择“采集以下链接地址”
https://www.360docs.net/doc/e35073246.html, 网页链接提取方法1 二、八爪鱼提取当前地址栏的超链接 从左边栏拖出一个提取数据的步骤出来（如果当前页已经有其他的提取字段，这一步可省略）点击“添加特殊字段”，选择“添加当前页面网址”。可以看到，当前地址栏的超链接被抓取下来
https://www.360docs.net/doc/e35073246.html, 网页链接提取方法2 而批量提取网页链接的需求，一般是指批量提取页面内的超链接。以下是一个使用八爪鱼批量提取页面内超链接的完整示例。 采集网站： https://https://www.360docs.net/doc/e35073246.html,/search?initiative_id=tbindexz_20170918&ie=utf8&spm=a21 bo.50862.201856-taobao-item.2&sourceId=tb.index&search_type=item&ssid=s5-e&commend=all&imgfile=&q=手表&suggest=history_1&_input_charset=utf-8&wq=&suggest_query=&source=sugg est
网页数据抓取分析
1、抓取网页数据通过指定的URL，获得页面信息，进而对页面用DOM进行 NODE分析， 处理得到原始HTML数据，这样做的优势在于，处理某段数据的灵活性高，难点在节算法 需要优化，在页面HTML信息大时，算法不好，会影响处理效率。 2、htmlparser框架，对html页面处理的数据结构，HtmlParser采用了经典的Composite 模式，通过RemarkNode、TextNode、TagNode、AbstractNode和Tag来描述HTML页面 各元素。Htmlparser基本上能够满足垂直搜索引擎页面处理分析的需求，映射HTML标签，可方便获取标签内的HTML CODE。 Htmlparser官方介绍: htmlparser是一个纯的java写的html解析的库，它不依赖于其它的java库文件，主要用于改造或提取html。它能超高速解析html，而且不会出错。现在htmlparser最新版本为2.0。毫不夸张地说，htmlparser就是目前最好的html解析和分析 的工具。 3、nekohtml框架，nekohtml在容错性、性能等方面的口碑上比htmlparser好（包括htmlunit也用的是nekohtml），nokehtml类似XML解析原理，把html标签确析为dom, 对它们对应于DOM树中相应的元素进行处理。 NekoHTML官方介绍：NekoHTML是一个Java语言的HTML扫描器和标签补全器(tag balancer) ,使得程序能解析HTML文档并用标准的XML接口来访问其中的信息。这个解析 器能够扫描HTML文件并“修正”许多作者（人或机器）在编写HTML文档过程中常犯的错误。 NekoHTML能增补缺失的父元素、自动用结束标签关闭相应的元素，以及不匹配的内嵌元 素标签。NekoHTML的开发使用了Xerces Native Interface (XNI)，后者是Xerces2的实现基础。由https://www.360docs.net/doc/e35073246.html,/整理
网站爬虫如何爬取数据
https://www.360docs.net/doc/e35073246.html, 网站爬虫如何爬取数据 大数据时代，用数据做出理性分析显然更为有力。做数据分析前，能够找到合适的的数据源是一件非常重要的事情，获取数据的方式有很多种，最简便的方法就是使用爬虫工具抓取。今天我们用八爪鱼采集器来演示如何去爬取网站数据，以今日头条网站为例。 采集网站： https://https://www.360docs.net/doc/e35073246.html,/ch/news_hot/ 步骤1：创建采集任务 1）进入主界面选择，选择“自定义模式” 网站爬虫如何爬取数据图1
https://www.360docs.net/doc/e35073246.html, 2）将上面网址的网址复制粘贴到网站输入框中，点击“保存网址” 网站爬虫如何爬取数据图2 3）保存网址后，页面将在八爪鱼采集器中打开，红色方框中的信息是这次演示要采集的内容
https://www.360docs.net/doc/e35073246.html, 网站爬虫如何爬取数据图3 步骤2：设置ajax页面加载时间 ●设置打开网页步骤的ajax滚动加载时间 ●找到翻页按钮，设置翻页循环 ●设置翻页步骤ajax下拉加载时间 1）网页打开后，需要进行以下设置：打开流程图，点击“打开网页”步骤，在右侧的高级选项框中，勾选“页面加载完成向下滚动”，设置滚动次数，每次滚动间隔时间，一般设置2秒，这个页面的滚动方式，选择直接滚动到底部；最后点击确定
https://www.360docs.net/doc/e35073246.html, 网站爬虫如何爬取数据图4 注意：今日头条的网站属于瀑布流网站，没有翻页按钮，这里的滚动次数设置将影响采集的数据量
https://www.360docs.net/doc/e35073246.html, 网站爬虫如何爬取数据图5 步骤3：采集新闻内容 创建数据提取列表 1）如图，移动鼠标选中评论列表的方框，右键点击，方框底色会变成绿色 然后点击“选中子元素”
如何抓取网页数据
https://www.360docs.net/doc/e35073246.html, 如何抓取网页数据 很多用户不懂爬虫代码，但是却对网页数据有迫切的需求。那么怎么抓取网页数据呢？ 本文便教大家如何通过八爪鱼采集器来采集数据，八爪鱼是一款通用的网页数据采集器，可以在很短的时间内，轻松从各种不同的网站或者网页获取大量的规范化数据，帮助任何需要从网页获取信息的客户实现数据自动化采集，编辑，规范化，摆脱对人工搜索及收集数据的依赖，从而降低获取信息的成本，提高效率。 本文示例以京东评论网站为例 京东评价采集采集数据字段：会员ID，会员级别，评价星级，评价内容，评价时间，点赞数，评论数，追评时间，追评内容，页面网址，页面标题，采集时间。 需要采集京东内容的，在网页简易模式界面里点击京东进去之后可以看到所有关于京东的规则信息，我们直接使用就可以的。
https://www.360docs.net/doc/e35073246.html, 京东评价采集步骤1 采集京东商品评论（下图所示）即打开京东主页输入关键词进行搜索，采集搜索到的内容。 1、找到京东商品评论规则然后点击立即使用
https://www.360docs.net/doc/e35073246.html, 京东评价采集步骤2 2、简易模式中京东商品评论的任务界面介绍 查看详情：点开可以看到示例网址 任务名：自定义任务名，默认为京东商品评论 任务组：给任务划分一个保存任务的组，如果不设置会有一个默认组 商品评论URL列表：提供要采集的网页网址，即商品评论页的链接。每个商品的链接必须以#comment结束，这个链接可以在商品列表点评论数打开后进行复制。或者自己打开商品链接后手动添加，如果没有这个后缀可能会报错。多个商品评论输入多个商品网址即可。 将鼠标移动到？号图标可以查看详细的注释信息。 示例数据：这个规则采集的所有字段信息。
python抓取网页数据的常见方法
https://www.360docs.net/doc/e35073246.html, python抓取网页数据的常见方法 很多时候爬虫去抓取数据，其实更多是模拟的人操作，只不过面向网页，我们看到的是html在CSS样式辅助下呈现的样子，但爬虫面对的是带着各类标签的html。下面介绍python抓取网页数据的常见方法。 一、Urllib抓取网页数据 Urllib是python内置的HTTP请求库 包括以下模块：urllib.request 请求模块、urllib.error 异常处理模块、urllib.parse url解析模块、urllib.robotparser robots.txt解析模块urlopen 关于urllib.request.urlopen参数的介绍： urllib.request.urlopen(url, data=None, [timeout, ]*, cafile=None, capath=None, cadefault=False, context=None) url参数的使用 先写一个简单的例子：
https://www.360docs.net/doc/e35073246.html, import urllib.request response = urllib.request.urlopen(' print(response.read().decode('utf-8')) urlopen一般常用的有三个参数，它的参数如下： urllib.requeset.urlopen(url,data,timeout) response.read()可以获取到网页的内容，如果没有read()，将返回如下内容 data参数的使用 上述的例子是通过请求百度的get请求获得百度，下面使用urllib的post请求 这里通过https://www.360docs.net/doc/e35073246.html,/post网站演示（该网站可以作为练习使用urllib的一个站点使用，可以 模拟各种请求操作）。 import urllib.parse import urllib.request data = bytes(urllib.parse.urlencode({'word': 'hello'}), encoding='utf8')
网页数据抓取方法详解
https://www.360docs.net/doc/e35073246.html, 网页数据抓取方法详解 互联网时代，网络上有海量的信息，有时我们需要筛选找到我们需要的信息。很多朋友对于如何简单有效获取数据毫无头绪，今天给大家详解网页数据抓取方法，希望对大家有帮助。 八爪鱼是一款通用的网页数据采集器，可实现全网数据（网页、论坛、移动互联网、QQ空间、电话号码、邮箱、图片等信息）的自动采集。同时八爪鱼提供单机采集和云采集两种采集方式，另外针对不同的用户还有自定义采集和简易采集等主要采集模式可供选择。
https://www.360docs.net/doc/e35073246.html, 如果想要自动抓取数据呢，八爪鱼的自动采集就派上用场了。 定时采集是八爪鱼采集器为需要持续更新网站信息的用户提供的精确到分钟的，可以设定采集时间段的功能。在设置好正确的采集规则后，八爪鱼会根据设置的时间在云服务器启动采集任务进行数据的采集。定时采集的功能必须使用云采集的时候，才会进行数据的采集，单机采集是无法进行定时采集的。 定时云采集的设置有两种方法： 方法一：任务字段配置完毕后，点击‘选中全部’→‘采集以下数据’→‘保存并开始采集’，进入到“运行任务”界面，点击‘设置定时云采集’，弹出‘定时云采集’配置页面。
https://www.360docs.net/doc/e35073246.html, 第一、如果需要保存定时设置，在‘已保存的配置’输入框内输入名称，再保存配置，保存成功之后，下次如果其他任务需要同样的定时配置时可以选择这个配置。 第二、定时方式的设置有4种，可以根据自己的需求选择启动方式和启动时间。所有设置完成之后，如果需要启动定时云采集选择下方‘保存并启动’定时采集，然后点击确定即可。如果不需要启动只需点击下方‘保存’定时采集设置即可。
如何利用爬虫爬取马蜂窝千万+数据
https://www.360docs.net/doc/e35073246.html, 如何利用爬虫爬取马蜂窝千万+数据 最近有人爬了马蜂窝的1800万数据就刷爆了网络，惊动了互联网界和投资界，背后的数据团队也因此爆红。 你一定会想像这个团队像是电影里演的非常牛掰黑客一样的人物吧？ 你以为爬数据一定要懂爬虫写代码、懂Python才能爬取网络数据是吧？ 小八告诉你，过去可能是，但现在真的不！是！
https://www.360docs.net/doc/e35073246.html, 爬这样千万级数据的工作，我们绝大部分人即使不懂写代码，都可以实现。 如何实现？ 就是利用「数据爬虫工具」。 目前的爬虫工具已经趋向于简易、智能、可视化了，即使不懂代码和爬虫的小白用户都可以用。 比如在全球坐拥百万用户粉丝的八爪鱼数据采集器。 简单来说，用八爪鱼 爬取马蜂窝数据只要4个步骤。这里我们以爬取【马蜂窝景点点评数据】举例。
https://www.360docs.net/doc/e35073246.html, ★ 第一步 打开马蜂窝，选择某城市的景点页面，（本文以采集成都景点点评为例） 第二步 用八爪鱼爬取马蜂窝的成都的top30景点页面超链接url地址
https://www.360docs.net/doc/e35073246.html, 八爪鱼采集成都top30 景点网址url
https://www.360docs.net/doc/e35073246.html, 第三步 用八爪鱼简易模板「蚂蜂窝国内景点点评爬虫」 第四步 导出数据到EXCEL。
https://www.360docs.net/doc/e35073246.html, 小八只花了15分钟的时间就采集到成都TOP热门30景点的842条点评数据。如果同时运行多个客户端并使用使用云采集，将会更快。 （由于只是示例，每个景点小八只采集了842条评，如果有需要可以采集更多，这个可自己设置） 爬取结果
网页内容如何批量提取
https://www.360docs.net/doc/e35073246.html, 网页内容如何批量提取 网站上有许多优质的内容或者是文章，我们想批量采集下来慢慢研究，但内容太多，分布在不同的网站，这时如何才能高效、快速地把这些有价值的内容收集到一起呢？ 本文向大家介绍一款网络数据采集工具【八爪鱼数据采集】，以【新浪博客】为例，教大家如何使用八爪鱼采集软件采集新浪博客文章内容的方法。 采集网站： https://www.360docs.net/doc/e35073246.html,/s/articlelist_1406314195_0_1.html 采集的内容包括：博客文章正文，标题，标签，分类，日期。 步骤1：创建新浪博客文章采集任务 1）进入主界面，选择“自定义采集”
https://www.360docs.net/doc/e35073246.html, 2）将要采集的网址URL复制粘贴到网站输入框中，点击“保存网址”
https://www.360docs.net/doc/e35073246.html, 步骤2：创建翻页循环
https://www.360docs.net/doc/e35073246.html, 1）打开网页之后，打开右上角的流程按钮，使制作的流程可见状态。点击页面下方的“下一页”，如图，选择“循环点击单个链接”，翻页循环创建完成。（可在左上角流程中手动点击“循环翻页”和“点击翻页”几次，测试是否正常翻页。） 2）由于进入详情页时网页加载很慢，网址一直在转圈状态，无法立即执行下一个步骤，因此在“循环翻页”的高级选项里设置“ajax加载数据”，超时时间设置为5秒，点击“确定”。
https://www.360docs.net/doc/e35073246.html, 步骤3：创建列表循环 1）鼠标点击列表目录中第一个博文，选择操作提示框中的“选中全部”。 2）鼠标点击“循环点击每个链接”，列表循环就创建完成，并进入到第一个循环项的详情页面。
网页信息抓取软件使用方法
https://www.360docs.net/doc/e35073246.html, 网页信息抓取软件使用方法 在日常工作生活中，有时候经常需要复制网页上的文字内容，比如淘宝、天猫、京东等电商类网站的商品数据；微信公众号、今日头条、新浪博客等新闻文章数据。收集这些数据，一般都需要借助网页信息抓取软件。市面上抓取的小工具有很多，但真正好用，功能强大，操作又简单的，却屈指可数。下面就为大家介绍一款免费的网页信息抓取软件，并详细介绍其使用方法。 本文介绍使用八爪鱼采集器采集新浪博客文章的方法。 采集网站： https://www.360docs.net/doc/e35073246.html,/s/articlelist_1406314195_0_1.html 采集的内容包括：博客文章正文，标题，标签，分类，日期。 步骤1：创建新浪博客文章采集任务 1）进入主界面，选择“自定义采集”
https://www.360docs.net/doc/e35073246.html, 2）将要采集的网址URL复制粘贴到网站输入框中，点击“保存网址”
https://www.360docs.net/doc/e35073246.html, 步骤2：创建翻页循环 1）打开网页之后，打开右上角的流程按钮，使制作的流程可见状态。点击页面下方的“下一页”，如图，选择“循环点击单个链接”，翻页循环创建完成。（可在左上角流程中手动点击“循环翻页”和“点击翻页”几次，测试是否正常翻页。）
https://www.360docs.net/doc/e35073246.html, 2）由于进入详情页时网页加载很慢，网址一直在转圈状态，无法立即执行下一个步骤，因此在“循环翻页”的高级选项里设置“ajax 加载数据”，超时时间设置为5秒，点击“确定”。
https://www.360docs.net/doc/e35073246.html, 步骤3：创建列表循环 1）鼠标点击列表目录中第一个博文，选择操作提示框中的“选中全部”。
php获取网页内容方法
1.file_get_contents获取网页内容 2.curl获取网页内容 3.fopen->fread->fclose获取网页内容
利用R从网站上抓数据
Webscraping using readLines and RCurl There is a massive amount of data available on the web. Some of it is in the form of precompiled, downloadable datasets which are easy to access. But the majority of online data exists as web content such as blogs, news stories and cooking recipes. With precompiled files, accessing the data is fairly straightforward; just download the file, unzip if necessary, and import into R. For “wild” data however, getting the data into an analyzeable format is more difficult. Acce ssing online data of this sort is sometimes reffered to as “webscraping”. Two R facilities, readLines() from the base package and getURL() from the RCurl package make this task possible. readLines For basic webscraping tasks the readLines() function will usually suffice. readLines() allows simple access to webpage source data on non-secure servers. In its simplest form, readLines() takes a single argument – the URL of the web page to be read: web_page <- readLines("https://www.360docs.net/doc/e35073246.html,") As an example of a (somewhat) practical use of webscraping, imagine a scenario in which we wanted to know the 10 most frequent posters to the R-help listserve for January 2009. Because the listserve is on a secure site (e.g. it has https:// rather than http:// in the URL) we can't easily access the live version with readLines(). So for this example, I've posted a local copy of the list archives on the this site. One note, by itself readLines() can only acquire the data. You'll need to use grep(), gsub() or equivalents to parse the data and keep what you need. # Get the page's source web_page <- readLines("https://www.360docs.net/doc/e35073246.html,/jan09rlist.html") # Pull out the appropriate line author_lines <- web_page[grep("", web_page)] # Delete unwanted characters in the lines we pulled out authors <- gsub("", "", author_lines, fixed = TRUE) # Present only the ten most frequent posters author_counts <- sort(table(authors), decreasing = TRUE) author_counts[1:10]
网站数据爬取方法
https://www.360docs.net/doc/e35073246.html, 网站数据爬取方法 网站数据主要是指网页上的文字，图像，声音，视频这几类，在告诉的信息化时代，如何去爬取这些网站数据显得至关重要。对于程序员或开发人员来说，拥有编程能力使得他们能轻松构建一个网页数据抓取程序，但是对于大多数没有任何编程知识的用户来说，一些好用的网络爬虫软件则显得非常的重要了。以下是一些使用八爪鱼采集器抓取网页数据的几种解决方案： 1、从动态网页中提取内容。 网页可以是静态的也可以是动态的。通常情况下，您想要提取的网页内容会随着访问网站的时间而改变。通常，这个网站是一个动态网站，它使用AJAX技术或其他技术来使网页内容能够及时更新。AJAX即延时加载、异步更新的一种脚本技术，通过在后台与服务器进行少量数据交换，可以在不重新加载整个网页的情况下，对网页的某部分进行更新。
https://www.360docs.net/doc/e35073246.html, 表现特征为点击网页中某个选项时，大部分网站的网址不会改变；网页不是完全加载，只是局部进行了数据加载，有所变化。这个时候你可以在八爪鱼的元素“高级选项”的“Ajax加载”中可以设置，就能抓取Ajax加载的网页数据了。 八爪鱼中的AJAX加载设置
https://www.360docs.net/doc/e35073246.html, 2.从网页中抓取隐藏的内容。 你有没有想过从网站上获取特定的数据，但是当你触发链接或鼠标悬停在某处时，内容会出现？例如，下图中的网站需要鼠标移动到选择彩票上才能显示出分类，这对这种可以设置“鼠标移动到该链接上”的功能，就能抓取网页中隐藏的内容了。 鼠标移动到该链接上的内容采集方法
https://www.360docs.net/doc/e35073246.html, 在滚动到网页底部之后，有些网站只会出现一部分你要提取的数据。例如今日头条首页，您需要不停地滚动到网页的底部以此加载更多文章内容，无限滚动的网站通常会使用AJAX或JavaScript来从网站请求额外的内容。在这种情况下，您可以设置AJAX超时设置并选择滚动方法和滚动时间以从网页中提取内容。
1.怎样定义抓取网页数据的规则
1 怎样定义抓取网页数据的规则 MetaSeeker工具的用处是定义抓取网页数据的规则，就像首 页所说，手工编写抓取网 页数据的规则容易出错，MetaSeeker能够自动生成抓取规则，使用直观的图形化界面，将人为编码错误的可能降到最 小，而且能够用极短的时间定义一套新的信息提取规则。 与其它网页数据抓取工具不同，MetaSeeker首先引导用户为目标网页定义语义结构（我们称之为信息结构）， 并且存储到信息结构描述文件中，这一步看似多余，实际上意义重大，因为目标网站的页面结构可能随着时间进行改变，例如，网站软件进行升级等，原先定义的抓 取网页数据的规则可能会部分失效，需要针对最新页面结构进行调整，调整信息结 构要比直接调整抓取规则直观的多，因为信息结构直接对应网页内容的语义结构， 加上图 形化用户界面（GUI）的便利性，锁定目标网站信息结构变化很容易。 另外，定义信息结构，而不是直接对网页在浏览器上的展现形式或者HTML源代码文 档进行分析，网站更换界面风格（称为皮肤，skin或者 theme）或者修改HTML文档中各内容块的位置和顺序不会导致原先定义的网页数据抓取规则失效。 定义信息结构还有更重大的意义，将网页数据抓取演进到语义网络时代的内容格式化和结构化数据（data sets）管理，抓取下来的结构化网页数据由于包含语义元数据，既可以很 容易的集成到Web 2.0的服务器系统中，例如，垂直搜索、SNS、商品比价服务、商业情报（智能）分析等等，又可以顺利地向Web 3.0（语义网络）时代演进，例如，建设异构数据 对象搜索、结构化数据对象的多形式展现（例如，手机搜索或者手机mashup混搭）等。 与其它网页数据抓取工具的另外一个重大区别是：MetaSeeker工具包将生成抓取网页数据规则和使用抓取规则进行数据抽取的工作分到两个软件工 具上，即MetaStudio 和DataScraper， 是一种高度模块化设计，而且增加了部署的灵活性。实际上，生成网页数据 抓取规则和爬行网络提取信息是两个泾渭分明的任务，分别用不同的模块实现可以最恰当 的贴合软件运行逻辑，例如，DataScraper采用了工作流框架，既确保软件执行效率又确保系统的扩展性，如果想增强DataScraper爬行网络 的能力，只需要扩展工作流的处理节点即可，关于DataScraper的特点和分析留待《DataScraper 使用手册》详述。 MetaStudio生成的抓取网页数据的规则存储在信息提取指令文件中，即数据提取指令 文件和线索提取指令文件，顾名思义，这两个文件命令DataScraper连续不断地从目标网站 上抓取页面数据和网页上的超链接。
股票交易数据抓取采集的方法
https://www.360docs.net/doc/e35073246.html, 股票交易数据抓取采集的方法 本文介绍使用八爪鱼采集器简易模式采集抓取股票交易数据的方法。 股票交易数据采集详细字段说明：股票代码，股票名称，股票最新价，股票最新价，股票换手率，股票市盈率，股票主力成本，机构参与度，数据日期，数据采集日期。 需要采集东方财富网里详细内容的，在网页简易模式界面里点击东方财富网，进去之后可以看到关于东方财富网的三个规则信息，我们依次直接使用就可以的。 采集东方财富网 -千评千股-数据中心内容（下图所示）即打开东方财富网主页点击第二个（千评千股-数据中心）采集搜索到的内容。
https://www.360docs.net/doc/e35073246.html, 1、找到东方财富网-千评千股-数据中心规则然后点击立即使用 2、下图显示的即为简易模式里面千评千股-数据中心的规则 ①查看详情：点开可以看到示例网址 ②任务名：自定义任务名，默认为千评千股-数据中心 ③任务组：给任务划分一个保存任务的组，如果不设置会有一个默认组 ④翻页次数：设置要采集几页 ⑤示例数据：这个规则采集的所有字段信息
https://www.360docs.net/doc/e35073246.html, 3、规则制作示例 任务名：自定义任务名，也可以不设置按照默认的就行 任务组：自定义任务组，也可以不设置按照默认的就行 翻页次数: 2 设置好之后点击保存，保存之后会出现开始采集的按钮 保存之后会出现开始采集的按钮
https://www.360docs.net/doc/e35073246.html, 4、选择开始采集之后系统将会弹出运行任务的界面 可以选择启动本地采集（本地执行采集流程）或者启动云采集（由云服务器执行采集流程），这里以启动本地采集为例，我们选择启动本地采集按钮
JAVA通过url获取网页内容
import java.io.*; import https://www.360docs.net/doc/e35073246.html,.URL; import https://www.360docs.net/doc/e35073246.html,.URLConnection; public class TestURL { public static void main(String[] args) throws IOException { test4(); test3(); test2(); test(); } /** * 获取URL指定的资源。 * * @throws IOException */ public static void test4() throws IOException { URL url = new URL("https://www.360docs.net/doc/e35073246.html,/attachment/200811/200811271227767778082.jpg"); //获得此URL 的内容。 Object obj = url.getContent(); System.out.println(obj.getClass().getName()); } /** * 获取URL指定的资源 * * @throws IOException */ public static void test3() throws IOException { URL url = new URL("https://www.360docs.net/doc/e35073246.html,/down/soft/45.htm"); //返回一个URLConnection 对象，它表示到URL 所引用的远程对象的连接。 URLConnection uc = url.openConnection(); //打开的连接读取的输入流。 InputStream in = uc.getInputStream(); int c; while ((c = in.read()) != -1) System.out.print(c); in.close(); } /** * 读取URL指定的网页内容
如何抓取网页数据
网页源码中规则数据的获取过程： 第一步：获取网页源码。 第二步：使用正则表达式匹配抽取所需要的数据。 第三步：将结果进行保存。 这里只介绍第一步。 https://www.360docs.net/doc/e35073246.html,.HttpWebRequest; https://www.360docs.net/doc/e35073246.html,.HttpWebResponse; System.IO.Stream; System.IO.StreamReader; System.IO.FileStream; 通过C#程序来获取访问页面的内容（网页源代码）并实现将内容保存到本机的文件中。 方法一是通过https://www.360docs.net/doc/e35073246.html,的两个关键的类 https://www.360docs.net/doc/e35073246.html,.HttpWebRequest; https://www.360docs.net/doc/e35073246.html,.HttpWebResponse; 来实现的。 具体代码如下 方案0：网上的代码，看明白这个就可以用方案一和方案二了 HttpWebRequest httpReq; HttpWebResponse httpResp; string strBuff = ""; char[] cbuffer = new char[256]; int byteRead = 0; string filename = @"c:\log.txt"; ///定义写入流操作 public void WriteStream() { Uri httpURL = new Uri(txtURL.Text); ///HttpWebRequest类继承于WebRequest，并没有自己的构造函数，需通过WebRequest 的Creat方法建立，并进行强制的类型转换 httpReq = (HttpWebRequest)WebRequest.Create(httpURL); ///通过HttpWebRequest的GetResponse()方法建立HttpWebResponse,强制类型转换 httpResp = (HttpWebResponse) httpReq.GetResponse(); ///GetResponseStream()方法获取HTTP响应的数据流,并尝试取得URL中所指定的网页内容///若成功取得网页的内容，则以System.IO.Stream形式返回，若失败则产生 ProtoclViolationException错误。在此正确的做法应将以下的代码放到一个try块中处理。这里简单处理 Stream respStream = httpResp.GetResponseStream(); ///返回的内容是Stream形式的，所以可以利用StreamReader类获取GetResponseStream的内容，并以StreamReader类的Read方法依次读取网页源程序代码每一行的内容，直至行尾（读取的编码格式：UTF8） StreamReader respStreamReader = new StreamReader(respStream,Encoding.UTF8); byteRead = respStreamReader.Read(cbuffer,0,256);
动态网页数据爬取
动态网站的抓取静态网站困难一些，主要涉及ajax和html，传统的web应用，我们提交一个表单给服务器接受请求返回一个页面给浏览器，这样每次用户的交互都需要向服务器发送请求。同时对整个网页进行刷新，这样会浪费网络宽带影响用户体验。 怎么解决？ Ajax--异步JavaScript和xml。是JavaScript异步加载技术、xml及dom还有xhtml和css等技术的组合。他不必刷新整个页面只需要页面的局部进行更新。Ajax只取回一些必要数据，使用soap、xml或者支持json的web service接口。这样提高服务器的响应减少了数据交互提高了访问速度。 Dhtml动态html，他只是html、css、和客户的的一宗集合，一个页面有html、css、JavaScript 制作事事变换页面的元素效果的网页设计。 如何分辨？ 最简单的就是看有没有“查看更多”字样，也可以使用response访问网页返回的response 内容和浏览器的内容不一致时就是使用了动态技术。这样我们也无法提取有效数据 如何提取？ 1直接在JavaScript中采集的数据分析 2使用采集器中加载好的数据 为什么使用Phantomjs？ Ajax请求太多并加密，手动分析每个ajax请求无疑愚公移山，phantomjs直接提取浏览器渲染好的结果不进行ajax请求分析，其实phantomjs就是基于webkit 的服务端JavaScript api。支持web而无需浏览器支持运行快，支持各种web标准：dom、css、json、canvas、svg。常用于页面自动化、网络监测、网页截屏、无界面测试。 安装？ 下载https://www.360docs.net/doc/e35073246.html,/download.html解压设置环境变量phantomjs -v测试安装 下载：{l55l59〇6〇9〇} 使用 页面加载：分析创建网页对象的呈现 代码：使用webpage模块创建一个page对象，通过page对象打开url网址，如果状态为success 通过render方法将页面保存。 代码评估：利用evaluate执行沙盒它执行网页外的JavaScript代码，evaluate返回一个对象然后返回值仅限对象不包含函数 屏幕捕获： 网络监控： 页面自动化： 常用模块和方法？ Phantom，webpage，system，fs 图形化？ Selenium将Python和phantomjs紧密结合实现爬虫开发。Selenium是自动化测试工具，支持各种浏览器，就是浏览器驱动可以对浏览器进行控制。并且支持多种开发语言phantomjs 负责解析JavaScript，selenium负责驱动浏览器和Python对接。 安装 pip install selenium===3.0.1 或者https://https://www.360docs.net/doc/e35073246.html,/pypi/selenium#downloads 下载源码解压python setup.py install selenium3然后下载https://https://www.360docs.net/doc/e35073246.html,/SeleniumHQ/selenium/
最全的八爪鱼循环提取网页数据方法
https://www.360docs.net/doc/e35073246.html, 最全的八爪鱼循环提取网页数据方法在八爪鱼中，创建循环列表有两种方式，适用于列表信息采集、列表及详情页采集，是由八爪鱼自动创建的。当手动创建的循环不能满足需求的时候，则需要我们手动创建或者修改循环，以满足更多的数据采集需求。 循环的高级选项中，有5大循环方式：URL循环、文本循环、单个元素循环、固定元素列表循环和不固定元素列表循环。 一、URL循环 适用情况：在多个同类型的网页中，网页结构和要采集的字段相同。 示例网址： https://https://www.360docs.net/doc/e35073246.html,/subject/26387939/ https://https://www.360docs.net/doc/e35073246.html,/subject/6311303/ https://https://www.360docs.net/doc/e35073246.html,/subject/1578714/ https://https://www.360docs.net/doc/e35073246.html,/subject/26718838/ https://https://www.360docs.net/doc/e35073246.html,/subject/25937854/ https://https://www.360docs.net/doc/e35073246.html,/subject/26743573/
https://www.360docs.net/doc/e35073246.html, 操作演示： 具体请看此教程：https://www.360docs.net/doc/e35073246.html,/tutorialdetail-1/urlxh_7.html 二、文本循环 适用情况：在搜索框中循环输入关键词，采集关键词搜索结果的信息。 实现方式：通过文本循环方式，实现循环输入关键词，采集关键词搜索结果。示例网址：https://https://www.360docs.net/doc/e35073246.html,/ 操作演示：
https://www.360docs.net/doc/e35073246.html, 具体请看此教程：https://www.360docs.net/doc/e35073246.html,/tutorialdetail-1/wbxh_7.html 注意事项：有的网页，点击搜索按钮后，页面会发生变化，只能采集到第一个关键词的数据，则打开网页步骤需放在文本循环内。 例：https://https://www.360docs.net/doc/e35073246.html,/ 如图，如果将打开网页步骤，放在循环外，则只能提取到第一个关键词的搜索结果文本，不能提取到第二个关键词的搜索结果文本，文本循环流程不能正常执行。
活用excel超简单网页列表数据手动抓取法
思路：将直接复制下来的列表信息，通过对各种符号的批量替换，最终使其能在excel文档里，自动排列为A、B、C等不同列，最终通过excel公式，批量生成sql查询语句，直接执行查询，数据入库； 例： https://www.360docs.net/doc/e35073246.html,/search.aspx?ctl00$ContentPlaceHolder1$cboPrevio=%E5% 8C%97%E4%BA%AC 1.直接把列表信息复制进新建的txt文档，格式非自动换行，如下图：
2.再把txt里的数据复制进新建的word文档，如图： (注：此处先复制进txt再复制进word的原因是，从网上拿下来的数据直接放入word会包含自身的列表结构甚至是图片，那些都是不需要的东西) 3. ctrl+H打开搜索替换，通过观察，我们在搜索中输入“回车+空格”，即“^p ”，替换中输入“空格”，即“”，如图：
4.全部替换，如图： 5.搜索替换，搜索中输入两个空格“”，替换中输入一个空格“”，疯狂的全部替换，一直到再也搜不到双空格，最终把所有有间隔的地方，变成了一个空格，如图所示：
6.将数据全选复制到新建excel文件的A列，选中A列，数据，分列，如图： 7.选分隔符号，下一步，空格，完成分列，(有连续识别符作为单个处理的选项，可以节省步骤5，但是我为了保险，还是没省略)，如图：
8.手动修改例如第三行的，奇葩的、不合群的数据： 9.在此特殊例中，由于每四个电话号码出现一个空格，导致了分列，可用一个简单公式：在E1中输入“=C1&D1”，回车，然后在E1单元格的右下角下拉公式至最后一行，合并如图：