基于新浪微博的碎片化学习研究

第17卷第5期软件导刊?教育技术2018年5月Journal o f Educational Technology Y o l.l7N o.5 May 2018

基于新浪微博的碎片化学习研究

王月彤\母静怡％

(1.东北师范大学信息科学与技术学院，吉林长春130024).巴川中学，重庆402560)

摘要：介绍碎片化学习，分析新浪微博对碎片化学习的支持，以及在新浪微博平台进行碎片化学习存在的问题，并提出了相应的建议。

关键词：社交网络）斤浪微博）卒片化学习

中图分类号：G434 文献标识码：A文章编号：1672-7800(2018)05-0030-02

1碎片化学习

随着互联网、云计算、大数据、虚拟现实等技术的蓬勃发展，人们使用智能手机、平板电脑等占用了大量的碎片化时间，微博、微信等社交媒体已融入人们的生活。随着新媒体的兴起与发展，移动学习迎来了更能满足学习者个性化知识需求的学习方式碎片化学习。祝智庭教授&'在《教育信息化的新发展：国际观察与国内动态》一文中指出，学习碎片化更大程度肇始于信息碎片化，进而带来知识碎片化、时间碎片化、空间碎片化、媒体碎片化、关系碎片化、思维碎片化、体验碎片化等。有研究表明，学习者进行碎片化学习，不利于系统化知识的掌握、容易引发肤浅阅读问题、容易造成注意力不集中、弱化对复杂问题的思考能力&'。学习者在碎片化学习中存在感知觉、注意、记忆、思维等认知方面的问题[3]。

碎片化学习者数量庞大，近年来国内外学者也越来关注此话题。日本山内祐平副教授介绍过面向企业开展的英语移动学习项目“N E k i r i English”！彻底英语”），该项目开发了手机使用的听力以及基于企业文化背景的移动型教材。研究表明：企业人士利用碎片的时间学习英语，很大程度上降低了使用英语的不安感。企业人士利用零碎的时间进行学习，能够提高英语听力能力&]。

快速的生活节奏，迅速发展的科技，日益膨胀的信息，这种时代背景催生了碎片化学习方式。

"新浪微博对碎片化学习的支持

新浪微博是新浪网推出的、提供微型博客服务类的社交网站。用户可以通过互联网、手机客户端、电脑客户端等发布消息或上传图片。新浪微博中知识信息丰富而全面，用户可以通过发布信息、搜索信息、分享信息、交流信息，获得生活上的帮助、精神上的慰藉等。《微博媒体特性及用户使用状况研究报告》中指出，56的用户会在交通中（坐车等)使用微博，*1. 46的用户会在等候的时间使用微博，42.36的用户会在睡前或早起后使用微博。可以看出，微博用户大多是在碎片化时间使用微博。

2.1新浪微博传播速度快、传播范围广是碎片化学习的基础

新浪微博发布了 2017年第一季度财报，截至3月31 日，微博月活跃用户达3. 4亿，已超过Twitter成为全球用户规模最大的独立社交媒体公司。一些名人、专家、企业家、媒体人等有一定社会影响力的人都已注册成为微博用户。与此同时，一些有专业特长并且乐于分享专业知识的人，在新浪微博上有大量的粉丝，成为所谓的“网红”。

新浪微博传播速度快，人们可以方便快速地获取信息。只需要一部有网络的智能手机，学习者可以随时随地在微博针对感兴趣的内容进行学习。同时，学习者可以通过评论、转发、@用户等功能传播信息，与志同道合的人交流互动，加快了传播速度，扩大了传播范围。由此可见，新浪微博有广泛的用户基础，以及强大的传播影响力，为信息的传播提供了良好的平台，这是碎片化学习的基础。

2.2新浪微博个性化的内容定制与推送是碎片化学习的关键

新浪微博用户可以根据喜好与需求，关注相应的博主，同时用户可以将已关注的博主按自己的方式进行分组，用户在浏览微博时，可以选择只看某一个分组的内容。并且，新浪微博会根据用户的兴趣爱好，推送一些相似博主发布的内容，用户可以选择是否关注被推送的博主。如果学习者在学习英语，在微博关注了一些英语老师的微博，新浪微

收稿日期=2018-01-03

作者简介：王月彤（1993-)，女，东北师范大学硕士研究生，研究方向为在线学习；母静怡（1993-)，女，重庆市潼南巴川中学校教师，研究方向为信息技术与课程整合。

微博营销的历史演变

微博营销的历史演变 2006年3月，博客技术先驱blogger创始人埃文·威廉姆斯(Evan Williams)创建的新兴公司Obvious推出了大围脖服务产品——Twitter。 Twitter的出现把世人的眼光引入了一个叫微博的小小世界里。世界100强大企业中有73家在Twitter上安了家。较早利用Twitter进行品牌营销的企业是戴尔，从2007年3月开始，戴尔的Twitter账号已超过了150万的追随者，通过这一销售渠道宣传促销而卖出的个人电脑、计算机配件和软件，已超过650万美元的销售收入，有超过100名的员工通过Twitter消息与顾客沟通。 Twitter在国外的大红大紫促使国内很多企业家看到了商机。 2007年，中国第一家带有微博色彩的“饭否网”开始进入人们的视野。 2009年8月份，中国最大的门户网站新浪网推出“新浪微博”内测版，成为了中国首家提供专业微博服务的网站，从此微博正式进入中文上网主流人群视野。而微博这个全新的名词，成为全世界最流行的词汇。在企业微博方面，以新浪微博为例，已有超过13万家企业开通了自己的企业官方微博，也有过半的个人微博用户关注了企业微博；企业借微博平台更人性化地和消费者“对话”，消费者也会直接通过企业微博投诉和维权，目前买卖双方的日均微博互动高峰时长已达12小时。

仅在新浪上，目前开通微博的企业用户就覆盖22个行业，餐饮美食、汽车交通、商务服务、电子商务、IT等跻身前五大开通微博量最高行业。在开通微博的13万家企业中，有143家世界500强企业，有207家中国500强企业。在地域分布上，京沪穗企业占地域分布榜前三名，三地开微博的企业量均超过1.7万个。据第31次《中国互联网络发展状况统计报告》显示，到2012年12月底，中国网民规模达到5.64亿，中国微博用户规模为3.09亿，手机微博用户规模2.02亿。由于目前不少企业微博更新快、够实用，56%的个人用户至少会关注1个企业微博。专家指出，官方微博目前仍处发展初级阶段，但未来有替代企业官网的趋势。

浅析新浪微博的优缺点及前景

仿佛在一夜之间，那些曾经神秘的明星、名人和社会名流仿佛通过新浪微博一下子来到了我们面前，我们甚至可以去评论他们的所说所想，运气好的话说不定还可以得到其回复，曾经的遥远感觉不再遥远。由于微博规定的单条状态发布字数不超过140个，很多文化较为欠缺的名人也纷纷开微，几句感想，几句随笔，不用再有小学生凑字数的感觉了。如果真有长篇大论，长微博也可以轻松搞定，博客在这种大背景下也逐渐淡出了历史的舞台。可以说是名人和明星为微博的“燃烧”点起了第一把火。在这方面，腾讯微博就没有他的优势了，由于腾讯微博嵌入QQ，没有哪个名人愿意把自己的个人隐私聊天软件账号泄露出去，这也导致了腾讯微博在互动性上的劣势。 2、即时性新浪微博惊人的传播速度和传播范围满足了很多希望第一时间掌握信息的用户的“虚荣心理”。随着3G、4G网络的部署，数据流量的速度不再是用户使用移动端app的障碍，人们更愿意将自己的碎片时间用到刷微博上，享受着压力释放、最新新闻资讯、幽默漫画等给他们带来的生活享受。 3、自主性微博是一个内容自创的平台，同时也是一个传播的平台。人人都可以通过微博来表达和传播自己的观点，从而形成一个自己的受众群落。此外，用户还可以通过@、转发等形式来和自己的朋友、同学或者是同事进行沟通和互动。缺点 1、广告与营销越来越多随着微博的迅猛发展，越来越多的商家看到了其潜在的巨大利益和商机，他们不断的把广告内容发到微博中，包括其中的一些旅行、英文等专题类微博也越来越多的充斥着各种广告，这不免让给用户产生抵触心理，进而对微博的好感度下降。 2、有价值的信息越来越少随着用户不断的发表自己日常的衣食住行，同时转发一些大V的生活琐事，微博内容的信息量正在逐渐减少，其他用户在刷微博的时候难免会对这些事情产生反感心态。 3、盈利点较少目前，微博主要依靠广告和向用户企业收费来盈利，但上面也说过，这种方式无疑会增加用户的反感度，所以无异于饮鸩止渴。所以说，新浪微博现在除了为网站集聚大量人气之外，其尚无明确的盈利模式，长此以往，其自身的运营将会成为一个比较严重的问题。

新浪微博技术

中国首届微博开发者大会在北京举行，这是国内微博行业的首场技术盛宴。作为国内微博市场的绝对领军者，新浪微博将在此次大会上公布一系列针对开发者的扶持政策，以期与第三方开发者联手推动微博行业的整体发展。图为微博平台首席架构师杨卫华演讲。以下为演讲实录：大家下午好，在座的大部分都是技术开发者，技术开发者往往对微博这个产品非常关心。最晚的一次，是12点多收到一个邮件说想了解一下微博底层是怎么构架的。很多技术人员对微博的构架非常感兴趣，就是一个明星他有300万粉丝，这个技术怎么来实现？今天在这里跟大家分享一下微博的底层机构，让大家对微博的底层技术有更好的了解。另外不管是做客户端、1.0、2.0、论坛、博客都要考虑架构的问题，架构实际上是有一些共性的。今天我通过讲解微博里面的一些架构，分析一下架构里面哪些共性大家可以参考。首先给大家介绍一下微博架构发展的历程。新浪微博在短短一年时间内从零发展到五千万用户，我们的基层架构也发展了几个版本。第一版是非常快的，我们可以非常快的实现我们的模块。我们看一下技术特点，微博这个产品从架构上来分析，它需要解决的是发表和订阅的问题。我们第一版采用的是推的消息模式，假如说我们一个明星用户他有10万个粉丝，那就是说用户发表一条微博的时候，我们把这个微博消息攒成10万份，这样就是很简单了，第一版的架构实际上就是这两行字。第一版本的技术细节，典型的LAMP(Linux-Apache-MySQL-PHP)架构，是使用Myisam搜索引擎，它的优点就是速度非常快。另外一个是MPSS，就是多个端口可以布置在服务器上。为什么使用MPSS？假如说我们做一个互联网应用，这个应用里面有三个单元，我们可以由三种部署方式。我们可以把三个单元部署在三台服务器上，另外一种部署模式就是这三个单元部署在每个服务器上都有。这个解决了两个问题，一个是负载均衡，因为每一个单元都有多个结点处理，另外一个是可以防止单点故障。如果我们按照模式一来做的话，任何一个结点有故障就会影响我们系统服务，如果模式二的话，任何一个结点发生故障我们的整体都不会受到影响的。我们微博第一版上线之后，用户非常喜欢这个产品，用户数增长非常迅速。我们技术上碰到几个问题。第一个问题是发表会出现延迟现象，尤其是明星用户他的粉丝多。另外系统处理明星用户发表时候的延迟，可能会影响到其他的用户，因为其他的用户同一时间发表的话，也会受到这个系统的影响。我们就考虑这个系统怎么改进。首先是推模式，这肯定是延迟的首要原因，我们要把这个问题解决掉。其次我们的用户越来越多，这个数据库表从一百万到一亿，数据规模不一样处理方式是有差别的。我们第一版单库单表的模式，当用户数量增多的时候，它不能满足就需要进行拆分。第二个是锁表的问题，我们考虑的是更改引擎。另外一个是发表过慢，我们考虑的是异步模式。第二版我们进行了模块化，我们首先做了一个层，做了拆分，最右边的发表做了异步模式。第二个服务层，我们把微博基础的单元设计成服务层一个一个模块，最大是对推模式进行了改进。首先看一下投递模式的优化，首先我们要思考推模式，如果我们做一下改进把用户分成有效和无效的用户。我们一个用户比如说有一百个粉丝，我发一条微博的时候不需要推给一百个粉丝，因为可能有50个粉丝不会马上来看，这样同步推送给他们，相当于做无用功。我们把用户分成有效和无效之后，我们把他们做一下区分，比如说当天登陆过的人我们分成有效用户的话，只需要发送给当天登陆过的粉丝，这样压力马上就减轻了，另外投递的延迟也减小了。

微博的由来及发展历史

一、微博的定义微博，即微博客，是一个基于用户关系信息分享、传播以及获取平台，用户可以及时更新简短的话题，并以公开的方式进行发布。微博是web3.0新兴起的一类开放因特网社交服务，国际上最知名的微博网站是推特，目前推特的独立访问用户已达3200万人，美国总统奥巴马、美国白宫、FBI、Google、HTC等很多国际知名个人和组织在Twitter上进行营销与用户交互。国内著名的微博有：新浪微博、腾讯说说、网易微博、搜狐微博等。二、微博的特点：微博虽然火热，但是风格与Twitter完全不同。国人不爱隐私爱热闹，微博与其说是朋友圈，不如说是粉丝厂。正好又由于众所周知的原因，微博又变成网民集体娱乐广场和讨伐的战场，知识分子启蒙的公共课堂。微博作为一种分享和交流平台，其更注重时效性和随意性。微博客更能表达出每时每刻的思想和最新动态，而博客则更偏重于梳理自己在一段时间内的所见、所闻、所感。

1.便捷性。微博有140个字符的长度限制，对于西文，以英文为例，一个英文单词加上空格平均也要五六个字符，而中文以双字词为主流，这样每条Twitter能够传达的信息量，就只有一条中文微博的1/3左右。 2.创新交互性。与博客的交互方式不同，微博实际上是可以一点对多点，也可以点对点，当你关注一个子集感兴趣的人时，两三天就会形成习惯地关注，移动终端提供的便利性和多媒体化，是的微博用户体验的粘性越来越强。 3.原创性。微博网站的即时通信功能非常强大，通过QQ和MSN就可以直接发布，在没有网络的地方，只要有手机也可以及时更新微博的内容，哪怕你就在事发现场。如一些大的突发事件或引起全球关注的大事，如果你当时在场，利用各种手段在微博上发布，其实时性，现场感以及快捷性，甚至超过所有媒体。

微博数据抓取方法详细步骤

https://www.360docs.net/doc/a8677751.html, 微博数据抓取方法详细步骤很多朋友想要采集微博上面的有用信息，对于繁多的信息量，需要手动的复制，粘贴，修改格式吗？不用这么麻烦！教你一键收集海量数据。本文介绍使用八爪鱼采集器简易模式采集抓取新浪微博的方法。需要采集微博内容的，在网页简易模式界面里点击微博进去之后可以看到所有关于微博的规则信息，我们直接使用就可以的。新浪微博数据抓取步骤1 采集在微博首页进关键词搜索后的信息以及发文者的关注量，粉丝数等（下图所示）即打开微博主页进行登录后输入关键词进行搜索，采集搜索到的内容以及进入发文者页面采集关注量，粉丝数，微博数。

https://www.360docs.net/doc/a8677751.html, 1、找到微博网页-关键词搜索规则然后点击立即使用新浪微博数据抓取步骤2 2、简易模式中微博网页-关键词搜索的任务界面介绍查看详情：点开可以看到示例网址任务名：自定义任务名，默认为微博网页-关键词搜索任务组：给任务划分一个保存任务的组，如果不设置会有一个默认组用户名：请填写您的微博账号密码：请填写微博账号的登录密码关键词/搜索词：用于搜索的关键词，只支持填写一个翻页次数：设置采集多少页，由于微博会封账号，限制翻页1-50页将鼠标移动到？号图标和任务名顶部文字均可以查看详细的注释信息。示例数据：这个规则采集的所有字段信息。

https://www.360docs.net/doc/a8677751.html, 新浪微博数据抓取步骤3 3、任务设置示例例如要采集与十九大相关的微博消息在设置里如下图所示：任务名：自定义任务名，也可以不设置按照默认的就行任务组：自定义任务组，也可以不设置按照默认的就行用户名：请填写您的微博账号，必填密码：请填写微博账号的登录密码，必填关键词/搜索词：用于搜索的关键词，此处填写“十九大” 翻页次数：设置采集多少页，此处设置2页设置好之后点击保存

新浪微博分析报告

新浪微博分析报告新浪微博加粉丝,完善个人资料。最好用自己的真实姓名（或有趣的匿名）、真实的头像（美女、帅锅或有趣的头像）、个人介绍（可以是搞笑的吸引人的）。真实的信息让人觉得更可信，会大大提高被收听的几率。通过微博第三方应用（狠狠转、互粉大厅、粉丝大师、互粉加加、互粉小助手、推兔、爱互粉、推兔互粉等。。。）来添加粉丝数量。最好不要用软件，软件刷的粉丝大多是死粉，且用软件刷还很容易被封号。我发现想让一个人转发或评论你的微博不是件容易的事。首先微博必须有看点（让别人有耐心看下去）、笑点（让别人对你产生兴趣）、创意（让别人新鲜有趣），或者有活动优惠（大部分网民是爱贪便宜的）。且不要刷屏，网民是很反感刷屏的，所以一天发3~5条微博就差不多了。多参加一些热点话题的讨论，尽量把自己的曝光度提升。如：我申请了#第三代搜索技术#这个话题的主持人，那么怎么推广呢？

我们可以点击微博下面的推广，也可以通过狠狠转的“我要转发”，其他第三方应用也有这项功能，也可以借助热门话题的力量进行宣传

借助话题，如：#第三代搜索技术#话题镶入#360#、#360好搜#、#奇虎360#等这些热门话题中，从而有了间接的关系，我们可以这样做：这就是借助引流方式。

添加相应的标签，有助于网民的搜索还有就是借助其他渠道宣传，qq、微信、论坛、软文等。。。。推广方式很多，我也不多说了。针对一个兴趣（或一个产品）来发布微博，如果每天都发不同的兴趣（或产品）那样会损失一批粉丝。明星就可以不在乎这些，但我们不是，所以要多多与网民互动，培养信任度，这样也有助于提高网民的转帖效率。微博营销，也就是社会化媒体营销，同微信、论坛、博客、sns社区是一样的，他们不同于其他传统营销，它们的内容都是由用户自愿提供的，而不是直接的雇佣关系，这个就需要社交思维。这种营销方式广泛，易于流行。我们可以从微博、论坛寻找潜在用户，让其进入微信进行一对一交谈，从而成为精确用户进行维护。最近了解到微博在2014.04月份采取了措施，在微博发微信二维码、微信公众号会被删或封号等

新浪微博技术架构

首先给大家介绍一下微博架构发展的历程。新浪微博在短短一年时间内从零发展到五千万用户，我们的基层架构也发展了几个版本。第一版就是是非常快的，我们可以非常快的实现我们的模块。我们看一下技术特点，微博这个产品从架构上来分析，它需要解决的是发表和订阅的问题。我们第一版采用的是推的消息模式，假如说我们一个明星用户他有10万个粉丝，那就是说用户发表一条微博的时候，我们把这个微博消息攒成10万份，这样就是很简单了，第一版的架构实际上就是这两行字。第一颁的技术细节，典型的LAMP架构，是使用Myisam搜索引擎，它的优点就是速度非常快。另外一个是MPSS，就是多个端口可以布置在服务器上。为什么使用MPSS？假如说我们做一个互联网应用，这个应用里面有三个单元，我们可以由三种部署方式。我们可以把三个单元部署在三台服务器上，另外一种部署模式就是这三个单元部署在每个服务器上都有。这个解决了两个问题，一个是负载均衡，因为每一个单元都有多个结点处理，另外一个是可以防止单点故障。如果我们按照模式一来做的话，任何一个结点有故障就会影响我们系统服务，如果模式二的话，任何一个结点发生故障我们的整体都不会受到影响的。我们微博第一版上线之后，用户非常喜欢这个产品，用户数增长非常迅速。我们技术上碰到几个问题。第一个问题是发表会出现延迟现象，尤其是明星用户他的粉丝多。另外系统处理明星用户发表时候的延迟，可能会影响到其他的用户，因为其他的用户同一时间发表的话，也会受到这个系统的影响。我们就考虑这个系统怎么改进。首先是推模式，这肯定是延迟的首要原因，我们要把这个问题解决掉。其次我们的用户越来越多，这个数据库表从一百万到一亿，数据规模不一样处理方式是有差别的。我们第一版单库单表的模式，当用户数量增多的时候，它不能满足就需要进行拆分。第二个是锁表的问题，我们考虑的是更改引擎。另外一个是发表过慢，我们考虑的是异步模式。第二版我们进行了模块化，我们首先做了一个层，做了拆分，最右边的发表做了异步模式。第二个服务层，我们把微博基础的单元设计成服务层一个一个模块，最大是对推模式进行了改进。首先看一下投递模式的优化，首先我们要思考推模式，如果我们做一下改进把用户分成有效和无效的用户。我们一个用户比如说有一百个粉丝，我发一条微博的时候不需要推给一百个粉丝，因为可能有50个粉丝不会马上来看，这样同步推送给他们，相当于做无用功。我们把用户分成有效和无效之后，我们把他们做一下区分，比如说当天登陆过的人我们分成有效用户的话，只需要发送给当天登陆过的粉丝，这样压力马上就减轻了，另外投递的延迟也减小了。我们再看数据的拆分，数据拆分有很多方式，很多互联网产品最常用的方法，比如说如可以按照用户的UID来拆分。但是微博用户的一个特点就是说大家访问的都是最近的服务器，所以我们考虑微博的数据我们按照时间拆分，比如说一个月发一张表，这样就解决了我们不同时间的惟度可以有不同的拆分方式。第二个考虑就是要把内容和索引分开存放。假如说一条微博发表的地址是索引数据，内容是内容数据。假如说我们分开的话，内容就简单的变成了一种key-value的方式，key-value是最容易扩展的一种数据。比如说一个用户发表了一千条微博，这一千条微博我们接口前端要分页放，比如说用户需要访问第五页，那我们需要迅速定位到这个记录。假如说我们把这个索引拆分成一个月一张表，我们记录上很难判断第五页在哪张表里，我们需要索引所有的表。如果这个地方不能拆分，那我们系统上就会有一个非常大的瓶颈。最后我们想了一个方法，就是说索引上做了一个二次索引，改变我们还是按照时间拆分，但是我们把每个月记录的偏移记下来，就是一个月这个用户发表了多少条，ID是哪里，就是按照这些数据迅速把记录找出来。异步处理，发表是一个非常繁重的操作，它要入库、统计索引、进入后台，如果我们要把所有的索引都做完用户需要前端等待很长的时间，如果有一个环节失败的话，用户得到的提示是发表失败，但是入库已经成功。所以我们做了一个异步操作，就是发表成功我们就提示成功，然后我们在后台慢慢的消息队列慢慢的做完。另外新浪发表了一个很重要的产品叫做MemcacheQ，我们去年做了一个对大规模部署非常有利的指令，就是stats queue，适合大规模运维。第二版我们做了这些改进之后，微博的用户和访问量并没有停止，还有很多新的问题出现。比如说系统问题，单点故障导致的雪崩，第二个是访问速度问题因为国内网络环境复杂，会有用户反映说在不同地区访问图片、js这些速度会有问题。另外一个是数据压力以及峰值，MySql复制延迟、慢查询，另外就是热门事件，比如说世界杯，可能会导致用户每秒发表的内容达到几百条。我们考虑如何改进，首先系统方面循序任意模块失败。另外静态内容，第一步我们用CDN来加速，另外数据的压力以及峰值，我们需要将数据、功能、部署尽可能的拆分，然后提前进行容量规划。另一方面我们还有平台化的需求，去年11月我们就说要做开放平台，开放平台的需求是有差异的，Web系统它有用户行为才有请求，但是API系统特别是客户端的应用，只要用户一开机就会有请求，直到他关闭电脑这种请求一直会不间断的过来，另外用户行为很难预测。系统规模在持续的增大，另外也有平台化的需求，我们新架构应该怎么做才能满足这些需要？我们看一下同行，比如说Google怎么样考虑这个问题的？Google首席科学家讲过一句话，就是一个大的复杂的系统，应该要分解成很多小的服务。比如说我们在https://www.360docs.net/doc/a8677751.html,执行一个搜索查询的话，实际上这个操作会调动内部一百多个服务。因此，我们第三版的考虑就是先有服务才有接口最后才有应用，我们才能把这个系统做大。

新浪微博数据抓取详细教程

https://www.360docs.net/doc/a8677751.html, 新浪微博数据抓取详细教程本文介绍使用八爪鱼采集器简易模式采集抓取新浪微博的方法。需要采集微博内容的，在网页简易模式界面里点击微博进去之后可以看到所有关于微博的规则信息，我们直接使用就可以的。新浪微博数据抓取步骤1 采集在微博首页进关键词搜索后的信息以及发文者的关注量，粉丝数等（下图所示）即打开微博主页进行登录后输入关键词进行搜索，采集搜索到的内容以及进入发文者页面采集关注量，粉丝数，微博数。 1、找到微博网页-关键词搜索规则然后点击立即使用

https://www.360docs.net/doc/a8677751.html, 新浪微博数据抓取步骤2 2、简易模式中微博网页-关键词搜索的任务界面介绍查看详情：点开可以看到示例网址任务名：自定义任务名，默认为微博网页-关键词搜索任务组：给任务划分一个保存任务的组，如果不设置会有一个默认组用户名：请填写您的微博账号密码：请填写微博账号的登录密码关键词/搜索词：用于搜索的关键词，只支持填写一个翻页次数：设置采集多少页，由于微博会封账号，限制翻页1-50页将鼠标移动到？号图标和任务名顶部文字均可以查看详细的注释信息。示例数据：这个规则采集的所有字段信息。

新浪微博粉丝分析都包含哪些内容-

新浪微博粉丝分析都包含哪些内容? 篇一：新浪微博分析报告新浪微博分析报告新浪微博加粉丝,完善个人资料。最好用自己的真实姓名（或有趣的匿名）、真实的头像（美女、帅锅或有趣的头像）、个人介绍（可以是搞笑的吸引人的）。真实的信息让人觉得更可信，会大大提高被收听的几率。通过微博第三方应用（狠狠转、互粉大厅、粉丝大师、互粉加加、互粉小助手、推兔、爱互粉、推兔互粉等。。。）来添加粉丝数量。最好不要用软件，软件刷的粉丝大多是死粉，且用软件刷还很容易被封号。我发现想让一个人转发或评论你的微博不是件容易的事。首先微博必须有看点（让别人有耐心看下去）、笑点（让别人对你产生兴趣）、创意（让别人新鲜有趣），或者有活动优惠（大部分网民是爱贪便宜的）。且不要刷屏，网民是很反感刷屏的，所以一天发3~5条微博就差不多了。多参加一些热点话题的讨论，尽量把自己的曝光度提升。如：我申请了#第三代搜索技术#这个话题的主持人，那么怎么推广呢？我们可以点击微博下面的推广，也可以通过狠狠转的“我要转发”，其他第三方应用也有这项功能，

也可以借助热门话题的力量进行宣传借助话题，如：#第三代搜索技术#话题镶入#360#、#360好搜#、#奇虎360#等这些热门话题中，从而有了间接的关系，我们可以这样做：这就是借助引流方式。添加相应的标签，有助于网民的搜索还有就是借助其他渠道宣传，qq、微信、论坛、软文等。。。。推广方式很多，我也不多说了。针对一个兴趣（或一个产品）来发布微博，如果每天都发不同的兴趣（或产品）那样会损失一批粉丝。明星就可以不在乎这些，但我们不是，所以要多多与网民互动，培养信任度，这样也有助于提高网民的转帖效率。微博营销，也就是社会化媒体营销，同微信、论坛、博客、sns 社区是一样的，他们不同于其他传统营销，它们的内容都是由用户自愿提供的，而不是直接的雇佣关系，这个就需要社交思维。这种营销方式广泛，易于流行。我们可以从微博、论坛寻找潜在用户，让其进入微信进行一对一交谈，从而成为精确用户进行维护。最近了解到微博在月份采取了措施，在微博发微信二维码、微信公众号会被删或封号等危险，但还可以在朋友圈上发。微博是一个很大的用户圈，如果想建立品牌，采用微博、微信、论坛、博客、sns社区宣传然后再加上在猪八戒发条任务，那样基本整个网络都是我们的信息。篇二：新浪微博微数据主要包括什么版块？

新浪微博框架

大家下午好，在座的大部分都是技术开发者，技术开发者往往对微博这个产品非常关心。最晚的一次，是12点多收到一个邮件说想了解一下微博底层是怎么构架的。很多技术人员对微博的构架非常感兴趣，就是一个明星他有300万粉丝，这个技术怎么来实现？今天在这里跟大家分享一下微博的底层机构，让大家对微博的底层技术有更好的了解。另外不管是做客户端、1.0、2.0、论坛、博客都要考虑架构的问题，架构实际上是有一些共性的。今天我通过讲解微博里面的一些架构，分析一下架构里面哪些共性大家可以参考。首先给大家介绍一下微博架构发展的历程。新浪微博在短短一年时间内从零发展到五千万用户，我们的基层架构也发展了几个版本。第一版就是是非常快的，我们可以非常快的实现我们的模块。我们看一下技术特点，微博这个产品从架构上来分析，它需要解决的是发表和订阅的问题。我们第一版采用的是推的消息模式，假如说我们一个明星用户他有10万个粉丝，那就是说用户发表一条微博的时候，我们把这个微博消息攒成10万份，这样就是很简单了，第一版的架构实际上就是这两行字。第一颁的技术细节，典型的LAMP架构，是使用Myisam搜索引擎，它的优点就是速度非常快。另外一个是MPSS，就是多个端口可以布置在服务器上。为什么使用MPSS？假如说我们做一个互联网应用，这个应用里面有三个单元，我们可以由三种部署方式。我们可以把三个单元部署在三台服务器上，另外一种部署模式就是这三个单元部署在每个服务器上都有。这个解决了两个问题，一个是负载均衡，因为每一个单元都有多个结点处理，另外一个是可以防止单点故障。如果我们按照模式一来做的话，任何一个结点有故障就

会影响我们系统服务，如果模式二的话，任何一个结点发生故障我们的整体都不会受到影响的。我们微博第一版上线之后，用户非常喜欢这个产品，用户数增长非常迅速。我们技术上碰到几个问题。第一个问题是发表会出现延迟现象，尤其是明星用户他的粉丝多。另外系统处理明星用户发表时候的延迟，可能会影响到其他的用户，因为其他的用户同一时间发表的话，也会受到这个系统的影响。我们就考虑这个系统怎么改进。首先是推模式，这肯定是延迟的首要原因，我们要把这个问题解决掉。其次我们的用户越来越多，这个数据库表从一百万到一亿，数据规模不一样处理方式是有差别的。我们第一版单库单表的模式，当用户数量增多的时候，它不能满足就需要进行拆分。第二个是锁表的问题，我们考虑的是更改引擎。另外一个是发表过慢，我们考虑的是异步模式。第二版我们进行了模块化，我们首先做了一个层，做了拆分，最右边的发表做了异步模式。第二个服务层，我们把微博基础的单元设计成服务层一个一个模块，最大是对推模式进行了改进。首先看一下投递模式的优化，首先我们要思考推模式，如果我们做一下改进把用户分成有效和无效的用户。我们一个用户比如说有一百个粉丝，我发一条微博的时候不需要推给一百个粉丝，因为可能有50个粉丝不会马上来看，这样同步推送给他们，相当于做无用功。我们把用户分成有效和无效之后，我们把他们做一下区分，比如说当天登陆过的人我们分成有效用户的话，只需要发送给当天登陆过的粉丝，这样压力马上就减轻了，另外投递的延迟也减小了。

微博爬虫抓取方法

https://www.360docs.net/doc/a8677751.html, 微博爬虫一天可以抓取多少条数据微博是一个基于用户关系信息分享、传播以及获取的平台。用户可以通过WEB、WAP等各种客户端组建个人社区，以140字（包括标点符号）的文字更新信息，并实现即时分享。微博作为一种分享和交流平台，十分更注重时效性和随意性。微博平台上产生了大量的数据。而在数据抓取领域，不同的爬虫工具能够抓取微博数据的效率是质量都是不一样的。本文以八爪鱼这款爬虫工具为例，具体分析其抓取微博数据的效率和质量。微博主要有三大类数据一、博主信息抓取采集网址：https://www.360docs.net/doc/a8677751.html,/1087030002_2975_2024_0 采集步骤：博主信息抓取步骤比较简单：打开要采集的网址>建立翻页循环（点击下一页）>建立循环列表（直接以博主信息区块建立循环列表）>采集并导出数据。采集结果：一天（24小时）可采集上百万数据。

https://www.360docs.net/doc/a8677751.html, 微博爬虫一天可以抓取多少条数据图1 具体采集步骤，请参考以下教程：微博大号-艺术类博主信息采集二、发布的微博抓取采集网址：采集步骤：这类数据抓取较为复杂，打开网页（打开某博主的微博主页，经过2次下拉加载，才会出现下一页按钮，因而需对步骤，进行Ajax下拉加载设置）>建立翻页循环（此步骤与打开网页步骤同理，当翻到第二页时，同样需要经过2次下来加载。因而也需要进行Ajax下拉加载设置）>建立循环列表（循环点击每条微博链接，以建立循环列表）>采集

https://www.360docs.net/doc/a8677751.html, 并导出数据（进入每条微博的详情页，采集所需的字段，如：博主ID、微博发布时间、微博来源、微博内容、评论数、转发数、点赞数）。采集结果：一天（24小时）可采集上万的数据。微博爬虫一天可以抓取多少条数据图2 具体采集步骤，请参考以下教程：新浪微博-发布的微博采集三、微博评论采集采集网址： https://https://www.360docs.net/doc/a8677751.html,/mdabao?is_search=0&visible=0&is_all=1&is_tag=0&profile_fty pe=1&page=1#feedtop 采集步骤：微博评论采集，采集规则也比较复杂。打开要采集的网页（打开某博主的微博主

微博内容提取

微博内容提取摘要随着近年来微博等社交软件的使用人数日益增多，微博的隐私发展也成为人们日益关注的问题，然而由于微博没有固定的格式约束使得在微博的研究过程中有一些无意义的“噪音”的干扰，本文主要是为了完成微博的“噪音”过滤问题，实现一个小软件，来将新浪微博等微博中下载到本地的微博来进行过滤，去除其中的噪音，提取出纯净的页面内容，主要工作包括以下几个方面：（1）字符串的查找函数与分割函数的实现。（2）多个文件的查找的函数的实现。（3）固定字符串的即表情“噪音”的过滤实现。（4）具有一定正则文法的“噪音”的过滤实现。关键字：中文微博，微博，过滤，噪音，正则

Microblogging content extraction Author: Liudi Tutor: Yangkexin Abstract With recent years the number of micro-blog using social software is increasing, the development of micro-blog privacy has become a growing concern,However, due to the micro blog there is no fixed format constraint makes the interference of some meaningless "noise" in the research process of micro blog. the purpose of this paper is to complete the "noise" micro-blog filtering problem, the realization of a small software, to be used for filtering the download to the Sina micro-blog micro-blog etc., remove the noise, extract the page content is pure, the main work includes the following aspects: (1) the search function and the function of the string segmentation. (2) the implementation of the search function for multiple files (3) the filter of the expression "noise" of the fixed string. (4) the filter of a certain regular grammar "noise" of the fixed string. Keywords: Chinese micro-blog，micro-blog，filtering ，noise ，regular

新浪微博活动策划方法

新浪微博活动策划方法 1、活动策划： a、【活动文案的策划】活动标题策划，如何策划让用户心动参与的活动？活动标题是关键，直接影响用户活动第一关注印象，在标题策划中，体现活动免费性，如0元赢取、免费之类词。还有就是在标题出现活动的具体奖品实物，如ipad、iphone、项链、手表、U盘，流行度高的产品更为的吸引用户。推荐使用数码内产品，用户的参与度好。活动主题内容策划和活动规则，活动主题明确，如周年庆典、用户回馈、或借助节假日有吸引力。在活动规则中，一般关注、转发@好友，微博登录官方网站、话题讨论，明确好活动规则，请勿过于繁琐的流程。活动声明未按要求参与者权取消其获奖资格，并采用第三方抽奖平台重新抽取符合规则的参与者。体现活动的公平、公正。活动话题策划，紧扣时尚热点和新闻热点，尽量贴近用户关注高的话题，植入活动活动传播的主题内容，成为粉丝的热点话题。活动时间策划：在用户关注度高的节假日，如国庆、情人节、元旦、圣诞节。 b、【活动海报设计】：标语醒目，奖品突出，参与规则。 c、【活动产品准备】：活动产品预算，活动预算高的朋友可以考虑如iphone、ipad之类，流行度高的产品。预算低的朋友也别灰心，我们从iphone、ipad之类周边产品入手、如乔布斯传、iphone充电器、iphone手机套、ipad键盘。推广不一定是砸金，有技巧的推广一样有不错的效果。当然，也有人说不要一味使用ipad、iphone之类的产品，但是从目前的效应告诉我们这样的产品受用户关注依旧居高不下，而这样的活动产品也屡试不爽。如果企业有自己不错的产品，可以将自己的产品设置为奖品，增加企业品牌宣传。活动产品的包装，在产品的包装上，尽量精致、更加体现出是一份高档的礼物。活动产品的受欢迎度，热门时尚的产品是首选，一般选择中性类的产品，不能女性化或者男性化的产品，当然跟推广目标用户群有关，有做女性产品或男性产品的用户可以这样做。推荐使用数码类产品。活动产品的物流配送，选择易配送的产品。 d、【活动效果预估】：根据自身网站内会员和微博的粉丝数，从日常的活跃度，访问量，粉丝的互动来判断活动效果的预估，最重要的是将活动用户转化为自己的用户。 2、活动预热：

微博现状讲解

北京航空航天大学微博分析 1 综述随着网络的快速发展和普及。微博作为一个信息分享、获取以及传播的平台，以其快速传播、实时搜索等特点，已成为当代人们抒发情感，分享信息，获取资源必不可少的工具。本文主要对近两年国内微博信息搜索发展和应用情况进行分析。 2 微博使用现状 2.1 微博使用情况根据中国物联网信息中（CNNIC）公布的《第35次中国互联网发展状况统计报告》，截止2014年12月，我国网民规模6.7亿，使用微博用户2.49亿，网民使用率38.4%，相较2013年底下降7.1%（如图 2-1所示）。而CNNIC《第35次中国互联网发展状况统计报告》中“2013年-2014年中国网民各类互联网使用过的使用率统计表”（如表1所示）显示同为交流沟通类应用中即时通信应用使用率增长率10.4%，微博应用使用率下降11.4%，电子邮件应用下降 2.9%，由以上数据不难看出微博、电子邮件等交流沟通类应用使用率出现下降的主要原则在于其在即时通信上的劣势导致。图2-1 2013年-2014年微博客/手机微博客用户国模及使用率（数据来源：CNNIC）

北京航天航空大学表 1 2013年-2014年中国网民各类互联网使用过的使用率统计 2.2 微博信息检索 2.2.1 微博信息检索概况尽管2013年-2014年网民对微博的使用率存在下降的趋势，但微博自身快速传播、实时搜索等特点依然使微博在信息检索中存在一定优势。根据中国物联网信息中（CNNIC）发布的《2014年中国网民搜索行为研究报告》，截止2014年6月，95.4%的搜索用户通过综合搜索网站搜索信息，除此之外搜索用户在购物网站、视频网站、资讯类网站、微博上进行搜索的比例分别达到78.5%、75.2%、57.2%和57.1%（如图 2-2所示）。而随着手机的快速发展，网民从PC 端向手机端持续转移，更多的人使用手机进行搜索，而用户实际微博搜索的比率则为58.1%高于PC端48.8（如图2-3所示）。

微博的应用与发展

微博的应用与发展摘要：本文首先介绍了微博的概念及发展历程，然后重点介绍了微博的功能与优势。在简单地对目前微博发展的现状进行了分析之后，通过对微博的盈利模式与用户行为的研究，展望了微博未来的发展趋势，并针对趋势提出了相应的应对策略。一、微博简述 1、微博的含义与特点微博，即微博客（MicroBlog）的简称，是一个基于用户关系的信息分享、传播以及获取平台，用户可以通过WEB、WAP以及各种客户端组件个人社区，以140字左右的文字更新信息，并实现即时分享。微博是最近新兴起的一个web2.0表现。它最大的特点就是集成化和开放化，可以使得用户通过的手机、IM软件（gtalk、MSN、QQ、skype）和外部API接口等途径向微博客发布消息。 2、微博的起源与在中国的发展 2006年3月https://www.360docs.net/doc/a8677751.html,的创始人推出了Twitter,英文原意为小鸟的叽叽喳喳声，用户能用如手机短信等数百种工具更新信息，这就是最早出现的微博。Twitter 被Alexa网页流量统计评定为最受欢迎的50个网络应用之一，截至2010年1月份，该产品在全球已经拥有7500万注册用户。2009年8月份中国最大的门户网站新浪网推出“新浪微博”内测版，成为门户网站中第一家提供微博服务的网站，微博正式进入中文上网主流人群视野。微博作为市场上出现的一种新产品，目前仍然处于起步和成长阶段，微博要作为一种成熟地产品走进用户的生活还需要一个漫长的发展阶段。如图１所示：美国微博目前正处于快速发展阶段，而中国微博处于起步阶段。从总体上来看在微博在未来发展的道路上必然会经历被夸大的预期峰值以及预期与现实幻灭的低谷两个阶段，只有进行不断地产品创新才能保证微博产品长久、可持续的生命力，并最终达到稳定与成熟。

微博发展史简明微博发展历史

微博发展史简明微博发展历史集团文件发布号：（9816-UATWW-MWUB-WUNN-INNUL-DQQTY-

微博发展史简明中国微博发展历史微博（MicroBlog），原意为微型博客，现已发展为多媒体网络交互传播形式。 2006年3月，美国人威廉姆斯发布了Twitter（推特）网站，它支持手机、即时通信、网页等多种客户端来发表文字、图片、音乐、视频等内容。由于推特的形式一改以往，它可以迅捷地进行多媒体交互传播，很快抄袭风起，2007年全球就有上百家仿推特网站上线。这一年，在中国也出现了饭否、腾讯滔滔、叽歪等网站，以及首款时称迷你博客的iShuo微博程序。不过，直到2009年国内也没有认识到微博的变革意义，甚至还没有具体的“微博”概念，仍将其作为博客的一个变种对待。因此，这年7月，国内几乎所有微博网站包括腾讯滔滔停止运营。当然，这也与当局管制不无关系。 2009年8月，新浪微博试探性上线。次年，新浪采用此前经营博客的成功经验——拉名人入伙——开始全力打造微博，点燃了微博在中国的第二把星星之火。 2011年，由于新浪微博的存活给中国互联网带来了希望，加之记事狗等微博代码的开源和微博网站经营成本的低廉，几乎所有的网站都开始介入微博。腾讯置刚刚上线的“朋友”同质经营不顾大肆地与新浪争夺微博领地，在当年春节的央视多套频道疯狂砸广告，并将QQ用户强行带入

腾讯微博。不久，新浪买下了https://www.360docs.net/doc/a8677751.html,和https://www.360docs.net/doc/a8677751.html,等几个相关域名。这一年由于郭MM、7.23动车事故等事件，微博大显身手，让所有的网民都感受到了微博这种多媒体多渠道迅捷传播和人际间互动的力量。 2011年9月16日，记事狗微博系统3.0发布，开创性地发展了微博，不仅吸纳了SNS、BBS的分类、多图、签名等优点，最重要的是将传统微博发表140字的限制进行了可选择性突破。其时，ThinkSNS和ThinkSAAS也对微博的发展进行了探索，前者在SNS 的基础上转向了微博，后者起初模仿豆瓣小组，逐渐加入了微博的元素。互联网的上帝——代码设计者不断创新、千百万热爱网络的站长们不断建设、每一个网民平权参与，微博这个“形式决定内容”经典案例、互联网发展史上的里程碑，方才刚刚起步。于东直门外博主注：本文应为软文。

基于微博API的分布式抓取技术

1引言近年来，社交网络的发展引人注目，参考文献[1]介绍了社交网络的发展现状及趋势。目前，约有一半的中国网民通过社交网络沟通交流、分享信息，社交网络已成为覆盖用户最广、传播影响最大、商业价值最高的Web2.0业务。微博作为一种便捷的媒体交互平台，在全球范围内吸引了数亿用户，已成为人们进行信息交流的重要媒介，用户可以通过微博进行信息记录和交流、娱乐消遣以及社会交往等[2]。 Twitter自2006年由Williams E等人联合推出以来，发展迅猛。Twitter作为一种结合社会化网络和微型博客的新型Web2.0应用形式正风靡国外，其应用涉及商业、新闻教育等社会领域，已成为网络舆论中最具有影响力的一种[3]。基于微博API的分布式抓取技术陈舜华1，王晓彤1，郝志峰1，蔡瑞初1，肖晓军2，卢宇2 （1.广东工业大学计算机学院广州510006；2.广州优亿信息科技有限公司广州510630）摘要：随着微博用户的迅猛增长，越来越多的人希望从用户的行为和微博内容中挖掘有趣的模式。针对如何对微博数据进行有效合理的采集，提出了基于微博API的分布式抓取技术，通过模拟微博登录自动授权，合理控制API的调用频次，结合任务分配控制器高效地获取微博数据。该分布式抓取技术还结合时间触发和内存数据库技术实现重复控制，避免了数据的重复爬取和重复存储，提高了系统的性能。本分布式抓取技术具有可扩展性高、任务分配明确、效率高、多种爬取策略适应不同的爬取需求等特点。新浪微博数据爬取实例验证了该技术的可行性。关键词：新浪微博；爬取策略；分布式爬取；微博API doi:10.3969/j.issn.1000-0801.2013.08.025 A Distributed Data-Crawling Technology for Microblog API Chen Shunhua1,Wang Xiaotong1,Hao Zhifeng1,Cai Ruichu1,Xiao Xiaojun2,Lu Yu2 (1.School of Computers,Guangdong University of Technology,Guangzhou510006,China; 2.Guangzhou Useease Information Technology Co.,Ltd.,Guangzhou510630,China) Abstract:As more and more users begin to use microblog,people eagerly want to dig interesting patterns from the microblog data.How to efficiently collect data from the service provider is one of the main challenges.To address this issue,a distributed crawling solution based on microblog API was present.The distributed crawling solution simulates microblog login,automatically gets authorized,and control the invoked frequency of the API with a task controller.A time trigger method with memory database was also proposed to avoid extra trivial data duplication and improve efficiency of the system.In the distributed framework,the crawling tasks can be assigned to distributed clients independently,which ensures the high scalability and flexibility of the crawling procedure.The feasibility of the crawler technology according to Sina microblog instance was verified. Key words:Sina microblog,crawling strategy,distributed crawl,microblog API 运营创新论坛 146