数据分析怎么做需要学哪些,手把手教你做公众号的数据分析

2022-09-07 14:05 · 小编
A+ A-

这篇文章,收集了部分我置顶公众号的所有文章,统计了文章中使用最多的词,做成了词云图。

为啥要做这个?

1、纯属好奇
2、大家知道我有个《不用写代码的爬虫课》,用 web scraper 抓数据,短平快,不用写代码,1 分钟就能设置好抓取规则,剩下就等程序跑完,拿到数据。所以,我有时也会抓点数据玩玩。
3、好久没写代码了,想看看这过程中会遇到哪些问题?自己能不能解决?(其实需要写代码,是我做之前没有预料到的)

制作过程中用的工具:

  • 公众号文章抓取工具:web scraper
  • 词频统计:1. github-jieba-结巴分词 – 精准模式 2.网上抄的 20 行 python 代码
  • 词云工具:https://wordart.com
  • 其他:excel

为了不影响词云图的效果,本文已经去除了一些常见词汇,比如

一个 这个 很多 可以 自己 问题 一些 我们 其实 如果 没有 就是 不是 可能 时候 什么 这样 他们 那么 知道 觉得 还是 但是 所以 非常 一下 当然 需要 比如 价值 现在 已经 事情 因为 然后 各种 这些 或者 存在 认为 这种 为什么 发现 通过 以前 不会 机会 不要 内容 一定 一种 重要 人家 时间 发展 逻辑 不同 如何 真的 信息 以及 而且 理解 怎么 有些 分享 文章 广告 简单 不能 东西 其他 开始 系统 看到 出来 这里 一点 等等等等等

文章中数据展示格式为:
1、公众号名称
2、相关数据
3、词云图
4、TOP 20 关键词 | 频次 | 明白业余分析

caoz 的梦呓(caozsay)

  • 文章数:503
  • 字数:1,492,273
  • 总阅读数:10,087,175
  • 总点赞数:157,171

caoz的梦呓
 

TOP 20 关键词 | 频次 | 分析

曹大的公众号,多是互联网创业、产品、数据相关,文章曾被马化腾,张小龙多次赞赏,推荐关注。

认知传送门 —— 互联网百晓生 | caoz 的小密圈

 

咪蒙

  • 文章数:664
  • 字数:1,615,050
  • 总阅读数:92,592,058+ ps:篇篇 10w+ ,这是下限
  • 总点赞数:12,154,279+
 

咪蒙 


TOP 20 关键词 | 频次 | 分析

咪蒙在运营公众号这个产品上,有很多值得学习的地方——

  • 文章如何开头能吸引人?
  • 如何引导用户点赞?
  • 如何从读者生活中获得文章素材(吸引用户投稿)?
  • 标题文案如何取才能吸引人?
  • 不发文章时,发纯文字,如何让用户不失望,又觉得有趣
    ……

阅读文章时,如何找到对自己有价值的信息,可以参考曹大的这篇文章 超视角阅读

学习学习再学习

  • 文章数:583
  • 字数:1,861,325
  • 总阅读数:21,617,810+
  • 总点赞数:213,448+
 

学习学习再学习
 

TOP 20 关键词 | 频次 | 分析

笑来老师的《把时间当做朋友》这本书,以及得到专栏,应该帮助了很多人,里面谈到的:时间复利、注意力、元认知、人生商业模式等等,都对我启发很大。

这个公众号也是笑来老师的一个输出渠道。

如果你有以下一些想法,或者困惑:

  • 老板给多少钱干多少活
  • 这个东西短期没用,不学了
  • 花大量时间在网上找免费资源
  • 为什么要学习工作之外的一些技能
  • 金钱 > 时间 > 注意力

建议关注一下这个公众号,或者读一下《把时间当做朋友》这本书。

stormzhang

文章数:571字数:1,097,32总阅读数:8,257,975+总点赞数:252,988+

 

stormzhang
 

TOP 20 关键词 | 频次 | 分析

stormzhang 是半路培训做的 Android 开发,后来转产品管理,一步一步靠个人努力,达成今天的成就。

程序员如果突破技术思维,那就是一个开挂的人生。

这个公众号活跃度极高,里面的内容也不拘一格,技术、产品、职场、投资等等,都是作者一个人维护,推荐关注,一个不羁的码农,相信能给你看待事物不一样的角度。

认知传送门 —— 不羁的码农stormzhang | 帅张和他的朋友们

小马宋

  • 文章数:702
  • 字数:1,461,853
  • 总阅读数:12,514,708+
  • 总点赞数:147,085+
 
小马宋
 
TOP 20 关键词 | 频次 | 分析

我以前听到营销,觉得就是在电视上打广告,没啥了不起。

小马宋老师让我对营销有了不一样的理解。

互联网时代,信息爆炸。如果不懂营销,空有好产品,不能在合适的渠道、以合适的方式、展示给合适的用户,一切都是白搭。

营销是个中性词,不要对它有敌意,如果有,是一件可怕的事情。

营销文案写不好,是因为对产品太无知。 —— 小马宋

认知传送门 —— 罗辑思维营销外脑 | 小马宋战略营销圈

剽悍一只猫

  • 文章数:906
  • 字数:1,827,873
  • 总阅读数:51,177,852+
  • 总点赞数:887,796+
 

剽悍一只猫
 
TOP 20 关键词 | 频次 | 分析

猫叔的口头禅“不行动,然并卵”,他举办的剽悍行动营,帮助了很多人解决了拖延症问题,有效提升了写作、演讲、读书三个技能。这个行动营很有趣,只招陌生人。

猫叔的一些文章,可以作为人生战略原则参考。比如:读懂此文的人,收获不止百万

槽边往事

  • 文章数:1099
  • 字数:2,754,656
  • 总阅读数:不详
  • 总点赞数:不详
    因为这个公众号发文时间太早,最初版本的订阅号,在 URL 方面有很多奇怪的地方,所以暂时没有完整抓取到。
 
槽边往事
 
TOP 20 关键词 | 频次 | 分析

和菜头是我关注公众号里最高产的一位作者,各种文章类型都能驾驭。

人们从公众号看到的,是那个笔耕不辍的和菜头,嬉笑怒骂,笔下纵横。
而在人们看不到的那一面,他是一个互联网公司的创始人。10年间,他做过20多个 APP、2 个网站、H5小游戏、会员系统等。

罗振宇:“和菜头时常对我暴起断喝,如晨钟般醒脑。”

成长

  • 文章数:91
  • 字数:171,490
  • 总阅读数:300,372+
  • 总点赞数:2,958+
 
成长
 
TOP 20 关键词 | 频次 | 分析

徐梦阳是多家互联网公司公司的产品经理,现在是自由职业者。

他平时喜欢研究互联网的各种赚钱套路,从词云图就可以看出。

信息挖掘、研究、实践、分享是公众号的风格,爆款文章:[麦当劳改名金拱门,一小时赚了15000]

认知传送门 —— 第一桶金研究所

小北的梦呓

  • 文章数:488
  • 字数:1,511,719
  • 总阅读数:3,025,755+
  • 总点赞数:48,424+
 
小北的梦呓
 
TOP 20 关键词 | 频次 | 分析

小北是跨境电商领域超级KOL,公众号不仅仅分享跨境电商内容,互联网思维、网站 SEO、流量玩法、产品思维等等,既有道也有术。

我虽然不做跨境电商,前几天也报了他的线上课。从他的文章中,能看到他对于趋势、流量方面很高的认知水平,学习一下大牛思考问题的方式,对自己也是一种提升。


做词云图的过程中,也遇到了一些坑。
1、之前我使用的词云工具是 http://www.picdata.cn/,这个网站是傻瓜操作,直接将要分析的文字全部丢进去,它会自动统计词频并生成词云图。

但是这个工具有个缺点,字数只能限制在 100 w以内。而这次的公众号内容字数,全部都超过了 100 w,于是这个工具就不灵了。

其他几个类似工具也不能解决这个字数过多问题。

我突然想到,在 MacTalk 池建强老师的知识星球,他发过一个 github 的分词库,叫做「结巴」,支持各种语言。

我就按图索骥,找到了这个库。

2、github 上的工具,使用教程都写的很清楚,我就是照抄,然后换一下文件名。

后来,我又有一个统计文章字数的需求,然后也是网上搜代码,搜到一个教程,巧的是,这个教程代码也是用的「结巴」这个库,我也就改改拿着用了。

互联网带给我们极大的方便,各种教程源码,动动手指就能搜到,略微修改,就能用。

3、词云工具,我最终使用的是:https://wordart.com/。这个网站需要我们提供词语和对应的词频。

这两项数据,可以通过上一步的「结巴」分词工具得出。

将词语和词频填入 wordart 的时候,我也遇到了问题。无论我怎么输入,wordart 显示都错误,我把设置里各种选项排列组合试了多次,都没成功。

后来我想到易灵微课上,新榜的数据分析师张佳曾经开过一门数据分析课,里面讲过这个工具,就去请教了他。

他告诉我,wordart 识别不了手动输入的 tab 键,需要先把数据输入到 excel 里面,然后复制到 wordart 才行。我按照他的方法,果然成功了。

有时候自己研究半天,不如专家一句话。


福利

之前我写了用 webscraper 抓取公众号标题教程后,有朋友问 webscraper 能不能抓取公众号的所有文章内容?

我研究了一下,没问题。

后来,又有朋友问,可以把公众号文章转换成 PDF 吗?

我研究了半天,最后得出了结论:webscraper 做不到这个。

但是我发现,公众号导出 PDF 这个需求,好像挺多人需要。于是就找了一个全栈技术大牛,让他看看能不能写程序实现这个。

过了几天,他给我发来一段程序,我运行了一下,惊呆了。

导出的公众号文章 PDF 排版和原文一模一样。(公众号后台回复“PDF”,可以查看示例)

不仅如此,这个程序连阅读数、点赞数都可以抓,太牛逼了,看下面图片。

 

我查了一下,现在市面上的导出公众号文章的工具,基本都是收费的,而且价格还不低。

淘宝上的店铺价格:

淘宝卖家1
 
淘宝卖家2

大概算下来,一个公众号大概需要 40 块钱,文章数多的话,可能会更多。

提供抓取公众号阅读数、点赞数的商家比较少,新榜提供公众号回采功能:

 
新榜公众号回采

例如:抓取「caoz的梦呓」公众号,选择抓取全部文章,300 榜豆。

 

1 榜豆 = 1 元!!!

好像确实有点贵。

马上双 11 了,我也凑个热闹,11.11 之前,免费帮您抓取任意一个公众号所有文章并转换为 PDF 或者 html 或者全部文章的阅读、点赞数据。

扫码联系站长,免费帮您导出公众号为 PDF


微信图片_20220927103704.png




点赞(16)
版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至1545685@qq.com举报,一经查实,本站将立刻删除。
猜您喜欢

东方甄选玉米下架了吗,东方甄选电商平台下架6元一根玉米回应

中国经济周刊—经济网讯 近期,有网友发现东方甄选电商平台下架了玉米,搜索“玉米”只有玉米汁。对此,客服回应称为了保证品质,厂家不能超量生产,产品的产量不是固定的,只要厂家有产能,会尽快上架商品链接的。此前,东方甄选因售卖6元一根的助农玉米而受到的质疑,也引发了电商助农话题的热议。某主播在直播间表示,一根玉米的成本价在7...

0 691 09-29 13:40

目标消费群体有哪些特征,3步教你快速分析目标消费群体

此刻的你是否带着这样的提问——品牌为什么要进行消费群体定位?品牌在进入市场的时候,通常会对消费人群进行定位。因为消费者对于某样产品的重视程度,或是某种产品在消费者心中的需求程度给产品的市场定位,是会直接影响产品销路的。在过去,品牌最简单直接的方法一般就是根据消费群体的年龄段进行定位,因为不同年龄段的人群消费特征也是比较...

0 545 09-29 17:18

设计师接单赚钱平台有哪些,5大靠谱的设计接单平台推荐2022

超强干货,这些兼职平台可以帮你实现月入上千的外快,只要你技能够硬!PS:文末有一波设计师常用网站整理哟~~1.一品威客有APP客户端,项目多,种类齐全,而且更新时间快。包括LOGO设计、Flash制作、网站建设、程序设计、起名服务、广告语、翻译、方案策划、劳务服务等10多种门类超100种的创意产品。平台发布任务,各个设...

0 538 10-09 15:19

有什么真实可靠的赚钱软件,看广告就能赚钱的3款软件推荐

第一,快手,有时候快手光看广告就能赚三毛左右第二,快手极速版,快手极速版和快手一样都能赚三毛五毛的,有时候视频刷多了还有可能赚个一块左右第三今日头条极速版,今日头条极速版刚开始下的时候赚挺多钱的,但感觉用时间长的话,赚的就比较少了第四,西瓜视频,可能是我刚刚下载的西瓜视频,我觉得西瓜视频赚的钱最多了,一个星期左右,我赚...

0 610 10-11 15:08

海景房最便宜多少钱,29岁青年花300月租实现海景房自由

这位钟姓小伙,29岁,已经在国内游览了100个城市,比起许多宅在家里的人,或者只在几个大城市之间穿梭的打工人来说,他已经实现了人生的自由。最厉害的是,每月他的月租只有300元不等,还是海景房,这就令许多人望尘莫及了。小伙子是杭州人,大学毕业后没有打过一份工作超过半年的。餐馆,酒吧,饭店都曾经留下他的足迹,但那里只是暂时...

0 622 10-08 21:24

北京故宫的历史背景,600年风云史的故宫背景介绍分享

北京故宫博物院是中国最大的古代文化艺术博物馆,全国重点文物保护单位,世界着名的旅游胜地。位于北京天安门广场北侧。1925年10月10日建立。故宫为中国明、清两代(1368年—1911年)的皇宫,又称“紫禁城”。1911年辛亥革命胜利后,清王朝政府宣布退位,根据当时临时革命政府对清皇室的优待条件,逊帝溥仪仍居紫禁城后部的...

0 924 10-17 19:37
关注我们
在线咨询
返回顶部