数据分析怎么做需要学哪些,手把手教你做公众号的数据分析

2022-09-07 14:05 · 小编
A+ A-

这篇文章,收集了部分我置顶公众号的所有文章,统计了文章中使用最多的词,做成了词云图。

为啥要做这个?

1、纯属好奇
2、大家知道我有个《不用写代码的爬虫课》,用 web scraper 抓数据,短平快,不用写代码,1 分钟就能设置好抓取规则,剩下就等程序跑完,拿到数据。所以,我有时也会抓点数据玩玩。
3、好久没写代码了,想看看这过程中会遇到哪些问题?自己能不能解决?(其实需要写代码,是我做之前没有预料到的)

制作过程中用的工具:

  • 公众号文章抓取工具:web scraper
  • 词频统计:1. github-jieba-结巴分词 – 精准模式 2.网上抄的 20 行 python 代码
  • 词云工具:https://wordart.com
  • 其他:excel

为了不影响词云图的效果,本文已经去除了一些常见词汇,比如

一个 这个 很多 可以 自己 问题 一些 我们 其实 如果 没有 就是 不是 可能 时候 什么 这样 他们 那么 知道 觉得 还是 但是 所以 非常 一下 当然 需要 比如 价值 现在 已经 事情 因为 然后 各种 这些 或者 存在 认为 这种 为什么 发现 通过 以前 不会 机会 不要 内容 一定 一种 重要 人家 时间 发展 逻辑 不同 如何 真的 信息 以及 而且 理解 怎么 有些 分享 文章 广告 简单 不能 东西 其他 开始 系统 看到 出来 这里 一点 等等等等等

文章中数据展示格式为:
1、公众号名称
2、相关数据
3、词云图
4、TOP 20 关键词 | 频次 | 明白业余分析

caoz 的梦呓(caozsay)

  • 文章数:503
  • 字数:1,492,273
  • 总阅读数:10,087,175
  • 总点赞数:157,171

caoz的梦呓
 

TOP 20 关键词 | 频次 | 分析

曹大的公众号,多是互联网创业、产品、数据相关,文章曾被马化腾,张小龙多次赞赏,推荐关注。

认知传送门 —— 互联网百晓生 | caoz 的小密圈

 

咪蒙

  • 文章数:664
  • 字数:1,615,050
  • 总阅读数:92,592,058+ ps:篇篇 10w+ ,这是下限
  • 总点赞数:12,154,279+
 

咪蒙 


TOP 20 关键词 | 频次 | 分析

咪蒙在运营公众号这个产品上,有很多值得学习的地方——

  • 文章如何开头能吸引人?
  • 如何引导用户点赞?
  • 如何从读者生活中获得文章素材(吸引用户投稿)?
  • 标题文案如何取才能吸引人?
  • 不发文章时,发纯文字,如何让用户不失望,又觉得有趣
    ……

阅读文章时,如何找到对自己有价值的信息,可以参考曹大的这篇文章 超视角阅读

学习学习再学习

  • 文章数:583
  • 字数:1,861,325
  • 总阅读数:21,617,810+
  • 总点赞数:213,448+
 

学习学习再学习
 

TOP 20 关键词 | 频次 | 分析

笑来老师的《把时间当做朋友》这本书,以及得到专栏,应该帮助了很多人,里面谈到的:时间复利、注意力、元认知、人生商业模式等等,都对我启发很大。

这个公众号也是笑来老师的一个输出渠道。

如果你有以下一些想法,或者困惑:

  • 老板给多少钱干多少活
  • 这个东西短期没用,不学了
  • 花大量时间在网上找免费资源
  • 为什么要学习工作之外的一些技能
  • 金钱 > 时间 > 注意力

建议关注一下这个公众号,或者读一下《把时间当做朋友》这本书。

stormzhang

文章数:571字数:1,097,32总阅读数:8,257,975+总点赞数:252,988+

 

stormzhang
 

TOP 20 关键词 | 频次 | 分析

stormzhang 是半路培训做的 Android 开发,后来转产品管理,一步一步靠个人努力,达成今天的成就。

程序员如果突破技术思维,那就是一个开挂的人生。

这个公众号活跃度极高,里面的内容也不拘一格,技术、产品、职场、投资等等,都是作者一个人维护,推荐关注,一个不羁的码农,相信能给你看待事物不一样的角度。

认知传送门 —— 不羁的码农stormzhang | 帅张和他的朋友们

小马宋

  • 文章数:702
  • 字数:1,461,853
  • 总阅读数:12,514,708+
  • 总点赞数:147,085+
 
小马宋
 
TOP 20 关键词 | 频次 | 分析

我以前听到营销,觉得就是在电视上打广告,没啥了不起。

小马宋老师让我对营销有了不一样的理解。

互联网时代,信息爆炸。如果不懂营销,空有好产品,不能在合适的渠道、以合适的方式、展示给合适的用户,一切都是白搭。

营销是个中性词,不要对它有敌意,如果有,是一件可怕的事情。

营销文案写不好,是因为对产品太无知。 —— 小马宋

认知传送门 —— 罗辑思维营销外脑 | 小马宋战略营销圈

剽悍一只猫

  • 文章数:906
  • 字数:1,827,873
  • 总阅读数:51,177,852+
  • 总点赞数:887,796+
 

剽悍一只猫
 
TOP 20 关键词 | 频次 | 分析

猫叔的口头禅“不行动,然并卵”,他举办的剽悍行动营,帮助了很多人解决了拖延症问题,有效提升了写作、演讲、读书三个技能。这个行动营很有趣,只招陌生人。

猫叔的一些文章,可以作为人生战略原则参考。比如:读懂此文的人,收获不止百万

槽边往事

  • 文章数:1099
  • 字数:2,754,656
  • 总阅读数:不详
  • 总点赞数:不详
    因为这个公众号发文时间太早,最初版本的订阅号,在 URL 方面有很多奇怪的地方,所以暂时没有完整抓取到。
 
槽边往事
 
TOP 20 关键词 | 频次 | 分析

和菜头是我关注公众号里最高产的一位作者,各种文章类型都能驾驭。

人们从公众号看到的,是那个笔耕不辍的和菜头,嬉笑怒骂,笔下纵横。
而在人们看不到的那一面,他是一个互联网公司的创始人。10年间,他做过20多个 APP、2 个网站、H5小游戏、会员系统等。

罗振宇:“和菜头时常对我暴起断喝,如晨钟般醒脑。”

成长

  • 文章数:91
  • 字数:171,490
  • 总阅读数:300,372+
  • 总点赞数:2,958+
 
成长
 
TOP 20 关键词 | 频次 | 分析

徐梦阳是多家互联网公司公司的产品经理,现在是自由职业者。

他平时喜欢研究互联网的各种赚钱套路,从词云图就可以看出。

信息挖掘、研究、实践、分享是公众号的风格,爆款文章:[麦当劳改名金拱门,一小时赚了15000]

认知传送门 —— 第一桶金研究所

小北的梦呓

  • 文章数:488
  • 字数:1,511,719
  • 总阅读数:3,025,755+
  • 总点赞数:48,424+
 
小北的梦呓
 
TOP 20 关键词 | 频次 | 分析

小北是跨境电商领域超级KOL,公众号不仅仅分享跨境电商内容,互联网思维、网站 SEO、流量玩法、产品思维等等,既有道也有术。

我虽然不做跨境电商,前几天也报了他的线上课。从他的文章中,能看到他对于趋势、流量方面很高的认知水平,学习一下大牛思考问题的方式,对自己也是一种提升。


做词云图的过程中,也遇到了一些坑。
1、之前我使用的词云工具是 http://www.picdata.cn/,这个网站是傻瓜操作,直接将要分析的文字全部丢进去,它会自动统计词频并生成词云图。

但是这个工具有个缺点,字数只能限制在 100 w以内。而这次的公众号内容字数,全部都超过了 100 w,于是这个工具就不灵了。

其他几个类似工具也不能解决这个字数过多问题。

我突然想到,在 MacTalk 池建强老师的知识星球,他发过一个 github 的分词库,叫做「结巴」,支持各种语言。

我就按图索骥,找到了这个库。

2、github 上的工具,使用教程都写的很清楚,我就是照抄,然后换一下文件名。

后来,我又有一个统计文章字数的需求,然后也是网上搜代码,搜到一个教程,巧的是,这个教程代码也是用的「结巴」这个库,我也就改改拿着用了。

互联网带给我们极大的方便,各种教程源码,动动手指就能搜到,略微修改,就能用。

3、词云工具,我最终使用的是:https://wordart.com/。这个网站需要我们提供词语和对应的词频。

这两项数据,可以通过上一步的「结巴」分词工具得出。

将词语和词频填入 wordart 的时候,我也遇到了问题。无论我怎么输入,wordart 显示都错误,我把设置里各种选项排列组合试了多次,都没成功。

后来我想到易灵微课上,新榜的数据分析师张佳曾经开过一门数据分析课,里面讲过这个工具,就去请教了他。

他告诉我,wordart 识别不了手动输入的 tab 键,需要先把数据输入到 excel 里面,然后复制到 wordart 才行。我按照他的方法,果然成功了。

有时候自己研究半天,不如专家一句话。


福利

之前我写了用 webscraper 抓取公众号标题教程后,有朋友问 webscraper 能不能抓取公众号的所有文章内容?

我研究了一下,没问题。

后来,又有朋友问,可以把公众号文章转换成 PDF 吗?

我研究了半天,最后得出了结论:webscraper 做不到这个。

但是我发现,公众号导出 PDF 这个需求,好像挺多人需要。于是就找了一个全栈技术大牛,让他看看能不能写程序实现这个。

过了几天,他给我发来一段程序,我运行了一下,惊呆了。

导出的公众号文章 PDF 排版和原文一模一样。(公众号后台回复“PDF”,可以查看示例)

不仅如此,这个程序连阅读数、点赞数都可以抓,太牛逼了,看下面图片。

 

我查了一下,现在市面上的导出公众号文章的工具,基本都是收费的,而且价格还不低。

淘宝上的店铺价格:

淘宝卖家1
 
淘宝卖家2

大概算下来,一个公众号大概需要 40 块钱,文章数多的话,可能会更多。

提供抓取公众号阅读数、点赞数的商家比较少,新榜提供公众号回采功能:

 
新榜公众号回采

例如:抓取「caoz的梦呓」公众号,选择抓取全部文章,300 榜豆。

 

1 榜豆 = 1 元!!!

好像确实有点贵。

马上双 11 了,我也凑个热闹,11.11 之前,免费帮您抓取任意一个公众号所有文章并转换为 PDF 或者 html 或者全部文章的阅读、点赞数据。

扫码联系站长,免费帮您导出公众号为 PDF


微信图片_20220927103704.png




点赞(16)
版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至1545685@qq.com举报,一经查实,本站将立刻删除。
猜您喜欢

缝隙市场里都有什么产业,小老板抢占缝隙市场的方法分享

谓“旱则资舟,水则资车”是指天旱时要购进船,水灾时要购进车,因为天旱时人多用车,船厂因无人要而价钱便宜,此时购入,等大旱过去则船为市场上的紧俏商品势必涨价,水灾购车的道理相同。小老板做生意要像兔子一样灵敏,与大企业不同的是,小本买卖属于“船小好调头”这种。四川某暖气设备专卖店的李老板是做小本生意起家的。几年前,在美食街...

0 605 10-10 14:36

知识星球被删内容是怎么回事?发帖需要注意的4条规则

在知识星球上,你可以经常看到有人提问:为什么我的帖子被删了?有人能告诉我删帖的原因吗?……等等关于知识星球为什么删帖,一般星主都会在置顶帖,或者星球介绍里面说明:一般有以下几点:营销性质的广告信息会被删:这点很好理解,你在别人的付费社群打广告,而且人数一多,无法确定广告的真实性,为了避免有圈友上当受骗,一律禁止,是可以...

0 864 09-08 10:29

病毒营销经典案例有哪些,10大病毒营销经典案例及分析

1、Chipotle:用奥斯卡级动画片夺眼球主营墨西哥烤肉的休闲快餐连锁店Chipotle一直把天然有机食材应用在其销售的食品中,并以“良心食品”为口号,从食材采购到下厨烹煮,在每个环节都非常重视顾客的健康。如今他们给自己的口号加了点儿料,通过和设计工作室Moonbot Studios(这家工作室曾荣获奥斯卡奖)的合作...

0 646 10-10 20:22

保健品销售技巧和话术分享,十种补脑益智类保健品火爆销售话术总结

一年一度的开学季又要到来,为了不让孩子输在起跑线上,家长们操碎心,不得不把希望寄于各类补脑保健品。无论是第一次踏入校园的小朋友,还是即将冲刺中考和高考的考生,学习强度大,长时间看书,久坐不运动,过度用脑,过度用眼,青少年又处于生长发育阶段,如果日常饮食不能满足自身营养需求,适当吃一些保健品是可以的。下面盘点一下适合中小...

0 799 10-13 14:51

项目管理目标怎么写,有效制定项目管理目标的5个技巧

项目目标是项目管理的关键要素——没有它们,你就无法在项目之前和期间以简洁的方式传达你的目标,也无法在项目结束后以可衡量的方式评估你的成功。制定项目目标并不难,但您必须确保它是一种可衡量的、有用的方式来评估项目的成功。本文将帮助你开始制定项目目标并提高您的项目管理技能。项目目标的好处明确的项目目标可帮助你了解项目的发展方...

0 701 10-11 11:04

互联网创业新手有哪些项目可以做,百万大v的3条创业建议

一、知识星球主冯大辉:网名 Fenng前阿里技术专家、支付宝首席 DBA(花名:西毒)前丁香园 CTO现「无码科技」创始人公众号 「小道消息」出品人Startup News 出品人公众号「小道消息」,由冯老师一人主笔,常年更新互联网相关的产品、运营、技术、企业评论等,意在为用户呈现了一幅中国互联网的清明上河图,文章曾多...

0 516 09-06 17:58
关注我们
在线咨询
返回顶部