4soul吧 关注:35,398贴子:3,452,894

对510官号评论区进行统计和文本分析(上)

只看楼主收藏回复

昨天心血来潮,把510珈乐毕业的官号评论区进行了文本抓取。抓取只限于主楼,楼中楼并未包括。抓取的内容包括id,评论内容,评论时间和点赞数。
经过数据处理,共抓取有效评论30909条,官号评论区共5.7万条,说明剩下2.7万条评论为楼中楼回复。
下面将开始对抓取的数据进行初步的描述性统计


IP属地:广东来自iPhone客户端1楼2022-07-24 10:13回复
    深度好帖,火速展示吧


    来自Android客户端2楼2022-07-24 10:16
    回复
      首先分析id和评论自身。通过统计发现,30909条评论及其id中,仅有15855个id是“unique”的,说明评论区共有15855个账号主体。
      随后,用同样的方式去分析评论内容,发现仅有16731条评论内容是“unique”的,说明有约一半的评论内容是重复的


      IP属地:广东来自iPhone客户端3楼2022-07-24 10:16
      回复
        好好好


        IP属地:江苏4楼2022-07-24 10:18
        回复
          接下来将分析每个账号在这一评论区共发布了多少条评论。“filter”列为发表的评论数,“freq”(频次)列为发表的评论数。
          可以发现,51.3%的账号仅发表了一次评论,而约20%的账号发表了2次,8%的用户发表了3次,21%的账号发表了4次及以上评论。更有甚者,有数十名用户发表了80次以上评论


          IP属地:广东来自iPhone客户端5楼2022-07-24 10:21
          回复
            看不见的手


            IP属地:山东来自Android客户端7楼2022-07-24 10:37
            回复
              👀


              IP属地:贵州来自Android客户端8楼2022-07-24 10:43
              回复
                👀


                IP属地:湖北来自iPhone客户端9楼2022-07-24 10:45
                回复
                  cy


                  IP属地:湖北来自iPhone客户端10楼2022-07-24 10:46
                  回复
                    一人80条评论我天


                    IP属地:北京来自Android客户端11楼2022-07-24 10:50
                    回复
                      火速展示吧!


                      IP属地:云南来自Android客户端12楼2022-07-24 10:51
                      回复
                        火速展示吧


                        IP属地:北京来自Android客户端13楼2022-07-24 10:55
                        回复
                          dd


                          IP属地:北京来自Android客户端14楼2022-07-24 10:57
                          回复
                            随后,在stata中将重复的id删除,并将id数据放入voyant tools进行分析(stata也能做词频分析,但是我的命令有点问题,就用现有的程序了)
                            可以发现,“啵”字计数865次,考虑到大部分人会使用“啵啵”,约有400个以上的账号id含有“啵”
                            “三”的计数次数为148次,“ww”的计数次数为109次
                            值得注意的是,“量子”的计数次数为121次


                            IP属地:广东来自iPhone客户端15楼2022-07-24 10:59
                            回复
                              接下来,重复的步骤去统计评论内容。根据结果,有至少564条评论被重复发送了5次以上;248条评论被重复发送了10次以上;12条内容被重复发送了100次以上;5条内容被重复发了186次以上;1条内容被重复发了885次。
                              接下来我们看看这些内容是什么


                              IP属地:广东来自iPhone客户端16楼2022-07-24 11:08
                              回复