微博数据分析8页.pptxVIP

微博数据分析 获取微博数据 通过file函数打开文件，并将文件内容读取出来 import os, sys def ReadFiles(dir): dictData = [] filesList = os.listdir(dir) for files in filesList: sFileName = dir + \\ +files fileRead = file(sFileName, r) for line in fileRead: dictData += eval(line) return dictData dictList = ReadFiles(os.path.curdir + r\二胎数据) 数据分析 首先要了解数据的结构，才可以进行分析。下图即为微博数据中一条记录。 [{beCommentWeiboId:,beForwardWeiboId:,catchTime:1385038835,commentCount:2,content:【爸爸妈妈生二胎老大答应吗？】现在关于单独二胎，不少家长都好像有点心思活络，想再生个伢儿。但是这个只是大人的想法，窝里相的小朋友，对爸爸妈妈要再生个小弟弟或者小妹妹，是怎么看的呢？我们记者去采访了几个小朋友，他们的答案各种各样，有些还很雷人。视频：/8kzzRRJ,createTime:1385013009,info1:,info2:,info3:,mlevel:,musicurl:[],pic_list:[/thumbnail/81b12a9fjw1easlgim8fqj20k00g0mys.jpg],praiseCount:0,reportCount:0,source:葫芦网官网,userId:2175871647,videourl:[],weiboId:3647071251242162,weiboUrl:/2175871647/AjKxn5d8S}] 数据格式 [{ beCommentWeiboId:, beForwardWeiboId:, catchTime:1385038835, commentCount:2, content:【爸爸妈妈生二胎老大答应吗？】现在关于单独二胎，不少家长都好像有点心思活络，想再生个伢儿。但是这个只是大人的想法，窝里相的小朋友，对爸爸妈妈要再生个小弟弟或者小妹妹，是怎么看的呢？我们记者去采访了几个小朋友，他们的答案各种各样，有些还很雷人。视频：/8kzzRRJ, createTime:1385013009, info1:, info2:, info3:, 数据格式 mlevel:, musicurl:[], pic_list:[/thumbnail/81b12a9fjw1easlgim8fqj20k00g0mys.jpg], praiseCount:0, reportCount:0, source:葫芦网官网, userId:2175871647, videourl:[], weiboId:3647071251242162, weiboUrl:/2175871647/AjKxn5d8S }] 数据统计 现要统计各数据源发出的相关信息的记录数并按记录数升序排列输出结果 先要统计各数据源记录数 按升序排序并输出结果 统计各数据源记录数 sourceName = [] sourceNum = [] for dic in dictList: if dic[source] in sourceName: iIndex = sourceName.index(dic[source]) sourceNum[iIndex] += 1 else: sourceName += [dic[source]] sourceNum += [1] 升序排序并输出结果 for i in range(0, len(sourceNum) - 1): k = i for j in range(i, len(sourceNum)): if sourceNum[j] sourceNum[k]: k = j if k != i: sourceNum[i], sourceNum[k] = sourceNum[k], sourceNum[i] sourceName[i], sourceName[k] = sourceName[k], sourceName[i] for i in range(len(sourceName)):