MCPcopy Create free account

hub / github.com/Python3Spiders/WeiboSuperSpider / functions

Functions175 in github.com/Python3Spiders/WeiboSuperSpider

↓ 8 callersMethoddeal_garbled
处理乱码
GUI 功能集中版(discard 废弃)/GUI.py:139
↓ 8 callersMethoddeal_garbled
处理乱码
GUI 功能集中版(discard 废弃)/GUI.py:651
↓ 8 callersMethoddeal_garbled
处理乱码
无 GUI 功能独立版/WeiboUserScrapy.py:75
↓ 8 callersMethoddeal_garbled
处理乱码
无 GUI 功能独立版/WeiboTopicScrapy(no longer maintained).py:63
↓ 5 callersMethoddeal_html
处理html
GUI 功能集中版(discard 废弃)/GUI.py:129
↓ 5 callersMethoddeal_html
处理html
无 GUI 功能独立版/WeiboUserScrapy.py:65
↓ 4 callersMethodget_filepath
获取结果文件路径
GUI 功能集中版(discard 废弃)/GUI.py:490
↓ 3 callersMethod__init__
(self)
GUI 功能集中版(discard 废弃)/GUI.py:1041
↓ 3 callersMethoddeal_html
处理html
无 GUI 功能独立版/WeiboTopicScrapy(no longer maintained).py:53
↓ 2 callersMethoddeal_html
处理html
GUI 功能集中版(discard 废弃)/GUI.py:641
↓ 2 callersMethodextract_picture_urls
提取微博原始图片url
GUI 功能集中版(discard 废弃)/GUI.py:383
↓ 2 callersMethodextract_picture_urls
提取微博原始图片url
GUI 功能集中版(discard 废弃)/GUI.py:841
↓ 2 callersMethodextract_picture_urls
(self, info, weibo_id)
无 GUI 功能独立版/WeiboUserScrapy.py:320
↓ 2 callersMethodextract_picture_urls
(self, info, weibo_id)
无 GUI 功能独立版/WeiboTopicScrapy(no longer maintained).py:253
↓ 2 callersMethodgetData
(self)
GUI 功能集中版(discard 废弃)/MyDialog.py:61
↓ 2 callersMethodgetItem
(self, index)
GUI 功能集中版(discard 废弃)/ListModel.py:41
↓ 2 callersFunctiongetUidByName
(name)
无 GUI 功能独立版/SearchUser.py:24
↓ 2 callersFunctiongetUserInfo
(uid)
无 GUI 功能独立版/WeiboUserInfoSpider.py:40
↓ 2 callersMethodget_long_weibo
获取长原创微博
GUI 功能集中版(discard 废弃)/GUI.py:195
↓ 2 callersMethodget_long_weibo
获取长原创微博
GUI 功能集中版(discard 废弃)/GUI.py:661
↓ 2 callersMethodget_long_weibo
获取长原创微博
无 GUI 功能独立版/WeiboUserScrapy.py:131
↓ 2 callersMethodget_long_weibo
获取长原创微博
无 GUI 功能独立版/WeiboTopicScrapy(no longer maintained).py:73
↓ 2 callersFunctioninfo_parser
(data)
无 GUI 功能独立版/WeiboSuperCommentScrapy(no longer maintained).py:312
↓ 2 callersMethodpre_login
(self)
无 GUI 功能独立版/WeiboSuperCommentScrapy(no longer maintained).py:182
↓ 2 callersMethodrun
(self)
无 GUI 功能独立版/WeiboSuperTopicActiveUserSpider.py:127
↓ 2 callersFunctiontime_formater
(input_time_str)
无 GUI 功能独立版/WeiboCnTopicSpiderWithoutCookie.py:25
↓ 2 callersFunctiontime_params_formatter
(params_time, offset_day=0, offset_hour=-8)
无 GUI 功能独立版/WeiboTopicScrapy(no longer maintained).py:486
↓ 2 callersMethodwrite_csv
将爬取的信息写入csv文件
GUI 功能集中版(discard 废弃)/GUI.py:933
↓ 2 callersMethodwrite_csv
将爬取的信息写入csv文件
无 GUI 功能独立版/WeiboLikeSpider.py:142
↓ 2 callersMethodwrite_csv
将爬取的信息写入csv文件
无 GUI 功能独立版/WeiboTopicScrapy(no longer maintained).py:368
↓ 2 callersMethodwrite_file
写文件
GUI 功能集中版(discard 废弃)/GUI.py:569
↓ 2 callersMethodwrite_file
写文件
无 GUI 功能独立版/WeiboUserScrapy.py:460
↓ 2 callersMethodwrite_to_csv
(self,result,isHeader=False)
GUI 功能集中版(discard 废弃)/WeiboCommentScrapy.py:128
↓ 2 callersMethodwrite_to_csv
(self,result,isHeader=False)
无 GUI 功能独立版/WeiboCommentScrapy(no longer maintained).py:128
↓ 1 callersMethodaddItem
(self, pitem)
GUI 功能集中版(discard 废弃)/ListView.py:55
↓ 1 callersMethodclearData
(self)
GUI 功能集中版(discard 废弃)/ListView.py:37
↓ 1 callersFunctiondfAddUserInfo
@params file_path 指定路径 @params user_col 指定用户主页链接在那一列, 比如评论csv文件的是 comment_user_link @params user_info_col 指定新加的 userinfo 列名,默认是 user_i
无 GUI 功能独立版/WeiboUserInfoSpider.py:97
↓ 1 callersFunctiondfGetUserInfo
(file_path, user_info_col)
无 GUI 功能独立版/WeiboUserInfoSpider.py:133
↓ 1 callersMethoddo_down_img
(self, img_url, savepath)
无 GUI 功能独立版/WeiboUserScrapy.py:518
↓ 1 callersMethoddownloadImg
(self, image_url)
无 GUI 功能独立版/WeiboSuperTopicActiveUserSpider.py:87
↓ 1 callersMethoddrop_duplicate
(file_path)
无 GUI 功能独立版/WeiboUserScrapy.py:417
↓ 1 callersFunctionextract_video_url
(a_weibo)
无 GUI 功能独立版/CommentedWeiboSpider.py:61
↓ 1 callersMethodfinish
(self, reason)
无 GUI 功能独立版/WeiboComPostSpider.py:109
↓ 1 callersFunctiongetLongText
(mid)
无 GUI 功能独立版/CommentedWeiboSpider.py:41
↓ 1 callersFunctiongetLongText
(lid)
无 GUI 功能独立版/WeiboCnTopicSpiderWithoutCookie.py:56
↓ 1 callersMethodgetPublisherInfo
(self,url)
GUI 功能集中版(discard 废弃)/WeiboCommentScrapy.py:81
↓ 1 callersMethodgetPublisherInfo
(self,url)
无 GUI 功能独立版/WeiboCommentScrapy(no longer maintained).py:81
↓ 1 callersFunctiongetUserLinkByName
(name)
无 GUI 功能独立版/SearchUser.py:56
↓ 1 callersMethodget_cha
获取验证码,并且用PIL打开, 1. 如果本机安装了图片查看软件,也可以用 os.subprocess 的打开验证码 2. 可以改写此函数接入打码平台。
无 GUI 功能独立版/WeiboSuperCommentScrapy(no longer maintained).py:163
↓ 1 callersFunctionget_commented_weibo_by_uid
(uid, cookie=None)
无 GUI 功能独立版/CommentedWeiboSpider.py:84
↓ 1 callersFunctionget_cookies
()
无 GUI 功能独立版/WeiboSuperCommentScrapy(no longer maintained).py:304
↓ 1 callersMethodget_long_retweet
获取长转发微博
GUI 功能集中版(discard 废弃)/GUI.py:225
↓ 1 callersMethodget_long_retweet
获取长转发微博
GUI 功能集中版(discard 废弃)/GUI.py:691
↓ 1 callersMethodget_long_retweet
获取长转发微博
无 GUI 功能独立版/WeiboUserScrapy.py:162
↓ 1 callersMethodget_long_retweet
获取长转发微博
无 GUI 功能独立版/WeiboTopicScrapy(no longer maintained).py:103
↓ 1 callersMethodget_nickname
获取用户昵称
GUI 功能集中版(discard 废弃)/GUI.py:149
↓ 1 callersMethodget_nickname
获取用户昵称
无 GUI 功能独立版/WeiboUserScrapy.py:85
↓ 1 callersMethodget_one_comment_struct
(self,comment)
GUI 功能集中版(discard 废弃)/WeiboCommentScrapy.py:101
↓ 1 callersMethodget_one_comment_struct
(self,comment)
无 GUI 功能独立版/WeiboCommentScrapy(no longer maintained).py:101
↓ 1 callersMethodget_one_page
获取第page页的全部微博
GUI 功能集中版(discard 废弃)/GUI.py:472
↓ 1 callersMethodget_one_page
获取第page页的全部微博
无 GUI 功能独立版/WeiboUserScrapy.py:398
↓ 1 callersMethodget_one_weibo
获取一条微博的全部信息
GUI 功能集中版(discard 废弃)/GUI.py:442
↓ 1 callersMethodget_one_weibo
获取一条微博的全部信息
GUI 功能集中版(discard 废弃)/GUI.py:900
↓ 1 callersMethodget_one_weibo
获取一条微博的全部信息
无 GUI 功能独立版/WeiboUserScrapy.py:367
↓ 1 callersMethodget_one_weibo
获取一条微博的全部信息
无 GUI 功能独立版/WeiboTopicScrapy(no longer maintained).py:331
↓ 1 callersMethodget_original_weibo
获取原创微博
GUI 功能集中版(discard 废弃)/GUI.py:209
↓ 1 callersMethodget_original_weibo
获取原创微博
GUI 功能集中版(discard 废弃)/GUI.py:675
↓ 1 callersMethodget_original_weibo
获取原创微博
无 GUI 功能独立版/WeiboUserScrapy.py:145
↓ 1 callersMethodget_original_weibo
获取原创微博
无 GUI 功能独立版/WeiboTopicScrapy(no longer maintained).py:87
↓ 1 callersMethodget_page_num
获取微博总页数
GUI 功能集中版(discard 废弃)/GUI.py:182
↓ 1 callersMethodget_page_num
获取微博总页数
无 GUI 功能独立版/WeiboUserScrapy.py:118
↓ 1 callersMethodget_password
对密码进行 RSA 的加密
无 GUI 功能独立版/WeiboSuperCommentScrapy(no longer maintained).py:153
↓ 1 callersMethodget_picture_urls
获取微博原始图片url
GUI 功能集中版(discard 废弃)/GUI.py:415
↓ 1 callersMethodget_picture_urls
获取微博原始图片url
GUI 功能集中版(discard 废弃)/GUI.py:873
↓ 1 callersMethodget_picture_urls
获取微博原始图片url
无 GUI 功能独立版/WeiboUserScrapy.py:340
↓ 1 callersMethodget_picture_urls
获取微博原始图片url
无 GUI 功能独立版/WeiboTopicScrapy(no longer maintained).py:285
↓ 1 callersMethodget_publish_place
获取微博发布位置
GUI 功能集中版(discard 废弃)/GUI.py:285
↓ 1 callersMethodget_publish_place
获取微博发布位置
GUI 功能集中版(discard 废弃)/GUI.py:743
↓ 1 callersMethodget_publish_place
获取微博发布位置
无 GUI 功能独立版/WeiboUserScrapy.py:222
↓ 1 callersMethodget_publish_place
获取微博发布位置
无 GUI 功能独立版/WeiboTopicScrapy(no longer maintained).py:155
↓ 1 callersMethodget_publish_time
获取微博发布时间
GUI 功能集中版(discard 废弃)/GUI.py:311
↓ 1 callersMethodget_publish_time
获取微博发布时间
GUI 功能集中版(discard 废弃)/GUI.py:769
↓ 1 callersMethodget_publish_time
获取微博发布时间
无 GUI 功能独立版/WeiboUserScrapy.py:248
↓ 1 callersMethodget_publish_time
获取微博发布时间
无 GUI 功能独立版/WeiboTopicScrapy(no longer maintained).py:181
↓ 1 callersMethodget_publish_tool
获取微博发布工具
GUI 功能集中版(discard 废弃)/GUI.py:342
↓ 1 callersMethodget_publish_tool
获取微博发布工具
GUI 功能集中版(discard 废弃)/GUI.py:800
↓ 1 callersMethodget_publish_tool
获取微博发布工具
无 GUI 功能独立版/WeiboUserScrapy.py:279
↓ 1 callersMethodget_publish_tool
获取微博发布工具
无 GUI 功能独立版/WeiboTopicScrapy(no longer maintained).py:212
↓ 1 callersMethodget_publisher_info
(self, link)
无 GUI 功能独立版/WeiboTopicScrapy(no longer maintained).py:312
↓ 1 callersMethodget_response
(self)
无 GUI 功能独立版/WeiboLikeSpider.py:120
↓ 1 callersMethodget_retweet
获取转发微博
GUI 功能集中版(discard 废弃)/GUI.py:235
↓ 1 callersMethodget_retweet
获取转发微博
GUI 功能集中版(discard 废弃)/GUI.py:701
↓ 1 callersMethodget_retweet
获取转发微博
无 GUI 功能独立版/WeiboUserScrapy.py:172
↓ 1 callersMethodget_retweet
获取转发微博
无 GUI 功能独立版/WeiboTopicScrapy(no longer maintained).py:113
↓ 1 callersMethodget_server_data
与原来的相比,微博的登录从 v1.4.18 升级到了 v1.4.19 这里使用了 URL 拼接的方式,也可以用 Params 参数传递的方式
无 GUI 功能独立版/WeiboSuperCommentScrapy(no longer maintained).py:138
↓ 1 callersFunctionget_single_page
(page, keyword)
无 GUI 功能独立版/WeiboCnTopicSpiderWithoutCookie.py:33
↓ 1 callersMethodget_su
对 email 地址和手机号码 先 javascript 中 encodeURIComponent 对应 Python 3 中的是 urllib.parse.quote_plus 然后在 base64 加密后decode
无 GUI 功能独立版/WeiboSuperCommentScrapy(no longer maintained).py:127
↓ 1 callersMethodget_user_info
获取用户昵称、微博数、关注数、粉丝数
GUI 功能集中版(discard 废弃)/GUI.py:163
↓ 1 callersMethodget_user_info
获取用户昵称、微博数、关注数、粉丝数
无 GUI 功能独立版/WeiboUserScrapy.py:99
↓ 1 callersMethodget_weibo_content
获取微博内容
GUI 功能集中版(discard 废弃)/GUI.py:271
next →1–100 of 175, ranked by callers