feat: 增加头条同步微博模块

chang_an/SyncToutiao2Weibo.py

@@ -0,0 +1,67 @@
+import requests
+from requests_html import HTMLSession, HTML
+from datetime import timedelta
+import json
+import datetime
+
+# 获取欧洲足球时评微头条内容
+"""
+获取微头条数据信息
+"""
+
+max_behot_time = '0'
+def getWeiToutiaoInfo():
+    global max_behot_time
+    # 获取上一周的第一天和最后一天的时间戳
+    lastWeekStartTime, lastWeekEndTime = getLastWeekFirstDayTimeStamp()
+    session = HTMLSession()
+    weitoutiaoGet = session.get(f"https://www.toutiao.com/api/pc/list/user/feed?category=pc_profile_ugc&token=MS4wLjABAAAA7lHc4sBPuZaQ85qdIrwVvWm8Ps5O1kPMpuh5lTJAwII&max_behot_time={max_behot_time}&aid=24&app_name=toutiao_web", verify=False, proxies=None)
+    # print(weitoutiaoGet.text)
+    # 使用Json解析返回的数据
+    resultJson = json.loads(weitoutiaoGet.text)
+    # 先获取下个max_behot_time时间戳，如果需要翻页查询需要使用该参数
+    max_behot_time = resultJson['next']['max_behot_time']
+    # 开始循环解析data数据，获取微头条的内容和发布人员
+    dataList = resultJson['data']
+    # 获取每一条消息的发布时间戳，如果发布时间出现早于上周一0点的数据，结束统计，函数返回，否则递归调用当前函数
+    for data in dataList:
+        # 获取本条新闻的发布时间
+        publishTime = data["publish_time"]
+        if int(publishTime) > int(lastWeekEndTime):
+            continue
+        elif int(publishTime) < int(lastWeekStartTime):
+            return
+        else:
+            # 如果是比分预测类的微头条，则跳过
+            content = str(data['content'])
+            print(content)
+            # if content.find("比分预测】")>0:
+            #     continue
+            # else:
+            #     # 获取该微头条的发布人和发布日期
+            #     author = None
+            #     contentSubString = content[-8:]
+            #     if contentSubString.find("太能喵")>0:
+            #         weitoutiaoMap["太能喵"] = weitoutiaoMap["太能喵"]+1
+            #     elif contentSubString.find("小小")>0:
+            #         weitoutiaoMap["小小"] = weitoutiaoMap["小小"]+1
+            #     elif contentSubString.find("大帝强") > 0:
+            #         weitoutiaoMap["大帝强"] = weitoutiaoMap["大帝强"] + 1
+            #     elif contentSubString.find("叶小欢") > 0:
+            #         weitoutiaoMap["叶小欢"] = weitoutiaoMap["叶小欢"] + 1
+    getWeiToutiaoInfo()
+
+"""
+获取当前日期上一周的第一天和最后一天的时间戳
+"""
+def getLastWeekFirstDayTimeStamp():
+    now = datetime.datetime.now()
+    # 上周第一天和最后一天
+    last_week_start = now - timedelta(days=now.weekday() + 7, hours=now.hour, minutes=now.minute, seconds=now.second, microseconds=now.microsecond)
+    last_week_end = last_week_start - timedelta(days=-7)
+    print(f"上周第一天的日期是：{last_week_start},最后一天的日期是：{last_week_end}")
+    print(f"上周第一天的时间戳是：{last_week_start.timestamp()},最后一天的时间戳是：{last_week_end.timestamp()}")
+    return last_week_start.timestamp(), last_week_end.timestamp()
+
+if __name__ == '__main__':
+    getWeiToutiaoInfo()

chang_an/all_comments.csv

@@ -0,0 +1,23 @@
+user_id,city,rating,date,comment
+西年,河北邯郸,推荐,2019-06-27 21:12:26,唐朝只有道士的簪子是竖着插，很少有剧组会注意到这点，所以这部剧的道具是真的用心，下了功夫研究的。服装化妆也都精致。一个最多时有上百个群演的组，每天出妆7小时。
+天是红河岸,上海,力荐,2019-06-27 20:39:18,打光摄影服化道都用心，曹盾的画面一如既往靠谱，质感太棒了！应该是本年度最佳古装了。
+秃头小宝贝,湖北武汉,力荐,2019-06-27 20:39:17,终于播了，从2017年官宣开始，我就在期待了！没想到雷佳音古装也这么合适，易烊千玺的气质也非常适合李泌。
+鸟倦知还,上海,推荐,2019-06-27 21:06:28,《妖猫传》之后在电视剧里面看到这么精致的盛唐太震撼了，能播出真是2019古装剧的华采。以雷佳音的张小敬和李必为中心的群像剧，有悬疑色彩，但更多的是不灭的赤子之心。很有诚意的国产精品作。
+欢乐分裂,上海,还行,2019-06-29 18:52:08,还是过誉了，开篇的盛唐气象和长镜穿梭很有感觉，服化道之讲究自不赘言。但作为电视剧核心的剧本，在节奏铺排上仍存有相当纰漏——将十二时辰的物理时间长度填满25集的长度，势必要穿插无数人和事（包括闪回），于是叙事点和各事件的剪接变得非常重要，而至中段看来，旁枝逸出的细节虽有利于完成破案拼图，究其自身不少细节是拖沓的，因此整体有不畅之处，作为悬疑权斗剧来说，摊子铺得过大的话，一来拖节奏后腿，二则也不容易收场自圆其说。选角倒是意外契合，四字表现不错，雷佳音虽可爱但角色同质化太雷同了吧。
+呜昂王,"Reykjavík, Iceland",力荐,2019-06-27 21:26:28,一天内拯救西安终于上了，不枉我等了这么久，这个剧太符合我的口味，服装造型场景设计以及台词太吃的下去了，演员选的也好，雷佳音把张小敬演活了每一个眼神动作台词我觉得非常到位！易烊千玺把李必高冷清净端正的感觉演出来了，好多人说弟弟台词不好，确实跟老戏骨比稍显稚嫩，但是也能看到他的努力。这部剧我吹爆每一位演员和幕后制作人员感谢你们还原了长安，西安人听着坊名地名倍感亲切！
+掉线,北京,推荐,2019-06-27 22:37:32,摄影太赞了，构图和色调真的是如盛唐画卷一般，无论是细节还是大场面都看得出背后制作的用心和规模。故事时间限定在十二时辰当中，快节奏的剧情让人很有追下去的欲望，第一集便用案件架设了悬念。易烊千玺和雷佳音的表演也都不错，这个剧真的很可！
+元气少女楼跟跟,,力荐,2019-06-27 20:52:00,期待已久的剧终于开播了！好喜欢呀！易烊千玺的表现很惊喜！
+momo,浙江杭州,推荐,2019-06-27 20:44:34,能在2019看到这部戏简直是人生之幸，雷佳音的张小敬是少见的不想笑的角色，看着一身杀伐气就知道他拼的有多值。拿到好剧本的曹盾宛如开了挂一样，实力派×潜力股，这个配置，绝了。
+把噗,北京,推荐,2019-06-27 23:12:26,年度第一良心国产古装剧。开头几段长镜头极尽影像美学，调色和构图很有电影质感。场景、道具、服装……十分考究，还原了一个盛极而衰的大唐长安。雷佳音的表演有意想不到的反差，千玺弟弟真的可以，演技到位，惊喜之上。
+Shirleysays,北京,力荐,2019-06-27 23:33:12,看了十集。改编走心，演员专心，舞美用心，古装剧里少见的良心剧。易烊千玺的扛鼎之作，从出现在镜头里的那一刻起，就令人刮目相看了，面对十七岁的自己，他真是太赞了👍。
+碎碎念,河南郑州,力荐,2019-06-27 21:45:16,感觉没港台的掺合，大陆班底慢慢走回正轨了！
+蓥鄞一米,上海,推荐,2019-06-27 21:10:36,草灰蛇线的几集，节奏稳的一批，很少见这么大部头扎扎实实的古装剧了。雷佳音演的很拼，易烊千玺难得的hold住了，作为四字弟弟第一部影视作品，这个成绩单交的相当漂亮。
+理想蔚藍,上海,力荐,2019-06-28 00:03:33,精致！长安反恐24小时！
+艮艮,,推荐,2019-06-27 21:08:02,终于有一部期待的剧播出了，太难得了！画面服化道也太棒了，整体节奏UPUP的快，让人恨不得一天看完全集。长安城里，看似平静的世道啊，早就变天了。
+Chestnut.,浙江宁波,力荐,2019-06-28 23:09:29,服化道美呆，长安众生相拍的太好了！！！吹爆大头演技！四字竟然表现的还8错。
+大浪淘沙,"Nairobi, Kenya",力荐,2019-06-27 21:35:32,很有质感的国产电视剧  制作很惊喜 演员台词和表情都很到位 看过原著  期待后面的剧情
+嘴巴嘟嘟,北京,力荐,2019-06-27 21:56:36,终于来了，看了第一集，先马一下，质感真的超级赞，主演演技都很好，原音好评
+凹凸,上海,推荐,2019-06-27 23:20:02,"《绣春刀》之后又看雷佳音演古装剧，台词功力太厉害，一开口就是戏。
+有被制作惊艳到，光看开场的长安城长镜头就知道出手不凡，之后一段室内打戏的穿墙长镜头更是调度惊人。不仅摄影构图和后期滤镜考究，配乐和服道化也都是电影级的精良制作，现在连网剧都这么有水准了么？
+头几集就铺了个大局，先给四星，持续观望下。"
+宁弍,,力荐,2019-06-27 23:03:50,台词、布景、细节、服化、收音、原声，包括原本担心的节奏都跟上了，大头和四字演技都在线，客观说四字台词还需打磨，但不妨碍这部剧好看呀。