百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术文章 > 正文

从零开始开发一个实时博客(开发一个博客需要什么技术)

cac55 2024-09-21 13:27 28 浏览 0 评论

后台回复【入门资料】

送你十本Python电子书

本文作者为何世友,科技媒体【爱范儿】的CTO。这是他在前年写的一篇介绍Django Channels 使用的教程,基本思路值得大家参考,但是要注意接口可能有变化,请以最新文档为准。

最终效果

ASGI 、Django Channels 简介

ASGI 的完整说明我在去年做了一个翻译。ASGI 由 Django 团队提出,为了解决在一个网络框架里(如 Django)同时处理 HTTPHTTP2、WebSocket 协议。为此,Django 团队开发了 Django Channels 插件,为 Django 带来了 ASGI 能力。

在 ASGI 中,将一个网络请求划分成三个处理层面,最前面的一层,interface server(协议处理服务器),负责对请求协议进行解析,并将不同的协议分发到不同的 Channel(频道);频道属于第二层,通常可以是一个队列系统。频道绑定了第三层的 Consumer(消费者)。

比如说,HTTP 协议的频道绑定了 HTTP 的消费者,当有新的 HTTP 请求过来时,interface server 将该请求分发到 HTTP 频道,HTTP 频道绑定的 HTTP 消费者对该请求进行处理,将处理结果返回给 HTTP 频道,最终传回给客户端。

下面,我们用一个实例演示下这种能力。完整源码在 Github-heshiyou/livelog: A Django Channels example project to demonstrate the ASGI use case.。

实时博客的实现

第一步:跑起来

本例基于 Python 3.5.1、macOS 10.12.4 beta 5,理论上 Python 2.7、Linux 可以跑起来(测试工作请自行认领)。

安装依赖:pip install-r requirements.txt

requirements.txt 如下:

  1. django

  2. channels

  3. asgi_redis

  4. feedparser

新建 Django 项目:django-admin startproject livelog。在 settings.py 里面,将channels添加到 INSTALLED_APPS,再加上基础的 channels 相关配置:

  1. ...

  2. INSTALLED_APPS = (

  3. ...

  4. 'channels',

  5. )

  6. ...

  7. # Redis

  8. REDIS_OPTIONS = {

  9. 'HOST': '127.0.0.1',

  10. 'PORT': 6379,

  11. 'DB': 0

  12. }

  13. USE_REDIS = True

  14. # Channel settings

  15. CHANNEL_LAYERS = {

  16. "default": {

  17. "BACKEND": "asgi_redis.RedisChannelLayer",

  18. "CONFIG": {

  19. "hosts": ['redis://{}:{}'.format(REDIS_OPTIONS['HOST'],

  20. REDIS_OPTIONS['PORT'])]

  21. },

  22. "ROUTING": "livelog.routing.channel_routing"

  23. }

  24. }

注意到使用了 Redis 来做为 Channels 的 Backend。使用 Redis 是为了跨进程的消息处理,为了简便(不需要跨进程),也可以使用 In Memory Channel Layer。接着,我们在 livelog app 目录下添加一个 routing.py 文件,用以配置 channel 路由,现在可以留空:

  1. channel_routing =

现在,通过以下命令即可跑起来我们的第一个 ASGI Server。

  1. # run following commands in command line separately

  2. redis-server /usr/local/etc/redis.conf

  3. python manage.py runserver

可以看到和普通的 Django app server 的启动方式没什么两样,这归功于 Django Channels 封装。实际工作中,要拆解为三个单独的启动步骤:

  1. daphne livelog.asgi:channel_layer --port 8080//daphne 是 asgi interface sever 的一种实现

  2. python manage.py runworker // 启动 ASGI consumer worker

  3. python manage.py runserver --noasgi --noworker // 启动原始的 WSGI server,不运行 ASGI interface server、worker

第二步:处理 WebSocket

Channels 将 WebSocket 连接映射到三个不同到频道:

  • 当一个新的客户端通过 WebSocket 连接时, websocket.connect频道将收到一条消息,在本例中,将在此频道将新用户添加到实时博客订阅组里。

  • 当一个客户端断开连接, websocket.disconnect频道将收到一条消息。

  • 每一条消息都将被发往 websocket.receive频道,在这个频道里。

首先,我们需要将我们的处理逻辑绑定到这三个频道。

在 livelog app 目录中,添加 comsumers.py 文件:

  1. ...

  2. defws_connect(message):

  3. message.reply_channel.send({'accept': True})

  4. Group(const.GROUP_NAME).add(message.reply_channel)


  5. defws_disconnect(message):

  6. Group(const.GROUP_NAME).discard(message.reply_channel)


  7. defws_receive(message):

  8. pass

在本例中,使用 WSGI 也即原生 Django 提供 http 服务。在 routing.py 文件中,将逻辑绑定到路由:

  1. ...

  2. channel_routing = [

  3. route('websocket.connect', ws_connect),

  4. route('websocket.disconnect', ws_disconnect),

  5. route('websocket.receive', ws_receive)

  6. ]

ws_connect频道中,做了两件事:

  1. 建立 WebSocket 连接;

  2. 将新用户添加到群组里,后面我们将该群组作为实时博客的订阅组,对它发送新的消息。

ws_disconnect频道中,将断开连接的用户移出群组。在ws_receive频道中,暂时什么也不做,因为本例中,我们不通过被动接受新消息的方式来更新博客。为了较为全面地展示 ASGI 的能力,本例中,我们使用 Background worker(后台进程)来主动更新博客,并给群组用户推送新消息。

第三步:推送消息

更新实时博客的方式有很多种,在这里我们使用一个 RSS Feed 作为内容源,对该内容源定时抓取,将新内容更新到博客中,以此来做一个演示。在此之前,介绍一个 Django 的小特性,这个特性将允许我们这么运行我们自己的后台进程:

python manage.py bloggingworker // bloggingworker 是我们自定义的命令

这个特新就是 Django 的自定义命令

具体做法在此不赘述,看文档或看本例完整源码即可得知。下面我们回到正事儿上:

blogging_worker.py

  1. # -*- coding: utf-8 -*-

  2. ...

  3. classCommand(BaseCommand):

  4. """

  5. Command to start blogging worker from command line.

  6. """

  7. help = 'Fetch and parse RSS feed and send over channel'


  8. defhandle(self, *args, **options):

  9. rc = redis.Redis(host=settings.REDIS_OPTIONS['HOST'],

  10. port=settings.REDIS_OPTIONS['PORT'],

  11. db=settings.REDIS_OPTIONS['DB'])

  12. rc.delete(const.GROUP_NAME) # flush live blogs

  13. whileTrue:

  14. feed = feedparser.parse(const.IFANR_FEED_URL)

  15. forentryinfeed.get('entries')[::-1]:

  16. ifnotrc.hexists(const.GROUP_NAME, entry.get('id')):

  17. Group(const.GROUP_NAME).send({'text': json.dumps(entry)})

  18. rc.hset(const.GROUP_NAME, entry.get('id'), json.dumps(entry))

  19. logger.debug('send a message %s ' % entry.get('title'))

  20. time.sleep(5)

这个文件里的大量写法都是 Django 约束的,所以不必过分追究,我们看 handle 方法,在这里,我们做这么几件事:

  1. 从爱范儿的 RSS Feed 获取最新的文章,对每一文章,检查这篇文章是否已经发送过,如果没有发送过,则将该文章发送给群组;

  2. 在 redis 中,新建一个名为 liveblog(这个常量存储在 const.GROUP_NAME) 的哈希表,将每篇未被发送过的新文章添加到该哈希表中,这样就可以判断一篇文章是否曾经被发送过;

  3. Group(const.GROUP_NAME).send({'text':json.dumps(entry)})对群组进行新消息的发送;

  4. 每次发送之后,休息 5 秒钟。

第四步:接收新消息并渲染

我们已经有了一个永不停歇的博客更新服务在运行着,一旦有新的内容,这个服务将为用户推送。现在,我们需要一个页面来渲染呈现新消息。

在 templates 目录下,新建 blog.html 文件:

  1. <!DOCTYPE html>

  2. <htmllang="en">

  3. ...

  4. <divid="container">

  5. <h2>Live Blog</h2>

  6. <ulid="log">


  7. </ul>

  8. </div>


  9. <scripttype="application/javascript">

  10. varws_scheme = window.location.protocol == "https:" ? "wss" : "ws";

  11. varws =newWebSocket(ws_scheme + '://' + window.location.host + window.location.pathname);

  12. console.log(ws);

  13. ws.onmessage = function(message) {

  14. vardata = JSON.parse(message.data);

  15. varlogList = document.querySelector('#log');

  16. varlogItem = document.createElement('li');


  17. varitemTmp = `

  18. <h3>${data.title}</h3>

  19. <p>

  20. <date>${newDate(data.published).toLocaleString}</date>

  21. <span>${data.source.title}</span>

  22. </p>

  23. `;

  24. logItem.innerHTML = itemTmp;

  25. logList.insertBefore(logItem, logList.firstChild);

  26. }


  27. </script>

  28. </body>

  29. </html>

在这个页面里,有一个 WebSocket Client 将被新建,并向服务器发起建立连接的请求。当有新消息,将在 #logul 中插入新的消息。接下来就是传统 Django 的工作:

  1. 在 urls.py 中配置 django view 的路由: url(r'blog/

,livelog.views.livelog,name='livelog')

  • 在 views.py 中新增一个名为 livelog 的 view: deflivelog(request):returnrender(request,'blog.html'),渲染模板,响应 http 请求。

  • 到此,一个主动更新博客内容并将新消息推送给每位在线的用户的服务就完成了。

    References

    • ASGI 异步服务网关接口规范

    • Django Channels Get Started

    • Finally, Real-Time Django Is Here: Get Started with Django Channels

    • Raspberry PI and Django Channels

    原文链接:https://blog.ernest.me/post/asgi-demonstration-realtime-blogging

    题图:pexels,CC0 授权。

    相关推荐

    服务器用的CPU和个人电脑用的CPU有什么区别?一篇文章告诉你!

    服务器cpu和普通cpu的区别你的电脑CPU是‘短跑健将’,服务器CPU却是‘铁人三项选手’——它不追求瞬间爆发力,而要7×24小时扛住千军万马的数据洪流!想知道为什么企业机房敢收天价服务费?答案全藏...

    “吃鸡”新版本第1天,玩家进入游戏点击“立即更新”,后悔了!

    欢迎诸位小伙伴们来到天哥开讲的《和平精英》“精英小课堂”~每逢两三个月,这款游戏就会迎来一次大版本迭代更新,很多朋友会在第一时间更新版本,前往全新的主题模式里一探究竟。不过也有一些老玩家并不会立刻更新...

    中关村在线·aigo存储杯《无畏契约》全国高校争霸赛招募启事

    以青春之名,燃电竞之火1赛事背景与宗旨在金秋送爽的9月,芊芊学子们即将回归校园生活。为了给精彩的校园生活锦上添花,由中关村在线与aigo存储联合主办的《无畏契约》全国高校争霸赛正式启幕,旨在为全国高...

    【生肖狗】9.7-9.10提醒:人算不如天算,转变即是转机

    九月上旬的风,带着秋意的清爽,也带着几分不可捉摸的变数。对于生肖狗的朋友们来说,9月7日到9月10日这四天,格外需要留意“计划与变化”的碰撞——你们向来习惯提前规划,做事稳妥周全...

    转转客服IM系统的WebSocket集群架构设计和部署方案

    本文由转转技术李帅分享,原题“转转客服IM的WebSocket集群部署方案”,下文有修订和重新排版。1、引言转转作为国内头部的二手闲置交易平台,拥有上亿的用户。用户在使用转转app遇到问题时,一般可以...

    上线3天Steam好评率86%,《时间旅者:重生曙光》开启生存恐怖新篇章

    这里究竟发生了什么?末日降临,真正的故事悄然启幕。目前,生存恐怖类游戏《时间旅者:重生曙光(Cronos:TheNewDawn)》已在PC(Steam、EpicGamesStore)、P...

    什么神仙洗衣机让我一天有28小时?拆开松下「大四洗」藏了啥秘密

    说起家庭洗衣的烦恼,想必很多人都有过类似的经历:贴身内衣要单独洗,宝宝的口水巾得小心呵护,宠物玩具怕藏污纳垢,床单被套又体积庞大,把这些东西混在一起洗担心越洗越脏,分开洗又得反复操作,洗完烘、烘完再洗...

    爆料人挖出GTA6注册的奇葩域名 延续经典讽刺风格

    等待《侠盗猎车手6》的日子跨越了数个春秋,在游戏圈期盼着这部可能成为史上最重磅游戏的过程中,每过一段时间就会有些许消息浮出水面。最新线索来自数据挖掘者Tez2在GTA论坛的发现,他可能偶然发现了关于...

    跟着故事去旅行——读《驼峰间:旅行、探险与征服》

    作者:郭冰茹《驼峰间》记录了旅行家伊本·白图泰有生之年流传的一则寓言,说一对父子被关进了监狱,有一天儿子问父亲他们每天吃的都是些什么肉,父亲说有牛、羊和骆驼,并且详细地描述了每种动物的特点。但不管父亲...

    前端工程师需要熟悉的Linux服务器(SSH 终端操作)指令

    在Linux服务器管理中,SSH(SecureShell)是远程操作的核心工具。以下是SSH终端操作的常用命令和技巧,涵盖连接、文件操作、系统管理等场景:一、SSH连接服务器1.基本连接...

    跳票6年后,「丝之歌」首发把Steam服务器干爆了 | 玩点好的

    文丨果脯樱花隧道昨天晚上22点,「鸽」了6年的《空洞骑士:丝之歌》终于上线,算是了却不少玩家的执念。毕竟,这款游戏实在让人等了太多太多年,而且曾有过多次定档后跳票的「案底」,不知道把多少人都整出了P...

    对标魔兽失败!腾讯版“魔兽”运营一年多后,宣布国际服凉凉

    大家好,这里是正惊游戏,我是正惊小弟。有很多游戏都想干掉《魔兽世界》,但是大部分魔兽杀手都知道自己不是魔兽的对手,不过是想蹭一下人气而已。腾讯也有一款曾经想对标魔兽的大作,可是上线才一年半国际服就宣布...

    408 Request Timeout:服务器等待客户端发送请求的时间过长。

    408RequestTimeout是HTTP状态码之一,表示客户端在发送请求时,服务器等待的时间过长,最终放弃了处理该请求。此问题通常与网络延迟、客户端配置、服务器设置或者应用程序的性能有关...

    梦幻西游:9.9维护解读,全新时间服锁定129级

    梦幻西游:9.9维护解读,全新时间服锁定129级9月9日维护解读。1、教师节活动开启,一共7天。挂机,答题,收笔墨纸砚,收海马,搞起来。或者是提前收点家具,教师节期间体力珍贵,家具会涨价。又或者是教师...

    只是拆掉一面墙,空间就立马大变样,这种设计思路,值得学习

    你有没有过这样的经历?刚买的房子户型图看起来方方正正,装修完却发现——玄关鞋柜只能塞在角落,进门就撞墙;餐厅正好在过道中间,吃饭像走流程;明明有四个房间,却有一个空着没用,像块食之无味的鸡肋;客餐厅之...

    取消回复欢迎 发表评论: