说明:本教程主要提供给Shadowshaman用户作为设置参考,图文按照不同的操作系统和浏览器顺序,并且已经默认安装完毕客户端。
多个应用静态文件路径的处理
发表于
|
分类于
Server
问题情景
在一个服务器上的两个不同端口下都有Python Tornadoweb的应用在运行,这个时候静态文件(static files)就会变得非常难处理。现在假设我们有两个应用A和B,A应用在8123端口运行;
1 | if __name__=="__main__": |
B应用在8321端口运行;
1 | if __name__=="__main__": |
制作网页弹幕服务器
发表于
|
分类于
Web
这篇说说一个非常好用的弹插件jquery.danmu.js的使用心得以及前端和后台数据一个解决方案。开发到最后发现这说不定是一个好的创业项目呢!
示例
这是主站地址下的一个弹幕主题设计的封面,这样的设计简洁而内容又可以根据需要变化,现在只有我可以从后端添加弹幕,但是其实这个区域可以变成一面留言墙,所有游客都可以留言。
Beautiful Soup 爬虫收集豆瓣电影评论
发表于
|
分类于
Scraper
前段时间研究了下豆瓣电影评论区的结构,加上一些bs4的技巧做了一个收集豆瓣电影品论的爬虫。
准备阶段
计划是用mongodb储存结果,这里可以换成其他的数据库。1
2
3
4
5
6
7-mongodb
-python2.7
|--pymongo
|--BeautifulSoup
|--requests
|--json
|-re
验证阶段
开始之前一定要确认豆瓣电影评论区是什么网页类型。BeautifulSoup只能用来爬静态网页。豆瓣的电影评论在点击进入时就已经加载完毕了,所以可以使用BeautifulSoup制作的爬虫读取。再分析一下电影评论页面链接的结构。这个结构非常有利于爬虫工作,对于不同的电影只需要更改ID即可。
https://movie.douban.com/subject/1889243/comments?start=0&limit=20&sort=new_score
链接结构 –> 电影区/对象/电影ID/评论页面?起点&数量&排序方式