电影页面目前没法以非登陆状态抓取 about douban-to-imdb HOT 4 CLOSED

@murdercdh
有一些稍微限制级点的电影在不登录状态下是没有办法打开条目的。
但这些条目在已经登录状态下就可以打开，逻辑很迷。
程序没有登录逻辑，所以限制级只能自己手工导入了。

关于什么是限制级豆瓣并没有公开相关标准，这个登录提示不登录的无法打开的就是了。

from douban-to-imdb.

@murdercdh 有一些稍微限制级点的电影在不登录状态下是没有办法打开条目的。 但这些条目在已经登录状态下就可以打开，逻辑很迷。 程序没有登录逻辑，所以限制级只能自己手工导入了。

关于什么是限制级豆瓣并没有公开相关标准，这个登录提示不登录的无法打开的就是了。

目前测试在200-300的连续请求以后，豆瓣的安全防火墙会无脑ban掉抓取ip，很弱智，就连登陆完毕的网页也一起banned掉了，我要迁移个数据感觉就很麻烦.

我找到一个他们自己爬了一些数据下来的query接口，但是却没有提供认证的姿势，也是郁闷了
https://github.com/iiiiiii1/douban-imdb-api

from douban-to-imdb.

豆瓣导出CSV时可以指定导出的开始日期，少量多次的分批导出也许可以。

from douban-to-imdb.

已经导出完毕，现在我改了下程序，没有用随机代理和随机agent了（douban反扒，对于已经登陆用户，直接封24小时ip, 挺无聊的），直接每天跑一次，直到所有我自己片单都跑完，已经迁移到letterbox然后import到imdb了。

卸载douban app完毕

from douban-to-imdb.