search

tysontxli / QIANGGUO

QG-Database
125 stars 38 forks source link

我win7配置了环境，怎么运行后没反应？需要Linux？ #2

Open wepo123 opened 5 years ago

wepo123 commented 5 years ago

我win7配置了环境，怎么运行后没反应？需要Linux？

tysontxli commented 5 years ago

爬虫程序是python写的，在win7和linux上只要有python环境都可以运行，就是数据库那一块需要自己先创建数据库，然后在news_scrapy.py里面把连接数据库相关的语句的信息改成自己的就ok，然后调用类里面的firsttime方法就能进行初次爬取文章数据。linux 的作用只是利用了linux上的crontab来定时执行shell脚本调用爬虫程序的maitain方法维护数据库。目前还没到配置好就可以用的阶段，还在继续边学边开发中，我是小白希望能谅解哈

wepo123 commented 5 years ago

我更是白纸一张，（主要是我这要每天45分，我快被逼疯了一点也不想刷积分），你有完整的教程或者程序说明么？感激不尽，邮箱threehahuang@163.com

tysontxli commented 5 years ago

45分也太恐怖了.... 怕是要文章、视频、评论和收藏一起上才有45吧.. 我预计这个程序第一阶段开发完之后每天能刷30积分。现在程序所有的可用的部分都附在这里了，还没那么快能用...兄弟可能现在得向其他办法先了...

napoleon1021 commented 5 years ago

@wepo123 数据库建好以后卡在python运行环境上了，单位的win7装vc++14有部分失败，今天上linux试试

y0fx commented 5 years ago

45分！我去 太变态！

cz1980 commented 5 years ago

爬虫程序是python写的，在win7和linux上只要有python环境都可以运行，就是数据库那一块需要自己先创建数据库，然后在news_scrapy.py里面把连接数据库相关的语句的信息改成自己的就ok，然后调用类里面的firsttime方法就能进行初次爬取文章数据。linux 的作用只是利用了linux上的crontab来定时执行shell脚本调用爬虫程序的maitain方法维护数据库。目前还没到配置好就可以用的阶段，还在继续边学边开发中，我是小白希望能谅解哈

其实不用去搞什么爬虫，只要一篇文章反复看，一个视频反复看就能得分了。不需要把文章和视频都爬下来

tysontxli commented 5 years ago

爬虫程序是python写的，在win7和linux上只要有python环境都可以运行，就是数据库那一块需要自己先创建数据库，然后在news_scrapy.py里面把连接数据库相关的语句的信息改成自己的就ok，然后调用类里面的firsttime方法就能进行初次爬取文章数据。linux 的作用只是利用了linux上的crontab来定时执行shell脚本调用爬虫程序的maitain方法维护数据库。目前还没到配置好就可以用的阶段，还在继续边学边开发中，我是小白希望能谅解哈

其实不用去搞什么爬虫，只要一篇文章反复看，一个视频反复看就能得分了。不需要把文章和视频都爬下来

听大家说貌似同一篇文章每天都能看都算积分.. 但是根本没想到这样也行...所以就先写好了爬虫

xkonglong commented 5 years ago

爬虫程序是python写的，在win7和linux上只要有python环境都可以运行，就是数据库那一块需要自己先创建数据库，然后在news_scrapy.py里面把连接数据库相关的语句的信息改成自己的就ok，然后调用类里面的firsttime方法就能进行初次爬取文章数据。linux 的作用只是利用了linux上的crontab来定时执行shell脚本调用爬虫程序的maitain方法维护数据库。目前还没到配置好就可以用的阶段，还在继续边学边开发中，我是小白希望能谅解哈

其实不用去搞什么爬虫，只要一篇文章反复看，一个视频反复看就能得分了。不需要把文章和视频都爬下来

听大家说貌似同一篇文章每天都能看都算积分.. 但是根本没想到这样也行...所以就先写好了爬虫

积分规则可能不断修正, 所以爬虫是必要的.