V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  jin6220  ›  全部回复第 7 页 / 共 10 页
回复总数  188
1  2  3  4  5  6  7  8  9  10  
2018-04-28 20:20:13 +08:00
回复了 laucenmi 创建的主题 宽带症候群 上海 360 一年 100M 的宽带,可提速 200M
@meteor 多少兆?多少钱
2018-04-28 20:19:50 +08:00
回复了 laucenmi 创建的主题 宽带症候群 上海 360 一年 100M 的宽带,可提速 200M
360 啊 这边都是 500-600
@iVeego 那时候开始用了 感觉还好。
2018-04-24 23:38:11 +08:00
回复了 bestkayle 创建的主题 投资 大家对上海油有什么看法,有人买吗?
内外盘怎么套利?
利用数据还是现货那种套利?
@dinghow 好像条鬼啊 哈哈哈
2018-04-24 23:16:32 +08:00
回复了 brickyang 创建的主题 投资 事实证明没事少听理财经理的话……
开汇丰银行弄美股吗?
我也没解决啊




啊啊啊 烦人。
如果 chromium 有同步的话 我是宁愿不用 chrome 的。
@abcbuzhiming 嗯 谢谢 这就去看看
动态加载网页 ,浏览器没刷新
然后 f12 浏览器在不停的发送间隔时间不等的数字请求 反而不被禁,但是浏览器为什么会发送间隔时间随机的请求呢?难道是因为对方服务器等这个数字变化了再给浏览器发送的数据?
是不是因为这个模拟浏览器请求频率跟这个间隔时间频率不一定导致被对方发现的。
http://wx1.sinaimg.cn/mw690/7600ea59ly1fkl5h0hu55j20pw0cl0uo.jpg
@Va1n3R 现在改成频率一秒请求下那个动态加载出来的数字的真实地址。算快吗?
但是那个网页的数字一秒钟要变化 1 到 3 次,是不是因为爬虫伪装的浏览器请求的的频率跟原装的不一致导致的。
@abcbuzhiming
有啊 time.sleep(0.2) 我把这个数字改大一点试一下吧 。
因为要爬取的数字类似股票价格变化,每秒都在 变化好几次,原网页的数字应该是动态加载出来的,我按 f12 获取那个真实的地址了然后 request 请求了网址。我不知道用 requsts 直接请求真实地址的方式跟浏览器动态加载原网页出来的效果,对方能不能识别出来。
@imn1 我把 timeout 设置成 60 秒了 但是要获取的那个数字几乎每秒都在变动 我估计对方发现这个请求不是真人 故不选择响应了。。。
2017-10-09 09:26:47 +08:00
回复了 liudaqi 创建的主题 Python Python 有 thread,为什么还要 asyncio 呢?
@billion 除了傻等 工作干完就不在占资源了吧 看来没必要学 thread 啊
2017-10-06 17:23:19 +08:00
回复了 jin6220 创建的主题 Python 爬虫天气数据是 js 数据怎么录入 excel 啊?
手动几次生成了时间列表
[20111, 20112, 20113, 20114, 20115, 20116, 20117, 20118, 20119, 201110, 201111, 201112,20121, 20122, 20123, 20124, 20125, 20126, 20127, 20128, 20129, 201210, 201211, 201212,20131, 20132, 20133, 20134, 20135, 20136, 20137, 20138, 20139, 201310, 201311, 201312,20141, 20142, 20143, 20144, 20145, 20146, 20147, 20148, 20149, 201410, 201411, 201412,20151, 20152, 20153, 20154, 20155, 20156, 20157, 20158, 20159, 201510, 201511, 201512,20161, 20162,201603, 201604, 201605, 201606, 201607, 201608, 201609, 201610, 201611, 201612,201701, 201702, 201703, 201704, 201705, 201706, 201707, 201708, 201709]
2017-10-05 20:51:01 +08:00
回复了 jin6220 创建的主题 Python 爬虫天气数据是 js 数据怎么录入 excel 啊?
import xlwt
#创建 workbook 和 sheet 对象
workbook = xlwt.Workbook() #注意 Workbook 的开头 W 要大写
sheet1 = workbook.add_sheet('sheet1',cell_overwrite_ok=True)
sheet2 = workbook.add_sheet('sheet2',cell_overwrite_ok=True)
#向 sheet 页中写入数据
sheet1.write(0,0,'this should overwrite1')
sheet1.write(0,1,'aaaaaaaaaaaa')
sheet2.write(0,0,'this should overwrite2')
sheet2.write(1,2,'bbbbbbbbbbbbb')

但实际上数据输入不可能是手一个一个录入啊,http://tianqi.2345.com/t/wea_history/js/56294_20112.js ,那么多数据,真不知道怎么自动化输入,这种挫败感让人很让人伤心加恼火。。。
2017-10-05 19:07:35 +08:00
回复了 jin6220 创建的主题 Python 爬虫天气数据是 js 数据怎么录入 excel 啊?
@luodaoyi
找了个 csv 案例,
import csv
with open('names.csv','w') as csvfile:
fieldnames = ['first_name','last_name']
writer = csv.DictWriter(csvfile, fieldnames=fieldnames)
writer.writeheader()
writer.writerow({'first_name': 'Baked', 'last_name': 'Beans'})
writer.writerow({'first_name': 'Lovely', 'last_name': 'Spam'})
writer.writerow({'first_name': 'Wonderful', 'last_name': 'Spam'})

但是,天气那个 js 数据怎么每一天数据单独写入一行啊?

fieldnames = ['Ymd',‘ bWendu',’ yWendu',’ fengxiang','fengli ’]
然后继续把每个日期的数据像字典这样放进吗?
‘ ymd:'2011-02-01',’ bWendu ‘:'9℃',’ yWendu ‘:'0℃',’ tianqi ‘:'多云',’ fengxiang ‘:'北风',’ fengli ‘:'微风'
就是不知道如何完全自动化。。。
2017-10-05 16:34:03 +08:00
回复了 jin6220 创建的主题 Python 爬虫天气数据是 js 数据怎么录入 excel 啊?
@zagreb 谢谢 虽然看不懂啊 ,业余非专业,现在去找找别人的代码看怎么处理类似情况的。
2017-10-05 16:07:43 +08:00
回复了 jin6220 创建的主题 Python 爬虫天气数据是 js 数据怎么录入 excel 啊?
@qiayue 先把首尾的 var weather_str=、分号去掉,变成 json,再存入表格里吗
好久没用过把入门级的那点知识也忘了差不多了
2017-05-04 09:17:39 +08:00
回复了 jin6220 创建的主题 Python 只会 Python 哪个 gui 简洁些?
@nicevar 搜了下新闻,原来 08 年就收购了。( 2008 年 1 月 29 日 - 昨天,诺基亚宣布将以约合 1.53 亿美元的价格收购著名跨平台开源开发工具 Qt 的开发商 Trolltech 公司,以增强其服务和软件业务。)
@xliao
Kivy 是一个图形用户界面( graphical user interface,GUI )工具用来轻松创建跨平台的 Python 应用。
兼容性 :Kivy 支持多平台,包括 Windows,MacOS,Linux,Android 和 iOS,均出自一个工具

是不是会用 kivy 以后能制作 exe(不用那些 py 代码打包的软件),也可以制作 apk,很赞。
2017-05-03 19:51:37 +08:00
回复了 jin6220 创建的主题 Python 只会 Python 哪个 gui 简洁些?
@nicevar Qt 是不是之前诺基亚快死亡的时候收购的 Qt ,妄图全平台 app?
1  2  3  4  5  6  7  8  9  10  
关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   我们的愿景   ·   实用小工具   ·   1029 人在线   最高记录 6543   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 22ms · UTC 18:08 · PVG 02:08 · LAX 11:08 · JFK 14:08
Developed with CodeLauncher
♥ Do have faith in what you're doing.