V2EX › 54dev 的所有回复 › 第 14 页 / 共 26 页

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

1 ... 10 11 12 13 14 15 16 17 18 19 ... 26

❮

❯

2013-09-15 13:11:37 +08:00

回复了 jianghu52 创建的主题 › 分享发现 › 类似smzdm的网站

有refer id

2013-09-14 17:32:41 +08:00

回复了 54dev 创建的主题 › 问与答 › python pyquery 采集淘宝的编码问题

@Ziya 对的，已经使用requests处理了，谢谢

2013-09-14 17:32:07 +08:00

回复了 54dev 创建的主题 › 问与答 › python pyquery 采集淘宝的编码问题

@swulling 嗯，对这些库不太熟，所以会走些弯路：）

2013-09-13 16:47:03 +08:00

回复了 54dev 创建的主题 › 问与答 › python pyquery 采集淘宝的编码问题

@swulling 谢谢，最终还是用你的request方法解决了，在回贴之前我看到有人说淘宝的编码可能是gb18030的，我试着用BeautifulSoup先把内容抓下来再去用pq处理，
像这样的方法
page = urllib2.urlopen('http://s.taobao.com/search?q=%BB%A7%CD%E2%B0%FC');
soup = BeautifulSoup(page,fromEncoding="gb18030")
d = pq(soup. prettify())
但还是会出现乱码。。。我觉得还是因为没有正常识别所采集网页编码的问题

从写这个脚本开始，我只知道pquery和beautifulsoup是采集的库，其他的还不太了解，而且刚接触这个语言就遇到编码的问题，的确很头痛，不过谢谢你啦。

2013-09-13 15:29:10 +08:00

回复了 cssnote 创建的主题 › 问与答 › 如果你的未来女朋友比较认同天朝的办事做法，你会交往吗？

19岁女孩看xx，激动的泪流满面

2013-09-13 15:20:42 +08:00

回复了 54dev 创建的主题 › 问与答 › python pyquery 采集淘宝的编码问题

@pigletfly

print price.decode('gbk')
会报错
UnicodeEncodeError: 'ascii' codec can't encode characters in position 0-1: ordinal not in range(128)

2013-09-13 15:20:24 +08:00

回复了 54dev 创建的主题 › 问与答 › python pyquery 采集淘宝的编码问题

@swulling
print price.decode('gbk')
会报错
print price.decode('gbk')
UnicodeEncodeError: 'ascii' codec can't encode characters in position 0-1: ordinal not in range(128)

2013-09-13 15:19:23 +08:00

回复了 54dev 创建的主题 › 问与答 › python pyquery 采集淘宝的编码问题

@swulling

2013-09-13 15:17:56 +08:00

回复了 54dev 创建的主题 › 问与答 › python pyquery 采集淘宝的编码问题

@swulling 谢谢你的解答，好多pyquery的编码都有你的身影，也根据你在别的贴子里的回复做过调试
1，mysql表的整理选项是utf8_general_ci
2,这个我再试一下不要setdefaultencoding('utf-8')的情况下decode('gbk'),我终端是utf8编码的
3，是，我也注意到这个问题，但我我拿到采集后，连unicode都打印不出来

2013-09-13 15:05:58 +08:00

回复了 54dev 创建的主题 › 问与答 › python pyquery 采集淘宝的编码问题

先去给同事修个电脑，回来继续test

2013-09-13 14:24:21 +08:00

回复了 54dev 创建的主题 › 问与答 › python pyquery 采集淘宝的编码问题

现在的问题是：插入到数据库的全是乱码，实在是不知道怎么转换了。

2013-09-12 17:21:05 +08:00

回复了 shanshuise 创建的主题 › Python › 使用pyquery过程中出现乱码怎么办？

@swulling pyjquery所有的输出好像都是unicode？

2013-08-30 17:56:02 +08:00

回复了 wangqj 创建的主题 › MacBook Pro › 请推荐清洁用品

apple store实体店里的那种就挺好。

2013-08-25 11:53:30 +08:00

回复了 chunshuai 创建的主题 › 奇思妙想 › 订餐网站。。。

@ryanliketea 能不能给个联系方式

2013-08-23 11:59:29 +08:00

回复了 lyuehh 创建的主题 › MacBook Air › 2012年中mac用了一年，电池循环151次，剩余电量76%，点击右上角电池图标，显示修理电池，怎么处理？拿到apple store修？

先拿去检修一下，让他们看看什么毛病，然后再问问他们能不能给换块电池。。

2013-08-21 13:59:56 +08:00

回复了 cluries 创建的主题 › 问与答 › 自己想买某物品,价格1W左右,女朋友坚决不许买,咋办？

攒私房钱吧

2013-08-20 18:03:21 +08:00

回复了 54dev 创建的主题 › 问与答 › [非你莫属选手] 20130819 欧光艳 ,看完欧光艳下台后，我特么的把电视关了

晕，我不知道怎么加视频

2013-08-20 18:03:12 +08:00

回复了 54dev 创建的主题 › 问与答 › [非你莫属选手] 20130819 欧光艳 ,看完欧光艳下台后，我特么的把电视关了

http://player.56.com/v_OTU0ODI0Nzc.swf

2013-08-20 18:02:06 +08:00

回复了 54dev 创建的主题 › 问与答 › [非你莫属选手] 20130819 欧光艳 ,看完欧光艳下台后，我特么的把电视关了

http://www.56.com/u24/v_OTU0ODI0Nzc.html

2013-08-20 18:01:30 +08:00

回复了 54dev 创建的主题 › 问与答 › [非你莫属选手] 20130819 欧光艳 ,看完欧光艳下台后，我特么的把电视关了

视频地址在这里
<embed src='http://player.56.com/v_OTU0ODI0Nzc.swf' type='application/x-shockwave-flash' width='480' height='405' allowFullScreen='true' allowNetworking='all' allowScriptAccess='always'></embed>

1 ... 10 11 12 13 14 15 16 17 18 19 ... 26

❮

❯