V2EX › sw10 的所有回复 › 第 2 页 / 共 4 页

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

For Existing Member Sign In

1 2 3 4

❮

❯

2018 年 4 月 15 日

回复了 ton4 创建的主题 › 程序员 › 请教：亿级数据，且有一定的反爬机制，爬虫怎么避免惊动监控且快速爬取

几百个代理，有点少。我维护的一个商用代理池，一天的代理量都有 40 万。

感兴趣的话，可以了解下：
/t/424630

2018 年 4 月 7 日

回复了 waibunleung 创建的主题 › PHP › 通过 PHP 代码发送的请求，要怎么抓包？

设置 PHP 的 HTTP Client 的代理为 charles 的代理就行，默认为 8888。

大概这样子：
```php
$aContext = array(
'http' => array(
'proxy' => 'tcp://127.0.0.1:8888',
),
);
$cxContext = stream_context_create($aContext);

$sFile = file_get_contents("http://www.google.com", false, $cxContext);

echo $sFile;
```

2018 年 4 月 6 日

回复了 n1a0t1t2a 创建的主题 › 酷工作 › 这么浮躁！现在应届生该何去何从？

/go/career

移动到『职场话题』节点比较合适。

2018 年 4 月 6 日

回复了 e3rp4y 创建的主题 › 程序员 › 有没有商用代理 IP 库推荐一下?

我有维护一个商用的代理 IP 池。
站内介绍地址：
/t/424630

2018 年 3 月 16 日

回复了 wildcat007 创建的主题 › 问与答 › 西刺代理这个接口是假的吗？

试了下，确实不能用。

可以试试看这两个：
https://raw.githubusercontent.com/fate0/proxylist/master/proxy.list
https://proxy.horocn.com/api/free-proxy?format=text&num=100

第一个是开源项目，第二个是我自己维护的。

2018 年 3 月 13 日

回复了 doubleflower 创建的主题 › Linux › 有没有易配置/支持密码的 HTTP 代理软件（爬虫用，非 FQ 用途）

推荐 gost，GitHub 地址： https://github.com/ginuerzh/gost

用户名密码认证大概这样：
gost -L=admin:123456@localhost:8080

@nfroot #5 gost 也有 Windows 版本

2018 年 3 月 12 日

回复了 jeffreychiu95 创建的主题 › 信息安全 › 服务器端如何安全存储用于模拟登录的密码？

binux 的签到项目，大概是这么做的：
1. 网站强制使用 HTTPS 访问
2. 所有用户敏感数据使用每个用户唯一的 256 位密钥加密
3. 再将用户密钥使用 256 位主密钥加密，所有解密过程只在内存中进行

参考：
/t/128478

当然，在服务器被拿下的情况下，这也只是增加破解难度而已。

2018 年 3 月 9 日

回复了 ayyll 创建的主题 › 程序员 › 一个毕业接近一年的菜鸟的迷茫

4.我就问问你们留的联系方式是什么加密？原谅我对加密这块一无所知。。。
base64，不是什么加密，编码而已。谷歌搜索：base64 decode

2018 年 3 月 8 日

回复了 TOTOP 创建的主题 › 问与答 › 当你上班刷着新闻发现认识的人，上新闻了而且变了很有钱，财务自由了，而你还在为抢到某云的优惠感到窃喜，你如何调整自己心态，而且事情不止一次发生。

@py2ex

试试看这个：
https://kernelpanic.fm/26

原始音频地址：
https://ipn.c.zgslb.net/kernelpanic/kernelpanic-ep26.mp3

感慨下，当时听的时候还是 15 年，现在都 18 年了呢~

2018 年 3 月 6 日

回复了 resolvewang 创建的主题 › 分享创造 › 开源一款高可用的分布式代理 IP 池（附性能测试图）

@resolvewang 思路很赞，谢谢~

2018 年 3 月 6 日

回复了 resolvewang 创建的主题 › 分享创造 › 开源一款高可用的分布式代理 IP 池（附性能测试图）

简单看了下，是利用 Squid 的 cache_peer ？

cache_peer {} parent {} 0 no-query weighted-round-robin weight=1 connect-fail-limit=2 allow-miss max-conn=5 name=proxy-{}

squid_path -k reconfigure

之前写过类似的东西，但是因为权限验证的缘故，重新用 GoLang 实现了。

赞一个~

2018 年 2 月 24 日

回复了 Neagle 创建的主题 › Python › 怎么维护爬虫代理池谢谢

1. 那些提供代理 ip 的网站他们的代理 ip 那里来的？
部分是扫描来的，部分是自建的，另外一些是比较特殊的渠道。（如：路由器内置）

2. 怎么更好的验证代理的可用性，比如验证速度，是否高匿等。
判断是否高匿用 httpbin.org 就行。

最后广告以下，我自己有维护一个代理池，提供免费和付费两种形式，有部分 V2EX 的朋友在使用。具体参考下面的站内贴：
/t/424630

2018 年 2 月 24 日

回复了 zhuzhongkelk 创建的主题 › Linux › 2018 最好的 Linux 桌面发行版投票

刚从 Manjaro + i3wm 转到 Ubuntu 17.10 。

2018 年 2 月 24 日

回复了 mysparrow 创建的主题 › Linux › 求助关于服务器流量中转的问题

试试看 UDPspeeder ？这块我没实验过，看介绍挺靠谱的。

https://github.com/wangyu-/UDPspeeder/blob/master/doc/README.zh-cn.md

2018 年 2 月 22 日

回复了 SouthCityCowBoy 创建的主题 › 程序员 › 大家有每天必刷的高质量、不落俗的公众号推荐吗？

差评
程序员小灰
聊聊架构
码农翻身
中生代技术

目前关注的公众号，比较满意上面列出的。没有到每天必刷的程度，无聊的时候会看看。

2018 年 2 月 22 日

回复了 tuding 创建的主题 › 程序员 › 现在都是在哪儿寻找可用的 HTTP 代理 IP？

我维护了一个代理池，可以了解一下。站内地址：/t/424630