@Kabie 嗯 我自己来

@Stof 多谢指点，有兴趣可以聊一下

@nsa
数据量级，有大有小，最难的目标公司，可能要到10亿级别。但我不是要照搬别人的数据，我需要的是统一口径的统计数据，理论上是可以找到巧妙的方法的。
数据正确和合适，这个不矛吧？
检验倒简单了，我日常工作，就是会通过访谈、沟通知道一些数据的。其实大概季报前一个月，这个季报的大概情况，机构投资者，都是知道大概的。只是有时候，消息源会混乱。但是有数据了，cross check一下，也就知道个差不多了。
数理统计、时序分析这些，应该都是不需要的。

@nsa 比如楼上几位说的，爬虫设计：10亿级别；数据源具体到哪些（这个先说出来有关系吗？）；总之，尽量具体。数据正确还是合适？怎么检验，有商业服务还是自己设计检验方法？需要数理统计，时序分析之类的专业知识吗？

--

数据量级，有大有小，最难的目标公司，可能要到10亿级别。但我不是要照搬别人的数据，我需要的是统一口径的统计数据，理论上是可以找到巧妙的方法的。
数据正确和合适，这个不矛盾吧？
检验倒简单了，我日常工作，就是会通过访谈、沟通知道一些数据的。其实大概季报前一个月，这个季报的大概情况，机构投资者，都是知道大概的。只是有时候，消息源会混乱。但是有数据了，cross check一下，也就知道个差不多了。
数理统计、时序分析这些，应该都是不需要的。

@GeekGao 哈哈 听上去你们的数据不好爬

@wankaizhang 好的 麻烦给我发封邮件

@zongwan thanks～

@sNullp 哇塞 所以 您这是大佬来了的节奏么？

@lusin 你可能不知道&不理解，投资JD的兄弟，2006年投资，2013年离职，至今不知道分不分得到他应得的几千万美元的奖金的兄弟的情况吧？哈哈，还有投资58+VIPS，但现在离开DCM的兄弟。。。DCM更惨，global fund，中国区只有2个partner能分carry。VC分钱，需要等到Fund清算，再加上一系列IF满足。

当然了，他们都走了上自己能把握分钱机制的道路。

最后一句：嗯，我是Loser。100%。

@lusin 你这几句话，实在没什么逻辑，本来懒得回应，但我也觉得自己刚才言语失敬，解释两句。

爬虫自身并不会赚钱，看谁用。对冲基金赚钱 ＝ 本金 * 投资收益 * 业绩费。没有本金是扯淡。我做这个程序，是为了在我做投资决策的时候多一个数据维度，或者在拐点时提供及时的业绩预警。但是本质上，有没有这个程序，我的工作职责依然是要做出投资决策，这个数据维度本质上是辅助性的。and，我当然不指望10万搞定数据，我们基金每年买数据和研究报告的花费是千万级别的，但那是基金层面的 & 大的Fund投资圈通用的。我写得很清楚，我是个人出资找一个搭档，换个说法，我在给我自己找个助理，多一个数据维度。我还请了帮我处理文字整理类工作、摘要投行研究报告的助理，我还在很多消息源上有出资获得信息，这些都是我个人出资的。我是为了提高自己的综合能力以及释放自己的时间。当然了，你也可以觉得我是瞎折腾。

VC投项目上市了，不知道你为什么觉得是loser。做VC拿不到real money的，real money我是指千万美元为单位的，因为VCPE fund有8年的fund life，还有vesting，carry分配机制不健全，国内VC行业没几个人拿过carry的，除了top fund的executive manager，所以才有那么多大佬要自立门户，比如今天爆出来的刘二海离开君联自己创业。你爱信不信。HF是按年算的，年年分carry。隔行如隔山，看的出来你对VC不太懂 & 有点盲目崇拜。我是主动从Very Top VCPE fund出来的，你或者不信，或者不理解，没关系。

就解释这么多。对话语言不通，多说无益。

@wecan 确实没必要 只是我确实看不上这种看事情总是负面先上来的悲观心态的人

@lusin 哈 最看不起你这种loser思维定式的 sorry～

@fishlee 频率一天一次 可能没什么验证码 数据基于我的需求分析生成excel即可

@revir 没那么复杂 不需要复杂的建模 数据处理的需求我很清晰

@sumhat 没那么复杂 不需要复杂的建模 数据处理的需求我很清晰

@nsa 没明白你说的什么意思

@tearsinchina 没那么复杂。。我只是把可能面临的困难写出来了 你给我发封邮件 如果已发就算了 收到的邮件我都回复了

@Catstyle 没那么复杂。。我只是把可能面临的困难写出来了

@binux 我被你的blog和技术唬到了。。。所以，sale下自己。如果你想给自己的生活工作状态埋下一些改变的可能性，你可以认真考虑下我的提议。