大数据会带来大改变，但是俺觉得大数据也有滞后性，等算出来了相关性，可能时机已经错过了，指导实践的效果会打折扣。
明月无心 发表于 2013-11-28 21:26 static/image/common/back.gif
这个“不是因果，是关联”是大数据时代的三大思维变革之一，另外两个是“不是抽样本，而是全量”和“不是精 ...
因为“全量”而导致了没有全部清晰的因果关系，或者是目前在认识中还没有清晰化的因果关系，由于关联性太多，难以全部精确表述(成本与现实的需要，这个是个天量），选择了混杂性--大致方向正确或者模糊性正确。
可以这么理解吗？
tdyxssrs 发表于 2013-11-29 22:50 static/image/common/back.gif
因为“全量”而导致了没有全部清晰的因果关系，或者是目前在认识中还没有清晰化的因果关系，由于关联性太 ...
关于因果vs.相关，我的观点是
1）因果关系只是个假设，或者说因果律不过是人类认识世界的方式而已，未必是这个世界的真相。
2）因果关系其实是相关关系的一个特例；相关度为100%即因果关系。
3）因果关系虽然很有用，但是不能完全解释这个世界。如果我们放弃因果关系的孜孜以求，从相关关系入手，会发现很多新的视角
4）用因果关系来验证各种猜想的研究范式（波普尔的那一套）在大数据泛滥的时代已经不是最好的做研究的方法；无需理论指导的纯粹的相关关系研究正大行其道。
明月无心 发表于 2013-11-30 00:35 static/image/common/back.gif
关于因果vs.相关，我的观点是
1）因果关系只是个假设，或者说因果律不过是人类认识世界的方式而已，未必 ...
按你的思路，思维方法不就是中国传统联想和类比--模糊性，有任意相关就有可能，相关大的就投入多的关注度--资源。易经不就在讲这个吗？{:4_268:}
静候好文，从身边的人看，大家都没意识到变化的来临，仍然沉浸在工作稳定的氛围中，思考的都是如何揣摩领导的意图，谋上个职位。变化将至，我准备好了吗？
静候好文，从身边的人看，大家都没意识到变化的来临，仍然沉浸在工作稳定的氛围中，思考的都是如何揣摩领导的意图，谋上个职位。变化将至，我准备好了吗？
tdyxssrs 发表于 2013-11-30 01:02 static/image/common/back.gif
按你的思路，思维方法不就是中国传统联想和类比--模糊性，有任意相关就有可能，相关大的就投入多的关注度 ...
跟中国传统的联想-类比方式还是不一样的，现在的相关性研究就是基于数据的，基础是很扎实的。咱们老祖宗那一套太随意了。:P
另，对于相关关系的滥用也是个问题，有时候得出的结论也是很搞笑的。但是这在任何范式转移的初期都在所难免，不是主要矛盾。
本帖最后由 明月无心 于 2013-11-30 10:50 编辑
健恒 发表于 2013-11-29 22:13 static/image/common/back.gif
大数据会带来大改变，但是俺觉得大数据也有滞后性，等算出来了相关性，可能时机已经错过了，指导实践的效果 ...
这个不是问题。现在Google对PB级（1PB=1000TB, 1TB=1000GB）数据查询可以做到秒级响应。为什么大数据现在火起来了呢？就是因为对数据的处理能力有了飞跃，很多以前想都不敢想的事儿现在都可以做了。
在这方面的一个典型应用是RTB，广告实时竞价系统，有兴趣的话你可以google一下
本帖最后由 健恒 于 2013-11-30 11:31 编辑
明月无心 发表于 2013-11-30 10:34 static/image/common/back.gif
这个不是问题。现在Google对PB级（1PB=1000TB, 1TB=1000GB）数据查询可以做到秒级响应。为什么大数据现在 ...
可能我没说清楚，我说的意思是数据有滞后性，大数据都是对已经发生的事实分析、处理，预见性没有人灵活，这也是机器的局限性，不过大数据对于辅助决策很有帮助。
本帖最后由 明月无心 于 2013-11-30 11:47 编辑
健恒 发表于 2013-11-30 11:25 static/image/common/back.gif
可能我没说清楚，我说的意思是数据有滞后性，大数据都是对已经发生的事实分析、处理，预见性没有人灵活， ...
大数据最大的用处就是用于预测。现在很多推荐系统（本质上就是一个预测系统）都做的很好了，你如果经常上Amazon和豆瓣的话就应该能感觉到。“历史告诉未来”不是一句空话{:1_1:}
明月无心 发表于 2013-11-30 10:16 static/image/common/back.gif
跟中国传统的联想-类比方式还是不一样的，现在的相关性研究就是基于数据的，基础是很扎实的。咱们老祖宗那 ...
老祖宗提供了无限可能的思考方式，但是无法全部证实。大数据在已有行为的基础上，根据行为的重叠程度，确认现有认识以外的新的可能和规律{:4_276:}
明月无心 发表于 2013-11-30 11:41 static/image/common/back.gif
大数据最大的用处就是用于预测。现在很多推荐系统（本质上就是一个预测系统）都做的很好了，你如果经常上 ...
我的观点不是预测，是同步。我因为感冒，脑子转不动一些话题之后说。这里我提一件事，你前面提过的阿里云，我正好有提过的那个报告涉及的技术与内容，我在网络群讨论中被人批评故意把技术神话。就是这种理解上的分歧。那次争论我屏蔽了和我争论的人，是因为争吵到后面不是为了道理是为了面子了。我这里说说大致。
那次做报告的人提到，他们给阿里云做的新算法，去年需要30分钟的检索今年下半年他们是28秒，这个是他们实验新算法的第一次实验。根据他们的说法还要做的更快。后来这个数字在小圈子里讨论的时候，有做IT工作的博士朋友给我一个介绍，也是提大数据的。里面提到了一件事，阿里云做到了一件过去别人认为不可能做到的事情：把中国合法药商合法产品的的条形码都收入阿里云。这个条形码过去被认为不可能是因为总量超过350万亿条。而上面说的算法，就涉及从海量数据中检索中药品从生产到销售的环节检索效率。
而我提到的同步你不妨这样理解，当我提到了一个话题你马上对应想到的是亚马逊。这里就包含着我说的同步，这个同步包含着我们对认知的匹配程度。而我说的新的大数据生态循环背后是人与社会发展的同步性，这样循环圈内外。我举例，去年美国国安局提出的YB级别的数据同步处理。YB是十的24次方，而今天谷歌在2011年每天产生的数据总量是10的15次方的EB ，2011年谷歌每天产生的数据是7个EB。而在今年击败IBM和甲骨文的数据库招标中，美国国家安全局实际已经在着手安排DB级别的数据同步处理。而每一个新的量级的数据库实际是可以做到对之前的数据总量的全覆盖，而美国现在的新型数据实际和我们现在通用的检索工具不兼容。这意味着圈内和圈外，发展的速度知识与工作方式进化的不可同日而语。你我同时知道，你我工作进度的同步调整，甚至在循环圈中的同步与协调，在大数据中的无缝隙衔接。果真如此，你还认为大数据仅仅是预测么。
对了，我写的东西比较复杂，甚至会涉及一些这里多数人难以理解的话题，比如你可以看到我年初在这里提技术革命与3D打印技术介绍时候遇到的非议与诘难。这里我不能怪别人和我知道信息的不对称，实际我年初就提到过比特币将会比用来炒作。这个炒作背后有很多系统性的实验性尝试的考虑。在这样的考虑尝试之后你不妨试试看看，从一个整体的角度看务务虚系列。过去西西河只有一个九公子直接说我试图在构建一个体系。这也是我评估信息反馈时一个让我困惑的地方。主席当年要求相信人民，在当代技术社会进化的速度面前，多数人习惯和少数人认知在技术与社会进化关系到底如何安排，这是一个问题、如果我这样说你还不明白我担心或者思考什么的时候。我举例，在我们最近小讨论里。我和诺娃就一个技术的进展时候应该与社会公众同步有着很大分歧。这样的技术包括，有人正在做的延缓衰老并以此提高人的绝对寿命的尝试，包括3D打印器官的实际进展，甚至包括已经有所公开的生命科学与脑科学研究同步匹配下关于永生的技术尝试。这些在西西河肯定要被骂跳大神，在这里也不会被多数人理解。而与此有关的话题，我非常犹豫是不是公开讨论，也涉及这些我知道的在实验室才出来的数据及其讨论是否在公众同步的评估。某种角度说，当大数据时代开启之后，大数据打开的研究范式尤其是其同步性的协调合作生产方式，会给我刚才说的生命领域带来前所未有的发展空间。而这还是只是大数据时代刚开始所能带来的技术与社会组织互动的一部分，一个大数据时代开始时分可以在以后忽略的部分。
这里是务务虚各个部分的连接，你不妨想想，我提到的这些话题，如何同步关联然后构成一个体系的。我不需要你多少程度来认同我，我只需要你有自己独立的思考就足够了。因为最终我们社会的未来是我们每个人选择后的集合，我不想干预每个人自己的选择权利，仅此而已。
务务虚 1
http://www.sychaguan.com/forum.php?mod=viewthread&tid=8269&extra=page%3D2
务务虚 2
http://www.sychaguan.com/forum.php?mod=viewthread&tid=8342&page=1&extra=#pid175252
关于古希腊与罗马传承的卷轴介绍在第335楼
http://www.sychaguan.com/forum.php?mod=viewthread&tid=1507&extra=page%3D1&page=12
帮葡萄转过来他的目录
务虚1写的是两个委员会开始了调整政治体制改革的序幕
务虚2写的是从现代文明的起源--古希腊与罗马的文明在各自文明黄金阶段前夕来对比我们今天的历史阶段的可能性
务虚3将要是写务虚1与务虚2的时代基础，既新技术革命与技术革命导致因生产关系调整而来社会组织变化的评估
务虚4将要写的是中国在现在这个历史时期从国家到个人的机会在哪里
务虚5将要写的是评估以及我个人视角下的实际已经到来的时代选择中利与弊
务虚文字完成后，会在回复里说说这些年和本楼讨论有关的思索和一些我所知道的大家关心的那些问题的原委。
非常期待下面的内容，能为走投无路的大众民指点迷津，在乱像中求生。
明月无心 发表于 2013-11-30 10:34 static/image/common/back.gif
这个不是问题。现在Google对PB级（1PB=1000TB, 1TB=1000GB）数据查询可以做到秒级响应。为什么大数据现在 ...
我给你补充我刚才和朋友讨论的同步的内容。
比如刚才的争论就涉及这样一个话题
你知识与认知别人和你不同步
比如大数据我们比较核心的讨论
是认同这个是社会方向并开始努力尝试去靠拢
而和你争论的人 他对这个认知就是 忽悠
而大数据启动的社会进化是极其可怕的
去年美国国安局提出的YB数据同步处理
亚马逊已经拿下合同
而明年很可能同步数据处理要求是DB
你可以知道社会一部分人以这样速度进化
那实际意味着什么EMC数据库兼容
我这里提到的是同步性
这里其实你就是这样在做而你和一些人不希望这些进度与其他人同步这是竞争的优势
因为你和他知道一旦你们的工作实现突破时机意味着不仅仅是金钱与权力
我不知道大数据时代会启动什么以及阶段性结果是什么
我起码知道如果我不想被淘汰
就需要与这个时代进步的东西在知识上同步匹配
我相信在这个同步过程中
会形成不同循环圈
我开始理解被人圈在自己理解的世界里是什么意思与操作了
让自负的人停留在他认知那一部分真实的世界就足够了
每个人有自己的世界。
未来或可通过化学物删除、修改人类记忆
http://tech.qq.com/a/20131130/002596.htm?pgv_ref=aio2012&ptlang=2052
下面一个视频其实是这篇文字起源的部分之一
http://v.163.com/movie/2013/3/5/M/M92INA100_M92IOSL5M.html
视频最后的访谈提到了，通过视频与光影的技术处理影响人的记忆在技术上是否可行。（包括删除与增加人的记忆）
大数据时代，推进这样的技术进展将会更快。
最爱庞贝红 发表于 2013-11-30 20:33 static/image/common/back.gif
帮葡萄转过来他的目录
我不干预别人的选择，我只想说一些我看到的和相信的存在并尽可能在网络中与普通人同步。不过实践结果，至少在我接触的网络群体，都更希望生活在自己以为的那个认知的世界。这个世界可以提供他们生活与工作所需要的必须的物质与精神保证。如果我只是打破这种认知，而不能重建，是必然被人反噬的。问题是，我有多少必要帮助别人重建这种认知。其实你看我在这里最早说新技术革命的时候，多少人持否定的态度。还有就是去年在3D打印技术有关讨论遭遇的冷嘲热讽与人身攻击甚至仅仅是为反对我这个人而反对。这样的人与这样的认知一旦和我认知同步，我认为他们对社会与社会组织进化带来的是负面影响，或者说他们及时认知并掌握了新的技术及其组织进化的规律与手段，这样的认知会让他们进一步让这个我看到的进化方向趋向固化而不是同步带来的协调与互助中的竞争。
让事物顺其自然吧。
本帖最后由 我不吃青椒 于 2013-11-30 23:14 编辑
葡萄 发表于 2013-11-30 22:04 static/image/common/back.gif
我不干预别人的选择，我只想说一些我看到的和相信的存在并尽可能在网络中与普通人同步。不过实践结果，至 ...
“绝大多数人无法对超出认知范围的事做出最基本的判断”，这是在新科技发展到今天，沟通最根本的前提。而希望把人隔绝在各自圈子的想法也会最终把人类推向无可避免的衰落。
我们必须冷静下来探讨的是类似如下的情况：在英国最鼎盛的时期，人们受够了在红茶馆里里的争吵和喧嚣，代之以各种封闭的俱乐部。而发轫于金融城的这场时髦运动，最终使人们乐意隔绝在各自的圈子中去讨论各自的事。最终的结果却是，俱乐部成员的固化，他们的行动带来了社会暂时的稳定，却最终将大英帝国的动员能力逐步冻结，直至在新的产业升级中居于下风。
你不能把这次科技革命作为进步的终结。因为历史证明这样的假设最终都走向了失败，尽管我们看到去年中国进行了量子网络通信的高保密性试验，我依然反对那种以物理隔离区分人神的做法。
尽管在大势面前我无能为力。但是取得可靠数据隐秘其关联性而代之以因果论的所谓的动员，依然形似于宗教。我的问题是如何在固化的情况下长期维持“价值”这种东西的存在，除非上层圈子的人博爱到放弃自私的天性。
我不怕被封闭在自己的圈子里，我只是害怕哈耶克一语成谶。
tdyxssrs 发表于 2013-11-30 01:02 static/image/common/back.gif
按你的思路，思维方法不就是中国传统联想和类比--模糊性，有任意相关就有可能，相关大的就投入多的关注度 ...
似乎是这样的道理，求知的方法可能有所改变。
silversky 发表于 2013-11-30 23:29 static/image/common/back.gif
似乎是这样的道理，求知的方法可能有所改变。
我这个理解，他们前面讲的网购模式的影响。看似不相关的事物之间的相关性。
我不吃青椒 发表于 2013-11-30 23:06 static/image/common/back.gif
“绝大多数人无法对超出认知范围的事做出最基本的判断”，这是在新科技发展到今天，沟通最根本的前提 ...
注意葡萄说的被隔绝的是“普通人”，整个社会的构成应该是被隔绝成小圈子的“普通人”构成了社会的“电池组”，而通过遴选机制（例如在高考）的少部分人，才能进入“核心”，触及甚至改造这个社会，只要社会还在健康的循环中，就不会发生你所说的情况
灵魂采集者 发表于 2013-12-1 00:10 static/image/common/back.gif
注意葡萄说的被隔绝的是“普通人”，整个社会的构成应该是被隔绝成小圈子的“普通人”构成了社会的“电池 ...
那样的隔绝意味着资源的分配模式将发生戏剧性变化。当一个生态圈可以满足一个人从物质到精神的全部需求时，由这些生态圈组成的人类集团，能否被称为是按需分配。
我们终于站在了共产主义的门口。我只是突然害怕这是一种致命的自负。
写一点读后感或者说自己的认知总结，不知对不对。
第一篇：控制体系的中枢化、扁平化，打破原有的地方、小集体的保护主义，实现从首到端的直接控制。
第二篇：罗马文明是地中海文明集大成者，其中变革的关键点在于共和国向帝国的转变（对外掠到造成对内部经济体系的巨大冲击），而值得学习的是罗马在这种帝国——殖民的统治方式下体现出来的稳定性。西方社会作为实际的继承者，集工业技术革命后的文明成果，但其统治方式目前已经出现难以适应时代发展趋势的情况。对经济学并不是很了解，葡萄大没写明的西方社会现在所实际出现的改革困难指的是什么不太明白。
在这儿实际可以联系到政治改革的方向，不走帝国主义或类似的道路（即对外掠夺而造成内部失去活力、享乐主义，或者说生产关系不能持续促进生产力的进步）。不知葡萄大说说的西方社会的问题是不是这个？
目前所处的时代变革，新技术革命所指明的方向——社会化大生产，不知是否是这个？
第一个热点是3D打印，作为基本生产方式的变革，能够更加节省能源与资源，而且能够实现按需定制，更重要的一点是不再是大机器、密集劳动力性质的生产而是使生产活动分散化。（这儿有一个小的蛮有意思的线——自耕农/小农生产方式、奴隶制生产方式、工业化生产方式、后工业化生产方式，人的组合貌似是一个分分合合的过程。想起葡萄大提到的那句调皮话，未来需要的不是一坨一坨的人，而是一个一个的人。）
第二个热点是大数据，大数据对应的管理体系的变革，不知可否算作生产关系的一部分？葡萄大反复提到了同步，目前还搞不太清楚准确的定义。掌握供、需数据无异于掌握了生产的控制权、而大数据则对应了未来社会的权力。数据（真实的或者经过修改的）本身传递给普通民众就起到了引导、甚至管理的作用，更何况葡萄大提到的很多可以直接作用于人的意识本身的新技术，在这种情况下能实现对民众的分块化（散而不乱）。
这两点使生产扩大，并实现有序与可控，从而实现更加丰富的产品供应。
本帖最后由 tdyxssrs 于 2013-12-1 10:30 编辑
我不吃青椒 发表于 2013-12-1 00:45 static/image/common/back.gif
那样的隔绝意味着资源的分配模式将发生戏剧性变化。当一个生态圈可以满足一个人从物质到精神的全部需求时 ...
一些社会趋势是拒绝不了的，拒绝了也没用。积极适应吧！
一些技术的应用，会导致了社会结构、组织结构、控制结构的改变。愿不愿意看到，他都会发生，而且影响社会上所有的人。
如：信息点对点的传输，社会动员方式都在改。不是上街发传单了，而是用手机了，用网络写宣言、做演讲了。
改变是双向的，不仅仅是完全对一方有利，而对另一方完全不利。信息点对点传播，控制更深入细化了，但同时，个人在互动中的影响也被同比放大了，个人如果独立自主思考也没那么容易被忽悠了！
灵魂采集者 发表于 2013-12-1 00:10 static/image/common/back.gif
注意葡萄说的被隔绝的是“普通人”，整个社会的构成应该是被隔绝成小圈子的“普通人”构成了社会的“电池 ...
少部分人来自哪个圈层呢？是不是回到了奴隶社会的血统定终生？绝大部分人组成的电池组供养着小圈子里的奴隶主？
tdyxssrs 发表于 2013-12-1 01:27 static/image/common/back.gif
一些社会趋势是拒绝不了的，拒绝了也没用。积极适应吧！
一些技术的应用，会导致了社会结构、组织结构、 ...
原意的人,命运领着走;不愿意的人,命运拖着走。
葡萄 发表于 2013-11-30 22:04 static/image/common/back.gif
我不干预别人的选择，我只想说一些我看到的和相信的存在并尽可能在网络中与普通人同步。不过实践结果，至 ...
"问题是，我有多少必要帮助别人重建这种认知。"
另一个问题是有多少必要帮助别人打破这种认知? 对被打破认知的个人来说这些必要重不重要并不重要,重要的是这种打破真实存在,并且被碰上.
昨晚想来想去，也差点失眠。作为喜欢看科幻小说的普通人，对于这些新科技表示还是在理解的范围内，但小说毕竟是小说，现实中的无数未来的确让人感到敬畏。我记得葡萄你说过，人是平等的，因为没有“神”，但技术的出现使这种成为可能；有“上帝情节”的人喜欢玩弄别人“灵魂”，相比普通人，他们更具有与科技结合的能力，葡萄不喜欢的是这部分人？还是让人知晓技术然后侵犯公共利益和他人利益的普通人？无论是虫族象征未来“生物基因的极致”所描绘的让人窒息的基因决定论社会，亦或是神族象征未来科技与人的统一，所达成的“永生”，对现在的人们来说，都是颠覆认识的存在，大家都知晓了，会引起动荡？
。。。。而不是同步带来的协调与互助中的竞争。
葡萄老师还是有那种赤子的情怀的
有个问题，对于如此宏大的分析，世界各国应该都有相应的思考，A这样思考的结果会不会导致B的思考行动的改变，链式反应从而改变思考的基础跟可能的走向。。。
第二，看了汹涌而来的大时代的改变可能，这是最好的时代这是最坏的时代，我刚才跟同学丢这里的书包说的，但其实是惶恐的，前面的打拼没积累多余资本，如今的所有，无论年龄，知识，资本都有点无心无力，很怕被甩开，甩下，同学没看过这些，似乎也不喜欢看这些，但他的意见是找出自己的瓶颈，找到就干，死而无憾！唯有如此。。。这个时代无论坏人好人都必须干，死命的干。。。
本帖最后由 健恒 于 2013-12-1 17:54 编辑
回顾中国的发展历史，最早“高科技"知识垄断在部落头领、巫医、神职人员手里，后来又垄断在奴隶主阶层及相关高级官吏手里，后来孔夫子开启平民教育，普通人可以读书、识字、学习高科技知识，现代以来，教育开始普及，人人都可以读书、识字、学习高科技。
伴随着高科技的下渐，社会整体是在向上发展进步的。至于如今准备一些小圈层精英垄断先进知识，不知道这样的社会将发展成啥样。
葡萄 发表于 2013-11-30 20:35 static/image/common/back.gif
我给你补充我刚才和朋友讨论的同步的内容。
比如刚才的争论就涉及这样一个话题
几点细节补充：1）美国国安局合同的主要竞标者是亚马逊和IBM，IBM输得很惨，几乎在所有的指标上都输了。这件事震惊业界，因为跟IBM比，亚马逊是IT业里新兵中新兵。一叶知秋，IBM前景堪虞。IT真是个竞争激烈、不进则退的行业，巴菲特的确不懂高科技，在投资IBM这件事上看走眼了。
2）你说的合法药品商的条码我恰好在两年前有所接触。这个条形码不是一般的13位条形码，而是20位。13位的条码一个药品品项，所有白加黑的13位条码都是一样的。20为条码则是对应于一盒药——每盒白加黑的条码都是不一样的，通过这个条码可以查出来某一盒白加黑是哪里生产的，卖给哪家批发商，批发商又卖给哪家零售商了，每一个流通环节都能查得到。我们曾经从药监局得到过一个接口可以查询20位条码，都觉得这个功能实在太强大太有用了，谁知没过多久药监局就不给我们这个接口了，把我们郁闷了很久。从你的帖子来看原来是技术上有问题，阿里解决了这个问题真是善莫大焉。（另，听说这个药监局的20位条码的推广是现总理主导的，好几年前就开始了）