大数据（二）
思炎的帖子已经让我们歪得不成样子，好在她脾气好。故在这里就你在那贴各层楼的回复聊一下。▲ 人们对信息的屏蔽和选择，是人的大脑的功能。比尔●西蒙的短时记忆的研究成果是，人们短时记忆最大的容量是七个组块，最小三块。这是正常人的常态。人们在屏蔽与选择信息的方向性，是由当前的认知任务与沉淀于记忆中的经验共同决定的。
▲ 加入群体的个体有去个性的现象和趋势。这是很古老的社会心理学的成果。前苏联的列宁格勒社会科学院有过总结。任何人，只要生活在现实社会中，都会受到所属群体（从松散到集体，不同水平的群体）的制约，放弃某些个性。这是有利于群体的功能强大和完善。
▲ “把人一生的时间可以作为数据增量来抵押”，其本质是信用。人是多变的，是能动的。非物化的时间如何信用？美国次级贷引发的全球经济危机，就是源于还有一点物化信用的断裂。残酷对个人而言，可怕对社会而言。
▲ 当下脑神经元系统本身都还没有搞清楚，模仿（不是仿真）其网络的水平也就在“透明计算”上下。有进出口，有结构，有反馈，也就形成了系统。可大，可小也。当下比较有意义是一个高位瘫痪的人，通过想，让机械手给自己喂了一块巧克力。其他的，多半是通过残肢的肌电来完成动作。要更进一步的，就是要通过基因技术，生产出没有排斥反应，又有良好通导信息能力的生物体，让它们进入人的大脑，参与大脑的活动。以此来获得大脑运作的全貌。
不介入大脑活动的所谓神经网络系统，其实是通过功能模理论拟和黑箱理论设计的，是大脑这个系统外部“行为”的猜测。并非真正的大脑的再现。
介入人的大脑，遇到伦理道德的强烈制约。这也是这个领域进步缓慢的根本原因。
▲ 信息的碎片化，是媒体理解信息爆炸时的误解，现在以诈传诈了。在认知心理学中，有认知信息的碎片化现象。由于生活便利性的提高，人们从小很容易养成，“需求——立马满足”的心理定势。又有人把这种心理现象，叫“易拉罐主义”。当大量信息涌到眼前的时候，有这种心理定势的人们，就会不知不觉地选择最利于“立马满足”的信息，而不在于这些信息的完整和真实。如果信息量不够（不是真正的不够，而是视而不见），就会从自己的记忆库中提取自以为是的经验以补充。这样，就表现出认知的碎片化。
不懂，但自己装懂以为真的懂似的在看着，帮顶！！！！！！！ 呼唤葡萄。你要的主题帖来了，你在哪里？ 信息的碎片化是不是说，人的行为模式会被所处环境的运行机制引导，久而久之形成自我强化，另外，人对陌生事务总是有一种天然的恐惧感，下意识地选择性回避？
老槐兄，您的大数据一、二之间，是否跳跃的太利害了，不方便理解。
能否给个总纲，或者概述之类的…… {:4_255:} 认知碎片化是不是无法避免的存在?
只是碎片多和少的问题? 碎片化的知识不能被充分利用的关键是没有更好的辅助系统。
如果我只想出一个词条，某个辅助系统就给出我一系列关于这个词的必要信息，那么我只对词条进行系统学习就够了。单纯的词条是碎片化的，但是有完整的辅助系统帮助，它形成的知识又是结构化的。 本帖最后由 黎明の瞳 于 2015-3-16 01:06 编辑
不知道该怎么说。就随口说几句呗。正好最近在上数据分析的课程。怎么说呐。个人觉得大数据这块是只能算以前概率统计的升级版。全量是一个伪概念，真正意义上的全量不纯在，只能说尽可能多的样本。数据分析一般分为两块，一块是概率统计那里的，另一块是所谓的先收集数据，然后套用模型来判断。但是这里一个问题就是模型够不够全？何况很多模型是过去的，是不是适用于这个时候？这些都是短板。还有一个问题，就是问题的拆解。以前看基于目标的情报分析，讲的一件事情就是把客户的粗劣不清晰的要求给拆解开来，然后再分析。大数据也一样，其实你还是在做分析，只是方法各异而已，客户的模糊不清要求你依然要把它给拆解成你可以使用的要求。
当然，还是保持谨慎的乐观。帖子里面某人提到的柴妓者的伪纪录片几乎在短短几天内就被网友们拔了内裤。这个确实是一个看点。也就是现在的信息交流的变的异常容易。当然，信号与噪音也算是老生常谈的话题了。 大数据有两层意思， 一是数据分析，这个是二十年来BI系统的自然延伸，受益于硬件与算法的进步在更大范围内的应用，所谓量变引起质变，大数据提供了视角，类似于互联网为广泛的信息扩散带来可能，大数据把事物间的联系从小群体内的独享转化为广泛的共享。这就类似于华尔街80%的买卖盘都是计算机算法操作的时代，一个散户可以看到的抓住的机会是很少的一样。大数据使资本的效率到达前所未有的高度，类似机动化的兵员动员可以形成局部的优势兵力一样，资本的高效率同样可以带来资本的总量的提高，换句话说，大数据的最大收益与印钞票的中央银行是一个效果。
第二层意思是决策，人的决策受益于大数据展示的关联性自然提高，但是计算机硬件与算法的进步同样也会带来决策智能的进步，也就是说人的决策在多大程度上让位于计算机。当然这个话题已经不止于大数据了，而是进入人工智能的范畴。不可否认的是，知识就是力量，这句人总结的道理对于人工智能与大数据的关系同样适用。大数据带来的是知识，人工智能其实也就是数据中带来的知识，因此人工智能离不开大数据，大数据的进一步发展必然提高人工智能的水平，这几乎是不用想的。
反过来，对知识的垄断，信息的孤岛化，都是大数据的敌人，也是人工智能的敌人，这个信息分享与独享的对抗将成为人类未来文明的主旋律，也许是人类对抗人工智能的唯一武器。
个人有趋于集体化的自然倾向，原因在于集体可以形成1+1》2的效果，因此人脑的进化出现独立思考容易被集体意识压制的秉性，这是人类在二十一世界之前文明发展的主旋律，即个人主义与集体主义的对抗。但是这以后的对抗将发生在数据层次上，数据碎片化也有结合的自然倾向，因为数据只有共享发生联系才会形成逻辑链，形成知识。但是与集体主义类似，谁控制了这个结合后产生的知识，谁的意志就会主宰一切。大数据时代的广告，竞选，与愚民时代的教宗皇天，本质上是一个道理。
为什么世界会从人的意识转变为数据的世界，是因为互联网媒介，想象一下，如果互联网网速提高一百倍，人类的世界会变成什么样？互联网本身难道真的不会产生意识，天网的出现全赖于信息碎片之间的传播速度，速度到了一定程度，自主意识一定会出现。 黎明の瞳 发表于 2015-3-16 00:43 static/image/common/back.gif
不知道该怎么说。就随口说几句呗。正好最近在上数据分析的课程。怎么说呐。个人觉得大数据这块是只能算以前 ...
概率统计的升级版只是大数据中数学模拟中的一种，或说一部分。
大数据的计算中把要计算的数据空间假设为一个高维动态空间，如果想要得到正确的大数据计算的结果，必须要有正确描述这个高维动态空间的数学模型。但是，要得到一个精确地描述经济（投资、债卷、股票，...）的高维动态空间的数学模型，是完全不可能的；人们就设法追求误差小的近似计算的数学模型，是概率统计、微分方程、抽象代数，... 的综合。
{:4_264:}
玩钉耙的悟空 发表于 2015-3-15 13:58 static/image/common/back.gif
信息的碎片化是不是说，人的行为模式会被所处环境的运行机制引导，久而久之形成自我强化，另外，人对陌生事 ...
有句话叫“真相伤人”，不知道是不是一种自我保护机制，人类似乎更倾向于“世界应该怎样”而不喜欢“世界实际怎样”，这是人类改造世界的动力，却也是认识世界的障碍吧。所以实事求是非常难啊。
另，以前有个笑话“人其实是电脑最慢的外设”，我觉得目前的生物形态早晚会成为进步的瓶颈，当然目前影响最大的应该还是组织形式。 羽笛 发表于 2015-3-16 09:56 static/image/common/back.gif
概率统计的升级版只是大数据中数学模拟中的一种，或说一部分。
大数据的计算中把要计算的数据空间假设为 ...
类似于量子力学的测不准定律。这种模糊化的东西越精确反而越不准确。 Fuhrer 发表于 2015-3-16 08:13 static/image/common/back.gif
大数据有两层意思， 一是数据分析，这个是二十年来BI系统的自然延伸，受益于硬件与算法的进步在更大范围内的 ...
想象一下，如果互联网网速提高一百倍，人类的世界会变成什么样？
觉得好像没有变吧，现在网速确实提高了100倍，相对于以前！ 信息碎片化应该是基于大脑的结构吧，解构才能辨识和理解，对总体做出不同的排列组合，有选择地提取“有效”的信息， 本帖最后由 葡萄 于 2015-3-17 21:31 编辑
补充一些大家有兴趣的
现在金融衍生品算法研究实际限于硬件环境，只能基于二阶最高三阶算法来创设，实际研究已经可以做到根据七阶算法设计金融衍生品。就拿我们合作的老师，给中金所上海期货交易所设计的高频交易软件来说，为了达到指标只能改硬件。
通过这个话题我想导入一个我对信息碎片化的个人理解，就我接触的圈子，比如早些年推动网络写手打破特定人例如作协对文化生活话语的垄断，比如资助网络常春藤名校公开课打破国内一些人对学术圈的话语权垄断。再比如，当年推进3D打印以及比特币炒作的垄断资本，他们试图在市场以这些尝试为切入点，引导社会发展朝特定的方向。今天我看到网络视频是一个新的例子，内容是远大集团19天盖了57层的房子。推动这个事情的人和我提过，远大就是原来房地产商圈的搅局者。我实际在说什么，我在说我们看到很多看起来无关的信息，在一个系统内是相互关联相互对应的一个整体。但是彼此又是一个个独立的尝试。这些尝试形成一个个独立信息，后面在验证很多事情。我把这些独立信息看做一个个信息碎片，他们服务体系对应的验证以及验证结果对应的社会改革的联动部分，恰恰是很多普通人不能理解的。
如果这样说你还觉得比较模糊，我不妨这样举例。在我生活中的讨论，有的圈子侧重讨论原理规律以及事物本质那是相关圈子的学有专长，有些圈子则是用讨论得出的原理或者理论确定实际操作的实践方法同时对理论进行验证，还有的圈子就是结合前两者给出自己项目目标优化解析的操作流程然后就是投资。 葡萄 发表于 2015-3-17 21:23 static/image/common/back.gif
补充一些大家有兴趣的
现在金融衍生品算法研究实际限于硬件环境，只能基于二阶最高三阶算法来创设，实际 ...
这个个人得有一个很大的系统框架，并且能把各信息点有机的联系起来。
每个个体其实一直都在努力，可做到做好不容易。 个人很难做到和跟上 不明觉厉 本帖最后由 葡萄 于 2015-3-22 17:32 编辑
昨天聚会讨论有不少新收获，有基于现实的也有基于未来的的。比如大数据，要想准确表达我们讨论的范畴目前对于多数人来说还是比较困难。比如，大数据或者全量数据的表述，他不仅仅是语义与语境上的的差异。还有，对于一个日新月异的技术变革领域，你本身想用一个稳态的界定域来覆盖一个正在不断突波自身既有边界的新生事物之难可想而知。而我们昨天的讨论涉及的一个新生事物的时候，我的提法是物联网自身逻辑不可避免是在云端的数据主的神格降临到任何一个点的时候都可以实现他在云端的任何职能。同行的来自茶馆的网友老猫提法是几个点就可以构架我们今天熟悉的互联网的全部。这意味着什么，甚至老猫和我对这种提法对现在多数人认知的认同一面有深刻的怀疑。因为就在多数人还在热议云与大数据的时候，业内已经在提云是过去式，在提取互联网。这样的进化速率，本身就是这个时代的一个侧面。
你曾经和我提过，看懂了我说大数据的智能化最后不可避免要替代决策。而现在大多数人对这一块还仅仅理解为压缩流程替代中层。这背后的差异，会导致一系列选择的最后的分道扬镳。谁对谁错，最终还是要市场来验证。同样，随着网络社会的崛起，新的社会形态必然诞生出与之匹配的组织形式。就像，资本主义在崛起过程中不可避免为集中在城市从生到死大多数时间集中在城市范畴的人群形成特定的阶层与阶级背书，这就是市民阶层与中产阶级的崛起的基础。而随着，满足数据型社会组织形态需求的新型社会组织方式与社会生产方式的出现， 与之相匹配的人群势必跨越现有的阶层乃至阶级形成新的有别于我们已经熟悉的市民阶层与中产阶级的形态。在这个讨论的范畴，我第一次使用了身份的混同这样的表达。对此，我们这里乃至社会自身有多少人做好了准备。
我说的这些都是我自己思考框架的一部分，我想在讨论大数据有关话题之前，把一部分话题内容约束一下，尽可能让更多的人看懂我思考的方向及其目的。这样对其他人讨论或许有所帮助，而不是无目的的侃侃而谈。标题暂定为 ，写在大数据讨论之前吧（时间可能要晚一周或者几周，一些内容需要约束，或者用朋友专业的术语要立定。）。
葡萄 发表于 2015-3-22 15:42 static/image/common/back.gif
昨天聚会讨论有不少新收获，有基于现实的也有基于未来的的。比如大数据，要想准确表达我们讨论的范畴目前对 ...
读葡萄的帖子，理解起来有难度，但感觉内容很重要！得细细再度
http://www.hutuyi.org/data/attachment/forum/201409/10/172806uszgvd6a6uyuu4p0.jpg 书不达言，言不达意。说得就是这样子吧。跟不上了，无法解读了。
不是自已辛苦得来的，是不能理解的。就像父母和幼儿谈生命、谈生存。鸡同鸭讲。 葡萄 发表于 2015-3-22 15:42 static/image/common/back.gif
昨天聚会讨论有不少新收获，有基于现实的也有基于未来的的。比如大数据，要想准确表达我们讨论的范畴目前对 ...
而我们昨天的讨论涉及的一个新生事物的时候，我的提法是物联网自身逻辑不可避免是在云端的数据主的神格降临到任何一个点的时候都可以实现他在云端的任何职能。同行的来自茶馆的网友老猫提法是几个点就可以构架我们今天熟悉的互联网的全部。
这不就是全息论吗 葡萄 发表于 2015-3-22 15:42 static/image/common/back.gif
昨天聚会讨论有不少新收获，有基于现实的也有基于未来的的。比如大数据，要想准确表达我们讨论的范畴目前对 ...
学习了，谢谢葡大。:lol 红松塔 发表于 2015-3-22 17:53 static/image/common/back.gif
这不就是全息论吗
社会进化因互联网而大大加快了
物联网时代反而将会阶级固化
大家都在朝着食物链顶端奋进
有的还没上岸，有的尚在爬行，
还有那么几只羊已经磨牙霍霍准备变身了
珍惜物联网到来前跑马圈地的好时光吧
大即美，大就是正确，大才能生存，新恐龙时代正在到来 老惰 发表于 2015-3-22 21:43 static/image/common/back.gif
社会进化因互联网而大大加快了
物联网时代反而将会阶级固化
大家都在朝着食物链顶端奋进
漫长的生物进化我们无缘得见
人类的超我进化我们有幸亲见 相对于信息科技的快速发展，人自身的研究进步甚微，可穿戴设备无法真正提高人的“能力”，算是妥协后的一种进步。未来的信息科技必须要和人体结合得更紧密才有大的发展空间。对于个体来说，可以大大提高能力和效率，对统治者来说，方便多了。 玩钉耙的悟空 发表于 2015-3-15 13:58 static/image/common/back.gif
信息的碎片化是不是说，人的行为模式会被所处环境的运行机制引导，久而久之形成自我强化，另外，人对陌生事 ...
玩钉耙的悟空：你好！
“人的行为模式会被所处环境的运行机制引导，久而久之形成自我强化”，旧行为主义认为是这样的。新行为主义则认为还应该有人的认知过程。同样的外部刺激，不同的人，有不同的认知，也就会有不同的行为结果。
“人对陌生事务总是有一种天然的恐惧感，下意识地选择性回避”，这要看个体的经历了。一般而言，人有新鲜感的需求，所以，人类会积极探索陌生世界。如果某人在探索中获得成功，那么，当陌生的东西到来的时候，他更会选择积极行动。如果某人的经历中失败印象深刻，他则多半会选择回避。
每个人身上都有进取和回避的特质。在遇到具体陌生事务时，究竟选择积极进取，还是退缩回避，与当时对陌生事物的认知，以及对自己能力的认知有关。如果觉得陌生事物利害可控，自己的控制力强方法多时，就会选择进取行为，否则就相反。
这种判断在两个层面进行，意识层面，和潜意识层面。以潜意识层面为主来判断的人，会以直觉的形式作为结论表现出来。
信息碎片化认知，更多的是指人们主动性认识事物过程中的“偷懒”的结果。是“偷懒”与“环境运行机制引导”共同作用的结果。
谢谢玩钉耙的悟空，谢谢! 乌鸦 发表于 2015-3-15 23:10 static/image/common/back.gif
认知碎片化是不是无法避免的存在?
只是碎片多和少的问题?
乌鸦：你好！
认知碎片化，可以通过警觉和训练来校正。大多数人知道认知碎片化的道理后，在了解信息的时候，就会主动改变“马上满足”的心态。这样就可以以正常的认知状态面对信息。
谢谢你的回复，谢谢! 我不吃青椒 发表于 2015-3-16 00:32 static/image/common/back.gif
碎片化的知识不能被充分利用的关键是没有更好的辅助系统。
如果我只想出一个词条，某个辅助系统就给 ...
我不吃青椒：你好！
世界是普遍联系的，反映世界的信息也是普遍联系的。至于反映到我们头脑中出现碎片化，是因为我们在认知这些信息的时候，没有找到它们的联系，而显示出碎片化的反映。并不是信息本身是碎片化。
所谓离散度，孤岛样，都是我们对世界和信息的一种认知的结果。
辅助系统的功能习得，还得要人教会它。它在帮助人们低级认知过程中的确起了很大的作用。还不能代替人的认知功能。
谢谢你的回复，谢谢!