-
用Python获取Amazon亚马逊的商品信息
引言亚马逊网站相较于国内的购物网站，可以直接使用python的最基本的requests进行请求。访问不是过于频繁，在未触发保护机制的情况下，可以获取我们想要的数据。本次通过以下三部分简单介绍下基本爬取流程： 使用requests的get请求，获取亚马逊列表和详情页的页面内容使用css/xpath对获取的内容进行解析，取得关键数据动态IP的作用及其使用方法一、获取亚马逊列表页的信息以游戏区
-
煤矿生产高精专！选矿厂 3D 可视化监管，实现提质增效
目前，随着人工智能、5G 等新一代信息技术的迅猛发展，正处于从工业经济向数字经济转型过渡的大变革时代。以“黑色煤炭、绿色发展、高碳能源、低碳利用”的管理理念，以精细化的管理模式，建立的智能化洗煤厂平台，最大限度以用户需要提供优质信息，发掘业务协同价值，多维度多层次展现，帮助用户迅速做出决策，提高选煤厂业务效率及质量。
-
激活数据价值，探究DataOps下的数据架构及其实践丨DTVision开发治理篇
据中国信通院发布，2012 年到 2021 年 10 年间，我国数字经济规模由 12 万亿元增长到 45.5 万亿元，在整个 GDP 中的比重由 21.6% 提升至 39.8%。顺应时代发展新趋势，“数据” 成为新的生产要素已是毋庸置疑的共识。如果说数据中台的崛起代表着企业数字化转型从流程驱动走向数据驱动，从数字化走向智能化。那么 DataOps，则是实现数据中台的一个优秀的理念或方法论。Data
-
挖掘数据价值，指标中台成为神奇传送门?
“数据”与“数据资产”之间隔了非常遥远的数据治理之路，这条路上有很多拦路虎，部门墙、数据孤岛、没有形成数据思维、缺乏数据文化、价值不可度量等，专家指出在数字化实践过程中，需要业务目标可拆解、可度量，如此才能发挥数据最大价值。近几年，一些企业开始尝试选用指标中台，让数据在企业内部被真正用起来。
-
Kafka 负载均衡在 vivo 的落地实践
副本迁移是Kafka最高频的操作，对于一个拥有几十万个副本的集群，通过人工去完成副本迁移是一件很困难的事情。Cruise Control作为Kafka的运维工具，它包含了Kafka 服务上下线、集群内负载均衡、副本扩缩容、副本缺失修复以及节点降级等功能。显然，Cruise Control的出现，使得我们能够更容易的运维大规模Kafka集群。备注：本文基于 Kafka 2.1.1开展。
-
代理IP怎样实现保护上网信息安全？
互联网时代的到来，使得人们对于网络信息安全有了一定的认知，现在大家都越来越注重网络访问的安全性，平时上网使用的网络IP在不经意间会给用户带来安全隐患，为了不让用户用网信息暴露在互联网上，很多用户都选择使用技术工具来保护上网安全。而代理IP就是比较常用的一种IP更换工具，现在很多线上业务都借助代理IP进行开展，很多场景都能看到它的踪影，应用范围很广。那么代理IP是怎样实现保护上网信息安全的呢？1.隐
-
代理IP如何帮助企业实现价格监控？
在大数据时代当下，很多互联网企业也都在挤破脑袋想要占领行业内优势地位，为了实现这个远大目标，企业需要在很多方面要运筹帷幄，其中非常重要的一方面就是价格监控。企业要想更好地进行价格监控，就需要制定一个优化的、动态的定价策略，而其中关键的因素就是数据获取。由于数据可以在不同的定价平台上获取，很多平台都为了保护这些商品的定价数据信息，会设有一些保护机制，因此，需要借助代理IP来确保能够获取这些有用数据进
-
专访科杰科技CEO于洋：湖仓一体数据底座，企业构建数据能力的“最优解” | 爱分析访谈
调研：黄勇 武宇撰写：武宇 兰壹凡 前言在数字化时代，各行各业都需要数据赋能业务，数据已经成为企业重要的生产要素，但在当下的企业中，数据管理普遍存在数据孤岛、标准不完善、技术缺失以及基础设施重复建设问题，企业亟需全面加强数据能力建设。而数据底座作为数据能力构建的基础，可以帮助企业运用最先进的大数据技术及多业态复杂场景的最佳实践，形成完善的数据资产运营和数据管理体系，构建兼备稳态和敏态的数
-
基于Python通过cookie对某芯片网站信息的获取
芯片大家都不陌生。在当今疫情下，显卡，车机的芯片产量锐减影响了不少人的购物需求（反正你也买不到），也让不少人重新认识了半导体行业。闲来无事，我们可以获取一下T网站的芯片库存和芯片信息。 一、列表页请求分析进入页面，就能看到我们需求的信息了。但是，在页面请求完成之前，有一点点不对劲，就是页面的各个部份请求的速度是不一样的：所以啊，需要的数据，大概率不是简单的get请求，所以要进一步去看，特
-
直播 | 开源合规之路，从法律层面一次聊透
扫描下方二维码即可预约
-
数维图API文档 SovitJS编辑器集成API方法
API是什么?数维图API又能做什么?为什么这么多开发者迫不及待要调用数维图API?通过调用API，可以将我们的2D、3D和大屏编辑器无缝集成到你的业务系统/产品中，实现无代码开发二维、三维可视化场景。
-
CDGA|数据素养对数据治理工作真的很重要！
数据驱动着每一个业务流程，包括销售、流失率、供应链、管理和绩效。如果没有良好的数据素养水平，公司就会盲目前行。
-
超干货 | 城市信息模型CIM1-CIM7级
一、 城市信息模型概述图观城市信息模型，以建筑信息模型（BIM）、地理信息系统（GIS）、物联网（IoT） 等技术为基础，整合城市地上地下、室内室外、历史现状未来多维多尺度空间数据和物联感知数据，构建起三维数字空间的城市信息有机综合体，可以广泛应用于各行业数字孪生应用构建。城市信息模型是构建数字孪生应用的载体，根据数据源、模型特征和场景精细度，划分为CIM1-CIM7七个级别，基于城市信息模型，可
-
数字孪生智慧选煤厂：数据监控赋能矿山高效生产
搭建了选煤厂区建筑及生产设备、管线等设施的三维场景，将生产数据采集、安全监测监控与生产时空有机结合，构建了集智能巡检、设备安全监测、预警功能、企业管理于一体的三维可视化管理系统。全方位推动选煤厂精细化管理工作，实现减人增效的目的。
-
计算机专业哀鸿遍野：低代码平台和程序员水火不容，马上被取代
最近听到最多关于计算机专业的消息，不是IT部门全部被裁，就是985硕士毕业找不到工作之类，计算机专业一片哀鸿遍野。近几年又恰逢低代码平台火热发展，一时间关于程序员是否会被低代码平台取代的讨论就出现了。有人说，低代码平台的出现，降低了应用开发的门槛，让更多只掌握基础技术知识的非专业人员从事开发工作，会导致程序员失业。甚至某知名公司CTO还炮轰低代码，认为通过低代码平台产出的“代码”，既难以维护，又难
-
慢下来的互联网医疗要等下一阵风？
慢下来的互联网医疗要等下一阵风？
-
美创入选江苏省工业领域数据安全防护方案供应商、优秀产品及解决方案名单
近日，江苏省工业和信息化厅公布了《2022年工业领域数据安全防护方案供应商、优秀产品及解决方案》名单。美创科技以专业的数据安全能力，强势入围工业领域数据安全防护方案供应商、优秀产品及解决方案代表厂商。为做好国家工业领域数据安全管理试点工作，进一步提升重点行业数据安全防护水平，江苏省工业和信息化厅组织开展2022 年工业领域数据安全防护方案供应商、优秀产品及解决方案评选工作。美创诺亚防勒索系统美创诺
-
应对数据安全典型薄弱点，这家医院“外防内控”筑牢屏障
医院承载着海量的数据资源，伴随着各种新业务、新应用的不断涌现，面临着越来越多的安全挑战与合规压力。其中，因医院在数据库运维管控上缺乏有效措施，成为重要隐患之一，诸如：• 假冒合法客户端访问业务系统敏感数据；• 盗用客户端内置的应用数据库账号；• 来自工具端的数据库登录安全威胁（暴力破解\绿色版工具）；• 高权限DBA用户违规访问敏感数据；• 敏感数
-
云端未来曝光云手机应用场景，相比传统物理手机延展性更强
云手机(Cloud Phone,简称CPH),云手机是基于端云一体虚拟化技术,通过云网、安全、AI等数字化能力,弹性适配用户个性化需求,释放手机本身硬件资源,随需加载海量云上应用的手机形态,简单来说,云手机=云服务器+Android OS,用户可以远程实时控制云手机,实现安卓APP的云端运行;也可以基于云手机的基础算力,高效搭建应用,如云游戏、移动办公、直播互娱等场景。随着电子商务的发展,越来越多
-
优思学院｜物料需求计划（MRP）是什么？
什么是物料需求规划？物料需求规划（Materials Requirement Planning）首创于1960年代，简称MRP，现在改称MRPI，MRP创始人为怀特（Oliver Wight）与欧利基（Joseph Orlicky），认为制造资源规划是企业的“整体行动对策”。用来协助公司计算所需各种物料的数量与需求的时点。MRP是根据公司已知的未来订单纪录，及预测将来有把握获取的订单，接着，MRP
