![](https://img-blog.csdnimg.cn/20201014180756724.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
数据库
文章平均质量分 61
jack@london
这个作者很懒,什么都没留下…
展开
-
Azure动手实验 - 使用Azure Data Factory 迁移数据
Azure Data Factory, CosmosDB原创 2022-12-07 11:09:23 · 1263 阅读 · 0 评论 -
mysql 8.0 常用操作
/原创 2022-11-01 15:22:15 · 125 阅读 · 0 评论 -
修改pg_hba.conf文件配置开放postgreSQL连接权限
/原创 2022-09-07 18:00:18 · 4838 阅读 · 0 评论 -
following signatures couldn‘t be verified because the public key is not available:NO_PUBKEY 467B942D
Ubuntu安装mysql8.0时,系统提示如下sudo apt-get updateHit:1 http://azure.archive.ubuntu.com/ubuntu bionic InReleaseHit:2 http://azure.archive.ubuntu.com/ubuntu bionic-updates InReleaseHit:3 http://azure.archive.ubuntu.com/ubuntu bionic-backports InReleaseHit:4原创 2022-03-28 08:27:04 · 620 阅读 · 0 评论 -
Ubuntu安装mysql
尽量在命令前加上 sudo首先,可以查找系统的mysqlsudo apt search mysqlSorting... DoneFull Text Search... Donemysql-server/bionic-updates,bionic-security 5.7.37-0ubuntu0.18.04.1 all MySQL database server (metapackage depending on the latest version)mysql-server-5.7原创 2022-03-23 16:48:40 · 1955 阅读 · 0 评论 -
使用 Python 探索和分析数据
利用 NumPy 和 Pandas 浏览数据 - Learn | Microsoft Docs原创 2022-03-08 15:34:10 · 360 阅读 · 0 评论 -
docker中连接Linux本机安装数据库ip
可以在本机运行 ifconfig,查看eth0中指向的 inet 地址如果该数据库是postgre,则docker中db_mg 的数据库engine可以写作from sqlalchemy import create_enginefrom sqlalchemy.orm import sessionmakerclass DatabaseManagement(): def __init__(self): self.engine_postgre = create_en原创 2022-01-27 14:41:13 · 3374 阅读 · 0 评论 -
备份和还原 Azure SQL 数据库
原文:备份和还原 Azure SQL 数据库 - Learn | Microsoft Docs在 Azure Cloud Shell 中运行以下命令,为创建 SQL Database 服务器设置一些变量。$serverName = "erpserver-$(Get-Random)"$location = $(Get-AzResourceGroup -ResourceGroupName learn-b4470029-d48d-4e35-84f1-f34115745c74).locati..原创 2021-12-14 10:46:19 · 1136 阅读 · 0 评论 -
Azure大数据项目作业角色
大数据项目可能很复杂。 通常涉及到数百个决策和 多个人员,并且在从设计到生产的项目过程中每个人都发挥着一定作用。业务利益干系人、业务分析师和商业智能开发人员等角色众所周知且仍具有价值。 数据处理方法因技术而异,于是开始有了一些新角色。 这些角色提供专业技能,以帮助简化数据工程过程。具体而言,在现代数据项目中,有三个角色开始变得普遍:数据工程师 数据科学家 人工智能 (AI) 工程师数据工程师数据工程师预配和设置本地和云中的数据平台技术。 他们管理并保护来自多个源的结构化和非结构化数..原创 2021-09-13 10:55:34 · 189 阅读 · 0 评论 -
Azure数据类型
Azure 提供了许多数据平台技术,以便满足常见数据类型的需求。 值得注意的两大类数据:结构化数据和非结构化数据。结构化数据在 Microsoft SQL Server、Azure SQL 数据库和 Azure SQL 数据仓库等关系数据库系统中,数据结构是在设计时定义的。 数据结构以表的形式设计。 这意味着它是在将任何信息加载到系统之前设计的。 数据结构包括关系模型、表结构、列宽和数据类型。关系系统对数据需求的变化反应很慢,因为每次数据需求发生变化时,结构数据库都需要发生变化。 当添加新列..原创 2021-09-13 10:09:29 · 180 阅读 · 0 评论 -
Azure数据处理解决方案概述
数据处理解决方案通常分为两大类:分析系统和事务处理系统。什么是事务系统?事务系统通常是大多数人所认为的业务计算的主要功能。 事务系统记录事务。 事务可以是财务,如银行系统中帐户之间的资金流动,也可能是零售系统的一部分,跟踪客户对货物和服务的付款。 可将事务视为小型、离散的工作单元。事务系统通常是大容量的,有时在一天内会处理数百万个事务。 正在处理的数据必须能够非常快速地进行访问。 事务系统执行的工作通常称为联机事务处理 (OLTP)。为了支持快速处理,事务系统中的数据通常拆分为小单位...原创 2021-09-08 09:01:37 · 184 阅读 · 0 评论 -
使用PL/SQL删除Oracle数据条目
在PL/SQL中直接使用delete语句删除数据条目是无效的,数据并没有被真正删除。彻底删除则需要这样做:首先,选中一条或多条数据条目(点击如图右侧的“2/3”行左侧边框)。接下来,按“锁”图标,“开锁”。点击“锁”右侧的减号图标,删除数据条目。点击减号右侧的对号“√”,完成删除。最终,点击工具栏上的“commit”工具框(如图左上角),提交commit。...原创 2021-08-06 17:28:44 · 2096 阅读 · 0 评论 -
一次往Oracle中插入多条数据的写法
使用PL/SQL工具第一种方法 (表 用了别名)Insert into sajet.g_sn_keyparts a(SERIAL_NUMBER, ITEM_PART_SN) select * from (select 'V99999', '11111' from dual union allselect 'V99999', '22222' from dual union allselect 'V99999', '33333' from dual)第二种 (表 没用别名)原创 2021-07-09 16:36:56 · 1076 阅读 · 0 评论 -
postgre的replace函数
在对postgre数据库字段做含replace操作时,通常会无效。解决办法是,需要为replace函数中第2个参数的字符串签添加 E。select replace("name", E'04X', '666') from packtopo_pack pm where create_date between '2021-05-08 02:12:00' and '2021-05-08 02:12:02' and "name" like E'04X%';update packtopo_pack .原创 2021-05-31 11:13:31 · 1182 阅读 · 0 评论 -
postgres连接时提示pg_ctl: another server might be running; trying to start server anyway
使用如下命令启动postgres数据库时,遇到如下提示信息。pg_ctl -D ..\data -l logfile startpg_ctl: another server might be running; trying to start server anywaywaiting for server to start....Active code page: 65001... doneserver started查看日志消息发现,很有可能经历过非正常关闭。2021-04-1...原创 2021-04-15 12:57:18 · 4270 阅读 · 0 评论 -
postgres提示pg_ctl: could not start server Examine the log output.
使用命令启动postgre数据库时,提示如下错误。pg_ctl -D ..\data -l logfile startwaiting for server to start....Active code page: 65001 stopped waitingpg_ctl: could not start serverExamine the log output.查看pgsql\bin\logfile,信息如下2021-04-15 01:02:00.566 GMT [17832] L原创 2021-04-15 11:16:02 · 96107 阅读 · 0 评论 -
在 Power BI 中清理、转换和加载数据
若要创建自定义功能区,请在“添加列”功能区选项卡上的“常规”组中,单击“自定义列”。 在“自定义列”窗口的“新列名”框中,将文本替换为 Cost。 在“自定义列公式”框中,输入以下表达式(等号后面的内容): if [TotalProductCost] = null then [OrderQuantity] * [StandardCost] else [TotalProductCost] 此表达式测试是否缺失 TotalProductCost 值。 如果是,...原创 2021-03-11 13:48:21 · 2240 阅读 · 0 评论 -
Power Query将多个表合并为一个表
假设你正在为销售和人力资源团队开发 Power BI 报表。 他们要求你创建一个联系信息报表,其中要包含每名员工、供应商和客户的联系信息和位置。HR.Employees、Production.Suppliers 和 Sales.Customers 表中的数据如下图所示。但是,这些数据来自多个表,因此,这一困境确定了你如何合并这多个表中的数据并创建一个真实数据来源表以从中创建报表。 利用 Power BI 的固有功能,可以将查询合并到一个表中。追加查询在追加查询时,你会将数据行添加到另一个表.原创 2021-03-11 12:53:14 · 5453 阅读 · 0 评论 -
Power Query 编辑器入门
若要开始调整数据,请在 Power BI Desktop 的“开始”选项卡上选择“转换数据”选项来打开 Power Query 编辑器********。在 Power Query 编辑器中,所选查询中的数据会显示在屏幕中间,而在屏幕左侧,“查询”窗格会列出可用的查询(表)****。在 Power Query 编辑器中工作时,你对数据进行调整的所有步骤都会被记录下来。 随后,每当查询连接到数据源时,它会自动应用你的步骤,从而使你的数据始终按你指定的方式调整。Power Query...原创 2021-03-11 08:44:15 · 4089 阅读 · 0 评论 -
修复PowerBI性能问题
Power BI 提供了性能分析器工具,以帮助解决问题并简化此过程。考虑这样一个场景,你要为组织中的销售团队创建报表。 你通过 DirectQuery 创建了到销售团队的 SQL 数据库的数据连接,进而导入了该数据库内多个表的数据。 创建初步视觉对象和筛选器时,你发现某些表的查询速度比其他表更快,而且有些筛选器相比其他筛选器需要更长的处理时间。优化 Power Query 中的性能Power Query 中的性能取决于数据源级别的性能。 Power Query 提供的数据源种类非常广泛,并且针.原创 2021-03-10 12:50:28 · 3442 阅读 · 1 评论 -
PowerBI导入数据的存储模式
若要在 Power BI 中使用数据,最常用的方法是将其导入到 Power BI 数据集。 导入数据意味着数据存储在 Power BI 文件中,并与 Power BI 报表一起发布。 此过程可帮助你更轻松地与数据直接交互。 但是,这种方法可能不适用于所有组织。继续使用该方案,你将为 Tailwind Traders 销售部门构建 Power BI 报表,但导入数据不是理想的方法。 需要完成的第一个任务是在 Power BI 中创建数据集,以便构建视觉对象和其他报表元素。 销售部门有许多不同大小的数据集。原创 2021-03-10 11:08:44 · 1833 阅读 · 0 评论 -
在PowerBI中导入JSON文件
某应用程序,用于管理其仓库中产品的发运和跟踪,该仓库将 NoSQL 数据库 CosmosDB 用作数据存储库。 此应用程序使用 Cosmos DB 存储 JSON 文档,这些文档采用公开的标准文件格式,主要用于在服务器和 Web 应用程序传输数据。你需要将此数据导入到 Power BI 数据模型中,以生成报表。连接到 NoSQL 数据库 (Azure Cosmos DB)使用 Power BI Desktop 中的“获取数据”功能。 选择“更多...”选项,以查找并连接到所使用的数据库类型。...原创 2021-03-10 10:49:51 · 3928 阅读 · 1 评论 -
PowerBI实现行级别安全性(RLS)
Microsoft Power BI 允许将报表和工作区共享到 Active Directory 用户和组,从而帮助保护报表和工作区。 你还可以共享单个报表,但根据用户的工作角色使用户看到不同的数据。假设企业有销售情况/员工信息/产品列表等3个表。你想要创建一个报表,其中特定部门的员工只能看到该部门的销售情况。 例如,Maria Cameron 在游戏部门工作,应该只能看到游戏部门的销售情况,看不到运动、服装或汽车部门的销售情况。此数据以星型架构进行组织。 销售表包含事实数据表的所有属性,而员工原创 2021-03-10 09:29:01 · 1856 阅读 · 0 评论 -
使用PowerBI的Power Query浏览和分析数据
当PowerBI中导入数据源后,右侧“字段”模块下会出现数据源中所选择的表。在任意一个表中单击右键,在弹出菜单中选“编辑查询”,即可打开“Power Query 编辑器”。预览 SQL Server 查询在此任务中,你将预览 SQL Server 查询的数据。 首先,你将了解数据的相关信息。 你还将使用列质量、列分布和列配置文件工具,来了解数据,并评估数据质量。 请注意“Power Query 编辑器”窗口左侧的“查询”窗格。 “查询”窗格包含针对每个所选表的各个查询。 .原创 2021-03-04 10:22:49 · 1893 阅读 · 1 评论 -
什么是 ELT 和 ETL?
转自:https://docs.microsoft.com/zh-cn/learn/modules/explore-concepts-of-data-analytics/2-describe-data-ingestion-process数据处理机制可以采用两种方法来检索引入的数据,处理这些数据以进行转换和生成模型,然后保存转换的数据和模型。 这些方法称为 ETL 和 ELT。ETL 表示提取、转换和加载。 原始数据会在保存之前进行检索和转换。 提取、转换和加载步骤可以作为持续操作管道来执行.原创 2021-02-19 15:07:59 · 2598 阅读 · 0 评论 -
什么是 NoSQL?
转自https://docs.microsoft.com/zh-cn/learn/modules/explore-concepts-of-non-relational-data/4-describe-types-nosql-databases阅读有关非关系数据库时,可能会看到术语“NoSQL”。 NoSQL 是一个相当宽泛的术语,仅表示非关系。 关于它是否意味着“不是 SQL”或“不仅仅是 SQL”,存在一些争论;一些非关系数据库支持适用于文档而非表的 SQL 版本(示例包括 Azur...原创 2021-02-19 13:47:31 · 267 阅读 · 0 评论 -
odoo数据库的备份和恢复
备份采取postgre的sql转储方式,主要依靠两条命令pg_dump –h 127.0.0.1 -p 5432 -U odoo -c -C –f dbname.sql dbnamepsql -h 127.0.0.1 -p 5432 -U odoo -f odoo12.sql参见:Postgresql的三种备份方式https://blog.csdn.net/international24/article/details/82689136备份和恢复https://ww..原创 2021-01-27 16:35:34 · 1252 阅读 · 1 评论 -
postgre常用命令
psql 进入命令行\h:查看SQL命令的解释,比如\h select。\?:查看psql命令列表。\l:列出所有数据库。\c [database_name]:连接其他数据库。\d:列出当前数据库的所有表格。\d [table_name]:列出某一张表格的结构。\du:列出所有用户。\e:打开文本编辑器。\conninfo:列出当前数据库和连接的信息。drop database “odoo-test”; 删除数据库drop user xxx;删除用户\q 退出ps...原创 2021-01-05 10:18:12 · 440 阅读 · 0 评论 -
Windows安装MySQL
C:\Users\Administrator>cd D:\mysql-8.0.19-winx64\binC:\Users\Administrator>d:D:\mysql-8.0.19-winx64\bin>D:\mysql-8.0.19-winx64\bin>mysqld --installService successfully installed.D:\mysql-8.0.19-winx64\bin>mysqld --initialize --conso原创 2020-08-17 09:38:06 · 231 阅读 · 1 评论