mysql查询

-- create table student(id int,name varchar(20),cource varchar(30),grade int);
-- insert into student value(2,'王五','English',100);
-- select * from student;
-- use test;

#查询所有name字段重复值 
-- select * from student where name in (select name from student group by name having count(name)>1) order by grade desc; 

#查询所有name字段重复值中id最小的
-- select * from student where name in(select name from student group by name having count(name)>1) and id in(select min(id) from student group by name having count(name)>1);
-- SET SQL_SAFE_UPDATES = 0;
-- delete from student where name in (select t.name from(select name from student group by name having count(name)>1) t) and id in (select dt.min_id from (select min(id) as min_id from student group by name having count(name)>1) dt);

python爬虫面试基础

'''
统计如下list单词及其出现的次数。
'''
a=['apple', 'banana', 'apple', 'tomato', 'orange', 'apple', 'banana', 'watermeton']

dic={}
for key in a:
    dic[key]=dic.get(key,0) +1
print(dic)

#等同于

for key in a:
    if key in dic.keys():
        dic[key]=dic[key]+1
    else:
        dic[key]=1
print(dic)

'''
给列表中的字典排序(例如有如下list对象,将alist中的元素按照age从小到大排序)
'''
alist=[{"name":"a", "age":20}, {"name":"b", "age":30}, {"name":"c", "age":25}]
# 法一
for i in range(1,len(alist)):
    for j in range(0,len(alist)-i):
        if alist[j].get('age')>alist[j+1].get('age'):
            alist[j],alist[j+1]=alist[j+1],alist[j]
print(alist)
#法二
alist.sort(key=lambda x: x['age'])
print(alist)

Pandas、Numpy

转载于:https://blog.csdn.net/weixin_45044554/article/details/125547411
'''
                                    numpy
'''
import numpy as np
array001=np.array([1,2,3,4,5,6,7,8,9,10,11,12])
array002=np.array([[1,2,3,4],[5,6,7,8],[9,10,11,12]])

array003=array001.reshape(3,-1)     #转换成3行,列需要计算
# array003=array001.reshape(-1,4)     转换成4列,行需要计算
# print(array003)

# array004=np.append(array001,[-1,-2,-3,-4])
array004=np.append(array002,[[-1],[-2],[-3]],axis=1)      #增加一列
# print(array004)

array005=array002.T
# print(array005)
array006=np.delete(array005,1,axis=0)       #axis=0 删除行,axis=1 删除列
# print(array006)

array002[1:2,1:2]=0
# print(array002)

arr1 = np.array([1,2,3])
arr2 = np.array([4,5,6])
# print('纵向堆叠后:\n',np.vstack((arr1,arr2)),
#       '\n横向堆叠后:\n',np.hstack((arr1,arr2)))


# mat()方法可以把其他数据结构的对象转换为矩阵类型
array1 = [1,2,3]
array2 = [6,7,8]
array3 = [11,12,17]
matrix = np.mat([array1,array2,array3])
# print('显示该数据结构类型:',type(matrix))
# print(matrix)


# 矩阵合并。c_() 方法进行连接,根据参数顺序也将决定生产矩阵的结果;r_() 方法用于列连接
mat1 = np.mat([[1,2],[3,4]])
mat2 = np.mat([4,5])
matrix_r = np.c_[mat1,mat2.T]
# print('将mat2矩阵添加在原矩阵右侧\n',matrix_r)
matrix_l = np.c_[mat2.T,mat1]
# print('将mat2矩阵添加在原矩阵左侧\n',matrix_l)
matrix_u = np.r_[np.mat([array1]),matrix]
# print('在原矩阵上方连接矩阵\n',matrix_u)


# 矩阵常常与列表和数组进行数据类型转换
# print('矩阵列表转换:\n',matrix.tolist(),
#       '\n矩阵转数组:\n',np.array(matrix))



'''
                                    pandas
'''
import pandas as pd

sdata = {'Ohio':35000,'Texas':71000,'Oregon':16000,'Utah':5000}
s0 = pd.Series(sdata)
# print('利用字典生成的序列对象\n',s0)
# print('显示该数据结构类型:',type(s0))
s1 = pd.Series([6,1,2,9])
# print('利用列表生成的序列对象\n',s1)


s1=pd.Series([6,1,2,9],index=['a','b','c','d'])
# print(s1)

# 查询
# print('序列的值\n',s0.values)
# print('序列的索引\n',s0.index)
# print('按照下标查找序列',s0[2])
# print('按照索引值查找元素',s0['Utah'])
# print('按照下标批量查找序列\n',s0[:2])
# print('按照索引值批量查找元素\n',s0[['Ohio','Oregon']])


# 增加
s2=s1.append(pd.Series([12],index=['e']))
# print(s2)

# 删除
s3=s1.drop('a')
# print(s3)

# 修改
s1['a']=4
# print(s1)


# Series特殊操作

    # 排序
# print(s1.sort_values())     #升序排序

    #序列求中位数
# print(s1)
# print('中位数为:'+str(s1.median()))
# print('大于序列中位数的数\n',s1[s1>s1.median()])

    # 序列的运算
s2 = pd.Series([4,3,5,8],index=['a','b','c','d'])
# print(s2+s1)

    #时间序列
s3 = pd.Series([100,150,200])
# print('产生的序列是:\n',s3)
idx = pd.date_range(start='2019-9',freq='M',periods=3)  #freq 是频率,“M”表示一个月的最后一天
# print('\n生成的时间序列是:\n',idx)
s3.index = idx
# print('\n产生的时间序列是:\n',s3)

'''pd.date_range(
    start=None,#开始时间
    end=None,#截止时间
    periods=None,#总长度
    freq=None,#时间间隔/频率,默认天,pd.date_range()默认频率为日历日,pd.bdate_range()默认频率为工作日
    tz=None,#时区
    normalize=False,#是否标准化到midnight
    name=None,#date名称
    closed=None,#首尾是否在内
)'''

            #数据框(DataFrame)
# pd.DataFrame(data,columns,index)
dic1 = {'name':['Tom','Lily','Cindy','Petter'],'no':['001','002','003','004'],'age':[16,16,15,16],'gender':['m','f','f','m']}
df1 = pd.DataFrame(dic1)
# print('显示该数据结构类型',type(df1))
df1.index.name = 'id'     #index.name给索引命名
# print(df1)

    #查询
'''
获取列索引:df.cloums 
获取行索引:df.index
获取值:df.value
'''
column = df1.no
row = df1.loc[3]
# print(df1)
# print('\n列数据索引\n',column,'\n行数据索引\n',row)


    # 增加
# print('修改前:\n',df1)
df2 = df1.append([{'name':'Stark','no':'005','age':15,'gender':'m'}],ignore_index=True) #接着索引号为4,不写的话就是0
# print('增加行:\n',df2)
df2['new_Col'] = [1,2,3,4,5]
# print('增加列:\n',df2)

    #删除
df3 = df1.copy()
# print('处理前的数据\n',df3)
df3b = df3.drop(['name'],axis=1)
# print('删除列后的数据框\n',df3b)
df3c = df3.drop([2])
# print('删除行后的数据框\n',df3c)

    #合并修改
#按列合并
df4 = pd.DataFrame({'address':['school','home','school','school','home']})
df5 = pd.concat([df2,df4],axis=1)
# print('合并前的df2\n',df2)
# print('合并前的df4\n',df4)
# print('合并后的df5\n',df5)

#按行合并
df6 = pd.DataFrame({'name':['Tony'],'no':['005'],'age':[16],'gender':['m']})
df7 = pd.concat([df1,df6],axis=0,ignore_index=True)
# print('合并前的df1\n',df1)
# print('合并前的df6\n',df6)
# print('合并后的df7\n',df7)

MySQL--四(表连接)

表连接的几种类型:自连接、内连接、左外连接、右外连接。

1、自连接

       自连接:即表本身和自己连接。

准备两个表:
一个学生表stu,字段有:stu_id,stu_name,stu_cls
一个课程表class,字段有:cls_id,cls_name,cls_stu_id(选课学生id)

2、内连接

语法:

select 查找字段..
from 左表
inner join 右表
on 查找条件;

查找出所有选了课的学生的名字,和所选课程名称

select stu_name,cls_name

from stu
inner join class
on stu_id= clas_stu_id;

3、左外连接

       左外连接:返回左表中所有的数据和右表中符合条件的数据。

通用语法:

select 查找字段..
from 左表
left join右表
on 左表字段  = 右表字段 ;

oracle中有特有的连接语法:

select 查找字段..
from 左表,右表
where 左表字段 = 右表字段(+);

需求:查找出所有学生的姓名和学生选的课的名称。(与上面内连接的区别在于这里查找的是所有学生的名字,因为有的学生有可能没有选课,在内连接中没有选课的学生并没有查找。

通用语法:
select stu_name,cls_name
from stu
left join class
on stu_id = cls_stu_id;
oracle特有语法实现:
select stu_name,cls_name
from stu,class
where stu_id = cls_stu_id(+);

4、右外连接

       右外连接:返回右表中所有的数据和左表中符合条件的数据。(右外连接和左外连接其实可以互相转换的,如果把左连接中的左表作为右表,就成了右连接)

通用语法:
select 左表字段,右表字段
from 左表
right join 右表
on 左表字段 = 右表字段;
特有语法:
select 左表字段,右表字段
from 左表,右表
where 左表字段(+) = 右表字段;

需求:用右连接找到所有学生姓名,和所有被学生选的课程。

通用语法
select cls_name,stu_name
from class
right join stu
on cls_stu_id = stu_id;
特有语法;
select cls_name,stu_name
from class,stu
where cls_stu_id(+) = stu_id;

<br/>

MySQL--三(杂)

1、索引有哪些类型?

       普通索引:普通索引是最基本的索引,没有任何限制,值可以为空;仅加速查询;

        唯一索引:与普通索引类似,不同的是:索引的列必须唯一,但可以为空值,如果是组合索引,则列值的组合必须唯一;

        主键索引:主键索引是特殊的唯一索引,一个表只能有一个主键,不许有空值;

        组合索引:组合索引指在多个字段上创建的索引,只有在查询条件中使用了创建索引时的第一个字段,索引才会被使用。使用组合索引时遵循最左前缀集合;

        全文索引:全文索引主要用来查找文本中的关键字,而不是直接与索引中的值相比较。

2、union和union all的区别

        union和union all 都是对于多个查询结果的并集进行操作,但:union会去重并排序,而union all会将所有结果显示出来,不去重也不排序。

3、索引的作用,和他的优缺点是什么?

        索引就一种特殊的查询表,数据库的搜索可以利用它加速对数据的检索。它很类似与现实生活中书的目录,不需要查询整本书内容就可以找到想要的数据。索引可以是唯一的,创建索引允许指定单个列或者是多个列。缺点是它减慢了数据录入的速度,同时也增加了数据库的尺寸大小。一般唯一、不为空、经常被查询的字段适合建索引。

4、MySQL哪些字段适合建立索引?

       数量超过300的表应该有索引;

        表的主键、外键必须有索引;

        经常与其他表进行连接的表,在连接字段上应该建立索引;

        经常出现在where语句中的字段,特别是大表的字段,应该建立索引;

        频繁进行数据操作的表,不要建立太多索引;

5、主键和外键的区别?

       主键是能确定一条记录的唯一标识,比如,一条记录包括身份证号、姓名、年龄。其中,身份证号是唯一能确定你这个人的,其他的都有可能重复,但身份证号不会,所以,身份证号是主键。

        外键用于与另一张表的关联。是能确定另一张表记录的字段,用于保持数据的一致性。比如,A表中的一个字段,是B表的主键,那他就可以是A表的外键。

6、order by 和 group by 的区别是什么?

       order by:order by的作用就是排序。asc:升序,desc:降序。order by后面跟多个字段时,排序按照就近原则;

        group by:聚合分组,值相等即为一组。聚合的意思就是聚合函数,例如sum()、avg()、count()、max()等;

注意:having只能用在group by之后,对分组后的结果进行筛选(即:要使用having,你必须先用group by分组);如果还要使用where,那么where要放在group by 之前where后的条件表达式里不允许使用聚合函数,但having可以