Joyber 发布的文章

tensorflow numpy 不想输出时显示科学计算法表示，e的x次方

作者: Joyber
时间: 2022-10-02
分类: 默认分类
评论

import numpy as np
import pandas as pd

np.set_printoptions(suppress=True, threshold=np.nan)
#其中，suppress=True 表示取消科学记数法，threshold=np.nan 完整输出（没有省略号)

pd.set_option('display.float_format',lambda x : '%.3f' % x)
#禁用科学计数法，小数保留3位

python缩放图片再居中剪切

作者: Joyber
时间: 2022-10-01
分类: 默认分类
评论

import io, requests
from PIL import Image

url = 'https://cdn.tatlerasia.com/asiatatler/i/hk/2018/11/05194216-hennessey-venom-f5-15_cover_1600x1000.jpg'
res = requests.get(url)

img = Image.open(io.BytesIO(res.content))

def imageCut(img:Image, flag='center'):
    '''居中剪切成正方形图片'''
    # 计算剪切图片的坐标点，左上角和右下角坐标
    (w, h) = img.size
    if w > h:
        opt = ((w-h)/2,0,(w-h)/2+h,h)
    else:
        opt = (0, (h-w)/2,w,(h-w)/2+w)
    return img.crop(opt)

img = imageCut(img)

移动文件shell案例

作者: Joyber
时间: 2022-09-30
分类: 默认分类
评论

#! /bin/bash

## move dirs files to /data/caiji

files=`find ./ -regex ".*.mp4\|.*.jpeg"`

for file in $files; do
    echo "start mode file: $file"
    filepath=`dirname $file`
    mkdirpath="/data/caiji${filepath:1}/"
    echo "mkdir: $mkdirpath"
    sudo -u www mkdir $mkdirpath -p
    if [ $? -ne 0 ]; then
        echo "mkdir exec fail! exit 1"
        exit 1
    else
        echo "mkdir exec success, start move file: $file"
        sudo -u www mv $file $mkdirpath -f
        if [ $? -ne 0 ]; then
            echo "move file fail! jump this"
        else
            echo "move file success, continue next file"
        fi
    fi
done

echo task done!

Linux shell脚本if条件判断语法

作者: Joyber
时间: 2022-09-30
分类: 默认分类
评论

1、基本语法:

if [ command ]; then
   符合该条件执行的语句
fi

2、扩展语法：

if [ command ];then
   符合该条件执行的语句
elif [ command ];then
   符合该条件执行的语句
else
   符合该条件执行的语句
fi

3、语法说明：
bash shell会按顺序执行if语句，如果command执行后且它的返回状态是0，则会执行符合该条件执行的语句，否则后面的命令不执行，跳到下一条命令。
当有多个嵌套时，只有第一个返回0退出状态的命令会导致符合该条件执行的语句部分被执行,如果所有的语句的执行状态都不为0，则执行else中语句。
返回状态：最后一个命令的退出状态，或者当没有条件是真的话为0。

注意：
1、[ ]表示条件测试。注意这里的空格很重要。要注意在'['后面和']'前面都必须要有空格
2、在shell中，then和fi是分开的语句。如果要在同一行里面输入，则需要用分号将他们隔开。
3、注意if判断中对于变量的处理，需要加引号，以免一些不必要的错误。没有加双引号会在一些含空格等的字符串变量判断的时候产生错误。比如[ -n "$var" ]如果var为空会出错
4、判断是不支持浮点值的
5、如果只单独使用>或者<号，系统会认为是输出或者输入重定向，虽然结果显示正确，但是其实是错误的，因此要对这些符号进行转意
6、在默认中，运行if语句中的命令所产生的错误信息仍然出现在脚本的输出结果中
7、使用-z或者-n来检查长度的时候，没有定义的变量也为0
8、空变量和没有初始化的变量可能会对shell脚本测试产生灾难性的影响，因此在不确定变量的内容的时候，在测试号前使用-n或者-z测试一下
9、? 变量包含了之前执行命令的退出状态（最近完成的前台进程）（可以用于检测退出状态）

常用参数：

文件/目录判断：

[ -a FILE ] 如果 FILE 存在则为真。 
[ -b FILE ] 如果 FILE 存在且是一个块文件则返回为真。
[ -c FILE ] 如果 FILE 存在且是一个字符文件则返回为真。
[ -d FILE ] 如果 FILE 存在且是一个目录则返回为真。 
[ -e FILE ] 如果 指定的文件或目录存在时返回为真。
[ -f FILE ] 如果 FILE 存在且是一个普通文件则返回为真。
[ -g FILE ] 如果 FILE 存在且设置了SGID则返回为真。
[ -h FILE ] 如果 FILE 存在且是一个符号符号链接文件则返回为真。（该选项在一些老系统上无效）
[ -k FILE ] 如果 FILE 存在且已经设置了冒险位则返回为真。
[ -p FILE ] 如果 FILE 存并且是命令管道时返回为真。
[ -r FILE ] 如果 FILE 存在且是可读的则返回为真。
[ -s FILE ] 如果 FILE 存在且大小非0时为真则返回为真。
[ -u FILE ] 如果 FILE 存在且设置了SUID位时返回为真。
[ -w FILE ] 如果 FILE 存在且是可写的则返回为真。（一个目录为了它的内容被访问必然是可执行的）
[ -x FILE ] 如果 FILE 存在且是可执行的则返回为真。
[ -O FILE ] 如果 FILE 存在且属有效用户ID则返回为真。
[ -G FILE ] 如果 FILE 存在且默认组为当前组则返回为真。（只检查系统默认组）
[ -L FILE ] 如果 FILE 存在且是一个符号连接则返回为真。 
[ -N FILE ] 如果 FILE 存在 and has been mod如果ied since it was last read则返回为真。 
[ -S FILE ] 如果 FILE 存在且是一个套接字则返回为真。
[ FILE1 -nt FILE2 ] 如果 FILE1 比 FILE2 新, 或者 FILE1 存在但是 FILE2 不存在则返回为真。 
[ FILE1 -ot FILE2 ] 如果 FILE1 比 FILE2 老, 或者 FILE2 存在但是 FILE1 不存在则返回为真。
[ FILE1 -ef FILE2 ] 如果 FILE1 和 FILE2 指向相同的设备和节点号则返回为真。

字符串判断

[ -z STRING ]    如果STRING的长度为零则返回为真，即空是真
[ -n STRING ]    如果STRING的长度非零则返回为真，即非空是真
[ STRING1 ]　   如果字符串不为空则返回为真,与-n类似
[ STRING1 == STRING2 ]   如果两个字符串相同则返回为真
[ STRING1 != STRING2 ]    如果字符串不相同则返回为真
[ STRING1 < STRING2 ]     如果 “STRING1”字典排序在“STRING2”前面则返回为真。 
[ STRING1 > STRING2 ]     如果 “STRING1”字典排序在“STRING2”后面则返回为真。

数值判断

[ INT1 -eq INT2 ]          INT1和INT2两数相等返回为真 ,=
[ INT1 -ne INT2 ]          INT1和INT2两数不等返回为真 ,<>
[ INT1 -gt INT2 ]           INT1大于INT2返回为真 ,>
[ INT1 -ge INT2 ]          INT1大于等于INT2返回为真,>=
[ INT1 -lt INT2 ]            INT1小于INT2返回为真 ,<
[ INT1 -le INT2 ]           INT1小于等于INT2返回为真,<=

逻辑判断

[ ! EXPR ]       逻辑非，如果 EXPR 是false则返回为真。
[ EXPR1 -a EXPR2 ]      逻辑与，如果 EXPR1 and EXPR2 全真则返回为真。
[ EXPR1 -o EXPR2 ]      逻辑或，如果 EXPR1 或者 EXPR2 为真则返回为真。
[  ] || [  ]           用OR来合并两个条件
[  ] && [  ]        用AND来合并两个条件

其他判断

[ -t FD ]  如果文件描述符 FD （默认值为1）打开且指向一个终端则返回为真
[ -o optionname ]  如果shell选项optionname开启则返回为真

加粗文字IF高级特性：

双圆括号(( ))：表示数学表达式

在判断命令中只允许在比较中进行简单的算术操作，而双圆括号提供更多的数学符号，而且在双圆括号里面的'>','<'号不需要转意。

双方括号[[ ]]：表示高级字符串处理函数

双方括号中判断命令使用标准的字符串比较，还可以使用匹配模式，从而定义与字符串相匹配的正则表达式。

双括号的作用：
在shell中，[ $a != 1 || $b = 2 ]是不允许出，要用[ $a != 1 ] || [ $b = 2 ]，而双括号就可以解决这个问题的，[[ $a != 1 || $b = 2 ]]。又比如这个[ "$a" -lt "$b" ]，也可以改成双括号的形式(("$a" < "$b"))

实例

1：判断目录$doiido是否存在，若不存在，则新建一个

if [ ! -d "$doiido"]; then
　　mkdir "$doiido"
fi

2：判断普通文件$doiido是否存，若不存在，则新建一个

if [ ! -f "$doiido" ]; then
　　touch "$doiido"
fi

3：判断$doiido是否存在并且是否具有可执行权限

if [ ! -x "$doiido"]; then
　　mkdir "$doiido"
    chmod +x "$doiido"
fi

4：是判断变量$doiido是否有值

if [ ! -n "$doiido" ]; then
　　echo "$doiido is empty"
　　exit 0
fi

5：两个变量判断是否相等

if [ "$var1" = "$var2" ]; then
　　echo '$var1 eq $var2'
else
　　echo '$var1 not eq $var2'
fi

6：测试退出状态：

if [ $? -eq 0 ];then
    echo 'That is ok'
fi

7：数值的比较：

if [ "$num" -gt "150" ]
    echo "$num is biger than 150"
fi

8：a>b且a<c

(( a > b )) && (( a < c ))
[[ $a > $b ]] && [[ $a < $c ]]
[ $a -gt $b -a $a -lt $c ]

9：a>b或a<c

(( a > b )) || (( a < c ))
[[ $a > $b ]] || [[ $a < $c ]]
[ $a -gt $b -o $a -lt $c ]

10：检测执行脚本的用户

if [ "$(whoami)" != 'root' ]; then
    echo "You have no permission to run $0 as non-root user."
    exit 1;
fi

上面的语句也可以使用以下的精简语句

[ "$(whoami)" != 'root' ] && ( echo "You have no permission to run $0 as non-root user."; exit 1 )

11：正则表达式

doiido="hero"
if [[ "$doiido" == h* ]];then 
    echo "hello，hero"
fi

============其他例子============
1、查看当前操作系统类型

#!/bin/sh
SYSTEM=`uname -s`
if [ $SYSTEM = "Linux" ] ; then
    echo "Linux"
elif [ $SYSTEM = "FreeBSD" ] ; then
    echo "FreeBSD"
elif [ $SYSTEM = "Solaris" ] ; then
    echo "Solaris"
else
    echo "What?"
fi

2、if利用read传参判断

#!/bin/bash
read -p "please input a score:" score
echo -e "your score [$score] is judging by sys now"

if [ "$score" -ge "0" ]&&[ "$score" -lt "60" ];then
    echo "sorry,you are lost!"
elif [ "$score" -ge "60" ]&&[ "$score" -lt "85" ];then
    echo "just soso!"
elif [ "$score" -le "100" ]&&[ "$score" -ge "85" ];then
    echo "good job!"
else
    echo "input score is wrong , the range is [0-100]!"
fi

3、判断文件是否存在

#!/bin/sh
today=`date -d yesterday +%y%m%d`
file="apache_$today.tar.gz"
cd /home/chenshuo/shell
if [ -f "$file" ];then
    echo "OK"
else
    echo "error $file" >error.log
    mail -s "fail backup from test" loveyasxn924@126.com <error.log
fi

4、这个脚本在每个星期天由cron来执行。如果星期的数是偶数，他就提醒你把垃圾箱清理：

#!/bin/bash
WEEKOFFSET=$[ $(date +"%V") % 2 ]

if [ $WEEKOFFSET -eq "0" ]; then
    echo "Sunday evening, put out the garbage cans." | mail -s "Garbage cans out" your@your_domain.org
fi

5、挂载硬盘脚本(windows下的ntfs格式硬盘)

#! /bin/sh
dir_d=/media/disk_d
dir_e=/media/disk_e
dir_f=/media/disk_f

a=`ls $dir_d | wc -l`
b=`ls $dir_e | wc -l`
c=`ls $dir_f | wc -l`

echo "checking disk_d..."
if [ $a -eq 0 ]; then
  echo "disk_d is not exsit,now creating..."
  sudo mount -t ntfs /dev/disk/by-label/software /media/disk_d
else
  echo "disk_d exits"
fi

echo "checking disk_e..."
if [ $b -eq 0 ]; then
  echo "disk_e is not exsit,now creating..."
  sudo mount -t ntfs /dev/disk/by-label/elitor /media/disk_e
else
  echo "disk_e exits"
fi

echo "checking disk_f..."
if [ $c -eq 0 ]; then
  echo "disk_f is not exsit,now creating..."
  sudo mount -t ntfs /dev/disk/by-label/work /media/disk_f
else
  echo "disk_f exits"
fi

tensorflow2.10版本配置NVIDIA显卡GPU的安装笔记

作者: Joyber
时间: 2022-09-29
分类: 默认分类
评论

tensorflow的新版本的安装是不分CPU和GPU版本的，直接 pip install tensorflow 就行了

重要的是cuda和cudnn的安装和配置，搞了很久就是用不了GPU

一、NVIDIA 官网下载安装:CUDA toolkit

https://developer.nvidia.com/cuda-toolkit 下载 11.7.1 版本
安装时，如果已经安装过其它NVIDIA驱动也可以直接再安装

安装时一定要选择【自定义安装】，选项选择:

可以去掉 nvidia geforce experience .. （这个程序没啥用）
去掉cuda->visual studio interation (如果没有安装visual studio的IDE的话，根本没用，一般也不用这个IDE所以我选择不要)
diriver components->下面的驱动的话，看一下当前版本和这个程序自带的新版本，自带的版本高于已安装的版本就勾上，否则就去掉吧（如果已经安装过了nvidia驱动应该能看到已有版本号）

这个安装后一般会需要重启才能生效的，选择等一会把cudnn一并配置好后重启即可。

二、NVIDIA 官网下载安装:CUDNN （这个程序是需要登录后，加入到开发者身份才能下载，加入也简单，注册账号，填写一个个人资料就可以顺利下载到）

这里要注意cudnn需要与CUDA toolkit的版本兼容才能使用，不然以后在运行tf程序的时候，可能会出现意外终止问题（看到 Loaded cuDNN version 之后就意外退出了，没有任何报错信息）
下载时，一定要看看下载到兼容版本的
https://developer.nvidia.com/rdp/cudnn-archive

这个下载回来后不需要安装，直接解压后就可使用，我的方法是解压后，把文件夹名字改成【cudnn】然后放到CUDA的安装目录里

三、重点：环境变量的配置

需要四个环境变量：

# CUDA toolkit安装后应该会自动添加好以下两个环境变量
$CUDA\bin
$CUDA\libnvvp
# 以下两条是需要手动添加的，添加到上移置顶
$CUDA\extras\CUPTI\lib64
$CUDA\cudnn\bin

重启电脑让显卡驱动生效。

验证是否有可用的GPU

import tensorflow as tf
tf.test.is_gpu_available()  #True or False  ,  TF1.x 和 TF 2.x中都适用
tf.config.list_physical_devices('GPU')  #会得到一个可用的GPU的设备列表

tensorflow numpy 不想输出时显示科学计算法表示，e的x次方

python缩放图片再居中剪切

移动文件shell案例

Linux shell脚本if条件判断语法

常用参数：

加粗文字IF高级特性：

实例

tensorflow2.10版本配置NVIDIA显卡GPU的安装笔记

友情链接

最新文章

最近回复

分类

标签

热门文章

其它