独立凹凸曼统计系统支持排行榜等有兴趣朋友可以Q我

分类:软件产品 | 作者:凹凸曼 | 发表于2022/05/17

为什么要自研发统计系统 ?如百度其他第三方统计不能很好的解决文章具体统计数据比如PV和IP ,里面的数据杂乱无章,还有想弄一个文章日排行,周排行,月排行,也支持某个频道内排行,而且还可以导出文章排行,这样方便为考核提供依据。

统计系统命名为:凹凸曼统计 ,系统已经经历过实践具体可以查看下面功能介绍

一、开发语言:PHP+Python+js

二、功能介绍:

1、系统组成包括前端入库嵌入代(类似百度统计那种)、后端分析引擎(python)及后台管理(php mvc)。

2、设计数据库结构并用单库分表设计模式,这样设计好处以前的数据就会归档,不会影响数据性能,每日千万级完全OK。

3、并且当初还设计了读写分离,前端写入的数据和后端分析可以分开来运行。

4、支持站点管理,意思支持多个站点统计数据。每个根域名对应一个站点。

5、支持每日新闻排行,查询url,页面(频道页排行,文章页面排行),排序(IP,PV),站点,频道,可选择导出excel表格。

6、支持每月新闻排行,查询浏览月份 ,发布月份,排序(IP,PV),站点,频道文章页排行,可选择导出excel表格

初次尝试golang聊两句及学习心得

分类:golang | 作者:凹凸曼 | 发表于2022/03/23 初次尝试golang聊两句及学习心得已关闭评论

花大概一周到二周时间边学边撸完一个基于golang的子项目,感觉还是挺有成就感。golang跨平台还是挺不错。语法格式开始与以往还是有点区别,不过呢看着写着就顺了。

回顾一下以往学习经历,最早学的的JAVA >J2SE,J2EE,J2ME,各种设计思想 。后来工作中用ASP+JS把JAVA抛弃,接着玩WEB之王PHP,后来安全运维中使用Python+Shell,中途因为项目原因捡起来玩JAVA;那时候大数据+人工智能还没有火。2022年了是时候学习当下流行的,有潜力的。学这些为了眼界更开阔一些,了解当下的流行趋势。语言其次,更重要还是思想,把这些优秀思想整合起来实现自己想实现的。

如要学习golang新手建议:

1、如果你有其他语言经历,直接可以看golang源码本身或者优先第三方案例,不懂再查资料;没有的话只能从基础入门。

2、直接使用优先第三方框架和组件,减少不必要重复造轮子时间。当然如果你有时间自己可以设计这些轮子。境界又回提升一个档次。比如我就是使用:gin+gorm+viper+sarama+redis+jwt-go+file-rotatelogs等

怎么实现AI自动审核图片找出违规图片呢?

分类:插件产品 | 作者:凹凸曼 | 发表于2021/12/10 怎么实现AI自动审核图片找出违规图片呢?已关闭评论

现在AI算法对图片违规情况分析还是不错,是时候引入自动审核图片,减少人工审核成本了。

通过云端API 调用阿里云内容安全,做为算法基础来解决。一般图片检测分为:同步检查和异步检测,我为什么会采用异步检测呢 ?好处是?异步检查图片多的情况一般不会造成超时,检测结果会通过callback通知对应网站服务,而如果不做长期的轮询,同步检查容易造成图片超时情况;其次减少影响正常上传图片的用户不友好提示,图片如有问题,转为后台审核,避免AI算法误报。

很久没有使用pr提交报鉴权失败

分类:Linux | 作者:凹凸曼 | 发表于2021/09/14 很久没有使用pr提交报鉴权失败已关闭评论

很久没有pr今天提交报鉴权失败如下:

remote: Support for password authentication was removed on August 13, 2021. Please use a personal access token instead.
remote: Please see https://github.blog/2020-12-15-token-authentication-requirements-for-git-operations/ for more information.
fatal: ‘https://github.com/apoyl/Lanmp-mm.git/’ 鉴权失败

也许某一天你会去跟踪一下mysql日志情况?

分类:Mysql | 作者:凹凸曼 | 发表于2021/08/09 也许某一天你会去跟踪一下mysql日志情况?已关闭评论

查一下某段时间某个数据库操作记录 mysqlbinlog –database=数据库 &#8211 […]

centos8 遇到无法启动rc.local

分类:Linux,问题集 | 作者:凹凸曼 | 发表于2021/06/08 centos8 遇到无法启动rc.local已关闭评论

一般情况加入:chmod +x /etc/rc.d/rc.local 即可解决在此配置文件里加入开机启动

但是我开启执行权限还是不行,查看启动错误信息如下:

[root@172-0-0-205 ~]# systemctl --failed
  UNIT             LOAD   ACTIVE SUB    DESCRIPTION                     
● rc-local.service loaded failed failed /etc/rc.d/rc.local Compatibility

LOAD   = Reflects whether the unit definition was properly loaded.
ACTIVE = The high-level unit activation state, i.e. generalization of SUB.
SUB    = The low-level unit activation state, values depend on unit type.

如何解决呢?

进去了解一下启动服务的规则:

如何配置使用负载均衡slb让你平台更加稳定行运营

分类:Nginx | 作者:凹凸曼 | 发表于2021/05/17 如何配置使用负载均衡slb让你平台更加稳定行运营已关闭评论

可能随着发展访问的人越来越多,单台机器容易出现故障几率越高,架构上就调整一下,把重要业务独立分割出来做一下负载均衡

使用软实现(代表之一:nginx),由于nginx缺失一些必要插件,又需要自己一个个装麻烦,直接使用Tengine ,它整合部分好用插件 如主动式后端服务器健康检查的功能ngx_http_upstream_check_module、会话保持ngx_http_upstream_session_sticky_module等

搞了三台机器:一台SLB ,后端两台负责业务处理,这样好处,即使以后业务增长一段时间能也能满足发展(简单可以多加几台后端业务处理),扩展性更好,即使其中一台挂掉也能正常运行,抗故障更好。

DZX2.0系列解决多张图片多个附件无法上传及头像无法修改等问题

分类:问题集 | 作者:凹凸曼 | 发表于2021/03/15 DZX2.0系列解决多张图片多个附件无法上传及头像无法修改等问题已关闭评论

最近帮台湾的朋友整合了早期DZX2.0 多张图片和多张附件无法上传的问题?因为早期的时候是采用flash的方案,随着现代游览器更新换代flash将在游览器退出历史舞台。因此需要html5方案来解决原本相关模板无法使用的问题

一、需求如下:
1、解决发主题无法上传多张图片或多个附件

2、解决个人相册无法上传多张图片

3、解决头像无法裁剪及无法上传头像

如何通过AI数据清洗解决网站大量隐藏的违规规容?

分类:插件产品 | 作者:凹凸曼 | 发表于2021/02/09 如何通过AI数据清洗解决网站大量隐藏的违规规容?已关闭评论

最近结合了解几大云的产品,推出了相应的解决方案,成本相对较低,通过使用者用处设计了不同的解决方案

阿里云清洗违规内容:实现主题和回帖后台自动提交内容到阿里云内容安全并且清洗违规内容自动进入回收站或者进入重审。

AI数据清洗违规内容:实现新旧主题自动游览页面自动触发提交内容到腾讯云内容安全并且违规内容自动进入回收站或者进入重审。

遇到SQL类似报错说明mysql需升级支持表情emoji

分类:Linux | 作者:凹凸曼 | 发表于2021/01/25 遇到SQL类似报错说明mysql需升级支持表情emoji已关闭评论

说明系统不支持 表情emoji;建议升级到MySQL在8.0以上,性能更加好一些,支持表情emoji 

mysql 建议采用 character-set-server=utf8mb4