丝绸平台项目



  • IM即时通讯平台, 采用自主研发的分布式存储应用与UDP/TCP可靠P2P网络传输技术, 自主研发的IM通讯协议, 覆盖主流平台(Win, Android, IOS, Mac, Linux, WP), 插件式高扩展性, OpenGL渲染高流畅UI, 支持集成Web应用, 可以私有化部署, 公有云部署, 简易部署.
    
    这款产品我是从2013年开始开发至今, 利用业余时间, 比如晚上, 周末, 各种节假日. 从底层一步一步搭建起来的.
    产品的技术文档, 产品文档, 美工图, 测试方案, 测试文档, 技术调研, 功能开发, 运维部署方案, 均由我独立完成.
    
    
    技术特点:
    1. 自主研发的分布式数据存储中间件, 可以方便快捷的搭建和部署基于分布式存储应用的云端系统, 轻松实现跨区域分布式存储系统.
    2. 自主研发的点对点可靠网络传输中间件, 可以搭建P2P网络平台系统, 轻松实现音视频会议中心, 直播, 远程桌面/文档演示等功能.
    3. 基于上面两个核心中间件, 搭建出来的丝绸服务器和客户端, 作为消息, 文件, 业务应用, 均能应对自如.
    
    
    产品特点:
    1. P2P
        基于UDP/TCP协议的内网穿透解决方案.
        
    2. 消息必达
        绝不丢消息, 要么在客户端, 要么在服务器. 而且可以随时控制每包数据是否允许丢失, 比如视频播放中的P帧, B帧是可以丢失的.
    
        解决丢包:采用自行研发的并行滑动窗口协议,保证数据的稳定可靠传输。
        动态调整:数据通讯可行效率动态评估和计算获得当前环境下的最佳通讯表现。
        数据组帧:通讯数据包发送分包,接收组包,保证数据顺序完整。
    
    
    3. 自主研发的IM通信协议
        由IM业务决定的消息传输协议, 非常强的扩展性, 开发灵活而高效.
    
    
    4. 分布式存储
        数据通过分布式存储方案, 负载均衡, 业务引流等方式达到服务器应用效能最大化.
    
    
    5. 覆盖主流平台的跨平台部署方案
        服务器可部署到Win7, Win10, Mac, Ubuntu上, 理论上部署到移动端也是可以的, 哈哈.  客户端可部署到Android, IOS, WP手机或平板上. 已覆盖主流平台.
    
    
    6. 客户端和服务器均可通过插件化扩展功能
        客户端和服务器除基础功能外, 扩展功能均采用插件式开发, 集成和部署相当方便.
    
    
    7. 严格软件分层, 保证了流畅的界面, 高效的底层
        基于OpenGL渲染的UI加上严格的分层模式, 流畅度高, 不会出现卡顿, 假死等现象.
    
    
    8. WebEngine
        可以非常快速的集成Web应用, 和H5特效等.
    
    
    9. 多种部署方式
        可以私有化部署, 公有云部署, 简易部署.
    
    
    
    10. 易维护的代码
        PC客户端, Android客户端, IOS客户端, WP客户端 均采用同一套代码编译而成, 维护和需求变更成本非常低.
    
    
     后续开发:
    1. 音视频通话, 音视频会议, 基于可靠UDP模式下的网络传输中间件, 开发音视频传输是非常容易的事, 只用关心采集和编解码就行了.
    2. 远程桌面, 这个同上
    3. 云盘, 基于分布式数据存储中间件, 可在目前C/S网络架构和P2P模式的配合上完成.
    

    产品展示:
    产品主页: http://www.camelstudio.cn/ (暂未更新到最新的界面)

    产品展示: 丝绸平台项目介绍书
    http://v.youku.com/v_show/id_XMjkxODcxMzI1Ng==.html

    联系方式:
    姓名: 郑天佐
    邮件: camelstudio@163.com
    QQ: 278969898

    替代文字
    替代文字
    替代文字
    替代文字
    替代文字
    替代文字
    替代文字
    替代文字
    替代文字
    替代文字
    替代文字
    替代文字
    替代文字
    替代文字
    替代文字
    替代文字
    替代文字
    替代文字
    替代文字
    替代文字


  • 网站研运

    @dromedary 哇,很不错的样子,真厉害,搞得定好多技术难点啊,强大的高手来了。



  • @dromedary 这个不错啊,如果在加上视频和音频技术,就更完美了



  • @jcy 技术一般, 主要是花的时间多, 慢慢研究出来的



  • @dromedary 这个厉害,用Qt吗?还用有大量qml?



  • @dromedary 你那个视频怎么没声音啊?
    我在你视频中看到不少都强调自主研发的数据库,传输协议。



  • @紫原罪 是的 目标有也是你说的这个方向



  • 厉害厉害,很多技术难题你都解决了啊。我现在在做一个小项目,看来要和大佬好好学习一下。


Log in to reply
 

走马观花

最近的回复

  • 还是很正常的Python脚本哈。
    不过有点好奇,你在实际场景中用QUiLoader多吗?🎯

    read more
  • 好棒,高产啊。真的很棒!🐱 能将自己有用的知识分享出来真不错!

    read more
  • 自动翻译器的qt部分

    接下来我们要实现qt窗口部分,这里遇到一个很尴尬的事情,qt for python的开发环境要求按照python,但我安装的是Anaconda,使用Jupyter开发,安完了PySide2,Qt找不到这个模块,用Jupyter呢,又提示找不到qt.qpa.plugin,打开环境变量查看os.environ,

    'QT_QPA_PLATFORM_PLUGIN_PATH': 'C:\\ProgramData\\Anaconda3\\lib\\site-packages\\PySide2\\plugins\\platform'platform竟然少个s,我也是醉了,由于不想在py文件追加环境变量配置,我很机智的把文件夹platforms复制了一份,改名platform,这样是不好的,但是好用呀。

    追加main.py文件,导入需要的包 import sys import random from PySide2.QtWidgets import QApplication, QWidget, QTextEdit, QHBoxLayout from PySide2.QtUiTools import QUiLoader from PySide2.QtCore import QFile, QDir, QTimer, Slot, Qt from PySide2.QtGui import QClipboard from Spider import * 使用线程创建翻译器 #创建翻译器 class WorkerThread(QThread): resultReady = Signal() def __init__(self): super().__init__() def __del__(self): pass def run(self): global translation translation = Translation() self.resultReady.emit() 翻译过程也使用线程 #翻译线程 class WorkerThreadTrans(QThread): resultReady = Signal(str) def __init__(self): super().__init__() self.last = '' def setText(self, value): self.value = value def run(self): self.result = '' while(1): self.getClipborad() time.sleep(1) @Slot() def getClipborad(self): global translation board = QApplication.clipboard() self.str = board.text() if self.str == '' or self.str == self.last: pass else: try: self.last = self.str self.result = translation.translate(self.str) except: pass finally: pass self.resultReady.emit(self.result) 实现窗口类 #窗口 class Form(QWidget): def __init__(self): super().__init__() self.textEdit = QTextEdit() self.layout = QHBoxLayout() self.layout.addWidget(self.textEdit) self.setLayout(self.layout) self.setWindowTitle("百度翻译器") self.resize(400, 300) self.setWindowFlags(Qt.WindowStaysOnTopHint) self.icon = QIcon() self.icon.addPixmap(QPixmap('favicon.ico'), QIcon.Normal, QIcon.Off) self.setWindowIcon(self.icon) self.create = False self.thread = WorkerThread() self.thread.finished.connect(self.thread.deleteLater) self.thread.resultReady.connect(self.createTrans) self.thread.start() self.threadTrans = WorkerThreadTrans() self.threadTrans.finished.connect(self.threadTrans.deleteLater) self.threadTrans.resultReady.connect(self.setTextValue) def __del__(self): self.threadTrans.quit() self.threadTrans.wait() if self.create: del translation @Slot() def createTrans(self): self.create = True self.threadTrans.start() @Slot() def setTextValue(self, value): self.textEdit.setPlainText(value) main if __name__ == "__main__": app = QApplication(sys.argv) translation = None window = Form() window.show() sys.exit(app.exec_())

    为了防止窗口启动卡顿,运行卡顿,我们开辟了两个线程。我们还把窗口置顶,为窗口设置了图标。我们重载了窗口关闭事件,用于把线程关闭。

    程序运行效果
    1564980342307.png

    打包

    具体打包操作请看帖子 https://www.jianshu.com/p/046e690c0f12

    打包命令

    pyinstaller -F -w -i favicon.ico --icon=favicon.ico main.py -p C:\ProgramData\Anaconda3\Lib\site-packages\PySide2

    为了平台显示我们把C:\ProgramData\Anaconda3\Lib\site-packages\PySide2\plugins\platforms\qwindows.dll也拷贝过来
    1564993349890.png

    去除selenium隐藏控制台解决办法

    参考帖子 https://www.cnblogs.com/TurboWay/p/9300105.html

    修改C:\ProgramData\Anaconda3\Lib\site-packages\selenium\webdriver\common\service.py源码

    程序地址

    read more
  • image.png

    自动翻译器的python部分 一、设计思路

    1.qt提取剪贴板/鼠标选中内容作为翻译内容

    2.使用python向百度翻译提交翻译内容,然后取回翻译结果

    3.使用qt显示翻译结果

    二、实现步骤

    我们已经安装了Jupyter作为开发环境

    先分析百度翻译提交接口

    有三种接口方式可以使用

    地址栏https://fanyi.baidu.com/translate?aldtype=16047&query=&keyfrom=baidu&smartresult=dict&lang=auto2zh#en/zh/world world就是要查询的单词 https://fanyi.baidu.com/sug 这个是百度自动识别的单词下拉项
    1564905012628.png https://fanyi.baidu.com/v2transapi 这个是真正百度翻译的接口

    这三种接口各有优缺点:

    第一种url简单,使用方便,缺点就是返回的是一整个网页,需要从网页中提取翻译的内容,但是该网页是动态渲染的,里面并没有我们需要的信息 第二种并不是一个真实的翻译,只是百度检索出类似的情况,不一定是需要的,而且如果是一句话的翻译,这个是空的 第三种是真正的翻译,但是需要提交详细数据,下面就是要提交的数据,其他数据还好,这个sign比较麻烦,他是js动态生成的,是加密的,我们无法模拟 from: en to: zh query: world transtype: realtime simple_means_flag: 3 sign: 335290.130699 token: fcd815f24ac02a1ddc7c485f38c8efe8

    综合考虑,这三种我们都要放弃。

    针对动态渲染的网页,Python提供了许多模拟浏览器运行的库,比如Selenium

    使用Selenium

    首先命令行安装selenium

    pip install selenium -i http://pypi.douban.com/simple/ --trusted-host pypi.douban.com 导入模块 import time from selenium import webdriver from selenium.webdriver.common.by import By from selenium.webdriver.common.keys import Keys from selenium.webdriver.support import expected_conditions as EC from selenium.webdriver.support.wait import WebDriverWait from selenium.webdriver.common.desired_capabilities import DesiredCapabilities 封装类 class Translation: def __init__(self): self.options = webdriver.ChromeOptions() self.options.add_argument('headless') # 后台运行 # self.options.add_experimental_option("excludeSwitches", ["ignore-certificate-errors"]) # 禁止图片的加载 self.prefs = {"profile.managed_default_content_settings.images":2} self.options.add_experimental_option("prefs",self.prefs) self.browser = webdriver.Chrome(executable_path='chromedriver.exe', options=self.options)#, desired_capabilities=self.desired_capabilities) self.load = False def __del__(self): self.browser.close() def translate(self, words): try: if not self.load : self.load = True self.browser.get('https://fanyi.baidu.com/translate#en/zh/') self.input= self.browser.find_element_by_id('baidu_translate_input') self.input.clear() self.input.send_keys(words) self.button = self.browser.find_element_by_id('translate-button') self.button.click() time.sleep(1) self.out = self.browser.find_element_by_class_name('output-bd') print (self.out.text) return self.out.text finally: # print ("translate [ {0} ] error.".format(words)) return '' 测试类 if __name__ == '__main__': words = [ '0', 'Taylor was nominated for a Primetime Emmy Award last year for portraying Minnie in the latest Mickey Mouse TV show rendition ', '"I really want whoever comes after us to be aware of the history and the tradition, and to love the characters as much as we do," Taylor said about herself and Allwine, according to Disney.', '"Minnie Mouse lost her voice with the passing of Russi Taylor," Bob Iger, Disney Chairman and CEO, wrote on Twitter.' ] print ('---start-') translation = Translation() for w in words: print ('----', w) result = translation.translate(w) print (result) del translation 测试结果 ---start- ---- 0 ---- Taylor was nominated for a Primetime Emmy Award last year for portraying Minnie in the latest Mickey Mouse TV show rendition 泰勒去年因在最新的米奇老鼠电视节目“表演”中饰演米妮而获得艾美奖的提名。 ---- "I really want whoever comes after us to be aware of the history and the tradition, and to love the characters as much as we do," Taylor said about herself and Allwine, according to Disney. “我真的希望任何一个追随我们的人都能意识到历史和传统,并且像我们一样热爱这些角色,”根据迪士尼的说法,泰勒在谈到自己和奥尔温时说。 ---- "Minnie Mouse lost her voice with the passing of Russi Taylor," Bob Iger, Disney Chairman and CEO, wrote on Twitter. 迪斯尼董事长兼首席执行官鲍勃•伊格尔在Twitter上写道:“米妮•老鼠在路西•泰勒去世后失去了声音。”

    之所以第一个数据是0,是因为未知原因第一个翻译时候,网页会刷新,导致得不到翻译结果,所以需要屏蔽。

    read more

关注我们

微博
QQ群