Redis দিয়ে ডেটার প্রতিক্রিয়া দ্রুত করা (ঐচ্ছিক)
কৌশল যে বাহ্যিক ডেটা ব্যবহার করে তা ডিফল্টভাবে **পর্যায়ক্রমিক অনুসন্ধানে** আসে। Redis যুক্ত করলে নতুন মান আসার মুহূর্তে এজেন্ট জেগে উঠে সঙ্গে সঙ্গে আবার পড়ে। মান নিজে সবসময় DB অনুসন্ধান থেকে আসে — Redis দিয়ে শুধু "নতুন মান এসেছে" সংকেত যায়।
1. আমার কাঠামো কোনটি
প্রকাশক পক্ষ (সংগ্রাহক) এবং সাবস্ক্রাইবার পক্ষ (এজেন্ট) উভয়কেই একই Redis-এ পৌঁছাতে পারতে হবে। এই শর্ত মিললে যেকোনো পদ্ধতিই চলে।
সবকিছু একটি মেশিনে — নিজে ইনস্টল (সবচেয়ে সহজ · বিনামূল্যে)
সংগ্রাহক এবং এজেন্ট একই সার্ভারে থাকলে সেই সার্ভারে Redis ইনস্টল করলেই কাজ শেষ। নেটওয়ার্ক ব্যবহার হয় না বলে এটি সবচেয়ে দ্রুত, এবং ঠিকানা মেশিনের বাইরে যায় না। ডিফল্ট কনফিগ ইতিমধ্যে শুধু 127.0.0.1-এ শোনে, তাই পাসওয়ার্ড ছাড়া ব্যবহার করলেও বাইরে উন্মুক্ত হয় না।
sudo apt install -y redis-server sudo systemctl enable --now redis-server redis-cli ping # PONG
redis://127.0.0.1:6379আমার একাধিক সার্ভার আছে — একটিতে রেখে প্রাইভেট নেটওয়ার্কে
সংগ্রাহক এবং এজেন্ট ভিন্ন সার্ভারে থাকলে একটিতে Redis রাখুন এবং বাকিগুলো সেখানে সংযুক্ত হবে। একই ক্লাউড ও একই রিজিয়নে থাকলে প্রাইভেট নেটওয়ার্ক IP দিয়ে সংযোগ করাই সবচেয়ে নিরাপদ। ★ bind 0.0.0.0 খুলে পাসওয়ার্ড না দিলে ইন্টারনেট স্ক্যানার খুব দ্রুত তা খুঁজে পায়। পাবলিক নেটওয়ার্ক ব্যবহার করতেই হলে লম্বা পাসওয়ার্ড + ফায়ারওয়াল + TLS (rediss://) তিনটিই প্রয়োগ করুন।
# /etc/redis/redis.conf bind 10.0.0.5 127.0.0.1 # ★ 0.0.0.0 금지 requirepass <긴-무작위-비밀번호> # 방화벽: 내 서버 IP 만 6379 허용
redis://:비밀번호@10.0.0.5:6379নেটওয়ার্ক আলাদা — পরিচালিত ফ্রি টিয়ার
সংগ্রাহক ও এজেন্ট যদি ভিন্ন ক্লাউড, বাড়ি বা অফিসের মতো একে অপরের নাগাল পায় না এমন জায়গায় থাকে, তাহলে মাঝখানে একটি পরিচালিত Redis রাখুন। জাগানো প্রায় কোনো স্টোরেজ ব্যবহার করে না, তাই সাধারণত ফ্রি সীমাই যথেষ্ট।
rediss://…অন্য কেউ প্রকাশ করে — দল বা প্রতিষ্ঠান থেকে সরাসরি পাঠানো
আমাদের সংগ্রাহক ব্যবহার না করলেও চলে। চ্যানেলের নাম ও পেলোডের নিয়ম মিললে যেকোনো প্রোগ্রাম প্রকাশ করতে পারে। চ্যানেল হলো sori:data:v1: এর পরে টেবিলের নাম (স্কিমা বাদে)। পেলোড শুধু একটি কার্সর সংকেত, তাই এতে মান রাখলেও তা ব্যবহার হয় না — জেগে ওঠা পক্ষ নিজের কোয়েরি আবার চালায়।
PUBLISH sori:data:v1:fear_greed '{"v":1,"last":1757462400000,"n":1}'2. চালু করার ক্রম — তিন জায়গাই মিললে তবে চালু হয়
একটিও বাদ পড়লে **কোনো ত্রুটি ছাড়াই** পর্যায়ক্রমিক অনুসন্ধানে চলে। মান ঠিকই থাকে, শুধু বিলম্ব বাড়ে, তাই চালু হয়নি সেটা না জেনেই পার হয়ে যাওয়া সহজ।
প্রকাশক পক্ষ — সংগ্রাহককে ঠিকানা জানান
সংগ্রাহক নতুন সারি যোগ করার পরে প্রকাশ করে। ঠিকানা না থাকলে প্রকাশ বাদ দেয় এবং সেটি রানের ফলাফলে লিখে রাখে।
# ~/soritrading-fetchers/.env SORI_WAKE_REDIS_URL=redis://127.0.0.1:6379
সাবস্ক্রাইবার পক্ষ — এজেন্টে স্লট সংরক্ষণ করুন
ওয়েবে উপনাম ও ঠিকানা দিয়ে [সংযোগ যাচাই] চাপলে সেই ডিভাইস সত্যিই সংযুক্ত হয় কিনা সঙ্গে সঙ্গে জানায়। ঠিকানা শুধু সেই ডিভাইসের কীস্টোরে সংরক্ষিত হয় — সার্ভারে যায় না এবং লগেও থাকে না।
ঘোষণা — কোন টেবিল কোন স্লটে শুনবে তা ঠিক করুন
একই স্ক্রিনের নিচে [ডেটাসেট ঘোষণা]-তে পদ্ধতি redis-এ বদলান এবং স্লটের নাম ও টেবিলের নাম পূরণ করুন। টেবিলের নাম প্রয়োজন কারণ চ্যানেলের নাম টেবিল থেকে তৈরি হয়।
mode: redis · redisAlias: main · tableName: fear_greed
- Redis শুধু জাগানোর কাজ করে। কোনো বার্তা হারালেও (যেমন এজেন্ট রিস্টার্টের সময়) পরের পর্যায়ক্রমিক অনুসন্ধান তা পূরণ করে নেয়, তাই মান ভুল হয় না।
- সার্ভারলেস প্রদানকারীর REST এন্ডপয়েন্ট দিয়ে সাবস্ক্রাইব করা যায় না। redis:// বা rediss:// দিয়ে শুরু হওয়া TCP ঠিকানা দিন।
- ফ্রি টিয়ার নিষ্ক্রিয় সংযোগ কেটে দিলে নিঃশব্দে শুধু পর্যায়ক্রমিক অনুসন্ধানে চলতে পারে। এজেন্ট বিচ্ছিন্নতা শনাক্ত করে আবার সংযোগ করে, কিন্তু ঘন ঘন বিচ্ছিন্ন হলে সেই টিয়ার এই কাজের উপযুক্ত নয়।
- স্লটের নাম এবং DB উপনাম আলাদা নামস্থান। দুটোই 'main' হলেও তারা ভিন্ন সার্ভার নির্দেশ করে।
- সংযোগের ঠিকানা শুধু এজেন্ট ডিভাইসে সংরক্ষিত হয়। আমাদের সার্ভার এই পথে নেই, এবং সংরক্ষণ বা অনুসন্ধান কোনো ক্ষেত্রেই ঠিকানা গ্রহণ করে না।
- স্লট মুছলেও আগে থেকে খোলা সাবস্ক্রিপশন পরের পুনঃসংযোগের সময় বন্ধ হয়। ততক্ষণ মান একই থাকে, শুধু বিলম্ব কম থাকে।
পূর্ণ ডকুমেন্টেশন এখানে — ব্যবহার নির্দেশিকা