Skip to content
New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

تهیه نسخه استاتیک روی وب با قابلیت جستجو #6

Open
NabiKAZ opened this issue Apr 21, 2021 · 26 comments
Open

Comments

@NabiKAZ
Copy link

NabiKAZ commented Apr 21, 2021

خوبه که یه نسخه استاتیک روی وب هم وجود داشته باشه، یعنی یه تمپلیت html باشه که دیتاهای json جاری توی اون فرمت نمایش داده باشند با قابلیت سرچ. این مرور و بررسی رو برای عموم ساده تر و دسترسی به اطلاعات رو کاربردی تر میکنه.
اصلاً هم نیازی نیست سمت سرور و داینامیک باشه. بنابراین میتونه روی github.io هم رایگان در دسترس عموم قرار بگیره.
میتونه reactjs یا angularjs کار بشه.
یه چیزی شبیه به این:
https://github.com/jadijadi/pishshomare

@AmirHosseinKarimi
Copy link
Contributor

AmirHosseinKarimi commented Apr 22, 2021

سلام و درود در حال حاضر تو مرحله جمع آوری اطلاعات هستیم، با توجه به مدت محدود یک ماهه که جاب گای اعلان کرده باید تا جای ممکن اطلاعات رو قبل از پایین اومدن سایت جمع آوری کنیم. بعد از اون میتونیم دیتا رو به هر نحو پایش کنیم و فرمت‌های مختلف رو ارائه بدیم.

@RaminNietzsche
Copy link
Owner

متاسفانه به دلیل شکایت شرکت‌ها ، امکان انتشار محتوی توسط افراد در ایران نیست و این انتشار از طرف شخصی در خارج کشور باید صورت بگیره

@NabiKAZ
Copy link
Author

NabiKAZ commented Apr 25, 2021

سلام و درود در حال حاضر تو مرحله جمع آوری اطلاعات هستیم، با توجه به مدت محدود یک ماهه که جاب گای اعلان کرده باید تا جای ممکن اطلاعات رو قبل از پایین اومدن سایت جمع آوری کنیم. بعد از اون میتونیم دیتا رو به هر نحو پایش کنیم و فرمت‌های مختلف رو ارائه بدیم.

ای کاش بجز دیتا، سورس کد کراولر یا برنامه کاری رو هم منتشر میکردید تا دیگران هم بتونن مشارکت کنند جهت تسریع در روند.
به هر حال من در زمینه روبات و کراولر زیاد کار کردم و سرور هم زیاد دارم. اگر کمکی از دست بنده ساخته بود بفرمائید.

@NabiKAZ
Copy link
Author

NabiKAZ commented Apr 25, 2021

متاسفانه به دلیل شکایت شرکت‌ها ، امکان انتشار محتوی توسط افراد در ایران نیست و این انتشار از طرف شخصی در خارج کشور باید صورت بگیره

مگه الان توی این پروژه دارید چیکار میکنید؟! خب همون محتوا رو دارید منتشر میکنید دیگه! حالا روی وب نه، json یا هر فورمتی مگه فرقی هم توی اصل ماجرا داره؟! یعنی اگر نگران این موضوع هستید، که همین الان هویت شما به عنوان مالک این پروژه مشخصه و باید نگران باشید!

در هر صورت اگر بحث مخفی بودن باشه، که در دنیای دیجیتال امروزی، "یک شخص در خارج" دیگر چه صیغه ایه؟! شما یک اکانت جعلی میسازید با vpn میاید مخفی میمونید دیگه. حالا مثلاً میخوان برن پلیس اینترپل شکایت کنن؟!!

در ادامه این بحث، شاید بد نباشه تجربه‌ی مشابه ای رو خدمتتون عرض کنم. که این پروژه من رو یاد اون پروژه میندازه.
در سالهای دور، بلاگفا محدودیتی برای جلوگیری از مهاجرت کاربرانش اتخاذ کرد که عده ای رو محکوم کردن که از این قضیه سود تبلیغاتی میبرند. این وسط یک نفر برای اثبات اشتباه این نگاه، به طور ناشناس و بدون اهداف تبلیغاتی و شخصی، پروژه ای اوپن سورس و رایگان رو بالا آورد که یک کراولر بود برای بک آپ گرفتن پست ها از بلاگفا و انتقال به مثلاً ورپرس. اون پروژه خوب کار کرد، بدون تبلیغ و جلو رفت و مشکل خیلی ها رو حل کرد و هیچوقتم کسی نفهمید پشت این عمل انسانی چه کسی بوده.
اکنون که صحبت میکنم 12 سال از اون قضیه گذشته و اون پروژه هنوز اینجاست:
https://groups.google.com/g/blogfa2x/c/-sLpZM-U-nc

@AmirHosseinKarimi
Copy link
Contributor

سلام و درود در حال حاضر تو مرحله جمع آوری اطلاعات هستیم، با توجه به مدت محدود یک ماهه که جاب گای اعلان کرده باید تا جای ممکن اطلاعات رو قبل از پایین اومدن سایت جمع آوری کنیم. بعد از اون میتونیم دیتا رو به هر نحو پایش کنیم و فرمت‌های مختلف رو ارائه بدیم.

ای کاش بجز دیتا، سورس کد کراولر یا برنامه کاری رو هم منتشر میکردید تا دیگران هم بتونن مشارکت کنند جهت تسریع در روند.
به هر حال من در زمینه روبات و کراولر زیاد کار کردم و سرور هم زیاد دارم. اگر کمکی از دست بنده ساخته بود بفرمائید.

https://github.com/AmirHosseinKarimi/jobguy-scraper

@AmirHosseinKarimi
Copy link
Contributor

متاسفانه به دلیل شکایت شرکت‌ها ، امکان انتشار محتوی توسط افراد در ایران نیست و این انتشار از طرف شخصی در خارج کشور باید صورت بگیره

مگه الان توی این پروژه دارید چیکار میکنید؟! خب همون محتوا رو دارید منتشر میکنید دیگه! حالا روی وب نه، json یا هر فورمتی مگه فرقی هم توی اصل ماجرا داره؟! یعنی اگر نگران این موضوع هستید، که همین الان هویت شما به عنوان مالک این پروژه مشخصه و باید نگران باشید!

در هر صورت اگر بحث مخفی بودن باشه، که در دنیای دیجیتال امروزی، "یک شخص در خارج" دیگر چه صیغه ایه؟! شما یک اکانت جعلی میسازید با vpn میاید مخفی میمونید دیگه. حالا مثلاً میخوان برن پلیس اینترپل شکایت کنن؟!!

در ادامه این بحث، شاید بد نباشه تجربه‌ی مشابه ای رو خدمتتون عرض کنم. که این پروژه من رو یاد اون پروژه میندازه.
در سالهای دور، بلاگفا محدودیتی برای جلوگیری از مهاجرت کاربرانش اتخاذ کرد که عده ای رو محکوم کردن که از این قضیه سود تبلیغاتی میبرند. این وسط یک نفر برای اثبات اشتباه این نگاه، به طور ناشناس و بدون اهداف تبلیغاتی و شخصی، پروژه ای اوپن سورس و رایگان رو بالا آورد که یک کراولر بود برای بک آپ گرفتن پست ها از بلاگفا و انتقال به مثلاً ورپرس. اون پروژه خوب کار کرد، بدون تبلیغ و جلو رفت و مشکل خیلی ها رو حل کرد و هیچوقتم کسی نفهمید پشت این عمل انسانی چه کسی بوده.
اکنون که صحبت میکنم 12 سال از اون قضیه گذشته و اون پروژه هنوز اینجاست:
https://groups.google.com/g/blogfa2x/c/-sLpZM-U-nc

عجله نکنید، جاب‌گای هنوز داره به فعالیتش ادامه میده و هنوز دان نشده

@daniyousefifar
Copy link

با سلام
من حساب جوکر و AWS دارم و در صورتی که مایل هستید و کمکی از دست من برمیداد خیلی خوشحال میشم کمک کنم، می تونم یک سیستم بنویسم و با استفاده از این دیتا یک سایت بالا بیاریم.

@AmirHosseinKarimi
Copy link
Contributor

AmirHosseinKarimi commented Aug 1, 2021

@daniyousefifar
بعد از انتقال مالکیت جاب‌گای، مالک جدید اخیرا سورس فرانت و بک رو بصورت باز منتشر کرده، دیگه نیازی به اسکرپ کردن وب‌سایت نیست.
https://github.com/jobguywork/

@RaminNietzsche
Copy link
Owner

با توجه به بسته شدن مجدد جابگای این پروژه مجدد فعال می‌شود با تشکر از همه ی کسانی که در این پروژه فعال بودن. لطفا فورک کنید تا در صورت بسته شدن این ریپو همچنان اطلاعات موجود در دسترس باشد

@rezzzza
Copy link

rezzzza commented Sep 11, 2021

@RaminNietzsche

رامین‌جان این دیتای موجود کامل هست؟

@daniyousefifar
Copy link

میشه دلیل تون رو بدونم چرا بالا نیارمیش؟

ضمن تشکر از دوستان پیشنهاد می کنم فعلاً می تونیم آنلاین بالا نیاریمش و هرکسی خواست بتونه با چهار تا دستور ساده به صورت لوکال رو سیستمش بیاره بالا و سرچ کنه. برای آنلاین کردنش هم می تونیم مثلاً پنجاه تا ازش رو دامین های مختلف بیاریم بالا که همشون با هم سینک باشن

@daniyousefifar
Copy link

میشه دلیل تون رو بدونم چرا بالا نیارمیش؟

چون ایرانیم راحت می‌تونن دوباره شکایت کنن و ببندنش

من قبلا عرض کردم الان هم میگم، دامین از خارج بگیریم و روی AWS سرویس رو دیپلوی کنیم، عملا هیچ غلطی نمی تونن بکنن فوقش فیلتر کردن

@daniyousefifar
Copy link

من قبلا عرض کردم الان هم میگم، دامین از خارج بگیریم و روی AWS سرویس رو دیپلوی کنیم، عملا هیچ غلطی نمی تونن بکنن فوقش فیلتر کردن

اگه یکی که دسترسی داره و بتونه این کارو بکنه که واقعاً دمش گرم

بنده هم حساب جوکر دارم و هم حساب AWS دارم و توی پلن دارم یک نسخه جدید برای جابگای پیاده سازی کنم و احتمالا زمستان سال جاری یا بهار سال نو ریلزش کنم و ادرس اش رو برای عموم منتشر کنم.

@AmirHosseinKarimi
Copy link
Contributor

فقط من فایل های جیسون رو نگاه کردم دیدم نظرات کاربران به صورت نصفه و نیمه هست. به نظر می‌رسه که به تعدادی کاراکتر محدود شده

اگر اشتباه نکنم نظرات کامل باشن. ممکنه شما فایل‌های قدیمی رو بررسی کردید. فایل‌هایی که بعدا اضافه شدن کامل هستند.

@mehrdadmmb2
Copy link

سلام به همه
تبدیل این دیتاها از جیسون به sql زمان بره حتی از طریق کراولر
اگه فایل dbش در دسترس هست من با یه ربات تلگرام سر و تهش رو هم میارم

@arefSajjadi
Copy link

سلام از امروز میتونید تموم اطلاعات جاب گای رو روی لینک زیر ببینید و تجربه های خودتون هم ثبت کنید وب سایت با دامین خارجی و روی سرور های hetzner المان هست و هیچ جای نگرانی برای بسته شدنش وجود نداره

Https://companyux.com

@AmirHosseinKarimi
Copy link
Contributor

سلام از امروز میتونید تموم اطلاعات جاب گای رو روی لینک زیر ببینید و تجربه های خودتون هم ثبت کنید وب سایت با دامین خارجی و روی سرور های hetzner المان هست و هیچ جای نگرانی برای بسته شدنش وجود نداره

Https://companyux.com

تیم جاب‌گای برنامه‌ی سمت بک‌اند و فرانت‌اند رو منتشر کردن. بهتر بود اگه از همون برنامه‌ای که از قبل توسعه داده شده استفاده می‌شد تا اینکه از نو یک پروژه‌ای رو با استفاده از اطلاعات جاب‌گای توسعه بدید.

@arefSajjadi
Copy link

ممنونم ازت که این نظر رو دادی ببین علت عدم استفاده از این سورس کد ها برای من این بوده که من میخوام این ایده توسعه پیدا بکنه و برنامه نویس هایی با لول جونیور هم متوجه سطوح عملکردی متفاوت این پلتفرم بشن ... برای همین زبان پی اچ پی و لاراول رو انتخاب کردم کد های منتشر شده رو خوندم تجربه خودمو گذاشتم کنارش و بعد از چند روز نتیجه چیزی شد که درکنار سادگی و قابل فهم بودنش قابل توسعه باشه نه توسط خودم بلکه توسط هرکسی که یکم پی اچ پی و لاراول یا برنامه نویسی بدونه.

@AmirHosseinKarimi
Copy link
Contributor

خیلی هم عالی. ایده‌ی خوبیه. امیداورم موفق باشید تو رسیدن به هدف این پروژه‌ای که شروع کردید. 👌

@rezzzza
Copy link

rezzzza commented Apr 10, 2022

سلام از امروز میتونید تموم اطلاعات جاب گای رو روی لینک زیر ببینید و تجربه های خودتون هم ثبت کنید وب سایت با دامین خارجی و روی سرور های hetzner المان هست و هیچ جای نگرانی برای بسته شدنش وجود نداره

Https://companyux.com

به به، خسته نباشی. امیدوارم پایدار باشه. من هم وقت کردم حتما برای توسعه کمک می‌کنم. موفق باشی

@NabiKAZ
Copy link
Author

NabiKAZ commented Jun 4, 2022

سلام از امروز میتونید تموم اطلاعات جاب گای رو روی لینک زیر ببینید و تجربه های خودتون هم ثبت کنید وب سایت با دامین خارجی و روی سرور های hetzner المان هست و هیچ جای نگرانی برای بسته شدنش وجود نداره

Https://companyux.com

image

@arefSajjadi
Copy link

سلام از امروز میتونید تموم اطلاعات جاب گای رو روی لینک زیر ببینید و تجربه های خودتون هم ثبت کنید وب سایت با دامین خارجی و روی سرور های hetzner المان هست و هیچ جای نگرانی برای بسته شدنش وجود نداره
Https://companyux.com

image
مشکل از سمت خود من بوده و الان بر طرف شده

Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment
Labels
None yet
Projects
None yet
Development

No branches or pull requests

8 participants
@NabiKAZ @RaminNietzsche @rezzzza @mehrdadmmb2 @AmirHosseinKarimi @daniyousefifar @arefSajjadi and others