结论：居民楼旁边建货场是否违法，不能一概而论，需结合具体情况判断，主要涉及规划许可、相邻权保护及环保要求等方面。以下从不同角度详细分析：
1. 规划许可角度
- 核心依据：根据《城乡规划法》第40条，建设单位或个人在城市、镇规划区内进行建筑物、构筑物等工程建设的，应向规划主管部门申请办理建设工程规划许可证。货场作为构筑物，若位于规划区内，需取得规划许可。
- 违法情形：若货场建设未取得规划许可证，或虽取得许可但违反规划要求（如超出用地范围、改变用途等），则属于违法建设，可能面临限期拆除、罚款等处罚（《城乡规划法》第64条）。
- 例外情形：若货场位于乡村规划区内，需依据《乡村规划法》办理乡村建设规划许可证；若符合临时建设规定（如期限、用途等），可能需办理临时规划许可。
2. 相邻权保护角度
- 核心依据：根据《民法典》第288-296条，不动产权利人应遵循有利生产、方便生活的原则处理相邻关系。货场建设不得违反国家有关工程建设标准，不得妨碍相邻建筑物的通风、采光和日照，不得制造噪音、振动等污染。
- 违法情形：若货场运营产生噪音、粉尘、振动等影响居民正常生活，或占用公共通道、消防通道等，居民可依据《民法典》第236条要求排除妨碍、消除危险，甚至主张赔偿。
- 案例参考：类似案件中，法院曾判决货场限期整改（如安装降噪设备、封闭运输通道）或搬迁，以保障居民相邻权。
3. 环保要求角度
- 核心依据：根据《环境保护法》第19条，建设对环境有影响的项目，应依法进行环境影响评价（环评）。货场若涉及货物装卸、运输等可能产生污染的活动，需通过环评审批并落实“三同时”制度（环保设施与主体工程同时设计、施工、使用）。
- 违法情形：若货场未依法进行环评或未落实环保措施，环保部门可责令停止建设、限期改正，并处以罚款（《环境影响评价法》第31条）。
4. 土地用途角度
- 核心依据：根据《土地管理法》第4条，国家实行土地用途管制制度。货场建设需符合土地利用总体规划，不得擅自改变土地用途（如将住宅用地改为工业用地）。
- 违法情形：若货场占用居民楼周边住宅用地或公共绿地，可能涉嫌违反土地用途管制，面临责令退还土地、拆除建筑物等处罚（《土地管理法》第77条）。
法律建议
- 核实规划许可：向当地规划部门查询货场是否取得合法规划许可，确认其建设位置、规模是否符合规划要求。
- 评估相邻影响：若货场已建成，可委托专业机构检测噪音、粉尘等指标，评估是否超出法定标准，并留存证据。
- 协商或投诉：先与货场建设方或运营方协商整改；协商无果的，可向城管、环保、规划等部门投诉，或通过法律途径主张权利。
- 关注环评手续：要求货场方出示环评批复文件，确认其是否落实环保措施；若未落实，可向环保部门举报。
提示：若您遇到类似问题，建议提供货场的具体位置、建设规模、运营方式等信息，以便进一步分析其合法性及维权路径。有问题可直接向我咨询，我将结合具体案情为您提供专业建议。