不算违法，但可能构成不当使用或侵犯财产权。

首先，从法律的角度来看，别人骑走你的电动车，后来又骑回来了，这一行为本身并不直接构成刑法上的盗窃罪或侵占罪。因为盗窃罪要求有非法占有的目的，并且行为人要实施秘密窃取的行为；而侵占罪则要求将他人财物非法占为己有，拒不交还。在这个情况下，如果对方只是临时骑走，并没有非法占有的目的，且最终将电动车归还，那么就不构成这两种犯罪。

然而，这一行为可能构成对你财产权的不当使用或侵犯。电动车作为你的个人财产，你有权决定其使用方式和范围。如果别人未经你的同意就擅自骑走你的电动车，即使后来归还了，也仍然是对你财产权的一种不尊重或侵犯。在这种情况下，你可以考虑与对方进行沟通，表达你的不满和担忧，并要求对方以后不再未经允许就使用你的电动车。

此外，如果这一行为给你造成了损失或损害（比如电动车被损坏或产生了额外的费用），你可以要求对方承担相应的赔偿责任。如果对方拒绝赔偿或协商无果，你可以通过法律途径来维护自己的合法权益。

总的来说，虽然这一行为本身可能不构成犯罪，但仍然可能构成对你财产权的不当使用或侵犯。在处理这类问题时，建议保持冷静和理性，通过沟通和协商来解决问题；如果无法协商解决，可以考虑寻求法律帮助来维护自己的权益。